0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

数字化转型的新基建

SSDFans 来源:ssdfans 作者:ssdfans 2021-01-07 10:35 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

上周末系统变更,配合DBA在IBM小型机上升级DB2的数据库版本,貌似很平常的一件事,但是心里却起了波澜。

外面的世界早就变了样,而我们却依然在DB2这条路上惯性前行。

1977年,硅谷一个30多岁的男人,凭借IBM的一个“失误”,成功开发了世界上使用最广泛,最成功的关系型数据库产品,就是后来的Oracle。到了1995年,IBM才发布了其关系型数据库产品,DB2。

而我,直到2003年,才开始学习DB2,起步晚不说,还是个冷门。一转眼,在这条路走了十多年,为什么不换条路呢?

数字化转型的新基建

今天,像Oracle、DB2这样的传统关系型数据库已经风光了30多年,至于未来,他们应该还会存在,但是我们看到的是,越来越多的应用场景被新产品和新技术替代。

目前,大多数NoSQL都是面向特定任务而设计出来的,这让我们有了更多的选择,如果一味的只用关系型数据库,可能会适得其反。

键值,列式,文档和图,四种NoSQL就像是四大名捕,各个身怀绝技。尤其是图数据库,这两年特别火。根据Garnter的研究分析,未来几年,图数据库将会以100%的速度增长。

最近在看任泽平等人合著的《新基建》,书中提到凡是符合未来新时代经济社会发展需要的基础设施都叫“新基建”。

相对于传统的关系型数据库,新型的图数据库就像是数据中心里的“新基建”,可以从数据挖掘的视角,去审视和发现大数据中存在的有价值的关系。

什么是图数据库?

我们今天所说的图(Graph),是图论的主要研究对象,是由若干顶点(Vertices)和边(Edges)组成的,用来存储实体的相关属性以及它们之间的关系信息。

图实际上是一个很古老的概念,最早出现在瑞士数学家欧拉的学术论文中,试图解决一个叫“哥尼斯堡七桥”的问题。

随着社交、电商、零售等行业的迅猛发展,这些行业逐渐形成了一张张基于大数据的关系网,如何发现关系,利用关系是亟需解决的问题。

而在面对复杂复杂关系的处理上,图是最佳的解决方案。利用图表现对象与对象之间的关系,在图上运用数学算法求解就可以有效解决链接爆炸的问题,降低复杂性,简化查询。

说起图应用的案例,其实很多,最著名的就是Google的PageRank算法,再比如Linkedin用图管理社交关系,实现好友推荐,Amazon用图实现实时的商品推荐,商业银行用图做风控、实现反欺诈和反洗钱。

虎虎生威的TigerGraph

说起图数据库,不得不提大名鼎鼎的Neo4j,尤其是其Cypher查询语言,让人有种耳目一新的感觉。

不过由于Neo4j社区版的功能有限,影响了其适用范围。目前开源软件社区中还有其他几个竞品,DGraph和JanusGraph,这二者都原生支持分布式,但是不支持SQL。另外一个重要的特征是,DGraph支持原生存储,而JanusGraph需要借助外部存储系统,导致其运维成本非常高。

后来,朋友向我推荐了一个第三代图数据库(Graph 3.0)的新产品,TigerGraph,与其技术人员交流后,发现产品确实有过人之处。

总结一下我对TigerGraph学习和理解:

支持原生图存储,使得空间占用更少,相比传统关系型数据库在容量上平均减少50%。

支持并行计算的分布式部署,高效并行加载数据,支持数据分片,利于横向扩展。

支持HTAP混合交易负载,可以很好的处理数十亿的实体和数千亿的关系,实现亚秒级的查询响应和更多跳的深度链接分析。

提供GSQL的专用查询语言和GraphStudio可视化开发套件。不过TigerGrpah的GSQL与Neo4j的Cypher语法有一定的差别,目前二者正在制定新一代的GQL,专门用于图数据库查询。

当然,TigerGraph还有很多特性,比如支持用户可扩展的图算法库等,唯一美中不足的地方,TigerGraph是一款闭源软件。

关于图的一些思考

虽然图数据库在国内互联网行业应用较多,但是在金融保险领域的案例其实还很少。我司早期尝试利用图数据库技术实现了家族营销的业务创新。

组织是人的组织,组织内部的关系也很重要。今天看到网上有文章讲保险代理人的模式,从传统的金字塔开始向前端小团队、后端大平台的方向发展,利用平台赋能扁平灵活的小组织。关于营销组织中的痛点,是不是也可以通过图计算进行优化,提升代理人队伍的管理效率呢?

另一方面,在我自己专业的业务连续性管理方面,也是很好的图计算应用场景,但是从建模到落地实施,估计也是长路漫漫。目前市面上的产品,好像也没听到过哪家是基于图的方式研发的。

早期我们看到的MySQL对与Oracle的替代,使用的是分库分表,读写分离的套路,其实不过是一个维度上的两个点在竞争,但当你升到更高的维度,用图的方式重构数据时,就不再是弯道超车,屌丝逆袭了,而是变道超车,决胜千里。

目前的很多创新,都是在外围展开的,对于真正核心的应用改造,无论在应用场景,还是理念上都有所欠缺。都知道创新这条路不好走,但如果是战略性的,就要敢于投入,毕竟一旦成功,收益远大于支出。

梦想总是要有的,万一实现了呢。

DBA这碗饭还能吃多久

在一些有规模的公司里,DBA大概分成两类。一类面向运维的,主要负责稳定运行、性能调优等;另一类,面向应用开发,主要是业务建模。

在Oracle最新的19C中,已经开始讲自动驾驶“Self-Driven”的概念了,试图通过人工智能完成数据库自治。

从前,Oracle数据库除了专业的模型设计外,还提供大量的可配置参数,给了传统DBA很大的操作空间,而现在,随着数据库产品自身越来越智能,DBA可操作的余地变少了,价值越来越低,就算遇上难缠的性能问题,也可以通过闪存这样硬件帮忙把坑填了,而且速度还杠杠的,绝对比DBA优化好使。

另一方面,自动化运维平台也越来越普及,很多工作,在页面上点点按钮就搞定了,复杂的实施工作都被平台屏蔽掉了。就好像那句话, 离开了平台,你还是DBA,但有了平台,你就是操作员。

没有岗位是一成不变的,随着像图数据库这样的新技术的出现,让一些传统架构下的复杂事务,变得简单高效,性能甚至是百倍的提升。而分布式,多副本的集群技术,也让原来的可用性和性能问题也逐渐弱化,DBA们也差不多是时候考虑转转型了。

写在最后

当年,董事长提过新三大件,“买房、买车、买保险”。

房子,最重要的是什么?位置、位置、位置

汽车,最重要的是什么?安全、安全、安全

保险、最重要的是什么?保障、保障、保障

今天,你看看卖房的中介,从链家的VR视频看房,到基于行业图谱的贝壳找房,各个都是科技赋能的高手。

但是,对于保险公司,最重要的是,队伍!队伍!队伍!

董事长说我们是一家伟大的销售公司,科技赋能业务。当我们把各个渠道的代理人、客户和产品等这些实体和关系,借助图数据库技术,充分发挥计算优势,进行深度的链接分析时,就是科技赋能队伍,从而打造出一支高效能的、武装精良的特种部队。

如果把传统的关系型数据表比作Excel,那么Graph就可以被比作PPT。两样技能肯定都是需要的,但是如果用来展现,你说哪个好?当然是,有图有真相。

DBA从来都不是我职业的全部,但我依然选择做一个隐形的DBA。

责任编辑:lq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据库
    +关注

    关注

    7

    文章

    3993

    浏览量

    67778
  • 数字化
    +关注

    关注

    8

    文章

    10351

    浏览量

    66591
  • 新基建
    +关注

    关注

    4

    文章

    811

    浏览量

    24162

原文标题:Hello,图数据库!再见,DBA!

文章出处:【微信号:SSDFans,微信公众号:SSDFans】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    网络安全与数字化转型的价值投资

    的认可。然而,随着数字化转型的深入,网络安全的角色正在发生深刻变化。它不仅仅是为企业护航的守门员,更多的是成为业务发展和创新的驱动力。 数字化转型中的安全挑战 随着企业不断推动
    的头像 发表于 11-10 15:57 218次阅读

    2025支持AI 驱动数字化转型的低代码开发平台有哪些

    数字化转型的浪潮中,低代码开发平台凭借其快速开发、降低技术门槛等优势,成为企业构建数字化应用的核心工具。2025年,随着AI技术深度融合与国产替代加速,低代码平台已从“效率工具”升
    的头像 发表于 10-31 13:18 156次阅读

    企业如何用SD-WAN节省50%网络成本?揭秘数字化转型的网络新基建

    #企业如何用SD-WAN节省50%网络成本?揭秘数字化转型的网络新基建>一条软件定义的网络高速公路,正在为成千上万企业开辟数字化转型的快车道
    的头像 发表于 08-13 10:32 1475次阅读
    企业如何用SD-WAN节省50%网络成本?揭秘<b class='flag-5'>数字化</b><b class='flag-5'>转型</b>的网络新<b class='flag-5'>基建</b>

    施耐德电气如何助力中药行业数字化转型

    施耐德电气“数字化转型七步法”为中药行业提供了从咨询到运维的全生命周期解决方案,涵盖数字化转型咨询服务、一体设计、资产信息管理中心、运营信
    的头像 发表于 07-30 10:16 558次阅读

    零基础也能转型!MES系统助力中小企业数字化转型

    制造业数字化转型需要从数据管理、流程自动、智能决策支持、数字化人才建设、创新商业模式、技术整合与应用以及组织文化转型等多个方面综合考虑并实
    的头像 发表于 06-03 13:54 487次阅读

    华宇电子加速先进封装测试数字化转型

    近日,安徽省工业和信息厅联合安徽省广播电视台打造“数字化转型·安徽时刻”专栏,聚焦华宇电子数字化转型典型案例,展示
    的头像 发表于 04-11 13:43 713次阅读

    网关:开启工厂数字化转型

    在当今科技飞速发展的时代,数字化转型已成为工厂提升竞争力、实现可持续发展的必由之路。而在这场转型浪潮中,一个关键的角色悄然崛起,它就是网关,正默默助力工厂实现设备数据的互联互通,为数字化
    的头像 发表于 03-14 13:41 472次阅读

    江西万年芯通过数字化转型成熟度星级评估

    加速数字化转型,是企业创新、产业升级和经济高质量发展的关键路径。江西万年芯微电子有限公司顺利通过了《数字化转型成熟度模型》(T/AIITRE10004-2023)标准体系认证,获得“
    的头像 发表于 02-19 15:35 836次阅读
    江西万年芯通过<b class='flag-5'>数字化</b><b class='flag-5'>转型</b>成熟度星级评估

    数字化转型中的IBMS管理平台优势与应用

    智慧楼宇管理系统(IBMS)是一种集成了多种智能技术的综合管理平台,可以帮助企业实现数字化转型并提升运营效率。
    的头像 发表于 02-06 16:53 714次阅读

    工信部|制造业企业数字化转型典型场景

    聚焦产业链上下游企业研发设计、生产制造、运维服务、经营管理、供应链管理等场景,以场景为切入点梳理数字化转型痛点需求,绘制重点行业、重点产业链数字化转型场景图谱(简称“一图谱”),明确企
    的头像 发表于 02-06 10:38 890次阅读
    工信部|制造业企业<b class='flag-5'>数字化</b><b class='flag-5'>转型</b>典型场景

    企业数字化转型实施方案

    数字化时代,企业数字化转型已不再是选择题,而是必答题。为了保持竞争力和可持续发展,企业必须积极拥抱数字化技术,推动业务和管理模式的深刻变革。从战略规划、组织架构调整、技术选型、人才培
    的头像 发表于 01-13 16:36 1145次阅读

    工厂数字化转型,这些要点你必须知道!

    随着数字化浪潮席卷全球,工厂数字化转型已成为企业生存与发展的关键抉择。以三一重工桩机工厂和海尔智能工厂家电巨头为例,数字化转型成功案例展现了
    的头像 发表于 01-13 10:49 905次阅读
    工厂<b class='flag-5'>数字化</b><b class='flag-5'>转型</b>,这些要点你必须知道!

    网关在数字化转型中的角色

    一、什么是网关? 网关是一种网络节点,它能够连接不同的网络或系统,并在它们之间转发数据。在数字化转型的背景下,网关不仅仅是数据传输的桥梁,更是确保数据安全、提高数据处理效率的关键技术。 二、网关在数字化
    的头像 发表于 01-02 18:00 908次阅读

    有方科技参加中国信通院城市全域数字化转型分论坛

    有方科技参加城市全域数字化转型分论坛并做《创新物联感知体系 助力城市全域数字化转型》主题演讲,分享在城市数字化
    的头像 发表于 12-25 16:09 922次阅读