0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

当分布式数据库遇上开放服务器 LinuxONE

IBM中国 来源:IBM中国 作者:IBM中国 2020-12-17 17:31 次阅读

分布式架构因为具备成本低、自主研发、灵活兼容和伸缩扩张方面的优势,备受互联网公司和创业公司的青睐,一些金融机构也开始探索分布式架构的解决方案,但在具体实践中不免还是会遇到鱼和熊掌难以兼顾的挑战,尤其是在满足一致性的问题上。IBM LinuxONE 可以和分布式架构形成很好的互补,完美地解决分布式架构落地遇到的重重挑战。

分布式架构落地,难关重重

说起分布式系统的难点,不得不说著名的 CAP 定律,它是说在分布式系统中,一致性(C)、可用性(A)和分区容忍性(P)三项,只能满足两项,而不能同时满足。因为在分布式环境中,由于节点之间的通信容易出现问题,为了扩展性,往往不得不牺牲一致性。此外,对于数据库的设计通常要遵循的四大特性(原子性、一致性、隔离性与持久性),分布式数据库也难以兼顾,要严格执行,就要在执行性能上花费很大的代价。

后来出现的 BASE 理论提供了一种解题思路,但也没有从根本上解决一致性问题。它的核心思想是容许分布式系统出现短暂性的不一致的状态,只要能够在一定时间内,最终达到一致状态就行。但是如果面对一些重要的系统,它们对一致性的要求非常高,就对分布式系统提出很大的挑战。因此,分布式系统的使命,并不是要放弃一致性,而是要不断的去追求更高一致性。

但是对于正要转向分布式架构的用户来说,做出抉择依然是艰难的,因为在实践层面他们将面临的不仅仅是数据不一致和网络质量无法保证的问题,更多的时候还有业务上的难题。

首先业务的拆分很复杂,包括业务功能和服务解耦,以及应用改造策略等。到底是推倒重来,还是循序渐进?慢慢拆分,对于拆分颗粒度的选择、分库分表的策略的定义、迁移数据的完整性,都具有一定的挑战性。

其次,拆分不容易,合并起来更难,比如全局一致性的备份、批量合并操作、全局跨分片分布式事务的处理,以及网络通讯质量的问题,都有很大的挑战性。

第三,拆分的越多,节点和服务数量也越多,随之而来的是,系统整体性能瓶颈点和故障点也增多。伴随着物理服务器和网络设备数量的不断增加,机房空间和电力不足的制约,软件成本的和整体 TCO 成本的不断增加,也会逐渐显现出来。

不难看出,分布式架构的水很深,选择分布式并不容易。但是,如果已经做好了选择,那么如何应对分布式架构带来的挑战,就显得尤为重要。

当分布式数据库遇上

开放服务器 LinuxONE

解决分布式架构落地的难题,有一种很好的选择,就是将分布式系统与 IBM LinuxONE 相结合,后者可以很好地应对分布式架构带来的种种挑战。

LinuxONE 本质上是一台开放 Linux 服务器,其综合能力远远超过其它的 Linux 服务器,它把开放开源的最好的部分,也就是基于 Linux 发展出来的开放的软件技术堆栈,跟企业级计算里最强的大机硬件平台做了强强联合。

基于这种组合打造的 LinuxONE,在软件层因为采用基于开放开源的技术堆栈,在使用体验上可以做到同样的简单易用,包括应用的开发、交付、混合多云的管理,以及服务治理管控等等。另外,客户在 Linux 方面的已积累技术力量,同样可以在 LinuxONE 上得到充分的复用,并不会带来额外的技能要求。

更重要的是,LinuxONE 除了具备开源开放、稳敏合一、绿色计算和安全可靠的特性外,还有很多独特的价值,可以很好地帮助分布式系统来应对各个层面的挑战。

首先,LinuxONE 拥有独有的内存通讯技术,可以很好的解决分布式系统节点数量过多,而带来节点之间通讯不可靠的痛点。

其次,LinuxONE 多层级虚拟化和大规模整合能力,不但简化了运维,同时还可以大大缓解物理设备激增所以带来的压力。

另外,LinuxONE 最高等级稳定性和安全性,可以为云中的核心系统提供最强的保障。

可以说,当分布式数据库遇上 LinuxONE,分布式数据库对更强一致性的追求,能够轻松得到提升。LinuxONE 和分布式数据库的组合,就是一对黄金搭档。LinuxONE 在硬件层面,提供了非常强大的底层支撑平台,从而在“相同的简单易用”基础之上,可以带给客户“与众不同的能力和体验”。

LinuxONE 的独门绝技

就像“脚踏风火轮、手拿红缨枪”的哪吒,他有三头六臂,还有混天绫和乾坤圈各项技能,LinuxONE 也同样拥有自己的各项独门技能。我们可以用“3高6黑”来概括 LinuxONE 的强大能力。

其中,3高是指 LinuxONE 超越任何其它平台的 3种超高能力,这三种高超能力是“高性能、高可靠和高密度”。

在高性能方面, LinuxONE 是所有商用服务器里性能最高的,它配置了 5.2GHz主频的处理器,以及总量超过 11GB 的 4级 CPU 大缓存,再加上高达 192个的 IO 插槽,从而为客户提供最强大的计算能力和 IO 处理的能力。

在高可靠方面,LinuxONE 提供了 N+1 的全冗余的体系架构,这里面涵盖了 CPU、内存、IO、电源、风扇、控制台等等,从而使得 LinuxONE 单机就可达到 6个9 的可靠性。

在高密度方面,LinuxONE 除了具备强大的纵向扩展能力外,横向扩展能力也是很强的,LinuxONE 单机可支持 85个逻辑分区、支持 8000多个虚机,以及 2百多万个容器,对 X86 而言,可以用“以一顶百”的方式,来实现高密度的集约化部署。

6黑是指 LinuxONE 所配备的 6种黑科技,主要是解决企业级用户经常会遇到的一些需求,比如数据的压缩排序和加解密,以及虚拟化环境中各种应用负载或虚拟服务器之间的通讯、隔离、时钟同步的需求。

LinuxONE 之所以能自带这些黑科技纵横江湖,那是因为它在硬件层面做了很多有针对性的优化。比如 LinuxONE 的芯片压缩功能,支持高达 260GB/s 的超大规模吞吐能力,可以帮助用户节省大量存储空间、节省网络带宽、缩短数据传输时间等。LinuxONE 的内存通讯技术,可以帮助联机交易端到端的响应时间减少30%,同时 TPS 提升超过 50%!

尤其值得一提的是,在时钟同步方面,LinuxONE 可以确保在同一设备内,所有分区和虚机、以及跨多台设备集群的精准同步,可以达到微秒级。这对于分布式数据库来说,有很大的价值,因为分布式数据库对于节点间的时间同步,往往有着非常苛刻的要求。

无可替代的价值

在 BASE 理论中,最终一致性是对分布式系统中数据不一致的中间状态的妥协,如何提升一致性,使得分布式数据库可以更好支持企业级的关键业务,是国内分布式数据库厂商普遍的追求。LinuxONE 的价值也在于此,在分布式数据库环境下,LinuxONE 支持以“大而少”的部署方式,以“快又稳”的技术实现,可以大幅减少各类不稳定问题的发生。

大而少:

当有了更高一致性的约束之后,知道分布式的数据库不是节点数越多越好的,这个时候 LinuxONE 的高主频、大缓存的设计,就显得尤为重要。它可以用更大的、更少的节点来部署分布式数据库,这种部署方式可以大大减少节点数量、节点的不稳定性,节点之间的通讯量,以及减少节点之间因时钟同步而出现问题的频率,同时还可以减少跨分片分布式事务的发生。此外,LinuxONE 还支持秒级之内激活微码的方式,可以在不中断业务的前提下,在线极大程度的纵向扩容节点,从而减少节点数量的增加,满足数据再平衡的需求。

快又稳:

LinuxONE 的各种黑科技,不仅可以大幅提升性能,还能大大增强节点和网络通讯的稳定性,以及节点之间以微秒级的精准时钟同步,这些恰恰帮助分布式数据库解决了在一致性方面所面临的几个主要的麻烦。

简又省:

不管是大而少,还是小而多,LinuxONE 能够以“以一顶百”的方式,做到高密度集约化部署,简化运维的同时,还实现了更为可持续的发展模式。这种高密度集约化部署,在帮助分布式系统简化运维、提升最佳数据一致性水平的同时,还以更稳健和更节省的绿色计算的方式,帮助用户推进分布式架构的转型和创新。

当分布式数据库遇上了 LinuxONE,这一对黄金搭档的结合,可以帮助用户在选择分布式架构时,创造无限可能。

责任编辑:xj

原文标题:当分布式架构遇到开放 LinuxONE 主机,一致性难题迎刃而解

文章出处:【微信公众号:IBM中国】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Linux
    +关注

    关注

    87

    文章

    10988

    浏览量

    206725
  • 分布式
    +关注

    关注

    1

    文章

    754

    浏览量

    74078

原文标题:当分布式架构遇到开放 LinuxONE 主机,一致性难题迎刃而解

文章出处:【微信号:IBMGCG,微信公众号:IBM中国】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    鸿蒙HarmonyOS开发实例:【分布式关系型数据库

    使用[@ohos.data.relationalStore]接口和[@ohos.distributedDeviceManager] 接口展示了在eTS中分布式关系型数据库的使用,在增、删、改、查的基本操作外,还包括分布式数据库
    的头像 发表于 04-11 09:52 180次阅读
    鸿蒙HarmonyOS开发实例:【<b class='flag-5'>分布式</b>关系型<b class='flag-5'>数据库</b>】

    分布式节点服务器是什么?

    部署在不同的服务器上进行处理和存储,以实现负载均衡和容错处理。这种架构模式旨在提高系统的可扩展性、可靠性和性能表现,以满足大规模数据处理、复杂任务处理等需求。 分布式节点服务器的实现方
    的头像 发表于 01-12 15:04 331次阅读
    <b class='flag-5'>分布式</b>节点<b class='flag-5'>服务器</b>是什么?

    分布式系统硬件资源池原理和接入实践

    和音频驱动信息,存入分布式数据库。如果 AB 两个设备建立了可信关系并且通过软总线组网上线成功,分布式数据库会在 AB 两个设备之间自动同步各自的本地外设数据信息,这样,设备 A 分布式
    发表于 12-06 10:02

    怎么区分分布式服务器和集群式服务器

      如何区分分布式服务器和集群服务器?许多朋友在选择服务器时不知道分布式服务器和集群
    的头像 发表于 11-29 15:20 251次阅读

    分布式数据恢复-hbase+hive分布式存储误删除文件的数据恢复方案

    hbase+hive分布式存储数据恢复环境: 16台某品牌R730XD服务器节点,每台物理服务器节点上有数台虚拟机,虚拟机上配置的分布式
    的头像 发表于 11-24 15:55 200次阅读

    有没有mcu远程读写服务器上mysql数据库方法?

    有没有mcu通过控制wifi芯片远程读写服务器上mysql数据库?相应的mcu和wifi模块的数据手册及控制方法?
    发表于 09-28 06:02

    基于ZigBee的分布式井盖监控系统

    、不能实时监控、成本较高的问题。融合 GPRS网络,设计相应的嵌入网关和 Web服务器,实现了对缺失井盖的精确定位、自动报警功能。
    发表于 09-18 08:46

    **分布式数据库|数据库数据类型**

    或科研机构。分布式数据库可以留在 Internet、有组织的网络服务器或分散的独立计算机上的企业内联网或外联网或其他组织网络。 分布式数据库的主要特点包括: (1) 数据分散存储
    的头像 发表于 07-17 13:33 358次阅读

    #分布式数据

    分布式数据
    未来加油dz
    发布于 :2023年07月03日 22:58:32

    Greenplum数据库权限控制(2)#分布式数据

    分布式数据
    未来加油dz
    发布于 :2023年07月03日 22:46:50

    Greenplum数据库权限控制(1)#分布式数据

    分布式数据
    未来加油dz
    发布于 :2023年07月03日 22:46:25

    数字化转型下我国分布式数据库应用挑战及发展建议

    当前,金融等重点行业都在进行数字化转型,而分布式数据库作为数据承载工具,为数字化转型提供了有力的支撑。分布式数据库近年来发展迅猛,在产品成熟度上有了很大提升,但在行业应用和生态建设上仍有很多挑战
    的头像 发表于 06-29 16:45 366次阅读

    华为云新一代分布式数据库GaussDB正式发布

        6月,在华为全球智慧金融峰会2023上,华为常务董事、华为云CEO张平安以“一切皆服务,做好金融数字化云底座和使能器”为主题发表演讲,全面介绍了华为云基于全云化底座、分布式数据库
    的头像 发表于 06-16 11:33 853次阅读

    华为新一代分布式数据库GaussDB向全球客户提供服务

      6月7日,华为常务理事兼首席执行官张平安在华为全球智慧金融峰会2023上正式发布新一代分布式数据库gaussdb。具备高可用性、高安全、高性能、固有延展性、高功能和配置简易性、可迁移功能的gaussdb全面升级。
    的头像 发表于 06-09 11:18 406次阅读

    华为云新一代分布式数据库GaussDB,给世界一个更优选择

    6月7日,在华为全球智慧金融峰会2023上,华为常务董事、华为云CEO张平安以“ 一切皆服务,做好金融数字化云底座和使能器 ”为主题发表演讲, 全面介绍了华为云基于全云化底座、分布式数据库
    的头像 发表于 06-08 17:55 700次阅读