0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

非结构化数据暴增,企业如何稳定高效的支撑日均百亿级访问

秃头也爱科技 来源:秃头也爱科技 作者:秃头也爱科技 2022-12-02 09:19 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

  5G时代来临,游戏、视频直播成为当下最为热门的娱乐方式,网上冲浪更快更满足。但数据量的爆发式增长带来的系统响应速度迟缓、数据库无损扩容难、数据存储成本陡增等问题扑面而来。

  以视频业务为例,每秒10万业务请求时,单表产生的数据量可能会高达数十亿。数据量暴增则需要扩容,对于传统自建数据库,扩容过程非常复杂,数据库系统扩容需要提前几个月去做规划,细致的部署,缜密的实施,需经历上线-灰度-再验证等过程,由于业务有变化起伏,当业务高峰过了后需要面临缩容的痛苦,否则将会造成极大的资源浪费,这是传统架构带来的必然问题。

  今天就来聊聊华为云GaussDB(for Cassandra)面对内容分发、视频直播等领域如何更低成本助力企业乘风破浪,快速应对业务百亿数据量增长。

无忧迁移百亿数据量,分钟级快速扩展

  首先,解决无忧搬迁海量数据尤为重要,华为云数据库提供了数据复制服务DRS,在不影响业务的情况下,可搬迁数据规模超过10TB,单表高达数百亿数据;同时可支持将数据反向同步到源库,可保证两边的数据一致性。

  其次,华为云GaussDB(for Cassandra) 多副本策略下沉到共享存储,大幅提升弹性伸缩能力,计算节点按需扩展,不需要做数据迁移;支持一键扩缩容,扩缩容耗时仅分钟级别,相比开源Cassandra扩容时长提升几十倍,可轻松应对业务变化。

降低成本、无损升级,业务无感知

  相比开源Cassandra,相同性能下的引擎规格,华为云GaussDB(for Cassandra) 2U8G规格的费用仅为开源Cassandra 8U32G规格的70%,同时免去了后续扩容存储等数据搬迁各项工作。此外,华为云GaussDB(for Cassandra)提供了无损升级方案,实现升级期间业务基本无感知。

轻松满足多维度、大数据量复杂查询场景

  在信息流、内容分发场景中,华为云GaussDB(for Cassandra)自身在写性能上具有先天优势,针对客户查询场景复杂及查询性能要求高的特点,GaussDB在大数据量查询性能进行了优化,引入视图增强特性,并对表结构进行优化设计,满足了信息流、内容搜索等业务的查询需求。

支持内容自动推荐,流服务助力客户轻松捕获数据变更

  内容分发场景,客户使用最多的便是自动推荐系统,由于传统NoSQL数据库无法做搜索引擎,所以需要将数据同步到搜索服务中支撑搜索功能。在内容管理业务中,一般都会用到经典应用场景---数据变更捕获完成数据同步,华为云GaussDB(for Cassandra) 实现了Stream功能,支持数据同步到搜索引擎中,完美支撑了在线大数据分析,内容自动推荐等场景。

支撑离线大数据分析,支持丰富的文件类型

  一般来说,互联网内容分发平台在用户系统、内容处理、信息流服务等场景中都有数据离线导出的需求。而需要分析的数据系统会定期导出到OBS(对象存储服务)上,等分析数据时再从OBS上获取数据进行分析处理。华为云GaussDB(for Cassandra)对导出的过程进行了优化,缩短导出时长,增加导出的文件类型,支持更多的离线分析系统、离线分析能力。

  当前,华为云GaussDB(for Cassandra)成功赋能了工业制造、气象业、互联网等行业,其中助力华为消费者云高效管理全球最大Cassandra节点1万+。华为云GaussDB(for Cassandra)通过解决大集群、大数据量下的性能稳定、数据一致性、可用性等问题,可支撑企业业务快速增长。此外,数字化时代下,视频直播、内容分发给人们带来了更为精准的娱乐体验,华为云GaussDB也将持续打造先进的技术,让人们更快乐的享受数字化服务。
审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据存储
    +关注

    关注

    5

    文章

    1037

    浏览量

    53009
  • 数据库
    +关注

    关注

    7

    文章

    4083

    浏览量

    68538
  • 华为云
    +关注

    关注

    3

    文章

    2836

    浏览量

    19370
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI大模型微调企业项目实战课

    结构化文本,通过去重、脱敏,最终转化为符合大模型阅读习惯的“指令-回复”对。几千条高质量、无矛盾的垂直行业数据,其效果远胜于几万条从网上爬取的劣质问答。 第二步:精准手术——参数高效
    发表于 04-16 18:48

    Altair OptiStruct:重构结构研发逻辑,引领工业仿真与优化新纪元

    ,驱动设计创新,突破传统经验设计的局限,生成更高效、更创新的结构构型,助力产品差异化竞争;其四,兼容前沿工艺,适配复合材料、材制造、新能源等新兴领域需求,助力企业紧跟行业技术趋势,抢
    发表于 03-20 10:25

    NVIDIA cuDF和cuVS获全球领先数据平台采用

    企业每年产生数百 ZB (Zettabyte) 的数据,并在争相将这些信息转化为洞察。NVIDIA cuDF 和 cuVS 作为基于 NVIDIA CUDA-X 构建的加速数据库,正在被各行业的
    的头像 发表于 03-19 15:46 444次阅读

    跨境 SDWAN 专线:企业海外应用访问的优化方案

    前言在企业国际业务布局的过程中,跨境访问海外应用软件时的卡顿、延迟、丢包等问题,成为制约工作效率的常见网络瓶颈,传统公网的跨境链路因稳定性不足,难以满足
    的头像 发表于 03-09 13:14 520次阅读
    跨境 SDWAN 专线:<b class='flag-5'>企业</b>海外应用<b class='flag-5'>访问</b>的优化方案

    物联网数据中台的功能应用有哪些

    源,包括数据库、文件系统、云存储、物联网设备、社交媒体等,将分散在不同系统中的结构化、半结构化结构化
    的头像 发表于 02-26 14:35 218次阅读

    技术分享|道路数据编辑与格式适配解析

    1引言我们此前发布的《如何高效构建与测试结构化道路场景?》一文,已系统阐述了结构化道路仿真的必要性、当前面临的技术难点及其解决方案。而在
    的头像 发表于 02-13 16:01 203次阅读
    技术分享|道路<b class='flag-5'>数据</b>编辑与格式适配解析

    数字的基础是什么

    、用户交互等渠道持续收集结构化(如数据库记录)和结构化数据(如文本、图像、视频)。 数据存储与
    的头像 发表于 02-04 17:53 1286次阅读

    如何高效构建与测试结构化道路场景?

    高保真虚拟数据集开源发布,兼容nuScenes,开箱即用!01引言随着智能驾驶仿真测试等技术的快速发展,行业评估体系已从单一的“测试里程数”向更全面的“场景覆盖度”及“边缘场景”检验演进。在此趋势下,实车测试向仿真环境迁移已成为提升验证效率与安全的必然选择。统计数据表明,
    的头像 发表于 01-04 17:33 727次阅读
    如何<b class='flag-5'>高效</b>构建与测试<b class='flag-5'>非</b><b class='flag-5'>结构化</b>道路场景?

    无质量损失的数据迁移:Nikon SLM Solutions信赖3Dfindit企业

    的同时,输入每个新零件节省了约13分钟。 一个软件,多种应用除了数据迁移,Nikon SLM Solutions还使用3Dfindit企业版对标准件、外购件和自制专有件进行结构化管理,以及将电子CAD
    发表于 11-25 10:06

    结构化布线中使用电缆标签的4个主要优势

    在现代通信和网络基础设施建设中,结构化布线系统扮演着至关重要的角色。它不仅确保了网络的高效传输和稳定运行,还为未来的扩展和维护提供了便利。而在结构化布线中,电缆标签的使用虽看似是一个小
    的头像 发表于 11-24 10:34 422次阅读

    PV线测径仪重磅来袭 准确把控每一丝 赋能光伏高效生产

    ,产品质量成为企业核心竞争力的关键。PV线测径仪以精准测量为基础,以高效智能为支撑,以稳定耐用为保障,帮助光伏企业实现PV线生产的质量管控,
    发表于 11-17 14:09

    Smarsh携手戴尔科技构建现代智能数据中心

    如今,越来越多的企业意识到,不只是合同和邮件,所有日常沟通的结构化数据——语音、视频、聊天记录、会议纪要等,都是潜在的合规风险点。
    的头像 发表于 07-08 15:58 964次阅读

    智能体AI面临结构化数据难题:IBM推出解决方案

    ,同时提供一个开放的混合数据基础架构和企业级结构化结构化数据管理。 智能体AI面临
    的头像 发表于 07-02 09:40 674次阅读

    白城LP-SCADA工业产线高密度数据采集 实时响应无滞后

    的问题。平台内置的优化算法与高效数据处理引擎,确保数据准确无误地流转至每一个分析与应用环节,为企业高效决策提供坚实的
    发表于 06-19 14:51

    DDN携手NVIDIA释放结构化数据的AI价值

    DDN 通过与 NVIDIA AI 数据平台的合作,推出联合解决方案,简化了企业结构化数据的存储、访
    的头像 发表于 06-10 10:31 1068次阅读