0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

星环科技CDH案例满足用户多方面数据智能需求

科技绿洲 来源:星环科技 作者:星环科技 2022-04-20 11:22 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

4月19日,星环科技2022春季新品发布周在线上盛大开启。开幕式中,星环科技CEO孙元浩做主题演讲,带大家走入“融合数据云时代“。

数据分析模式的历史变迁

星环科技成立的2013年,数据分析模式是以Data Hub数据枢纽的形式来进行;

2017年星环科技提出大数据3.0概念,区分于运用离散工具的数据平台,大数据3.0时代的最显著特征为一站式数据平台,同时可以覆盖数据全生命周期的处理。星环科技的一站式平台把数据湖、数据仓库、数据集市一体化,提供一套数据工具集Transwap studio处理数据的各个阶段;

2018年星环科技提出数据云的概念,在这个阶段大数据技术和云、AI技术融合,具备统一的资源管理技术,利用容器化技术,对外弹性提供数据库作为服务,数据为应用而生,数据更重,应用较轻,星环科技数据云产品领先业界一代;

2020年,星环科技提出多模型数据平台,利用统一语言、计算、存储、资源重构大数据软件栈,在一个平台上支持十种数据模型,有效降低数据开发和运维的难度,极大提升用户开发效率。随着多种数据模型融合在一起,访问语言产生了革命性的变化,SQL语言拓展、延伸到不同结构数据上面,能够用同样的语言访问不同数据结构,统一的多模平台,可以支撑更多新应用的产生。

同年星环科技提出联邦数据云概念,针对多数据中心、跨国数据中心而言,在资源层、数据层、计算层、机器学习层联邦化。部署结构也从早年间的星型结构,发展为雪花型。

进入2022年,我们来到了融合数据云的时代。融合数据云是指在按数据域组织的分布式数据云的技术架构基础上进行统筹管理、协同运营、服务融合以形成可协同一致,自由组合,灵活部署的一种新型数据分析模式。数据可以如血液一般,以安全、可信的方式即时流动到合适的地方,流给需要的人。

融合数据云时代的特征

融合数据云是以网格结构进行部署,它主要具备流动、开放、轻量、统管四大特点,即以数据的实时流动取代以往准实时和离线的批量处理;以数据的共享和开放激发数据作为生产力的最大价值;以轻量化的数据分析应用部署模式取代以往反复冗长的开发过程;以横跨多种部署结构、IaaS层及物理资源的统管方式打破各数据平台及底层物理资源的管理壁垒。

流动:数据只有流动才能产生价值,数据流动的速度越快,产生的价值越大。融合数据云以数据主动流动的方式取代了以往数据被动被采集入湖的方式(只能做到准实时或离线分析加工),将数据分析的效率大大提升。数据的流动需要建立在安全可信的基础之上,再即时地流动到合适的地方,流给需要的人。

开放:作为生产要素的数据,只有开放和共享才能使得价值最大化。数据的交易和流通已成为推动生产力的重要因素。

轻量:分析变得越来越轻量化,对于按需生成和随时部署的需求也在不断扩大。因此需要有统一的语言和应用开发方式,即时、按需地产生分析应用。

统管:融合数据云需要横跨企业边缘端、私有云、公有云、混合云,同时覆盖传统数据库和现代数据平台架构。 对于企业而言,融合数据云能够横跨和统管不同的部署结构、IaaS层或物理资源,第一时间调动底层资源承接上层的数据应用。

对于融合数据云而言,数据将被存储于多模型的数据库中,并且以网络结构的方式部署和流动。数据域可独立或两两组合成融合数据域,具备部署、模型、分析、智能等多维属性,通过互联管控实现协同工作,数据流动。网格结构是数据流动的基础,代表了云边端等多种部署维度以及数据业务化过程中的价值转换维度所构建网格结构,数据在各数据域间的流动带动了数据价值的活跃度。企业可以根据云边端等数据资源环境、时序/对象/图片/文档/图数据等企业数据模型、湖仓集等存储结构建立三维立体的数据域,并形成企业级的网格结构,为数据的流通创造合规的路径和价值创造的前提基础。在融合数据云下的数据,能够在不同的数据平台间即时流动,数据流从低到高,为企业不断涌现数据价值,而从高到低,又为企业的分析应用部署,提供了应需而生的响应速度。

数据连接一切,星环科技以引领行业技术发展和助力各行各业数字化转型为使命,期望通过数据全生命周期的基础软件与服务,为企业搭建数字化转型的数字底座,保障数据的安全和顺畅流通;以自研技术和产品积极落地IT基础设施的国产化替代,满足用户多方面数据智能需求,助力各行各业企业数字化转型。

对开源或国外产品的替代

数据连接一切,星环科技以引领行业技术发展和助力各行各业数字化转型为使命,期望通过数据全生命周期的基础软件与服务,为企业搭建数字化转型的数字底座,保障数据的安全和顺畅流通;以自研技术和产品积极落地IT基础设施的国产化替代,满足用户多方面数据智能需求,助力各行各业企业数字化转型。

星环科技的自主研发比例在大幅度提升,性能更优,速度更快,功能更强大,并且开始更多的替代国外产品。

大数据平台方面,星环科技早就实现了诸多替代CDH的案例,包括cloudera和Hortoworks合并后的Cloudera Data Platform和Cloudera Data cloud,星环科技的产品能够提供更多模型支持,提供统一接口和更好的SQL兼容性。

分布式数据库方面,星环科技产品可以兼容Oracle、Teratada、DB2,整合了Cypher语言,并用容器化技术实现更好的租户隔离,保守来讲性能提升2-10倍。星环科技KunDB在OLAP场景、MySQL的应用场景中已经能够取代MySQL和Oracle,ArgoDB取代Oracle、DB2和Teradata建设数据仓库,并在多个用户中完整替代了Teradata。

图分析方面,星环科技图数据库库StellarDB在中信证券等客户中,取代开源的或者商用版的Neo4j,StellarDB可以处理更大规模的图数据。

索引擎方面,完全自研的Scope搜索引擎可以替代Elasticsearch,经过比较,Scope集群规模可以达到几百个节点,远远大于Elasticsearch的几十个节点数量。

数据科学方面,Sophon Base机器学习建模工具,可以取代SaaS、SPS等统计分析软件,Sophon Base主要特点是在MLops把整个机器学习流程进行优化了,从特征工程到模拟训练、模型上线、模型评估到改进,有一套完整的工具集。星环科技提供了更多的分布式机器学习的算法和框架,也用更开放的态度,鼓励大家尝试使用星环的一系列技术软件。因此星环科技此次推出了轻量化的TDH社区版,免费供高校和科研机构方便地使用大数据技术。

审核编辑:彭菁
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器学习
    +关注

    关注

    67

    文章

    8571

    浏览量

    137457
  • 大数据
    +关注

    关注

    64

    文章

    9116

    浏览量

    144204
  • 星环科技
    +关注

    关注

    0

    文章

    37

    浏览量

    2907
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    黑芝麻智能加入理想OS开源生态

    黑芝麻智能加入理想OS开源生态,双方将围绕开源共建展开深度合作,携手推动智能汽车底层技术的开放协同与产业创新。
    的头像 发表于 04-30 10:18 545次阅读

    实时工业图像采集卡 | 低延迟传输,满足自动化生产线需求

    实时工业图像采集卡作为自动化生产线机器视觉系统的核心硬件,凭借接口、芯片、传输协议等多方面的硬件优化实现低延迟传输,适配不同生产线的检测与控制需求,以下从核心技术、接口类型、场景适配及选型要点展开
    的头像 发表于 11-26 16:23 818次阅读
    实时工业图像采集卡 | 低延迟传输,<b class='flag-5'>满足</b>自动化生产线<b class='flag-5'>需求</b>

    全流程场景落地 在线测长仪多方位部署 满足各种检测需求

    在钢厂,不同的位置都有长度的检测需求,如剪切位置、钢坯位置、成品位置等,在不同的位置部署在线测长仪,保证测量精度,提升产品品质。 全流程场景落地:这些环节“吃劲”,管控效果明显 在线测长仪在钢铁生产
    发表于 11-04 14:23

    多方面了解万向型双金属温度计!

    温度计
    华泰天科
    发布于 :2025年10月23日 16:28:09

    光纤电缆选型与安装需要注意哪些事项

    光纤电缆选型与安装需综合考虑传输需求、环境条件、施工规范及维护便利性等多方面因素。
    的头像 发表于 10-15 18:13 1484次阅读

    直插瓷片电容选型需要考虑哪些方面

    直插瓷片电容作为电子电路中常用的元件,其选型需综合考虑电路需求、产品特性、环境条件及可靠性要求等多方面因素。以下是选型时需重点关注的维度及具体要点: 一、基础参数匹配 1、电容值 需求
    的头像 发表于 10-14 14:29 1032次阅读
    三<b class='flag-5'>环</b>直插瓷片电容选型需要考虑哪些<b class='flag-5'>方面</b>?

    芯驰科技加入理想汽车OS指导委员会

    近日,理想汽车召开OS首届指导委员会会议,芯驰科技创始人兼董事长仇雨菁受邀出席。会上,OS指导委员会正式成立,理想汽车与包括芯驰科技在内的16家生态合作伙伴正式签署合作备忘录,
    的头像 发表于 09-26 15:54 1128次阅读

    中科创达加入理想汽车OS指导委员会

    日前,理想汽车OS首次技术指导委员会会议在理想汽车北京研发总部召开。中科创达作为全球领先的智能操作系统及端侧智能产品和技术提供商受邀参加,并由其
    的头像 发表于 09-26 10:51 1283次阅读

    电流能采集到直流分量吗?

    的问题,涵盖工作原理、特性、采集方法及影响因素等多方面内容。 一、电流的工作原理与基本构成 电流本质上是一个反馈控制系统,目标是精确控制电路中的电流。 在电机驱动系统中,电流负责
    的头像 发表于 09-03 13:39 972次阅读

    突破传统桎梏,PPEC Workbench 开启电源智能化设计新路径

    ,涵盖从简单到复杂的各种拓扑结构,并支持用户根据实际需求自由组合与优化,大幅缩短产品设计周期。 ■ 智能选型推荐: 平台基于海量历史数据与算法模型,能依据效率、体积、成本等指标,为工程
    发表于 08-26 11:40

    安科瑞智能微型断路器在老旧小区用电安全中应用

    引言 随着城镇化进程加速和居民生活用电负荷不断攀升,传统配电保护方式已难以满足现代家庭对用电安全、智能化管理及运行效率的多方面需求。尤其在老旧小区改造与智慧社区建设推进过程中,对
    的头像 发表于 08-21 19:30 605次阅读
    安科瑞<b class='flag-5'>智能</b>微型断路器在老旧小区用电安全中应用

    告别传统电闸局限,ASCB智能微型断路器开启用电智能化时代!漏电监测,远程控制

    安科瑞 王晶淼 Acrel-wjm 一、引言 随着城镇化进程加速和居民生活用电负荷不断攀升,传统配电保护方式已难以满足现代家庭对用电安全、智能化管理及运行效率的多方面需求。尤其在老旧小
    的头像 发表于 08-21 10:57 877次阅读
    告别传统电闸局限,ASCB<b class='flag-5'>智能</b>微型断路器开启用电<b class='flag-5'>智能</b>化时代!漏电监测,远程控制

    挖到宝了!比邻人工智能综合实验箱,高校新工科的宝藏神器!

    应用场景。从数据采集,到模型推理,都能完整且自如地参与,轻松解锁人工智能全流程实训,让你深度体验AI技术的魅力 。 四、九门课程全覆盖,满足多元学习需求 对于高校教学或者技术学习来说,
    发表于 08-07 14:23

    多方面分析光纤尾纤是怎么分类的

    在光纤电缆安装中,电缆如何连接到系统对于网络的成功至关重要。如果操作正确,光信号将以低衰减和极小的回波损耗通过链路。光纤尾纤是连接光纤的最佳方式,99% 的单模应用都使用光纤尾纤。本文包含一些关于光纤尾纤的基础知识,包括尾纤连接器类型、尾纤分类。 光纤尾纤规格 光纤尾纤是指一端带有工厂预装连接器、另一端未端接的光纤电缆。因此,连接器侧可以连接到设备,另一端可以与光纤电缆熔接。尾纤跳线用于通过熔接或机械连接的
    的头像 发表于 07-10 09:41 1397次阅读

    华兴变压器:SG-10kVA三相隔离变压器,定制化服务满足高海拔地区多样化需求

    高海拔地区地理环境复杂,不同用户的电力需求也存在差异。华兴变压器深入了解高海拔地区用户的实际需求,推出了SG-10kVA三相隔离变压器,并提供灵活的定制化服务,
    的头像 发表于 07-09 16:06 908次阅读
    华兴变压器:SG-10kVA三相隔离变压器,定制化服务<b class='flag-5'>满足</b>高海拔地区多样化<b class='flag-5'>需求</b>