0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

几种有用的数据平台建设方案

如意 来源:腾讯云 作者:佚名 2020-12-18 15:53 次阅读

随着大数据在越来越多的企业当中落地,企业要开展大数据相关的业务,那么首先要搭建起自身的数据平台。而企业搭建大数据平台,往往需要结合成本、业务、人员等各方面的因素,来规划数据平台建设方案。今天我们就来聊聊数据平台建设的几种方案。

数据平台其实在企业当中一直都是存在的,但是进入到数据爆发式增长的大数据时代,传统的企业级数据库,在满足数据管理应用上,并不能完全满足各项需求。

对于企业而言,基于大数据背景下的企业数据管理应用,也需要更加符合需求的数据平台建设方案。

主流数据平台建设方案

从市场主流选择来看,企业数据平台建设方案,目前大致有以下几种:

1、常规数据仓库

数据仓库的重点,是对数据进行整合,同时也是对业务逻辑的一个梳理。数据仓库虽然也可以打包成SAAS那种Cube一类的东西来提升数据的读取性能,但是数据仓库的作用,更多的是为了解决公司的业务问题。

2、敏捷型数据集市

数据集市也是常见的一种方案,底层的数据产品与分析层绑定,使得应用层可以直接对底层数据产品中的数据进行拖拽式分析。数据集市,主要的优势在于对业务数据进行简单的、快速的整合,实现敏捷建模,并且大幅提升数据的处理速度。

3、MPP(大规模并行处理)架构

进入大数据时代以来,传统的主机计算模式已经不能满足需求了,分布式存储和分布式计算才是王道。大家所熟悉的Hadoop MapReduce框架以及MPP计算框架,都是基于这一背景产生。

MPP架构的代表产品,就是Greenplum。Greenplum的数据库引擎是基于Postgresql的,并且通过Interconnnect神器实现了对同一个集群中多个Postgresql实例的高效协同和并行计算。

4、Hadoop分布式系统架构

当然,大规模分布式系统架构,Hadoop依然站在不可代替的关键位置上。雅虎、Facebook、百度、淘宝等国内外大企,最初都是基于Hadoop来展开的。

Hadoop生态体系庞大,企业基于Hadoop所能实现的需求,也不仅限于数据分析,也包括机器学习、数据挖掘、实时系统等。企业搭建大数据系统平台,Hadoop的大数据处理能力、高可靠性、高容错性、开源性以及低成本,都使得它成为首选。

关于大数据平台架构,数据平台建设的几种方案,以上就为大家做了一个简单的介绍了。企业基于大数据平台建设的需求,对于专业人才的需求度也正在增加,具备过硬技术实力的大数据人才,将受到更高程度的青睐。
责编AJX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 平台
    +关注

    关注

    1

    文章

    194

    浏览量

    23502
  • 数据
    +关注

    关注

    8

    文章

    6514

    浏览量

    87610
  • 大数据
    +关注

    关注

    64

    文章

    8657

    浏览量

    136604
收藏 人收藏

    评论

    相关推荐

    某单位多源监控摄像头统一视频监管平台建设方案

    融合通信平台建设
    的头像 发表于 04-21 19:13 34次阅读
    某单位多源监控摄像头统一视频监管<b class='flag-5'>平台</b><b class='flag-5'>建设</b><b class='flag-5'>方案</b>

    晶众合肥市交通规划数据模型及应用平台建设项目顺利通过初验

    2024年3月24日,在合肥市自然资源和规划局顺利召开了合肥市交通规划数据模型及应用平台建设初验专家评审会,晶众合肥市交通规划数据模型及应用平台
    的头像 发表于 03-25 15:25 190次阅读

    应用方案:实时数据加密

    应用方案:实时数据加密 利用CPLD设计加密电路方便可行,能够较好地实现加密功能。AG32系列MCU产品,在芯片内部内置了CPLD逻辑,可以有效地满足各种数据采集需求,降低了客户的BOM成本。以下
    发表于 01-15 08:57

    集成电路学习与实训平台配置方案-高职院校第一期建设

    北京革新创展能科技有限公司提供的集成电路学习与实训平台配置方案,主要用于高职院校第一期建设需求,如需详细方案,请随时联系我们。
    的头像 发表于 01-03 10:42 260次阅读
    集成电路学习与实训<b class='flag-5'>平台</b>配置<b class='flag-5'>方案</b>-高职院校第一期<b class='flag-5'>建设</b>

    集成电路学习与实训平台配置方案-本科院校第一期建设

    北京革新创展科技有限公司提供的集成电路学习与实训平台配置方案,主要用于本科院校第一期建设。如需详细方案资料,请随时联系我们。
    的头像 发表于 01-03 10:29 231次阅读
    集成电路学习与实训<b class='flag-5'>平台</b>配置<b class='flag-5'>方案</b>-本科院校第一期<b class='flag-5'>建设</b>

    有没有用杰理的蓝牙芯片设计的音频接收方案

    有没有用杰理的蓝牙芯片设计的音频接收方案?各位大佬,求原理图学习一下。
    发表于 12-04 10:13

    关注智慧灯杆管理平台建设项目

    新乡市红旗区5G新型智慧城市建设项目“智慧红旗综合指挥服务中心”项目,项目投资:6435万元,建设智慧城市运营中心(IOC)、智慧灯杆等智慧城市基础平台及前端配套服务。
    的头像 发表于 11-29 09:17 212次阅读
    关注智慧灯杆管理<b class='flag-5'>平台</b><b class='flag-5'>建设</b>项目

    LED显示屏常见几种控制解决方案

    常见的几种操作解决方案:3G/4G解决方案、Wi-Fi解决方案、同异步双模控制方案、多屏画面同步方案
    的头像 发表于 11-23 12:00 2546次阅读
    LED显示屏常见<b class='flag-5'>几种</b>控制解决<b class='flag-5'>方案</b>

    串口发送的这几种写法,你用过几种

    串口发送的这几种写法,你用过几种
    的头像 发表于 11-02 16:20 711次阅读
    串口发送的这<b class='flag-5'>几种</b>写法,你用过<b class='flag-5'>几种</b>?

    中科曙光医疗数字化平台方案推动新郑市县域医共体的建设工作

      为积极推动新郑市县域医共体的建设工作,实现区域内医疗信息互联、互通、共享,提升基层服务能力,新郑市公立人民医院引入中科曙光医疗数字化平台方案,以医共体之“通”破解群众看病之“痛”,打造敏捷高效
    的头像 发表于 10-13 09:35 984次阅读

    中伟视界&amp;矿山安全生产:煤矿智慧矿山ai平台建设方案,ai平台由哪几部分组成

    本文介绍煤矿智慧矿山AI平台建设方案,并详细阐述该平台由哪几部分组成。
    的头像 发表于 09-27 10:52 255次阅读

    工业物联网平台助力新型工业化建设

    随着工业物联网场景应用的落地与丰富,工业物联网平台正在成为推动新型工业化建设的重要力量。它通过了解设备、系统和管理人员,实现数据交互和共享,并为大数据分析提供可靠的
    的头像 发表于 09-25 11:30 252次阅读

    力控元申ThingNet智慧燃气物联网运维平台建设方案

    一、力控元申ThingNet智慧燃气物联网运维平台背景某燃气有限公司的主营业务为管道天然气销售、营业收费、用户服务,天然气管网工程建设,各类管网设施的运行、维护、保养、维修、抢修,天然气市场开发
    的头像 发表于 08-17 16:13 427次阅读
    力控元申ThingNet智慧燃气物联网运维<b class='flag-5'>平台</b><b class='flag-5'>建设</b><b class='flag-5'>方案</b>

    【解决方案】设备如何上报数据到ZWS云平台

    ZWS云平台是致远电子研发的通用物联网云平台,提供多种行业解决方案及云服务,为设备厂商提供上云服务,支持对厂商不同种类设备的数据采集和分析。 不同种类的设备采集的
    的头像 发表于 07-19 11:55 267次阅读
    【解决<b class='flag-5'>方案</b>】设备如何上报<b class='flag-5'>数据</b>到ZWS云<b class='flag-5'>平台</b>?

    浅谈智慧医院的信息集成平台建设与配电设计方案

    的必要性。文章提出并分析智慧医院发展趋势,阐述了智慧医院的整体建设规划,论述了基于智慧医院为背景,信息集成平台在其中的重要作用和支撑。研究通过信息集成平台实现数据的整合和标准化,将医院
    的头像 发表于 07-12 15:26 297次阅读
    浅谈智慧医院的信息集成<b class='flag-5'>平台</b><b class='flag-5'>建设</b>与配电设计<b class='flag-5'>方案</b>