0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大数据和数据分析区别

工程师 来源:未知 作者:姚远香 2018-12-19 15:39 次阅读

大数据是指用现有的计算机软硬件设施难以采集、存储、管理、分析和使用的超大规模的数据集。大数据具有规模大、种类杂、快速化、价值密度低等特点(4V特性)。大数据的“大”是一个相对概念,没有具体标准,如果一定要给一个标准,那么10-100TB通常称为大数据的门槛。

数据分析是一个大的概念,理论上任何对数据进行计算、处理从而得出一些有意义的结论的过程,都叫数据分析。从数据本身的复杂程度、以及对数据进行处理的复杂度和深度来看,可以把数据分析分为以下4个层次:数据统计,OLAP,数据挖掘,大数据。

大数据分析和数据分析是有区别和联系的。这里重点关注两者的是技术要求、使用场景、业务范围等方面的区别和联系。重点要区分理论研究和实际应用两方面区别和联系。

第一:在分析方法上两者并没有本质不同

数据分析的核心工作是人对数据指标的分析、思考和解读,人脑所能承载的数据量是极其有限的。所以,无论是“传统数据分析”,还是“大数据分析”,均需要将原始数据按照分析思路进行统计处理,得到概要性的统计结果供人分析。两者在这个过程中是类似的,区别只是原始数据量大小所导致处理方式的不同。

第二:在对统计学知识的使用重心上两者存在较大的不同

传统数据分析”使用的知识主要围绕“能否通过少量的抽样数据来推测真实世界”的主题展开。“大数据分析”主要是利用各种类型的全量数据(不是抽样数据),设计统计方案,得到兼具细致和置信的统计结论。

第三:与机器学习模型的关系上,两者有着本质差别

“传统数据分析”在大部分时候,知识将机器学习模型当黑盒工具来辅助分析数据。而“大数据分析”,更多时候是两者的紧密结合,大数据分析产出的不仅是一份分析效果测评,后续基于此来升级产品。在大数据分析的场景中,数据分析往往是数据加墨的前奏,数据建模是数据分析的成果。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据分析
    +关注

    关注

    2

    文章

    1352

    浏览量

    33736
  • 大数据
    +关注

    关注

    64

    文章

    8652

    浏览量

    136599
收藏 人收藏

    评论

    相关推荐

    Get职场新知识:做分析,用大数据分析工具

    综合分析。但现在有了大数据分析工具,一切问题都可迎刃而解。 大数据分析工具,顾名思义就是专门为分析海量数据而开发的一类工具。这类工具具有极强
    发表于 12-05 09:36

    基于大数据分析的5G智能工厂如何实现

    随着科技的快速发展,大数据分析和5G智能工厂已经成为当今社会的热门话题。它们在很多领域都有着广泛的应用,如工业制造、医疗保健、交通运输等。在本文中,我们将探讨大数据分析和5G智能工厂的概念
    的头像 发表于 09-25 17:08 318次阅读

    大数据行业应用#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月13日 00:20:34

    大数据安全#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月13日 00:13:43

    #大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月13日 00:11:30

    Sqoop安装部署和数据导入导出(2)(2)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月11日 15:04:29

    Sqoop安装部署和数据导入导出(1)(1)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月11日 15:03:08

    大数据分析架构(3)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月11日 13:18:40

    大数据分析架构(2)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月11日 13:17:56

    大数据分析架构(1)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月11日 13:17:31

    电商数据分析攻略,让你轻松搞定数据分析

    在当今的数字经济时代,运用大数据分析来促进业务增长已然成为一种普遍行为,拥有一套系统化的数据分析方案尤为重要。奥威BI电商数据分析方案是一种基于数据挖掘和机器学习技术的解决方案,以丰富
    发表于 06-27 09:22

    浅谈大数据分析技术在军事应用

    大数据分析技术的发展历史可追溯至20世纪初。从那时起,大数据在军事领域的应用便逐渐显现。
    的头像 发表于 05-23 12:44 2360次阅读

    什么是大数据分析

    大数据分析行业是最近这几年比较火,比较高薪的行业了,很多人都想分一杯羹,经常同学问我什么是大数据分析?什么是python?这些能学到什么技能?以后能学到什么知识?有太多的疑问,小编今天就简单写出来
    的头像 发表于 05-19 11:47 881次阅读

    事实证明,国产BI软件的财务数据分析性价比极高!

    国产BI软件做财务数据分析的性价比极高,主要得益于两个因素,一个是国产BI软件按功能模块购买,大幅度降低BI大数据分析平台的使用成本;另一个则是国产BI软件已打磨出标准化、系统化的财务数据分析方案
    发表于 05-16 11:06

    大数据分析的重要性

    大数据分析有助于找到问题的解决方案,如降低成本,节省时间并降低决策风险。通过结合数据分析和机器学习,企业可以通过以下方式获益匪浅:
    的头像 发表于 05-10 15:34 671次阅读