资料介绍
随着互联网的飞速发展, 特别是近年来社交网络、物联网和云计算的飞速发展和大量应用, 人们所接触和关注的数据量出现爆炸式增长, 使得数据的极大丰富和复杂成为当今社会的重要特征。对大数据分析和处理的技术也随之建立完善并丰富起来。主要介绍大数据的概念和特点,分析了实现大数据处理的关键技术和大数据的应用领域,列举了几种大数据在现实生活中的典型应用。
首先, 全球数据量出现爆炸式增长, 数据成了当今社会增长最快的资源之一。根据国际数据公司IDC 的监测统计,即使在遭遇金融危机的2009 年,全球信息量也比2008年增长了62%,达到80 万PB(1PB等于10GB),到2011年全球数据总量已经达到1.8ZB (1ZB 等于1 万亿GB),并且以每两年翻一番的速度飞速增长,预计到2020 年全球数据量总量将达到40ZB,10 年间增长20 倍以上,到2020 年,地球上人均数据预计将达5247GB。在数据规模急剧增长的同时, 数据类型也越来越复杂, 包括结构化数据、半结构化数据、非结构化数据等多种类,其中采用传统数据处理手段难以处理的非结构化数据已接近数据总量的75%。
如此增长迅速、庞大繁杂的数据资源, 给传统的数据分析、处理技术带来了巨大的挑战。为了应对这样的新任务, 与大数据相关的大数据技术、大数据工程、大数据科学和大数据应用等迅速成为信息科学领域的热点问题, 得到了一些国家政府部门、经济领域以及科学领域有关专家的广泛关注。虽然大数据日益升温,但与大多数信息学领域的问题一样, 大数据的基本概念及特点, 大数据要解决核心问题,目前尚无统一的认识,大数据的获取、存储、处理、分析等诸多方面仍存在一定的争议, 大数据概念有过度炒作的嫌疑。欧洲的一些企业甚至认为大数据就是海量数据存储,仅将大数据视作是可以获取更多信息的平台。本文分析当前流行的几种大数据的概念, 讨论其异同,从大数据据有的典型特征角度描述大数据的概念和特点,从整体上分析大数据要解决的相关性分析、实时处理等核心问题, 在此基础上, 最后讨论大数据可能要面临的多种挑战。
大数据的概念和特点
大数据是个较为抽象的概念,正如信息学领域但是面对以视频、图片、文字等非结构化数据为主大多数新兴概念样,大数据至今尚无确切、统的定义。来自维基百科的定义为:大数据指数量巨大、类型复杂的数据集合,现有的数据库管理工具或传统的数据处理应用难以对其进行处理。这些挑战包括如捕获、手机、存储、搜索、共享、传递、分析与可视化等。IDC 在对大数据作出的定义为:大数据一般会涉及2 种或2 种以上数据形式。它要收集超过100TB的数据,并且是高速、实时数据流;或者是从小数据开始,但数据每年会增长60%以上。这个定义给出了量化标准, 但只强调数据量大,种类多,增长快等数据本身的特征。研究机构Gartner 给出了这样的定义:大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
- Python语言在AI、大数据方面的重要性 25次下载
- 应用在TFT面板的液晶控制器芯片R61505W 5次下载
- 大数据在物流行业的应用 19次下载
- 大数据环境下的移动学习发展趋势 21次下载
- 可应用在电磁涡流场问题的等几何配点法 7次下载
- 医疗大数据面临的挑战及相应的隐私保护技术 16次下载
- 大数据时代有什么样的利与弊 11次下载
- 直流超声波电机可以应用在那些领域 0次下载
- 微型电机可以应用在那些领域 13次下载
- 3D数学基础图形与游戏开发PDF电子书免费下载 87次下载
- 物联网的关键技术有哪些可以应用在那些方面 21次下载
- 物联网时代下嵌入式可以在那些行业应用详细资料说明 1次下载
- 大数据的基础起源发展和处理流程应用及面临的挑战和展望 12次下载
- 大数据与推荐系统 18次下载
- 领域大数据应用开发与运行平台技术研究 0次下载
- 大数据技术是干嘛的 大数据核心技术有哪些 536次阅读
- 学成Java后,可开发应用在哪里? 2054次阅读
- 零基础可以学习大数据开发吗?学什么内容? 3135次阅读
- 5G到底有哪些价值能应用在那些方面 5486次阅读
- 碳化硅有哪些优势?能应用在那些方面 8240次阅读
- python主要应用在那些领域 4396次阅读
- 视觉大数据领域的最好分析方法之一:深度学习 4664次阅读
- 大数据是什么_大数据技术和应用的现状与前景 2.3w次阅读
- 大数据的5v特征你知道多少 2.7w次阅读
- 柔性电子常用材料是那些柔性电子那应用在那些行业 2.6w次阅读
- IGBT模块是什么?主要应用在那些领域?以及IGBT市场规模和发展方向 9.8w次阅读
- 区块链技术需要应用在那些方面?区块链未来应用的36种场景资料概述 6673次阅读
- 为什么要发展区块链?区块链能应用在那些方面? 5586次阅读
- Xilinx支持Serial RapidIO Gen2核可应用在Rapid IO交换设计中 7263次阅读
- 介绍了计算机视觉领域内比较成功的10个深度学习架构 8947次阅读
下载排行
本周
- 1东芝BiCD集成电路硅单片TB67S109AFNAG数据手册
- 1.93 MB | 5次下载 | 免费
- 2SP3060A/30120A/30160A/30320A/30520A系列数字合成扫频仪使用说明书
- 4.16 MB | 3次下载 | 1 积分
- 3具有双通道 DC-DC转换器、由串行接口控制的9通道电机驱动器TPIC2010数据表
- 1.15MB | 2次下载 | 免费
- 4USB Type-C PD快充协议智能触发芯片FS312B数据手册
- 0.75 MB | 1次下载 | 免费
- 5USB Type_C PD快充协议智能触发芯片FS8025B数据手册
- 1.29 MB | 1次下载 | 免费
- 6触摸按键PCB 设计要点V01
- 1.42 MB | 1次下载 | 免费
- 75V升压充电两串锂电池充电管理IC FS4058数据手册
- 2.98 MB | 次下载 | 免费
- 8真关断同步升压IC FS2009数据手册
- 2.08 MB | 次下载 | 免费
本月
- 1DCDC原理详解
- 0.98 MB | 63次下载 | 免费
- 2allegro快速入门教程
- 1.98 MB | 36次下载 | 免费
- 3FU-7(807)胆机原理图
- 11.93 MB | 25次下载 | 1 积分
- 4用于汽车应用的高压电源管理IC TPS65311-Q1数据表
- 1.05MB | 22次下载 | 免费
- 5电子元件基础知识介绍
- 8.76 MB | 13次下载 | 2 积分
- 6华为海思Ascend 310芯片的资料说明
- 0.12 MB | 10次下载 | 10 积分
- 7GD32F10x系列MCU用户手册
- 11.5MB | 9次下载 | 免费
- 86A 输出电流同步降压稳压器TPS65286数据表
- 2.05MB | 6次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935083次下载 | 免费
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420045次下载 | 免费
- 3Altium DXP2002下载入口
- 未知 | 233067次下载 | 免费
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191308次下载 | 免费
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183308次下载 | 免费
- 6labview8.5下载
- 未知 | 81567次下载 | 免费
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73785次下载 | 免费
- 8NI LabVIEW中实现3D视觉的工具和技术
- 未知 | 70088次下载 | 免费
评论
查看更多