0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

区块链和大数据的关系及结合的必要性

姚小熊27 来源:人工智能实验室 作者:人工智能实验室 2020-10-23 14:27 次阅读

互联网信息技术的高速发展,更多产业都对产业互联网方面加大投入。大数据、区块链人工智能等高新技术的不断发展,智慧城市应运而生。不过,智慧城市因为数据承载量大,以往的存储方式已经不能满足智慧城市所需的底层架构,因不具备弹性的扩张存储容量,且不能同时存储多种数据,同时安全问题也是智慧城市建设之中的重点,区块链其去中心化的思想与大数据的需求结合,去中心化以简洁的方式保障城市安全,使城市建设和运行更加稳定。

一、大数据和区块链的含义

1.大数据

大数据一般指的是海量、复杂的数据集。传统的数据处理软件无法在合理的时长内捕捉并处理这些数据。这些大数据集包括结构化、非结构化和半结构化数据,每一种数据集都可以通过分析获得洞见。

究竟数据量多大才算“大数据”还有待商榷。但数据量通常为拍字节的倍数;对于最大的项目来说,数据量通常在艾字节范围内。

通常,大数据包括以下三个要素:

海量的数据

各种类型的数据

数据处理和分析的速度

构成大数据存储的数据来源为网站、社交媒体、桌面和移动应用等。大数据的概念来自于使组织能够实际运用数据的组件。此外,企业还可以用大数据解决许多业务问题,如:支持大数据的IT基础设施;应用于数据的分析;大数据项目所需技术;相关技能;以及对大数据有意义的实际用例等。

2.区块链

区块链是一项彻底改变互联网运作方式的技术。该技术的工作原理是创建一系列数据记录,其中每个新纪录都驻留在一个区块中并指向前一个记录。术语“区块链”来自这种连接数据块的结构。

区块链技术使分布式账本系统成为可能,从而使记录更加透明。该技术使用加密技术来保护用户信息,分式账本系统几乎不可能被破解。区块链技术不仅是加密货币的主干技术,还有其它几种用途。

区块链网络上的加密货币交换可呈中心化,也可呈网络化。去中心化的加密货币交换几乎不可能被破解,因为有多个节点支持该系统。区块链技术使点对点共享内容成为可能,无需中间人平台。无论通过区块链网络分享什么内容,用户都保留对内容的所有权,除非用户将其出售给其他人。个人信息非常安全,并受私钥加密保护。

简而言之,区块链是一种网络技术。它可以让用户有机会安全地共享内容,实现点对点交易,不需要中间人或中央管理系统。

二、区块链和大数据的关系是怎么样的呢?

1、数据安全:区块链让数据真正“放心”流动起来

区块链以其可信任性、安全性和不可篡改性,让更多数据被解放出来。用一个典型案例来说明,即区块链是如何推进基因测序大数据产生的。区块链测序可以利用私钥限制访问权限,从而规避法律对个人获取基因数据的限制问题,并且利用分布式计算资源,低成本完成测序服务。区块链的安全性让测序成为工业化的解决方案,实现了全球规模的测序,从而推进数据的海量增长。

2、数据开放共享:区块链保障数据私密性

政府掌握着大量高密度、高价值数据,如医疗数据、人口数据等。政府数据开放是大势所趋,将对整个经济社会的发展产生不可估量的推动力。然而,数据开放的主要难点和挑战是如何在保护个人隐私的情况下开放数据。基于区块链的数据脱敏技术能保证数据私密性,为隐私保护下的数据开放提供了解决方案。数据脱敏技术主要是采用了哈希处理等加密算法。例如,基于区块链技术的英格码系统(Enigma),在不访问原始数据情况下运算数据,可以对数据的私密性进行保护,杜绝数据共享中的信息安全问题。例如,公司员工可放心地开放可访问其工资信息的路径,并共同计算出群内平均工资。每个参与者可得知其在该组中的相对地位,但对其他成员的薪酬一无所知。

3、数据存储:区块链是一种不可篡改的、全历史的、强背书的数据库存储技术

区块链技术,通过网络中所有节点共同参与计算,互相验证其信息的真伪以达成全网共识,可以说区块链技术是一种特定数据库技术。迄今为止我们的大数据还处于非常基础的阶段,基于全网共识为基础的数据可信的区块链数据,是不可篡改的、全历史的、也使数据的质量获得前所未有的强信任背书,也使数据库的发展进入一个新时代。

4、数据分析:区块链确保数据安全性

数据分析是实现数据价值的核心。在进行数据分析时,如何有效保护个人隐私和防止核心数据泄露,成为首要考虑的问题。例如,随着指纹数据分析应用和基因数据检测与分析手段的普及,越来越多的人担心,一旦个人健康数据发生泄露,将可能导致严重后果。区块链技术可以通过多签名私钥、加密技术、安全多方计算技术来防止这类情况的出现。当数据被哈希后放置在区块链上,使用数字签名技术,就能够让那些获得授权的人们才可以对数据进行访问。通过私钥既保证数据私密性,又可以共享给授权研究机构。数据统一存储在去中心化的区块链上,在不访问原始数据情况下进行数据分析,既可以对数据的私密性进行保护,又可以安全地提供给全球科研机构、医生共享,作为全人类的基础健康数据库,对未来解决突发疾并疑难疾病带来极大的便利。

5、数据流通:区块链保障数据相关权益

对于个人或机构有价值的数据资产,可以利用区块链对其进行注册,交易记录是全网认可的、透明的、可追溯的,明确了大数据资产来源、所有权、使用权和流通路径,对数据资产交易具有很大价值。

一方面,区块链能够破除中介拷贝数据威胁,有利于建立可信任的数据资产交易环境。数据是一种非常特殊的商品,与普通商品有着本质区别,主要是具有所有权不清晰、 “看过、复制即被拥有”等特征,这也决定了使用传统商品中介的交易方式无法满足数据的共享、交换和交易。因为中介中心有条件、有能力复制和保存所有流经的数据,这对数据生产者极不公平。这种威胁仅仅依靠承诺是无法消除的,而这种威胁的存在也成为阻碍数据流通巨大障碍。基于去中心化的区块链,能够破除中介中心拷贝数据的威胁,保障数据拥有者的合法权益。

另一方面,区块链提供了可追溯路径,能有效破解数据确权难题。区块链通过网络中多个参与计算的节点来共同参与数据的计算和记录,并且互相验证其信息的有效,既可以进行信息防伪,又提供了可追溯路径。把各个区块的交易信息串起来,就形成了完整的交易明细清单,每笔交易来龙去脉非常清晰、透明。另外,当人们对某个区块的“值”有疑问时,可方便地回溯历史交易记录进而判别该值是否正确,识别出该值是否已被篡改或记录有误。

为什么要把大数据和区块链结合起来?

1.安全性

区块链没有把数据上传到云服务器上,也没有把数据存储在一个地方,而是把所有数据东西分成小部分并使其分布在整个计算机网络上。它有效地排除了中间人。没有必要使用第三方来处理交易。当可以依赖去中心化的、不可篡改的分类账时,就不必再信任供应商或服务提供者。此外,区块链上发生的所有事情都是加密的,并且可以证明数据没有被更改。由于其分布式特性,所以可以检查网络中所有节点上的所有分类帐的文件签名,并验证它们是否未经更改。

2.数据质量

区块链提供的卓越的数据安全性和数据质量,可以改变人们处理大数据的方式。这非常有用,因为安全性仍然是物联网生态系统的主要关注点。物联网系统将各种设备和大量数据暴露在安全漏洞之下。而区块链具有强大的潜力,可以阻止黑客入侵,并在从银行、医疗保健到智能城市等多个领域提供安全保障。

3.隐私性

这是区块链与当今常见的传统技术模式的主要区别之一。区块链不需要网络层本身的任何标识。这意味着下载和开始使用该技术不需要姓名、电子邮件、地址或其他任何信息。不会严格要求用户个人信息意味着没有中央服务器存储用户信息,这使得区块链技术比可能被破坏的中央服务器更安全,不会使其用户的敏感数据处于危险之中。

4.透明性

区块链技术最吸引人的一个方面是它的隐私性。然而,这导致了一些关于隐私性和透明性如何有效共存的困惑。区块链之所以透明,是因为每个公共地址的持有和交易都是公开的。使用带有用户公共地址的资源管理器,可以查看他们的资产和交易。这种透明性以前从未在金融体系中存在过,特别是在大型企业方面,并增加了迄今为止尚未存在的某种程度上的问责制。

5.自动化

如今,业务流程无疑正在从缓慢的手工方法,转为更加自动化和集中化的趋势。自动化流程有很多好处:更快地完成任务、增加可见性、标准化输出、减少错误和降低成本等等。尽管自动化在帮助企业提高生产效率方面做了大量工作,但未来还会发生进一步的变化。特别是,区块链工作流程自动化可以帮助那些严重依赖交易和基于文档的流程的组织在数字化转型中迈出重要一步。

四、区块链在大数据中的应用起到的作用

将区块链技术应用于大数据之中,使得平台上数据无法随意修改、增删,使得大数据极具弹性,存储量也随之增加,安全性和技术性兼得。区块链技术对大数据的影响在于对于数据方面的确认以及数据存储方面,为大数据平台提供有力的技术补充。依托大数据和区块链技术融合,凸显区块链技术价值,使得所存储数据安全和信息都真实兼备,便于后期预测和分析。区块链是数字经济时代不可或缺的重要技术。

在智慧城市基础平台的搭建之中,大数据、区块链技术的优势明显。区块链技术与大数据技术的结合,使得智慧城市网络中,中心化管理机制不复存在,取而代之的是区块链技术赋予的分布式管理机制,消除了数据集中破坏的风险,免除了数据被人为的篡改,保障了城市数据安全,使得智慧城市各项功能更加完善。通过大数据、区块链技术构建智慧城市,也增强了数据的可靠性,使得智慧城市平台的数据更加稳定。

利用区块链、大数据技术的优势,也使得城市的“数据孤岛”得以打破,为智慧城市的建设和管理提供了有力的技术支持,利用相关方面技术,智慧城市基础数据建设规模方面也会增加,数据存储量大。反馈过程之中的精准度高,规避了更多智慧城市建设之中的各类问题。

随着社会经济的发展以及城市人口的增多,城市面临着各种各样的压力,城市管理、交通水平、公共服务等方面的问题层出不穷,智慧城市的建设发展随之兴起。随着大数据、区块链等互联网信息技术的不断发展成熟,在智慧城市的建设之中成为重要的基石。智慧城市包含智慧交通、智慧消费以及智慧环境等等多个领域,多种产业,而区块链、大数据也仅仅是科技发展之中互联网技术的缩影,只有充分发挥信息技术才能使得城市智慧化建设快速发展以致成熟。
责任编辑:YYX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 大数据
    +关注

    关注

    64

    文章

    8647

    浏览量

    136587
  • 区块链
    +关注

    关注

    110

    文章

    15554

    浏览量

    104757
收藏 人收藏

    评论

    相关推荐

    示波器测量交流电压不能接地的原因和必要性

    示波器测量交流电压不能接地的原因和必要性  示波器是一种非常重要的测试仪器,用于测量信号的振幅、频率、相位等参数。在测量交流电压时,通常需要将示波器的地端(GND)与待测点的接地进行连接。然而
    的头像 发表于 01-08 16:36 589次阅读

    防雷检测认证服务的作用和必要性

    的发生和扩大,保护人身和财产安全,促进防雷行业的规范和发展。防雷检测认证服务的意义是实现雷电防护装置的科学化、标准化和法制化,提高防雷检测的公信力和权威性,增强社会公众的防雷意识和信心。防雷检测认证服务的必要性
    的头像 发表于 01-02 10:25 174次阅读
    防雷检测认证服务的作用和<b class='flag-5'>必要性</b>

    何谓正确去耦?有何必要性

    电子发烧友网站提供《何谓正确去耦?有何必要性?.pdf》资料免费下载
    发表于 11-30 09:25 0次下载
    何谓正确去耦?有何<b class='flag-5'>必要性</b>?

    如何正确去耦?去耦技术的必要性

    何谓正确去耦?有何必要性? 如果电源引脚上存在纹波和/或噪声,大多数IC都会有某种类型的性能下降。数字IC的噪声裕量会降低,时钟抖动则可能增加。对于高性能数字IC,例如微处理器和FPGA,电源额定
    发表于 11-28 16:16 0次下载
    如何正确去耦?去耦技术的<b class='flag-5'>必要性</b>

    使用Cache的必要性与可行性

    使用Cache的必要性 所谓Cache即高速缓冲存储器,它位于CPU与主存即DRAM之间,是通常由SRAM构成的规模较小但存取速度很快的存储器。 目前计算机主要使用的内存为DRAM,它具有价格
    的头像 发表于 10-31 11:53 372次阅读

    LED介绍及限流电阻的必要性

    LED介绍及限流电阻的必要性  LED是Light Emitting Diode的缩写,即发光二极管。它是一种半导体器件,能够将电能转化为光能,并在低电压下发光。LED在现代电子学中发挥着重要的作用
    的头像 发表于 10-30 09:28 748次阅读

    大数据是人工智能吗

    和人工智能到底有什么关系大数据是不是人工智能的代名词?下面将从多个角度来探讨这个问题。 一、大数据是什么? 大数据是指规模超过传统数据处理
    的头像 发表于 08-12 17:12 982次阅读

    元宇宙的定义与发展 构建军事元宇宙的必要性

    仿真拓展的角度分析了构建军事元宇宙的必要性,从训练、作战、数据信息资源管理的现实需求角度研究了军事元宇宙可能带来的改进,分析了目前宣称正在开发的军事元宇宙雏形产品及其典型开发方式。
    发表于 08-04 11:50 837次阅读
    元宇宙的定义与发展 构建军事元宇宙的<b class='flag-5'>必要性</b>

    人工智能与大数据关系和影响

    人工智能和大数据是密不可分的。大数据提供了足够的数据让机器学习,从而使人工智能更加聪明、精确和准确。同时,人工智能也能够为大数据提供更高效的处理手段,例如自动分类、识别和分析。
    发表于 08-03 17:45 1411次阅读

    大数据与云计算的关系(2)#大数据分析

    大数据分析
    学习硬声知识
    发布于 :2023年07月13日 00:12:15

    关系数据编程模型(2)#大数据处理

    大数据
    未来加油dz
    发布于 :2023年07月05日 10:58:27

    关系数据编程模型(1)#大数据处理

    大数据
    未来加油dz
    发布于 :2023年07月05日 10:57:52

    HIT 17: 标准专利必要性问题辨析

    作者:高玉光 北京市信利(深圳)律师事务所 2023/06/05于深圳 #本文仅代表作者观点,未经作者许可,禁止转载# 标准专利必要性含义 欧洲电信标准协会(ETSI)认为,标准必要专利中的“必要
    的头像 发表于 06-07 08:45 534次阅读
    HIT 17: 标准专利<b class='flag-5'>必要性</b>问题辨析

    PCB防静电设计的必要性

    ,加大地的泄放面积,平整地铺铜均匀,保持地的电阻值不变,互相之间水平状态地平面平稳; 2)板外围进行环绕地设计,数据线用地包围; 3)地孔越多越好,并使每层地紧密连合在一起; 4)在PCB上安装光耦合器
    发表于 05-12 11:52

    PCB防静电设计的必要性

    )保持地的完整,加大地的泄放面积,平整地铺铜均匀,保持地的电阻值不变,互相之间水平状态地平面平稳; 2)板外围进行环绕地设计,数据线用地包围; 3)地孔越多越好,并使每层地紧密连合在一起; 4)在
    发表于 05-08 18:28