电子发烧友网 > 人工智能 > 正文

非结构化数据在AI上有什么用

2020年04月06日 22:49 次阅读

人工智能(AI)系统的交互过程更像人类,这让一些人感到不舒服,但人工智能并不是要取代人类。实际上,它更多的是把机器人从人类身上移除。人工智能的价值很大一部分在于自动化人工过程和快速分析大量数据,这样人类就可以自由地完成需要理性和判断力的高阶任务。然而,要达到这一点,人工智能系统必须能够与用户通信并分析自然形式的数据(又称非结构化数据),所有无法以整洁的方式打包的自由流动的数据,如语音、图像和文本。

非结构化数据在AI上有什么用

非结构化数据对人工智能系统的发展至关重要。人工智能系统与用户的沟通越好,就越能自主学习,因此,它的效率也就越高。这一点很重要,因为如果一个人工智能系统只要求用户以结构化的格式进行交互,那么它的组件将受到极大的限制。为了让人工智能成功,它必须理解杂乱的信息。

在这种情况下,需要深入了解非结构化数据是如何发挥作用的。

非结构化数据的挑战

在人类的世界里,当人们进行对话时,如果不按礼仪说话。可能任何东西都会出现在我们的脑海中,以某种可能遵循或可能不遵循惯例的配置。人们可能使用俚语,讽刺和开玩笑。人们把日常语言和希望传达的信息组织成整齐的列和行是不自然的。语言本身就是非结构化的。

如果人们曾经与亚马逊公司的Alexa进行过互动,那么就会知道虽然Echo系统通常非常熟练地理解自由格式命令,但缺乏定义的协议有时会导致问题,或者至少在Alexa尝试回答时会产生幽默的回应查询不适合模具。亚马逊公司已投入大量资源和数百万美元用于创建和永久性地改进算法,使这种类似人类的语音能够响应命令,但正如Echo熟练解读自由流动语言一样,Alexa仍然存在缺陷。

Alexa示例强调了一种非结构化数据的复杂性。人工智能系统处理和创建与文本等效的数字的能力也是一项很高的要求,特别是当企业考虑细微差别和场景的重要性时。想象一台机器试图“理解”家庭度假中那张照片中发生的事情,或者是一部关于印象派的艺术史教科书中的图像。

与处理非结构化数据相关的复杂性可能是企业中人工智能的最大障碍。然而,它们并不是不可逾越的。

专业知识的重要性

非结构化数据本身就是噪声。因此,它需要大量的专业知识来突破、梳理和检测模式,然后开发识别这些模式的模型。数据科学家正在积极推动人工智能系统的改进,最大的成功表明人类的本能和经验是必需的。这通常发生在团队专注于非常狭窄的人工智能应用时。

以工作人员的赔偿索赔程序为例,对声明有深入了解的数据科学家团队可以根据他们发现的关键指标创建预测模型。它们包含非结构化数据,如诊断、药物信息、索赔记录等。这样做,人工智能系统评估早期指标,并确定某个索赔可能被拒绝。然后它可以向用户提供警报。索赔代表可以找出如何干预和给予特定索赔更小心,以防止索赔人的律师参与(通常被拒绝的索赔最终涉及律师,这会变得非常昂贵,需要很长时间才能解决)。

在这种情况下,很容易看出人工智能系统是如何为用户提供帮助的,而且当合并非结构化数据时,与单独依赖结构化数据相比,还大大提高了准确性。在非结构化数据(例如,关于共病的信息)中,有一个信息和洞察力的金矿,它无法一致地找到进入结构化数据的方法。每增加一条信息,人工智能系统就会变得更智能,结果也会得到改善。这将提高效率并降低索赔成本。

这只是将非结构化数据合并到企业人工智能系统中的一个好处示例。破解代码需要时间和努力,但回报正在获得前所未有的洞察力——与几天或几周相比,只需几分钟或几小时就可以获得。

非结构化数据是关键

展望未来,很明显每个人工智能系统都需要以自然的方式与用户交互。各组织必须对此高度重视。事实上,如果非结构化数据分析不是路线图的一部分,那么公司的产品存在巨大的差距。

尽管非结构化数据具有挑战性,但亚马逊、谷歌、苹果和其他公司为人工智能应用提供了许多机会。人们可以利用这些进步,并将它们应用到企业应用程序中,在这些应用程序中它们具有巨大的业务影响。

通过花时间应用专业知识和声音数据科学,人们可以取得重大突破。人们不仅要通过非结构化数据提高数据分析的准确性,还要在未来实现基本的新思维、沟通和利用信息的方式。

责任编辑:ct

下载发烧友APP

打造属于您的人脉电子圈

关注电子发烧友微信

有趣有料的资讯及技术干货

关注发烧友课堂

锁定最新课程活动及技术直播

电子发烧友观察

一线报道 · 深度观察 · 最新资讯
收藏 人收藏
分享:

评论

相关推荐

【5月12】不懂编程没关系,邀请您来学AI

不懂编程没关系,邀请您来学AI活动概述:本活动是现场讲座,由台湾知名AI教育专家、金门创新学院院长、台湾Android技
发烧友学院发表于 2019-05-24 00:00 2419次阅读
【5月12】不懂编程没关系,邀请您来学AI

神经拟态芯片掌握多种气味神经表征

除了会看会听,还会“闻”。近日,一直致力于模仿人类五感的人工智能又有新突破,通过神经拟态芯片,人工智....
发表于 2020-04-08 16:45 0次阅读
神经拟态芯片掌握多种气味神经表征

AI芯片和传统芯片的差异在哪里

目前在图像识别、语音识别、自然语言处理等领域,精度最高的算法就是基于深度学习的,传统的机器学习的计算....
发表于 2020-04-08 16:31 7次阅读
AI芯片和传统芯片的差异在哪里

中兴通讯AIVO数字化运营解决方案,立足于大数据...

随着5G网络部署加速和流量快速增长,运营商面临网络系统庞大复杂、网络管理与业务运营难度超出人工处理能....
发表于 2020-04-08 15:55 18次阅读
中兴通讯AIVO数字化运营解决方案,立足于大数据...

数字化转型新奇之处在哪里,有什么新的特点

“数字化转型”是当今的一个热门词,但是它的新奇之处在哪里呢?那些在市场营销领域工作的人总是不断地制造....
发表于 2020-04-08 15:52 40次阅读
数字化转型新奇之处在哪里,有什么新的特点

未来的智能体能否代替程序员而进行代码编写

首先,在当前的程序开发领域,代码辅助生成系统一直是一个重要的研究方向,相关领域的很多技术也确实为程序....
发表于 2020-04-08 15:44 23次阅读
未来的智能体能否代替程序员而进行代码编写

金山云推出AIoT防疫解决方案,测温到进出一站式...

2020年的开始,注定是不平凡的,一场突如其来的新冠疫情引发全国人民的关注。面对疫情,全国各界众志成....
发表于 2020-04-08 14:52 39次阅读
金山云推出AIoT防疫解决方案,测温到进出一站式...

人工智能应用遇上怎样的新机遇

人工智能新场景的创新应用,也使其成为一股新的战疫力量。
发表于 2020-04-08 14:41 25次阅读
人工智能应用遇上怎样的新机遇

人工智能是怎么样的

因此人工智能的研究往往涉及对人的智能本身的研究。其它关于动物或其它人造系统的智能也普遍被认为是人工智....
发表于 2020-04-08 14:33 22次阅读
人工智能是怎么样的

小Biu空调Max正式上市该空调支持AI智能语音...

据官方介绍,小Biu空调Max支持AI智能语音操控,用户开启或关闭空调时,只需要对空调喊一句“打开空....
发表于 2020-04-08 14:28 13次阅读
小Biu空调Max正式上市该空调支持AI智能语音...

产业智能化如何利用人工智能来守护

AI算法本身存在安全漏洞。因为各类机器学习的高度复杂,带来的“黑箱问题”使得算法不可解释。
发表于 2020-04-08 14:26 9次阅读
产业智能化如何利用人工智能来守护

MEMS麦克风能够听懂AI?

全球音频市场持续成长,由于语音VPA要求更高的信噪比(SNR),才能在吵杂的环境中准确获取人声,麦克....
发表于 2020-04-08 14:23 18次阅读
MEMS麦克风能够听懂AI?

AI与人脑距离怎么样去拉近

目前深度学习算法作为实现人工智能的重要技术手段,被广泛应用于各类人工智能成果中。对于以深度学习算法为....
发表于 2020-04-08 14:19 18次阅读
AI与人脑距离怎么样去拉近

人工智能实现成本怎样去降低

伴随着“战疫”工作的深入,AI测温、AI医生、送药送餐机器人等多项以人工智能为核心的各类远程应用与无....
发表于 2020-04-08 14:07 80次阅读
人工智能实现成本怎样去降低

北京地铁6号线正式亮相智慧地铁

首都智慧地铁列车有黄色和灰色两种配色。走进车厢,车门上方新增的4K高清屏幕吸引乘客眼球。这里滚动播放....
发表于 2020-04-08 11:48 176次阅读
北京地铁6号线正式亮相智慧地铁

科大讯飞正在利用人工智能辅助诊断平台来防控疫情

新冠肺炎疫情暴发以来,全国和地方各级人大代表、政协委员活跃在疫情防控和病患救治一线,立足岗位做贡献,....
发表于 2020-04-08 11:03 78次阅读
科大讯飞正在利用人工智能辅助诊断平台来防控疫情

我国人工智能产业在3月份的应用情况分析

3月2日消息,人社部与市场监管总局、国家统计局联合发布第二批16个新职业,其中人工智能训练师、智能制....
发表于 2020-04-08 11:00 28次阅读
我国人工智能产业在3月份的应用情况分析

5G发展前景不可估量

现在,随着新基建概念的提出,伴随着智能智造的号角5G的发展风头正盛。作为下一个支撑我国社会经济管理数....
发表于 2020-04-08 10:56 8次阅读
5G发展前景不可估量

腾讯将全方位助力武汉数字产业的建设与发展

具体来看,在数字政府、智慧城市方面,腾讯将继续推进腾讯(武汉)数字产业总部的建设。同时,腾讯将继续联....
发表于 2020-04-08 10:54 124次阅读
腾讯将全方位助力武汉数字产业的建设与发展

基于人工智能的存储可帮助公司充分利用数据

如果您可以将存储更像是自动驾驶汽车而不是动手,劳动密集型的必需品,该怎么办?如果像自动驾驶汽车一样,....
发表于 2020-04-08 10:31 81次阅读
基于人工智能的存储可帮助公司充分利用数据

英特尔将利用人工智能等技术来抗击新型冠状病毒

英特尔CEO司睿博(Bob Swan)表示:“世界正面临着抗击COVID-19的严峻挑战。英特尔致力....
发表于 2020-04-08 10:02 139次阅读
英特尔将利用人工智能等技术来抗击新型冠状病毒

AI能否识别出急性脑CT异常

在新的研究中,人工智能深度学习算法能够准确识别头部CT扫描中9种不同程度的异常。
发表于 2020-04-08 10:00 23次阅读
AI能否识别出急性脑CT异常

通过人工智能技术如何来改善视频会议的效果

如今,AI计划来自端点供应商,会议软件供应商和初创公司,这些公司可以自行提供或与会议平台提供商合作提....
发表于 2020-04-08 09:58 14次阅读
通过人工智能技术如何来改善视频会议的效果

人工智能技术如何优化医学影像

随着人们对人工智能技术的探索逐步深入,AI正在渐渐渗透到医疗影像行业的方方面面。毫不夸张地说,AI正....
发表于 2020-04-08 09:56 17次阅读
人工智能技术如何优化医学影像

Monet Analytics最新推出了基于AI...

Monet Analytics推出了一款产品,该产品使用人工智能来衡量受众对内容的反应。
发表于 2020-04-08 09:51 57次阅读
Monet Analytics最新推出了基于AI...

医疗影像AI落地的难处有哪些

另一方面数据的不统一还存在一定的客观原因,例如不同品牌的仪器成像机理和标准不同,因此对于同一病灶输出....
发表于 2020-04-08 09:45 20次阅读
医疗影像AI落地的难处有哪些

2020你得知道的物联网趋势

随着技术的不断发展,对于个人和组织而言,利用物联网设备来提高生产力和盈利能力至关重要。
发表于 2020-04-08 09:22 255次阅读
2020你得知道的物联网趋势

人工智能怎样助力楼宇对讲

伴随着人工智能技术的落地应用。楼宇对讲系统作为智慧社区的入口,通过结合人工智能技术,实现身份确认、身....
发表于 2020-04-08 09:10 23次阅读
人工智能怎样助力楼宇对讲

物联网的风险如何去缓解

物联网的绝对复杂性既是福也是祸。一方面,它是代表人类创造力的新高度的技术奇迹,但另一方面,它依赖于许....
发表于 2020-04-08 08:57 33次阅读
物联网的风险如何去缓解

解密面部识别技术,AI如何识别人脸

自从人工智能诞生之初,计算机科学家就一直梦想着能制造出可以像人类一样看到和理解世界的机器。这些努力导....
发表于 2020-04-07 17:30 151次阅读
解密面部识别技术,AI如何识别人脸

5G、AI、大数据的发展,对智慧城市会有什么影响

市场分调研机构Omdia的最新数据分析显示,全球智能城市人工智能(AI)软件市场将从6.738亿美元....
发表于 2020-04-07 17:24 163次阅读
5G、AI、大数据的发展,对智慧城市会有什么影响

自我监督学习将是AI技术的未来发展方向

尽管深度学习已经在人工智能领域做出重大贡献,但这项技术本身仍存在一项致命缺陷:需要大量数据的加持。
发表于 2020-04-07 17:14 258次阅读
自我监督学习将是AI技术的未来发展方向

RPA是什么,AI和RPA结合方式和架构的解析

RPA是Robotic Process Automation(机器人流程自动化)的简称。RPA的概念....
发表于 2020-04-07 17:08 193次阅读
RPA是什么,AI和RPA结合方式和架构的解析

人工智能技术将如何促进体育事业的发展

目前,人工智能服务于体育事业和体育文化等领域已有很多尝试,取得了丰富的成果,使体育领域不断走向“更快....
发表于 2020-04-07 16:59 245次阅读
人工智能技术将如何促进体育事业的发展

远距传输的低功耗网络技术LoRaWAN及边缘人工...

原始数据的传输对任何装置来说都是十分耗电的。传统的蜂巢式广域网(WAN)功耗大,因此不适用于电池供电....
发表于 2020-04-07 16:47 103次阅读
远距传输的低功耗网络技术LoRaWAN及边缘人工...

物联网的未来将朝着范式转变的方向而发展

当今,大多数成长中的工业公司都将最大的赌注押在根据工业4.0转型解决各种技术计划上。
发表于 2020-04-07 16:47 138次阅读
物联网的未来将朝着范式转变的方向而发展

人工智能与神经科学的碰撞将会带来什么影响

人工智能与神经科学,这两个看似相隔甚远的学科,实际上有着非常紧密的联系。这两个领域的协作是必然的。
发表于 2020-04-07 16:16 122次阅读
人工智能与神经科学的碰撞将会带来什么影响

无论我们提供多少数据,人工智能都无法预测未来

普林斯顿大学的3位社会科学家最近对160个研究小组进行了一项大规模实验,以查看他们中是否有一个能预测....
发表于 2020-04-07 16:14 109次阅读
无论我们提供多少数据,人工智能都无法预测未来

利用人工智能在制药行业有哪些应用

制药行业是医疗保健行业不可或缺的一部分。但是,该行业的增长在最近几年中有所放缓。许多行业专家认为,制....
发表于 2020-04-07 15:30 93次阅读
利用人工智能在制药行业有哪些应用

2025年全球智能城市AI软件市场将增至到49亿...

分析师机构Omdia的最新分析显示,全球智能城市人工智能(AI)软件市场将从2019年的6.738亿....
发表于 2020-04-07 15:26 148次阅读
2025年全球智能城市AI软件市场将增至到49亿...

人工智能在制药领域中的应用介绍

预计远程医疗、智能可穿戴设备、智能纳米设备和人工智能等技术将改变制药行业。其中,人工智能将在推动该行....
发表于 2020-04-07 15:24 51次阅读
人工智能在制药领域中的应用介绍

大数据产业迎来新机遇,“四驱”推动大数据产业发展

近段时间以来,“新基建”一次热度不断攀升,受到了科技、产业界的高度关注。实际上,新基建指的是以人工智....
发表于 2020-04-07 15:23 283次阅读
大数据产业迎来新机遇,“四驱”推动大数据产业发展

AI赋能边缘可以解决视频监控哪些问题

处于物联网时代中,随着时间的推移,这类数据还将持续增长,未来会有越来越多的设备和传感器诞生。
发表于 2020-04-07 15:18 40次阅读
AI赋能边缘可以解决视频监控哪些问题

机器学习算法未来将彻底改变残疾人的生活

目前,这有点像看大雾,但是旧金山加利福尼亚大学Chang实验室的研究人员已经训练了一种机器学习算法,....
发表于 2020-04-07 14:58 35次阅读
机器学习算法未来将彻底改变残疾人的生活

均胜电子与微软中国达成合作,双方开拓汽车云技术领...

4月3日讯,近日,宁波均胜电子股份有限公司与微软中国签署战略合作备忘录,双方将充分发挥在各自领域的优....
发表于 2020-04-07 14:37 506次阅读
均胜电子与微软中国达成合作,双方开拓汽车云技术领...

如何防范人工智能的技术性风险

一种新型的人工智能驱动的经济和社会模式正在由无处不在的数据和算法催生而出,同时也带来了一些法律和伦理....
发表于 2020-04-07 14:24 53次阅读
如何防范人工智能的技术性风险

瑞莱智慧推出RealSafe AI安全平台,具有...

然而AI安全作为一个新兴领域,尽管对抗样本等攻击手段日益变得复杂,在开源社区、工具包的加持下,高级攻....
发表于 2020-04-07 14:05 379次阅读
瑞莱智慧推出RealSafe AI安全平台,具有...

智慧大脑如何为河南制造赋能

自动驾驶、智能机器人、视频与图像识别、智能语音交互……人工智能正融入日常生活,带动技术升级、推动产业....
发表于 2020-04-07 11:49 123次阅读
智慧大脑如何为河南制造赋能

智能音箱可以帮我们监控身体健康?

人工智能风潮的推动下,智能音箱正在用越来越多的可能抢占控制枢纽的核心地位,这已经大有可为,然而你不知....
发表于 2020-04-07 11:46 81次阅读
智能音箱可以帮我们监控身体健康?

药企为什么对于人工智能动心

图片随着新一代信息技术的崛起和诸多高科技领域的发展,以人工智能为代表的一系列前沿技术开始在各个传统领....
发表于 2020-04-07 11:38 163次阅读
药企为什么对于人工智能动心

在人工智能的技术时代可能发生什么

创新技术、科技颠覆的步调在加速,曾经由蒸汽机、炼油厂和电视构成的世界面临着虚拟现实、人工智能的冲击,....
发表于 2020-04-07 11:26 45次阅读
在人工智能的技术时代可能发生什么

【战疫专题】第五期:智慧物流,疫情之中显担当

2020年,新型冠状病毒席卷了整个中国,同时也在促进着产业的变革与生活变化。 电子发烧友在此期间推出【战疫专题】活...
发表于 2020-03-18 11:00 2157次阅读
【战疫专题】第五期:智慧物流,疫情之中显担当

人工智能、数据挖掘、机器学习和深度学习的关系

人工智能、数据挖掘、机器学习和深度学习之间,主要有什么关系?...
发表于 2020-03-16 11:35 110次阅读
人工智能、数据挖掘、机器学习和深度学习的关系

人工智能侦查有哪些应用

【人工智能侦查的应用领域】
发表于 2020-03-16 11:28 85次阅读
人工智能侦查有哪些应用

人工智能+边缘计算!米尔NXP工业级物联网板卡8M mini资料分享

响应行业应用和满足客户需求,米尔推出了基于NXP公司i.MX 8M Mini系列芯片的MYC-C8MMX系列核心板及开发...
发表于 2020-03-06 11:44 654次阅读
人工智能+边缘计算!米尔NXP工业级物联网板卡8M mini资料分享

红外传感+人工智能,智能机器人红外发送接收电路解析

该移动音乐机器人以英飞凌16 位单片机XE162FN 处理器为核心,英飞凌开发的16/32 位微控制器具有高度系统集成、无需...
发表于 2020-02-28 07:00 571次阅读
红外传感+人工智能,智能机器人红外发送接收电路解析

【战疫专题】第二期:硬核战“疫”,机器人大有可为

2020年,新型冠状病毒席卷了整个中国,同时也在促进着产业的变革与生活变化。 电子发烧友在此期间推出【战疫专题】活...
发表于 2020-02-25 14:24 5616次阅读
【战疫专题】第二期:硬核战“疫”,机器人大有可为

【瑞芯微RK1808计算棒试用体验】机械臂视觉快速识别

折腾了一个新年,总算勉强有点效果了,这个任务真是大坑啊,关键的识别部分没多大难度,但上位机、下位机、机械结构接...
发表于 2020-02-08 18:13 609次阅读
【瑞芯微RK1808计算棒试用体验】机械臂视觉快速识别

2020艾睿电子解决方案展示会

活动简介 艾睿电子解决方案展示会是艾睿电子自主主办的展会,也是每年一度的 ACT (Arrow Centralized Training...
发表于 2020-01-15 09:40 39041次阅读
2020艾睿电子解决方案展示会

内置NPU的Orange Pi 4B,你怎么看

提起单板电脑,树莓派基金会发布的树莓派系列开发板或许是最广为人知的,该公司坚持使用博通的SOC芯片,以实现不断...
发表于 2019-12-23 21:07 1070次阅读
内置NPU的Orange Pi 4B,你怎么看

串口屏应用案例-自助点餐系统

串口屏应用案例-自助点餐系统 自助点餐系统应景而生,彻底打破了传统,能够有效的减少排队使用的时间。在自助点餐机器...
发表于 2019-12-23 13:15 721次阅读
串口屏应用案例-自助点餐系统