0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

纳米光子介质能够执行人工神经计算 因为它的能耗最低

Hf1h_BigDataDig 来源:陈年丽 2019-07-16 16:54 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

纳米光子介质在人工神经干涉中的应用

本文中,学者们介绍了一种纳米光子神经介质,可以执行相当于人工神经计算的复杂和非线性模式映射。具体而言,他们的工作证明了通过纳米光子介质的光波能够执行人工神经计算,测试集的精度约为84%。

许多现有的光学神经计算技术通过利用分层前馈网络遵循数字ANN的架构。但是对于新的纳米光子神经介质(NNM),研究人员表明,通过利用光学反射,可以超越分层前馈网络的范例,以连续和无层的方式实现人工神经计算。

复杂信息是输入光的波前编码。该介质转换波前可以实现复杂的计算任务,例如图像识别。在输出端,光能集中在明确定义的位置,例如,可以将其解释为图像中物体的身份。这些计算媒体可以小到几十个波长,并提供超高的计算密度。他们利用亚波长散射体实现复杂的输入/输出映射,超越了传统纳米光子器件的功能。

一段时间以来,AI社区一直在寻找减少神经网络训练和推理所需的内存和功耗的方法。与传统方法不同,NNM非常具有前景,因为它的能耗最低。

该方法的固有并行性可以显著提高计算速度。结合超高计算密度,NNM方法可用作各种信息设备中的模拟预处理单元。

原文:shorturl.at/sJPS4

无监督数据增强(UDA),实现更高效,更连续的半监督学习

在最近的一篇论文中,Google AI研究人员证明,数据增强也可以应用于未标记的数据,用来推进半监督学习。他们的方法,即所谓的无监督数据增强或UDA,能够促进模型预测在未标记的样本和增强的未标记样本之间保持一致。

在评估方面,UDA取得了出色的成果。例如,在IMDb文本分类数据集中,UDA仅使用20个标记样本实现了4.20的错误率,超过了在25,000个标记样本上训练的传统模型。

在标准的半监督学习基准CIFAR-10和SVHN上,UDA优于所有前述方法,CIFAR-10的错误率为2.7%,仅有4,000个样本,SVHN的错误率为2.85%,只有250个样本。

UDA也适用于像ImageNet这样的大型数据集。当使用标记组的10%进行训练时,UDA将前1/前5精度从55.1/77.3%提高到68.7/88.5%。对于具有130万额外未标记数据的完整ImageNet,UDA进一步将性能从78.3/94.4%提升至79.0/94.5%。

这项工作表明,可以应用数据增强来增强半监督学习。对于半监督学习方法的数据稀缺,这一方法非常有效。此外,即使有大规模数据,UDA也能提供强劲的收益。

为了避免UDA过度拟合,研究人员提出了一种称为TSA的技术,用于存在大量未标记数据的情况。这种学习已被证明与数据提升相匹配并且令人惊讶地超越了监督学习。

增强神经网络的泛化

Google AI的研究人员建议在网络层使用标准化的边际分配作为推广差距的预测因子。在对边际分布与概括之间的关系进行实证研究后,他们证明了距离的正确归一化和边际分布的一些基本统计可以准确地预测广义差距。

研究人员还介绍了深度模型推广(DEMOGEN)数据集,包括756个训练深度模型,以及他们在CIFAR-10和CIFAR-100数据集上的训练和测试性能。这些模型是CNN和ResNet-32的变体,具有不同的流行正则化技术和超参数设置,从而引发了广泛的泛化行为。例如,在CIFAR-10上训练的CNN模型的测试精度范围为60%至90.5%,一般化差距为1%至35%。

这项工作为AI社区提供了一个用于研究泛化的工具。它还鼓励进一步研究隐藏层中的泛化间隙预测器和边缘分布。

多语言语音合成和跨语言语音克隆

学者们提出了一种基于Tacotron(中文语音合成)的多人多种语言文本到语音(TTS)的合成算法,能够在多种语言中生成高质量的语音。模型结构采用基于注意力机制的序列到序列模型,根据输入文本序列生成倒谱梅频(log-mel,来自MFCC梅尔频率倒谱系数)图帧序列。

该模型是通过使用音位输入表示来设计的,以激励跨语言的模型容量共享。它还包含了一个对抗性的损失,以帮助理清它的说话者表示。通过对每种语言的多名使用者进行训练,加入自动编码输入,并在训练期间来帮助稳定注意力,从而进一步扩大了训练规模。

该模型对三种语言的高质量语音合成和语音训练的跨语言传输具有重要的应用潜力。例如,不需要任何双语或并行语言的训练,它就能够使用英语使用者的声音合成流利的西班牙语。此外,该模型在学习说外语的同时还会适量调节口音。

它可以扩展并利用大量低质的训练数据,来支持更多的使用者和语言。

机器人物联网的分析、挑战与解决方案

机器人物联网(IoRT)是一种新引入的理论,旨在定义机器人在物联网场景中的综合运用。物联网和机器人研究领域的研究现在已经紧密地联系在一起了,不能再分别看待。

它们的紧密联系使两个研究领域走到了一起,研究人员只有合作才能推动这两个领域的进步。本文试图将这两个领域结合在一起,提供了关于互联网机器人的一个概述,分析和挑战,可能的解决方案。该研究探讨了IoRT架构、智能空间集成以及机器人应用等问题。

当两个或两个以上的领域紧密联系在一起时,将它们的研究和开发结合起来,并快速推进它们就变得至关重要。机器人和物联网结合的时代已经到来,目的是帮助研究人员共同努力,推动相关理论、模型和应用的发展。

它们的综合运用将有助于促进研究,这些研究可用于帮助开发更多更好的应用,例如家庭自动化、卫生健康、交通、物流等。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31682

    浏览量

    224599
  • 语音合成
    +关注

    关注

    2

    文章

    94

    浏览量

    16877

原文标题:合成特朗普的西班牙语演讲,新研究实现跨语言语音克隆 | 一周AI最火论文

文章出处:【微信号:BigDataDigest,微信公众号:大数据文摘】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    [VirtualLab] 分层介质组件

    解算器。该解算器在空间频率域(k-domain)中工作。包括 每个均匀图层的本征模解算器和 匹配所有界面边界条件的S-矩阵。 本征模解算器计算各图层中均匀介质在k域中的场解。S-矩阵算法通过递归方式
    发表于 05-13 08:48

    JCMsuite应用:空心光子晶体光纤

    | | | JCMsuite布局描述提供了许多设置复杂几何图形的方法。例如,在多核光子晶体光纤示例中,我们使用晶格副本来创建固体核光子晶体光纤的空气孔的排列。然而,在某些应用中,可能需要描述几何图形
    发表于 04-15 08:09

    激活函数ReLU的理解与总结

    ’。1957年,在Cornell航空实验室中,Frank Rosenblatt成功在IBM 704机上完成了感知机的仿真。两年后,他又成功实现了能够识别一些英文字母、基于感知机的神经计算机——Mark1
    发表于 10-31 06:16

    【综述】工作总有规范——测试执行和bug

    关于测试工作的规范,上次讨论了用例部分。本次将继续聊下测试执行期间的规范标准,是主要需要测试执行人员关注的部分。【测试执行】测试执行规范或标准,主要是为了确保测试人员“在正确的环境做正
    的头像 发表于 10-24 10:04 580次阅读
    【综述】工作总有规范——测试<b class='flag-5'>执行</b>和bug

    脉冲神经元模型的硬件实现

    息电位 vrest。 LIF神经元模型在生物可解释性上低于其他模型,只体现了神经计算的关键特性,并不能够解释真实神经元的脉冲是如何生成,也
    发表于 10-24 08:27

    芯明天压电纳米定位台:助力六方氮化硼单光子源研究

    在量子科技飞速发展的今天,单光子源作为量子计算、量子通信、量子传感的核心基石,其制备与性能优化始终是科研领域的焦点。六方氮化硼凭借无表面悬挂键、室温下可实现明亮单光子发射等独特优势,成为制备固态单
    的头像 发表于 10-23 10:21 453次阅读
    芯明天压电<b class='flag-5'>纳米</b>定位台:助力六方氮化硼单<b class='flag-5'>光子</b>源研究

    量子通信与激光雷达利器:超导纳米线单光子探测器技术与应用指南

    概述 超导纳米线单光子探测器作为量子技术领域的核心器件,以其近乎极限的探测效率、极低的暗计数和皮秒级的时间抖动,正不断重新定义量子通信、激光雷达与量子计算等前沿科技的边界。本文将深入解析其技术
    的头像 发表于 10-16 17:00 1210次阅读
    量子通信与激光雷达利器:超导<b class='flag-5'>纳米</b>线单<b class='flag-5'>光子</b>探测器技术与应用指南

    【「AI芯片:科技探索与AGI愿景」阅读体验】+神经形态计算、类脑芯片

    功耗和并行处理信息能力。 类脑芯片的理论基础是神经形态计算,即借鉴生物神经系统信息的处理模式和结构,以人脑为蓝本、旨在构建能够像人脑一样学习、感知及决策的
    发表于 09-17 16:43

    神经网络的并行计算与加速技术

    随着人工智能技术的飞速发展,神经网络在众多领域展现出了巨大的潜力和广泛的应用前景。然而,神经网络模型的复杂度和规模也在不断增加,这使得传统的串行计算方式面临着巨大的挑战,如
    的头像 发表于 09-17 13:31 1385次阅读
    <b class='flag-5'>神经</b>网络的并行<b class='flag-5'>计算</b>与加速技术

    能耗数据采集能够计算碳排放吗

    能耗数据采集 能够计算碳排放提供关键基础,但需结合额外的参数和转换模型才能实现精准计算。以下是具体分析: 一、能耗数据与碳排放的直接关联
    的头像 发表于 09-12 17:42 2072次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+第二章 实现深度学习AI芯片的创新方法与架构

    的同时,能够利用更小、更快的数字格式,提升模型的整体性能。 1.3Transformer 模型中的矩阵乘法计算 2、存内计算AI芯片 存内计算已经成为应对大模型不断增加的
    发表于 09-12 17:30

    利用超微型 Neuton ML 模型解锁 SoC 边缘人工智能

    的框架小 10 倍,速度也快 10 倍,甚至可以在最先进的边缘设备上进行人工智能处理。在这篇博文中,我们将介绍这对开发人员意味着什么,以及使用 Neuton 模型如何改进您的开发和终端
    发表于 08-31 20:54

    AI 边缘计算网关:开启智能新时代的钥匙​—龙兴物联

    顺畅地通向云端,实现设备与云端之间高效的数据传输与交互。通过融合先进的边缘计算人工智能技术,AI 边缘计算网关能够在靠近数据源的网络边缘,对数据进行实时处理和精准分析,进而实现智能化
    发表于 08-09 16:40

    EastWave应用:自动计算光子晶体透反率

    本案例使用“自动计算透反率模式”研究光子晶体的透反率,将建立简单二维光子晶体结构以说明透反率的计算方法。   模型示意图:   预览网格划分效果如下:   观察到下面的实时场:   记
    的头像 发表于 07-16 11:26 544次阅读
    EastWave应用:自动<b class='flag-5'>计算</b><b class='flag-5'>光子</b>晶体透反率

    VirtualLab Fusion:分层介质元件

    k域内计算各层均匀介质的场解。S矩阵算法通过递归匹配边界条件来计算整个层系的响应。这是一种以无条件的数值稳定性著称的方法,因为与传统的传递矩阵不同,
    发表于 06-11 08:48