创作

完善资料让更多小伙伴认识你,还能领取20积分哦, 立即完善>

3天内不再提示

元宇宙的核心关键技术—人机交互

要长高 来源:二元星球NFT 作者:二元星球NFT 2022-05-11 16:06 次阅读

元宇宙的目标是实现万物的信息化和智能化,创造一个信息充分包围人的虚实融合空间,演化生成时空无界的新型社会形态。 元宇宙是信息技术蓬勃发展的集大成应用环境,著名的元宇宙七层价值链图上包含了许多当下先进的IT技术,如5G/6G、穿戴、眼镜XR、AI、区块链、3D引擎等。 元宇宙是面向终端用户的,所以人机交互是核心关键技术。

01人机交互式核心关键技术

poYBAGJ7bi2AQc9OAARbhC6y2QI016.png

人机交互研究人机之间高可用的信息交换原理和技术,建立起计算机多种模态的输入输出软硬件交互接口,及其构成的用户终端界面,形成特定的交互模式。

纵观计算机发展历史,交互模式从字符用户界面(CUI)的键入命令,到图形用户界面(GUI)的鼠标拖拽,再到智能手机上的动作语音操控,不断突破用户使用计算机的难度瓶颈,计算得以从少量专家用户的科学计算扩增到数十亿人的日常应用。 人机交互也是元宇宙系统的基础能力,其性能水平直接决定了人在元宇宙中的能力边界,进而决定了元宇宙对人类的价值。 元宇宙中所运用的人机交互应突破目前的两种技术,进入第三阶段:自然用户界面。 不管是CUI还是GUI都要求用户必须学习软件开发者预先设置好的操作,而NUI只需要用户用最自然的方式(语音、面部表情、动作手势、移动身体、旋转头部……)和计算机交流。

02元宇宙的人机交互

目前有成熟可用于元宇宙的人机交互技术吗?答案是没有。

首先,元宇宙的用户终端将从智能手机扩展开来,新型的终端将多种多样,典型的包括智能眼镜、AR/VR设备和智慧物联网环境,如家居等。 这些新型终端在交互接口上的共性是接口的虚拟化、远程化和多映射关系,不同于PC和手机的固定接口并能提供明确的反馈确认,这些新型终端在目前实现基本的交互功能尚有困难。 交互技术在不断进步,输入技术上,则都需要实现交互接口上的三个原子交互功能:操控目标对象,对象空间位置明确,又称为可视目标、表达抽象命令,不是基于目标位置的、输入语言内容,如下图总结了历史上几种交互模式是如何实现这些原子交互功能的。

03现有产品设备的难题

目前一些科技巨头在开发研究的智能眼镜,意义是解放双手,沉浸三维,回归自然。

但自然交互上,由于失去了精准的输入设备,如桌面的鼠标,缺少触觉反馈的感知支持,如手机触屏,完成这三类基本的交互功能,一直是智能眼镜这类新型终端设备固有的难题。

视觉速度慢和眩晕

3D对象的访问一般都需要人眼视觉参与,但我们用手访问精细的3D对象时,视觉注意力的高度集中和随动图像难以准确匹配人的视觉感知,不仅访问速度慢,还是造成用户眩晕的重要因素。

手势动作的可用性不高

手势动作的设计空间虽然大,但手势到命令的映射关系设计和用户表达需要符合人的认知和表达能力,同时还存在传感和识别技术上的困难。

文字输入必要但难以实现

智能眼镜用户用手势在空中使用虚拟键盘输入文字时,速度慢到不及手机打字的1/3;而语音并不万能,很多场合不方便出声;并且缺少连续交互能力,每次输入文字都需要特地唤醒设备。 因此,这些问题限制了用户的表达能力,是智能眼镜一直难以成为通用用户终端的症结所在。

为解决这些问题,市场上还出现了专属折叠蓝牙键盘和鼠标这样不得不“回归”的配置,完全失去了眼镜解放双手的意义。

04人机关系与交互的变革

进一步地,元宇宙空间,人机关系将发生重大变革,机器从被动应答者向主动服务者身份转变,交互从单一的用户动作表达向机器智能推理与用户表达融合方向发展,在恰当时间与情境下提供用户亟需的智能服务成为必然发展趋势。

也就是说,人机交互的路径,将从现在用户记忆搜索应用和界面的模式,转换到AI主动感知和推送服务,极大缩减交互路径的模式。 由于用户终端多样,这一层面的问题还反映在同样功能的服务需要设计实现为每种终端上的应用功能的开发难题。 元宇宙作为所有用户可随时随地接入的虚拟空间,其中用户的交互行为将无处不在、连续不断,这会导致交互数据模糊,为AI推理用户交互意图的准确能力带来巨大挑战。 无论是扩展现实的智能眼镜、VR设备还是智慧互联的现实环境,交互接口都不再是单一固定的界面。 设备在虚拟化的空间上如何实现操控目标对象、表达抽象命令、输入语言内容三个输入交互接口上的原子功能,目前尚无高可用的产品技术,这是人机交互领域的热点研究方向,也是元宇宙需要突破的人机交互技术。

  • 人机交互
    +关注

    关注

    12

    文章

    748

    浏览量

    50922
  • 元宇宙
    +关注

    关注

    10

    文章

    566

    浏览量

    6936
收藏 人收藏

    评论

    相关推荐

    元宇宙时代,广东未来科技打响“元宇宙”未来之战

    要说当下的科技创新领域最火是什么? 我想答案一定是“元宇宙”。近两年,“元宇宙”以迅雷不及掩耳之势火....
    的头像 话说科技 发表于 06-24 11:10 120次 阅读
    元宇宙时代,广东未来科技打响“元宇宙”未来之战

    NVIDIA如何以最好的方式来构建元宇宙

    元宇宙是互联网向 3D 网络进化过程中的下一个重要阶段,将为娱乐、汽车、制造业、机器人等各个行业带来....
    的头像 NVIDIA英伟达企业解决方案 发表于 06-23 11:13 157次 阅读

    凌迪Style3D完成近1亿美元 Pre-B+轮融资

    6 月 21 日,物理世界数字化基础设施服务商「凌迪Style3D」正式宣布完成近 1 亿美元 Pr....
    的头像 科技绿洲 发表于 06-21 16:27 250次 阅读

    rt-thread 驱动篇(六)serialX弊端及解决方法

    serialX 作为一个非阻塞串口驱动框架,在遇到一些异常时,需要做一些特殊处理,今天,笔者带大家来....
    的头像 出出 发表于 06-20 11:43 268次 阅读

    云从科技入选2022胡润中国元宇宙潜力企业榜TOP50

    6月,胡润研究院在广州南沙发布《2022胡润中国元宇宙潜力企业榜》,榜单列出了元宇宙领域最具发展潜力....
    的头像 科技绿洲 发表于 06-20 11:01 684次 阅读

    谷东科技董事长当选中国仿真学会元宇宙专业委员会委员

    中国仿真学会元宇宙专业委员会4月22日在京成立。这是首个由中国科协所属一级学会成立的元宇宙专业委员会....
    的头像 科技绿洲 发表于 06-17 15:34 417次 阅读

    抓住元宇宙风口 Unity技术学习集训营让你拥有“跨界竞争力”

    又到一年毕业季,今年高校毕业生人数首次突破1,000万,达到历史新高,但是受疫情影响,岗位需求却比往....
    的头像 科技观点 发表于 06-17 15:07 143次 阅读
    抓住元宇宙风口 Unity技术学习集训营让你拥有“跨界竞争力”

    小米12 Ultra将采用自研芯 Meta将在法国开设“元宇宙学院”

    亚马逊(AMZN.US)当地时间13日宣布,将于今年晚些时候开始使用其开发的Prime Air无人机....
    的头像 Camsense 发表于 06-17 09:59 247次 阅读

    扩展多点触控功能的可能性

      投射电容式多点触控技术已经在便携式消费领域得到广泛应用,其中大容量和小尺寸设计是地方性的。
    的头像 星星科技指导员 发表于 06-14 14:17 319次 阅读
    扩展多点触控功能的可能性

    元宇宙为何会出现?

    元宇宙也是当下年轻人和孩子们极为关注的领域。据统计,Y世代(1980-1995年出生的)人口数是17....
    的头像 浪潮存储 发表于 06-14 10:44 305次 阅读

    手机看点:酷派发布新机999起售 HTC推出首款元宇宙手机

    近期发布会锐减,vivo T2发布会二度推迟后也在没有了声音,大家猜测将会在6月发布的nova 10....
    的头像 智能移动终端拆解开箱图鉴 发表于 06-13 18:28 1304次 阅读
    手机看点:酷派发布新机999起售 HTC推出首款元宇宙手机

    利亚德成功入围2022年度元宇宙产业品牌百强榜单

    利亚德通过完善品牌矩阵,设立虚拟动点、德火科技、孚心科技等品牌,强势布局元宇宙产业,实现品牌的功能延....
    的头像 科技绿洲 发表于 06-13 10:27 368次 阅读

    HTC重拾手机业务,将打造元宇宙智能手机,发布会已定于6月28日

    今日,原本已经退出手机市场的HTC突然宣布称,6月28日将举行一场发布会,并且会推出一款全新的智能手....
    的头像 汽车玩家 发表于 06-10 16:24 873次 阅读

    全新VR一体机奇遇Dream Pro搭载强大骁龙XR2平台

    近日,爱奇艺正式推出旗下全新VR一体机奇遇Dream Pro,其在上一代奇遇Dream强悍配置的基础....
    的头像 科技绿洲 发表于 06-09 14:18 704次 阅读

    NVIDIA Omniverse的技术愿景与现有应用

    此前,NVIDIA CTO Michael Kagan 在媒体采访中谈到了元宇宙、云计算、数据中心等....
    的头像 NVIDIA英伟达企业解决方案 发表于 06-06 11:50 342次 阅读

    高通Snapdragon Spaces面向全球开发者支持下载

    高通技术公司今日面向全球开发者开放Snapdragon Spaces XR开发者平台下载。Snapd....
    的头像 科技绿洲 发表于 06-02 10:52 1707次 阅读

    浅谈元宇宙的传感交互技术

    导读:随着某国际知名社交平台更名将“元宇宙”推向了大众视野,至今热度仍存,近日周杰伦持有的价值超32....
    发表于 06-01 11:50 411次 阅读

    推动元宇宙以更低成本走入生活的几项技术最新进展

    元宇宙是改变我们生活与工作方式的一个重要趋势,无论是虚实结合场景中的互动性娱乐与消费,还是数字孪生或....
    的头像 21克888 发表于 05-31 14:00 2574次 阅读
    推动元宇宙以更低成本走入生活的几项技术最新进展

    微软将完整布局并实现工业元宇宙

    许多公司正在处理一些供应链等现实而迫近的问题。因此,拥有一种可以帮助解除相应挑战的技术方案具有难以置....
    的头像 科技绿洲 发表于 05-31 09:53 581次 阅读

    机智云与广大通签署元宇宙数字工厂建设项目

    广州天河区元宇宙创新生态大会于广州(国际)科技成果转化天河基地成功举办。机智云与广大通现场签署元宇宙....
    的头像 机智云物联网 发表于 05-27 16:52 1486次 阅读

    浪潮存储助力PACS医学影像系统存好、管好、用好多模态数据

    首先在病症可视方面,CT、DR、核磁共振等所有的影像设备,目标就是病症可视,因为器官是在人体内部,是....
    的头像 科技绿洲 发表于 05-27 09:15 2254次 阅读

    元宇宙下的自动驾驶发展都有哪些可能性

    诞生于1992年的科幻小说《雪崩》描绘了一个庞大的虚拟现实世界,首次提出了“元宇宙”的概念,美国经典....
    的头像 智驾最前沿 发表于 05-26 17:40 2847次 阅读

    谷东科技与英特尔就面向工业元宇宙生态建设达成战略合作协议

    谷东科技与英特尔(中国)宣布就面向工业元宇宙的生态建设达成战略合作协议。谷东科技依托自主研发的光学显....
    的头像 科技绿洲 发表于 05-26 16:37 654次 阅读

    微软首提工业元宇宙 OPPO与海信正式达成战略合作

    据报道,三星将于7月成立一个智能手机与半导体部门的特别小组,目标是在2025年实现首款Galaxy专....
    发表于 05-26 11:37 1809次 阅读

    谷东科技与英特尔就面向工业元宇宙的生态建设达成战略合作协议

    谷东科技与英特尔(中国)宣布就面向工业元宇宙的生态建设达成战略合作协议。谷东科技依托自主研发的光学显....
    的头像 谷东科技 发表于 05-25 20:11 1249次 阅读

    工业富联推出下一代机房产品“模块化服务器”

    近日,工业富联全资子公司鸿佰科技(Ingrasys Technology Inc.)线上参与COMP....
    的头像 科技绿洲 发表于 05-25 14:17 811次 阅读

    5G+XR还能开拓哪些新行业?XR设备将会如何演进?元宇宙的浪漫在哪里?

      得益于5G大宽带、低时延、广连接的特性与现代软硬件技术的突破,XR越来越被大众视为下一代通用信息....
    的头像 广和通FIBOCOM 发表于 05-19 18:34 1253次 阅读

    “元宇宙”概念越来越火,物联网如何为其赋能

    互联网轰轰烈烈发展至今,红利已过,利润下滑。各企业都面临用户增长减缓、产业布局同质化严重等诸多难题。....
    发表于 05-19 11:03 172次 阅读

    谷东科技成为中国计算机行业协会元宇宙产业专委会首批创始成员

    谷东科技创始人兼CEO崔海涛、首席科学家兼北京研发中心负责人龚海飞博士,与专委会成员和各创始企业代表....
    的头像 科技绿洲 发表于 05-18 15:50 564次 阅读

    屏上触觉反馈技术:重新定义人机交互,带来全新体验

    汽车智能座舱的高速发展,为触摸屏行业带来了新的应用需求。 车载设备呈现人机交互信息内容和电子设备数量....
    的头像 科技数码 发表于 05-18 14:02 312次 阅读
    屏上触觉反馈技术:重新定义人机交互,带来全新体验

    UD数字厂牌发布项目蓝图:拉近用户与虚拟世界的距离

    进入到2022年以来,数字藏品的热度不仅没有缩减,反而是一路高歌引来各路资本关注,至目前为止,基本上....
    的头像 科技数码 发表于 05-16 23:04 259次 阅读
    UD数字厂牌发布项目蓝图:拉近用户与虚拟世界的距离

    元宇宙是什么?元宇宙行业如何布局

    随着对于元宇宙发展的认知更为清晰和完善,游戏、娱乐只是元宇宙的一部分。元宇宙 与现实世界的边界是模糊....
    的头像 要长高 发表于 05-12 15:00 14353次 阅读
    元宇宙是什么?元宇宙行业如何布局

    元宇宙赋能城市和企业的数字化

    “随着数字化的不断深入,人类的碳基生命和硅基世界不断融合,建立起一个目前我们还难以定义的世界,可能这....
    的头像 WAYZ维智 发表于 05-11 16:26 522次 阅读

    元宇宙热潮如何去伪存真?

    英伟达最新升级的“三芯”战略(GPU+CPU+DPU),是提高自身竞争力,构建元宇宙的底层技术,而其....
    的头像 要长高 发表于 05-11 15:57 1045次 阅读

    大朋VR新品曝光,“元宇宙”拥抱“Z世代”

    再过两个月,“00后”千禧青年将正式告别大学校园步入社会,“Z世代”(1995年至2009年出生的人....
    的头像 话说科技 发表于 05-11 10:19 307次 阅读

    元宇宙领域主要哪些参与者

    元宇宙主要包括四类参与者,分别是新创业公司、互联网厂商、软件公司和硬件公司。
    的头像 要长高 发表于 05-10 16:27 1164次 阅读
    元宇宙领域主要哪些参与者

    元宇宙热,真的要退潮了吗?

    关注元宇宙赛道的主要是美元基金,最近一段时间美元基金处境艰难,出手能力减弱。
    的头像 要长高 发表于 05-10 16:21 931次 阅读
    元宇宙热,真的要退潮了吗?

    元宇宙热潮持续 VR头显引进游戏领域和汽车领域

    根据IDC《全球AR/VR头显市场季度跟踪报告,2021年第四季度》,预计2022年,全球VR头显出....
    的头像 要长高 发表于 05-10 16:13 899次 阅读
    元宇宙热潮持续  VR头显引进游戏领域和汽车领域

    Web 3.0时代和元宇宙需要的网络生态高度重合

    以太坊带来的商业创新浪潮远远超出了已经在以太坊上产生重大影响的无数行业。如果成功,这些项目将为保护用....
    的头像 工业互联网前线 发表于 05-10 15:20 623次 阅读

    智能交互手部康复机器人讲解 人机交互新视野肌电交互

    智能交互手部康复机器人 一、产品概述   智能交互手部康复机器人是以手部康复外骨骼为被控对象,配备简....
    的头像 雷纪中 发表于 05-09 17:47 4595次 阅读
    智能交互手部康复机器人讲解 人机交互新视野肌电交互

    元宇宙技术的基础知识

    元宇宙作为一个新兴的概念受到了产业界、学术界、媒体界及公众的广泛关注,国内外众多公司也纷纷在“元宇....
    发表于 05-07 15:38 1827次 阅读

    云从科技正式加入四川天府新区元宇宙研究院

    云从董事长周曦出席大会,并发表主旨演讲“元宇宙与AI精灵”,探讨未来元宇宙科技发展趋势,讲述人工智能....
    的头像 科技绿洲 发表于 05-07 11:30 843次 阅读

    洲明科技凭借光显助力元宇宙产业化迈向新台阶

    会中,协会下属机构「光显技术创新研究院」宣告成立,聘请洲明科技副总裁袁道仁任研究院院长,期待发挥洲明....
    的头像 科技绿洲 发表于 05-07 11:06 704次 阅读

    进军元宇宙芯片的行业巨头有哪些

    在显示芯片方面,目前市场上的AR/VR设备显示芯片功能不强,显示效果不佳,且缺乏关键光学模组的整体设....
    的头像 要长高 发表于 05-06 16:39 1121次 阅读

    自动驾驶时代汽车人机交互发展趋势

    随着汽车技术的不断提升,互联网技术的不断普及,越来越多的功能被赋予给了汽车,汽车也从起初的代步工具逐....
    的头像 智驾最前沿 发表于 05-05 10:29 1315次 阅读

    Mojo Vision发布AR眼镜Mojo Lens原型机

    根据官网发布的图片来看,这款AR隐形眼镜的外观跟我们见到的普通隐形眼镜很相似。
    的头像 要长高 发表于 05-05 10:08 933次 阅读
    Mojo Vision发布AR眼镜Mojo Lens原型机

    为何打造数字孪生地球需要超算系统

    电子发烧友网报道(文/周凯扬)在不少人眼里,数字孪生可能象征着购物时的一件衣服,饮茶时的一个杯子,但....
    的头像 电子发烧友网 发表于 05-05 10:00 318次 阅读

    元宇宙的监管如何解决?

    元宇宙项目数量众多,涉及到的其它法律问题也需要引起政策制定者高度关注。
    的头像 要长高 发表于 05-05 09:43 979次 阅读

    元宇宙慢点走,先把数字孪生做好

    在不少人眼里,数字孪生可能象征着购物时的一件衣服,饮茶时的一个杯子,但数字孪生的对象远不止这些,甚至....
    的头像 E4Life 发表于 05-05 00:46 2284次 阅读
    元宇宙慢点走,先把数字孪生做好

    灵境VR重塑元宇宙想象,颠覆感官、连接未来

    2021年,数字世界兴起一个新概念——“元宇宙”。铺天盖地的宣传让很多人都知道了“元宇宙”的大名,然....
    发表于 05-03 16:15 556次 阅读
    灵境VR重塑元宇宙想象,颠覆感官、连接未来

    基于语音识别的人机交互方式浅析

    0 引言传统的人机交互依靠复杂的键盘或按钮来实现,随着科技的发展,一些新型的人机交互方式也随之诞生,带给人们全新的体验。基...
    发表于 01-25 07:00 974次 阅读

    点阵式二氧化碳激光治疗仪控制系统的研究与设计--预约18号直播学习驱动电路

        选择性光热治疗理论的提出,奠定了激光应用于美容医学领域的理论基础。随后,该理论在实际的临床治疗中得到了进一...
    发表于 01-17 10:48 12383次 阅读
    点阵式二氧化碳激光治疗仪控制系统的研究与设计--预约18号直播学习驱动电路

    arduino交互设计相关资料推荐

    永远盛开的郁金香机械郁金香雕塑,只需轻轻触摸即可绽放,可以发出五彩斑斓的光亮。硬件材料1 * Arduino Nano R31 * SG90舵...
    发表于 01-12 06:34 417次 阅读

    LCD和数字键盘实现的人机交互式界面

    引言     目前,以LCD和数字键盘实现的人机交互式界面在智能终端中广泛采用。在不同的应用场合,对人机界...
    发表于 12-22 06:09 922次 阅读

    8ms是什么?

    8ms平台使用体验文章目录前言一、8ms是什么?二、使用步骤1.创建工程2.开始编辑界面3.烧录总结前言关于8ms平台体验提示:以下是本...
    发表于 12-14 09:04 1606次 阅读

    怎样通过USART串口来实现单片机简单的人机交互功能呢

    怎样通过USART串口来实现单片机简单的人机交互功能呢?有什么解决办法吗?...
    发表于 12-09 07:42 1040次 阅读

    人机交互系统设计相关资料下载

    编程实现用4×4的矩阵键盘控制连接在P0和P1口上的16个LED,当按下某键并释放后只有对应的LED灯亮,例如按S0后D0亮,按...
    发表于 11-23 06:46 556次 阅读

    人机交互中英文显示系统的设计

    1 引言 信号源作为一种基本电子设备无论是在教学、科研还是在工程技术保障中,都有着广泛的使用。随着科学技术的发展和DDS技...
    发表于 11-15 09:41 2262次 阅读

    如何利用云服务器端去完成辉光管的人机交互和控制功能呢

    什么是辉光管呢? 怎样做才能完成辉光管的显示功能呢? 如何利用云服务器端去完成辉光管的人机交互和控制功能呢? ...
    发表于 11-04 07:48 884次 阅读

    如何去开发一个人机交互的显示屏呢

    如何去开发一个人机交互的显示屏呢?串口屏的开发步骤有哪些? ...
    发表于 10-25 07:22 509次 阅读