0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于视觉感知的波束跟踪系统

5NwT_Exc 来源:曾益科技 作者:曾益科技 2021-08-10 10:26 次阅读

清华大学高飞飞老师团队联合曾益科技将在无线研究领域的年度盛会IEEE/CIC International Conference on Communications in China上展出基于软件无线电平台及人工智能算法相结合的原型验证系统Vicom,可实现基于视觉感知的毫米波波束跟踪及遮挡情境下的高低频无缝切换演示验证,该技术属于感知通信一体化新体系。

研究背景

5G的主流部署方式之中主要存在两个频段:Sub6G频段(6GHz以下频段)与毫米波频段(24GHz至300GHz频段)。毫米波频段相比于Sub6G频段具有高数据吞吐量、大带宽、天线体积小等优点,因此占据5G通信研究前沿的重要一席。

然而,毫米波也具有其波段上的固有缺点,如大维天线信道估计开销较高,波束对准耗时较长,相对于低频信号穿透能力弱、易被遮挡等缺点。近期研究表明,可利用感知信息等带外信息辅助提高无线通信性能,因此感知通信一体化研究已成为B5G乃至6G技术的热点之一。

本原型系统实现了利用视觉感知信号来辅助毫米波通信的演示验证,包括视频感知辅助的窄波束实时跟踪,视频感知辅助的遮挡判断,一站双频的高低频切换等来保持稳定可靠的数据传输。系统起名为Vicom,意指Vision Aided Communications。

系统展示

基于视觉感知的波束跟踪系统

使用视觉感知以及人工智能的方式从环境中获取收发两端最优的波束权重,并通过传感器直接控制收发两端的大规模天线相位、无需使用昂贵的射频链路资源。

传统框架下毫米波通信的波束成形与跟踪采用的是:在收发两端依次扫描遍历整个码本来确定接收能量最强的方向作为波束对准方向。该方式在用户运动过程中必须不断扫描整个码本、造成时间资源和通信资源浪费。

在所搭建的基于视觉感知的毫米波通信系统中,基站端和用户移动端均使用摄像头对环境进行感知、然后利用人工智能的方式从视觉信息中找到当前时刻最优的波束方向,从而控制毫米波阵列的波束权重。该方法利用可见光频段这类“带外”信息,不占用宝贵的带内资源,且无需扫描遍历整个码本,使得波束跟踪算法更加简单、且降低了设备成本。

基于视觉感知的高低频通信切换系统

使用视觉对于毫米波天线遮挡情况进行判断,在存在天线遮挡的情况下,系统自动切换低频传输,有效地解决了遮挡物导致的毫米波传输中断问题。

在毫米波通信之中,对于遮挡物阻隔信号的处理问题是研究关注的热点之一。毫米波较弱的穿透能力、较弱的散射和衍射能力使得在存在遮挡物的情形下通信效果迅速下降。

5G通信之中存在Sub6G较低的频率资源,且使用Sub6G频段的低频通信具有丰富的散射和衍射效应,形成充足的多径资源,使得5G通信在NLOS下也能够正常进行通信。目前已有大量的基站采用一站多频的方式,而相当多类型的手机也已经支持多个高低频频段。

所搭建的演示验证系统使用基站端和移动端的视觉判定LOS径是否被遮挡、若遮挡存在将通信频段从毫米波频段切换至使用NLOS径的Sub6G频段。在遮挡物消失后,基站端和移动端通过视觉检测自动切换回毫米波频段继续进行波束跟踪。

应用前景

基于视觉辅助无线通信系统其本质是将传统通信转化为“主动感知通信”,属于主动感知辅助的通信方式,是感知通信一体化新体系中的重要技术。采用主动感知的方案,使得基站端能够利用人工智能算法对周围通信环境做出判断,不仅仅能够实现波束跟踪。

同时还可实现遮挡判断、参数获取、资源配置等多种功能、对于多类其他通信场景例如智能反射面(RIS)等也有良好的支撑,具有大规模部署和应用的前景。

大咖分享

团队研究负责人清华大学高飞飞副教授将会出席IEEE/CIC同期6G分论坛,分享6G智能无线通信研究的最新进展。

演讲摘要

在无线通信系统设计里融入人工智能技术已成为无线通信领域的新趋势,并被认可为是6G移动通信系统的关键技术之一。本报告主要讲述了如何利用深度学习对无线通信物理层各个环节进行创新设计,包括信道估计、信道预测、波束成形等。

研究表明,利用深度学习能够解决传统通信系统无法触及的大量新问题。我们同时还搭建了原型验证平台来展示人工智能融合无线通信的可行性。

演讲嘉宾

高飞飞老师长期从事智能通信与信号处理技术研究,发表IEEE期刊论文150余篇,获谷歌引用1万余次,获中国通信学会自然科学奖二等奖、中国通信学会青年科技奖、IEEE通信学会亚太地区杰出青年学者称号。

担任IEEE TCOM、IEEE TWC、IEEE JSTSP、IEEE TCCN等6个IEEE顶级期刊高级编委/客座编委/编委、以及中国科技期刊卓越行动计划入选期刊《China Communications》编委。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 毫米波
    +关注

    关注

    21

    文章

    1857

    浏览量

    64065
  • 6G
    6G
    +关注

    关注

    7

    文章

    416

    浏览量

    40941
  • 视觉感知
    +关注

    关注

    0

    文章

    38

    浏览量

    3120

原文标题:6G技术前沿:基于视觉感知的毫米波通信新技术

文章出处:【微信号:Excelpoint世健,微信公众号:Excelpoint世健】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器融合方案就好像一双比人眼更敏锐的眼睛,可以为自动驾驶系统提供更丰富更精准的视觉语言——
    发表于 04-11 10:26

    视觉焊缝跟踪系统的发展趋势与挑战

    在当今制造业中,焊接技术一直扮演着至关重要的角色。为了提高焊接质量和效率,视觉焊缝跟踪系统应运而生。这些系统利用计算机视觉技术,实时监测焊接
    的头像 发表于 03-05 16:30 153次阅读
    <b class='flag-5'>视觉</b>焊缝<b class='flag-5'>跟踪</b><b class='flag-5'>系统</b>的发展趋势与挑战

    Zinn Labs 推出基于 PROPHESEE事件视觉传感器的视线跟踪系统,为 AI 智能镜框和 VR/MR 系统赋能

    结合  Prophesee 超低功耗、低延迟的事件视觉传感器, 该款突破性的 视线 跟踪系统将 助力 带来直观、无缝 流畅 的 新 用户体验   Zinn Labs 宣布推出业内首款基于事件的视线
    的头像 发表于 02-07 13:53 325次阅读
    Zinn Labs 推出基于 PROPHESEE事件<b class='flag-5'>视觉</b>传感器的视线<b class='flag-5'>跟踪</b><b class='flag-5'>系统</b>,为 AI 智能镜框和 VR/MR <b class='flag-5'>系统</b>赋能

    技术基因+自主创新,光鉴科技塑造3D视觉感知新范式

    感知技术已经渗透到智能汽车、工业机器人、服务机器人、智慧城市、新零售和智能家居等广泛领域,凭借精度高、速度快、适配性强、抗干扰能力强等突出优势,3D视觉感知技术迅猛发展之势已经不可阻挡。 产业热度高让相关企业率先受益。在3D
    的头像 发表于 01-16 00:22 852次阅读
    技术基因+自主创新,光鉴科技塑造3D<b class='flag-5'>视觉</b><b class='flag-5'>感知</b>新范式

    创想视觉焊缝跟踪系统适配广数机器人进行自动化焊接的应用

      随着制造业的发展,自动化技术在焊接领域的应用变得愈发重要。为了提高焊接质量和效率,越来越多的企业开始采用机器人进行自动化焊接。而焊缝跟踪技术作为自动化焊接的关键技术之一,今天创想焊缝跟踪小编带大家了解创想视觉焊缝
    的头像 发表于 01-07 10:52 187次阅读

    创想焊缝跟踪系统适配大牛机器人进行智能寻位跟踪的应用案例

    系统小编带大家一起了解创想焊缝跟踪系统在大牛机器人上的应用。 创想焊缝跟踪系统原理 创想焊缝跟踪
    的头像 发表于 12-23 16:00 444次阅读
    创想焊缝<b class='flag-5'>跟踪</b><b class='flag-5'>系统</b>适配大牛机器人进行智能寻位<b class='flag-5'>跟踪</b>的应用案例

    创想视觉焊缝跟踪系统适配OTC机器人实现高效自动焊接的案例

    ,为制造业发展提供了强有力的支持。 焊缝跟踪工作原理 焊缝跟踪系统是一种基于先进视觉技术的自动化系统,其工作原理基于计算机
    的头像 发表于 11-25 14:20 258次阅读
    创想<b class='flag-5'>视觉</b>焊缝<b class='flag-5'>跟踪</b><b class='flag-5'>系统</b>适配OTC机器人实现高效自动焊接的案例

    毫米波雷达的自适应波束成形技术:提升感知精度的前沿探索

    毫米波雷达的自适应波束成形技术是当前雷达领域备受关注的研究方向之一。本文深入探讨了自适应波束成形技术的原理、关键技术和在各个应用领域中的前景,以及它如何提升毫米波雷达系统在复杂环境中的感知
    的头像 发表于 11-14 15:51 226次阅读

    激光雷达与视觉感知的优劣对比

    马斯克曾经详细解释过他对雷达和摄像头的看法:在雷达波长下,现实世界看起来像一个奇怪的幽灵世界。除了金属,几乎所有东西都是半透明的。当雷达和视觉感知不一致时,你采信哪一个?视觉具有更高的精度,因此投入两倍的精力改善
    发表于 10-26 15:14 247次阅读
    激光雷达与<b class='flag-5'>视觉</b><b class='flag-5'>感知</b>的优劣对比

    基于视觉的多模态触觉感知系统

    传统的多模态/多任务触觉感知系统通过集成多种传感单元来达到多模态触觉信息的解耦,但其往往导致系统结构的复杂性,以及需要应对来自不同刺激间的干扰。
    发表于 10-18 11:24 222次阅读
    基于<b class='flag-5'>视觉</b>的多模态触觉<b class='flag-5'>感知</b><b class='flag-5'>系统</b>

    自动驾驶中激光雷达和视觉感知的区别

    视觉自动驾驶方案从产品分析,目前特斯拉的产品还处于L2的阶段,从今年第一季度的财报上看纯视觉自动驾驶方案是这样解释:目前道路交通系统是基于人类视觉
    发表于 08-08 12:49 1010次阅读
    自动驾驶中激光雷达和<b class='flag-5'>视觉</b><b class='flag-5'>感知</b>的区别

    人眼视觉和机器视觉的图像传感器有何不同?

    人眼视觉系统对像素间亮度强弱差异的感知与机器视觉算法不同。人眼对亮度的感知是非线性的,也就是说,如果所在环境中光子数量增加一倍,眼睛感知到的
    发表于 06-28 15:55 306次阅读
    人眼<b class='flag-5'>视觉</b>和机器<b class='flag-5'>视觉</b>的图像传感器有何不同?

    主流的机器视觉技术有哪些呢

    视觉是人类最敏感、最直接的感知方式,在不进行实际接触的情况下,视觉感知可以使得我们获取周围环境的诸多信息。由于生物视觉系统非常复杂,目前还不
    的头像 发表于 06-16 11:03 483次阅读
    主流的机器<b class='flag-5'>视觉</b>技术有哪些呢

    基于纯视觉感知方法

         背景  近年来,基于纯视觉感知方法由于其较高的信噪比和较低的成本,在自动驾驶领域占有重要地位。其中,鸟瞰图(BEV)感知已成为主流的方法。在以视觉为中心的自动驾驶任务中,B
    的头像 发表于 06-15 14:20 627次阅读
    基于纯<b class='flag-5'>视觉</b>的<b class='flag-5'>感知</b>方法

    感知系统和运作法则

    视听觉系统不完全是由你们所知道的眼睛、眼球以及耳朵来构成,这些只是其中一部分。 我们把这些向外来观看,外在图像上的叫做外视觉和外听觉系统,统整也叫外感知
    的头像 发表于 05-17 10:55 410次阅读