0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA技术驱动帕西尼触觉感知与人形机器人智能突破

NVIDIA英伟达 来源:NVIDIA英伟达 2025-04-21 09:15 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

案例简介

本案例中通过在 NVIDIA Isaac 平台集成触觉仿真器,借助NVIDIA Isaac Sim平台的 3D 场景生成技术和NVIDIA Isaac Lab的强化学习与数据增扩技术,帕西尼感知科技实现了从接触仿真、触觉信号产生、仿真数据生成,再到触觉模态模型训练的全流程 GPU 加速,提升标定和训练效率 100 倍,完成触觉传感器的批量标定和触觉模态规模化实机部署。

NVIDIA 技术驱动帕西尼触觉感知与人形机器人智能突破

帕西尼感知科技(深圳)有限公司作为一家在触觉技术及人形机器人领域拥有前沿核心技术的创新企业,致力于将机器人的触觉感知能力提升至人类水平,从而实现对外界环境的精细解析与敏捷响应。

作为国内触觉传感技术的革新者,帕西尼感知科技凭借其触觉传感阵列与深度学习算法,能够实时采集并精准分析灵巧手及机器人与外部环境交互的触觉数据,通过基于物理模型的预处理与特征提炼,将其转化为对物体形状、质地、力度等属性的精准描述。帕西尼感知科技应用NVIDIA Warp提供的高效并行机制和高层级接口,高效实现了柔性体接触计算和触觉仿真器,并集成到 Isaac Sim 平台上。Isaac Sim 平台的 3D 场景生成技术和 Isaac Lab 的数据增扩技术协助帕西尼感知科技实现了从接触仿真、触觉信号产生、仿真数据生成,再到触觉模态模型训练的全流程,在 NVIDIA GPU 的并行能力加持下,提升训练效率超 100 倍,完成触觉传感器的触觉模态规模化实机部署。在此基础上,借助高性能计算平台与智能优化算法,实现复杂触觉信息的深度挖掘与高效解析,为灵巧手及机器人在动态环境中构建强大的智能决策引擎。

具身智能触觉感知突破与三大挑战

触觉的双向交互性对人类意义重大,让我们感知自身存在,帮助我们完成各种复杂任务。同样的,具身智能体也必须依靠触觉感知才能实现精巧、实时的反馈。高精度的触觉感知,一直都是具身智能领域极为关键和稀缺的模态,智能通用化能力是限制人形机器人规模化和商业化的瓶颈所在,在通往具身智能的道路上依然需要克服的几大挑战:

一是传感数据仿真模型的参数优化和轻量化,主要挑战在于构建阵列式触觉传感器的计算物理和计算力学模型,该模型需要在边缘侧以毫秒量级处理近万个独立参数,并在服务器端实现高速仿真和求解。此外,模型还需进一步突破材质纹理、摩擦系数、热导系数等感知执行边界的限制。物理模型参数的快速优化计算和轻量化是实现复杂物理交互,适应更广泛应用场景和任务需求的重要前提;

二是触觉模态和多模态模型构建和调优,主要挑战在于整合多模态数据提供的特征集,增强机器人任务执行时对环境上下文的理解,并在此基础上实现高效的规划、决策和执行,从而指导机器人完成复杂的闭环任务。这需要处理包括图像、三维视觉、触觉和文字标注在内的高维度异构数据,涉及跨模态表示学习、融合网络设计以及联合训练与优化等算法策略。这些策略通常依赖于具备高吞吐量的算力支持,以实现并行计算任务的高效调度与执行,提高模型的训练和推理效率,从而提升任务执行的智能化水平;

三是人形机器人学习技能训练与应用,主要挑战在于实现虚拟数据采集和真实数据精调。训练数据和训练场地的局限使得难以低成本、系统化地扩展机器人的数据集,当前的数据集仍难以满足产业化需求中的泛化能力要求。这涉及到如何高效地收集、整合和利用来自虚拟仿真环境和真实物理世界的海量数据,以及如何实现不同机器人本体之间的数据共享和协同,从而为模型训练和优化提供充足且多样化的数据支持。

NVIDIA 生态赋能帕西尼触觉感知全链路突破

基于以上挑战,帕西尼感知科技选择采用 NVIDIA GPU 作为硬件基础,结合NVIDIA Omniverse生态系统提供支持,为产品矩阵和业务能力带来提升和优化。

帕西尼感知科技选择采用 Isaac Sim 仿真开发平台,实现自研高效多物理系统的模拟和参数辨识。Isaac Sim 集成的统一刚体求解器,结合 NVIDIA Warp 框架支持下的柔性体快速求解器,在仿真过程中对刚体和柔性体进行协调优化,从而高效处理模拟传感器与不同材质物体接触时的复杂动力学行为。同时,帕西尼利用 CUDA 加速了自研快速超弹性材料的参数辨识和有限元正算仿真和接触计算。这不仅减少了对真实物理环境和硬件升级的依赖,还大幅缩短了解耦算法的调试和优化周期,将开发周期从数月缩减至几周,成本效益显著提升约 40% 以上。

帕西尼感知科技选择采用 NVIDIA GPU,其高性能架构和特性高度契合多模态大模型训练所需的并行计算能力。NVIDIA GPU 的高显存容量和带宽,能够满足训练与优化过程中大量存储模型参数、中间计算结果和数据集的需求。在高数据吞吐量下,能够实现低延迟,通过 CUDA 工具充分调用与执行 NVIDIA GPU 的计算资源,将图像特征提取、文本编码和模态融合等任务并行化执行。借助 GPU 并行优势,进一步加速深度学习算法的执行效率,在成本仅增加约 50% 的情况下,模型训练提速近 100 倍。

帕西尼感知科技选择采用 Isaac Lab 支持大规模机器人仿真。采用 Isaac Lab 仿真开发平台,高效构建人形机器人的数字孪生,通过 GPU 加速高度逼真的物理模拟、实时渲染、深度强化学习(RL)模仿学习(IL)集成等先进技术,在虚拟环境中复现真实机器人的运动、感知和交互过程等,实现虚实融合与多本体融合数据共享和协同,从而提高模型的泛化能力和适应性。避免物理硬件的损坏和高昂的实验成本局限。在数据方面,Isaac Lab 支持数据增扩,能有效生成和收集机器人在虚拟环境中的各类数据。同时,它还可通过连接外设进行虚拟遥操作,丰富训练数据,进一步提升机器人在不同场景下的泛化能力。在 Isaac Lab 的加持下,提高训练效率约至 100 倍,为机器人学习技能训练与应用提供了强有力的支持,快速打开并扩展应用场景。

在 NVIDIA GPU 和 SDK 生态的共同支持下,帕西尼得以迅速完成从传感计算、触觉多模态数据集到具身智能模型的全链路落地,触觉传感器、灵巧手、机器人和算法方案得以快速服务到众多客户。目前,帕西尼感知科技已经成为国内知名的高精度多维触觉传感器研发企业,依托 NVIDIA 开发平台和算力的全栈式软硬件生态体系,为人形机器人提供“大脑”,形成人形机器人训练提升的良性循环,实现智能化水平的快速升级。

NVIDIA 算力驱动帕西尼触觉感知

引领人形机器人多模态升级

帕西尼感知科技依托 NVIDIA 软硬件解决方案,特别是高性能 AI 加速集群算力技术,实现了海量触觉数据的高速运算与算法优化。这一技术支撑使帕西尼感知科技在触觉传感技术领域处于行业领先地位。

帕西尼感知科技 CEO 许晋诚博士表示:在具身智能的发展进程中,人形机器人正快速进入“多模态感知 2.0”时代。精细触觉感知能力作为实现高级交互与自主行动的关键要素,成为行业竞争焦点。帕西尼感知科技在“多维度多阵列触觉感知”领域大幅提升了触觉传感器的灵敏度与精度。NVIDIA 凭借强大的 GPU 矩阵和 AI 加速解决方案,构建起从芯片到算法的全栈生态体系,为帕西尼感知科技提供了底层算力支持。在此基础上,帕西尼的触觉传感器能够在毫秒级时间内完成数据的捕捉、解析与反馈,为算法模型的持续迭代优化提供动力,有力推动了人形机器人触觉技术的发展。

机器人及自动化设备一直以来缺乏完善的触觉感知能力,只有依靠多维度触觉传感器,才能更大程度提升机器人及设备对环境的感知能力,从而能够更好与物理世界进行交互,协助人类执行更多重要的任务。

许晋诚博士表示:“我们帕西尼作为触觉传感领域的佼佼者,深知与顶尖技术伙伴携手共进的重要性。NVIDIA 作为全球领先的 AI 计算平台提供商,为我们提供了高性能的 AI 加速集群算力,将‘多维阵列触觉传感算法’和‘触觉模态模型’发挥到极致。”

NVIDIA 初创加速计划

NVIDIA 初创加速计划 (NVIDIA Inception)为免费会员制,旨在培养颠覆行业格局的优秀创业公司。该计划联合国内外知名的风投机构、创业孵化器、创业加速器、行业合作伙伴以及科技创业媒体等,打造创业加速生态系统。能够提供产品折扣、技术支持、市场宣传、融资对接、业务推荐等一系列服务,加速创业公司的发展。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2573

    文章

    54354

    浏览量

    785763
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109044
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5097

    浏览量

    134415
  • 人形机器人
    +关注

    关注

    7

    文章

    879

    浏览量

    18266

原文标题:初创加速计划 | 帕西尼感知科技基于 NVIDIA Isaac 实现触觉模态的加速训练与部署

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA 发布三大利器,推动人形机器人迈向新纪元

    电子发烧友网综合报道 在节前的机器人学习大会(CoRL)上,NVIDIA 发布了一系列突破技术,包括开源物理引擎 Newton、机器人基础
    的头像 发表于 10-13 04:42 5410次阅读

    人形机器人传感器产业链最新分析:力、触觉、IMU、视觉传感器为主流!(全面)

    在人工智能机器人技术飞速发展的浪潮中,人形机器人正从科幻概念逐步走向现实应用,成为全球科技竞争的新焦点。而传感器作为
    的头像 发表于 10-11 18:38 4.3w次阅读
    <b class='flag-5'>人形</b><b class='flag-5'>机器人</b>传感器产业链最新分析:力、<b class='flag-5'>触觉</b>、IMU、视觉传感器为主流!(全面)

    最新发布!泰科机器人发布首款自研双足人形机器人

    泰科机器人凭借十多年的技术积淀与持续创新,已成功推出多款高性能人形机器人四肢的解决方案。今天,泰科机器人再次迎来重大
    的头像 发表于 09-02 14:34 2838次阅读
    最新发布!泰科<b class='flag-5'>机器人</b>发布首款自研双足<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    机器人获得更接近人类的触觉反馈。 赛事首席技术官王博士表示:“当机器人开始‘感知’而非‘计算’环境时,真正的
    发表于 08-26 10:02

    OpenAI、西、松延动力等获融资,AI与机器人技术加速革新

    电子发烧友网综合报道 人工智能机器人领域融资热情高涨,本周除了传OpenAI近期完成了新一轮83亿美元融资外,多家机器人企业宣布完成新一轮融资,包括京东领投“
    的头像 发表于 08-11 07:33 1600次阅读

    NVIDIA 通过云端至机器人计算平台驱动人形机器人技术,赋能物理 AI

    机器人推理与技能基础模型的首次更新;用于合成运动生成的 NVIDIA Isaac GR00T-Dreams Blueprint;以及用于加速人形机器人开发的
    发表于 05-19 17:53 1681次阅读
    <b class='flag-5'>NVIDIA</b> 通过云端至<b class='flag-5'>机器人</b>计算平台<b class='flag-5'>驱动人形</b><b class='flag-5'>机器人</b><b class='flag-5'>技术</b>,赋能物理 AI

    比亚迪,悄悄投了深圳这家机器人传感器公司

    最大外部股东,持股约13.37%,据报道,本轮融资将用于西在多维触觉传感技术人形
    的头像 发表于 05-11 16:27 1529次阅读
    比亚迪,悄悄投了深圳这家<b class='flag-5'>机器人</b>传感器公司

    短讯:全球首个!人形机器人技术突破

    机器人起身站立的控制技术一直存在很多难题,据央视报道,近期,上海人工智能实验室和上海交通大学发布算法技术,使人形
    的头像 发表于 02-26 15:01 1072次阅读

    汉威科技助力:传感器技术人形机器人打造智能感知新生态

    在第四次工业革命浪潮中,具身智能与人形机器人技术正成为全球科技竞争的战略高地。据国际机器人联合会(IFR)预测,2024年全球服务机器人市场
    的头像 发表于 02-26 10:33 1048次阅读
    汉威科技助力:传感器<b class='flag-5'>技术</b>为<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>打造<b class='flag-5'>智能感知</b>新生态

    广东新支柱产业“拼图”:深圳这四家人形机器人企业受关注

    电子发烧友网综合报道 近日,广东省省长王伟中调研了深圳多家人形机器人企业,包括逐际动力、乐聚、西感知
    发表于 02-14 00:03 1276次阅读

    人形机器人涉及的化工材料

    人形机器人产业前景广阔 人形机器人指模仿人类外观和行为,具备较高智能化水平的机器人。与传统工业
    的头像 发表于 02-12 09:39 1565次阅读
    <b class='flag-5'>人形</b><b class='flag-5'>机器人</b>涉及的化工材料

    伺服电动缸在人形机器人中的应用

    将伺服电机自身优势转变成精确速度控制、精确位置控制和精确推力控制,从而实现高精度直线运动。这种特性使其成为人形机器人的核心运动部件,特别是在关节驱动方面。二、替代传统驱动方式在
    发表于 02-06 09:04

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    具身智能机器人的基础模块,这个是本书的第二部分内容,主要分为四个部分:机器人计算系统,自主机器人感知系统,自主
    发表于 01-04 19:22

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    近年来,人工智能领域的大模型技术在多个方向上取得了突破性的进展,特别是在机器人控制领域展现出了巨大的潜力。在“具身智能
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】+初品的体验

    的学习资源,以培养更多的专业人才。随着具身智能机器人技术对社会的影响越来越大,该书还可以向公众普及相关的知识,以提升社会对新技术的认知和接受度,从而为
    发表于 12-20 19:17