NVIDIA助力元形水滴提升3D数字人技术性能

案例简介

在本案例中，元形水滴通过与 NVIDIA 合作，利用先进的 GPU 加速技术，显著提升了 3D 数字人技术的性能与体验。

本案例主要应用到NVIDIA 的ACE NIMs微服务。

以前沿技术赋能文旅文创

杭州元形水滴智能科技有限公司专注于通过 AR（增强现实）、VR（虚拟现实）、XR（扩展现实）以及 AIGC（人工智能生成内容）等前沿技术，赋能文旅和文创等商业场景。公司目标客户涵盖企业展厅、智慧文旅、文创及元宇宙互动等领域，旨在连接物理与数字空间，架起现实世界与虚拟世界之间的桥梁，创造无缝且丰富的互动体验。

元形水滴 3D 数字人技术面临的挑战

在 3D 数字人技术的开发与应用过程中，元形水滴面临诸多挑战。首先，数字人需具备高效的语音识别与合成能力，以实现自然流畅的交互体验。然而，传统语音识别与合成技术在处理复杂语境及多样化语音时，常出现准确率低、响应速度慢的问题。其次，数字人的唇形生成技术需与语音精准同步，确保视觉与听觉的高度协调，这对技术的精确度和实时性提出了极高要求。此外，数字人技术的开发对计算资源的需求巨大，而传统 CPU 的计算能力难以满足实时处理的需求。因此，如何在保障技术质量的同时提升计算效率，成为元形水滴仍待攻克的难题。

NVIDIA 助力元形水滴突破数字人技术瓶颈

为了解决上述挑战，杭州元形水滴智能科技有限公司选择了 NVIDIA 的 ACE NIMs 微服务。通过 Riva 框架，元形水滴实现了高效的 ASR 和 TTS 功能，语音识别的准确率提升了 80%，语音合成的自然度也得到了显著改善。Riva 的 GPU 加速能力使得语音处理的速度提高了 10 倍，能够实时响应用户的语音指令。

在唇形生成方面，元形水滴利用 Audio2Face-3D 技术，成功实现了数字人唇形与语音的精准同步。该技术能够根据语音内容实时生成相应的唇形动画，提升了数字人交互的真实感和沉浸感。

通过这些技术的应用，元形水滴不仅提升了数字人技术的整体性能，还大幅缩短了开发周期，使得数字人解决方案能够更快地投入市场。

NVIDIA 技术赋能元形水滴智能业务发展

NVIDIA 的产品和技术对杭州元形水滴的业务发展产生了深远的影响。通过使用 ACE NIMs 服务，元形水滴的数字人技术在语音识别、合成和唇形生成等方面取得了显著进展，极大地提升了用户体验和市场竞争力。

在 NVIDIA 初创加速计划的支持下，元形水滴智能还获得了深度学习学院的免费课程，提升了团队的技术水平。此外，初创加速计划提供的云服务资源也为元形水滴的技术研发提供了强有力的支持，使其能够在竞争激烈的市场中脱颖而出，最终获得天使投资人的信赖。

“3D 数字人技术是元宇宙等场景未来人机交互的重要趋势，NVIDIA 的技术为我们提供了强大的支持，使我们能够在这一领域不断创新。”元形水滴智能的联合创始人 & CEO 沈传立表示。

NVIDIA 初创加速计划

NVIDIA 初创加速计划 (NVIDIA Inception)为免费会员制，旨在培养颠覆行业格局的优秀创业公司。该计划联合国内外知名的风投机构、创业孵化器、创业加速器、行业合作伙伴以及科技创业媒体等，打造创业加速生态系统。能够提供产品折扣、技术支持、市场宣传、融资对接、业务推荐等一系列服务，加速创业公司的发展。