谷东科技与智谱AI合作推出首个AR+大模型行业解决方案

2024年，AR行业展现出一片欣欣向荣之态。注册企业不断增加，AR新品不断上市。据企查查数据统计，截至2024年4月，全国现存VR、AR相关企业达到2.82万；2024年第一季度，国内VR、AR相关企业注册达1169家，与去年同期趋平。2023年，国内共计上市了30余款AR眼镜，在小米、魅族、Xreal、雷鸟等知名厂商AR新品的带动下，消费级AR市场迎来了久违的热闹。

但繁荣的背后，更加凸显出行业面临的艰巨挑战，入局的新玩家更多了，AR新品上市更频繁了，产品的差异化更小了，AR眼镜尚未大规模普及就已陷入激烈的竞争，面对红海市场与同质化问题，我们不得不思考：AR的未来方向在哪？

深耕XR行业十年的Meta近期的举措为行业带来了启发思考。Meta先是发布了旗下对标GPT-4的开源大模型Llama3，并联合高通支持Llama3在终端侧的运行，然后又不断对外释放将推出一款结合MR和AI的AR眼镜产品，包括OpenAI 也在探索将ChatGPT移植到XR设备上应用。

从国外科技巨头的布局看，AR+大模型的融合应用是可以预见的未来方向。反观国内，AR+大模型的探索相对空白，行业缺少标杆案例，尚且难以对标国外科技巨头。

AR空间计算与大模型两大技术浪潮交汇碰撞下，不断激荡出时代的“机遇之花”。

2024年4月29日，谷东科技有限公司（以下简称“谷东科技”）与北京智谱华章科技有限公司(以下简称“智谱AI”)就大模型在AR领域落地与应用，在北京签署战略合作协议，双方正式建立战略合作伙伴关系，合作推出首个AR+大模型行业解决方案，致力于打造AR+大模型应用的标杆案例，以构建全新的AR终端及行业应用生态，为AR行业发展解锁新方向。

谷东科技创始人崔海涛、常务副总裁李星、光学总监李学民，智谱AI副总裁郑叔亮等双方人员出席签约仪式。

双方出席签约仪式人员合影

本着优势互补、共同发展的原则，双方将共同为行业客户提供大模型技术产品等专业服务，共同开发AR+大模型产品市场。双方相信，通过本次战略合作，能够帮助双方进一步推动AR+大模型在千行百业的应用场景落地，提升双方技术产品在各自专业领域的品牌影响力等，通过前沿新技术的融合应用催生新产业新模式，为发展新质生产力贡献力量。

“谷东科技与智谱AI将各自处于行业领先的AR、大模型技术进行深度适配和融合，强强联手，希望为行业用户开创‘知百科、识万物’的数智时代。”谷东科技创始人崔海涛在会上表示。

如何将AI大模型技术更好地融入到日常的生活与工作中，成为人类随身的智能助手？除了传统的PC、智能手机等终端外，以AR为代表的空间计算终端目前是更适合作为大模型落地的载体。AR眼镜集合了显示、交互、传感、通信等技术，能够以第一视角录制传输分享内容，为用户提供3D立体、身临其境、虚实融合的沉浸式体验。凭借语音、手势、指环等多样化的人机交互方式，在大模型优秀的学习感知、分析预测、决策和生成等能力加持下，AR眼镜更能精准预测、理解用户的指令与意图，从而更加擅长处理复杂多样的任务，比PC、智能手机更高效直观，极大解放双手，为人类未来的工作方式带来根本性变革。

目前，国内AR+AI的应用实践已经相对成熟，但在更前沿的AR+大模型领域，行业还处于探索阶段，并且研发大模型技术的壁垒非常高，需要大量算力、算法和数据的积累和海量投入，这对任何一家公司来说都是不小的挑战，尤其对于国内AR企业来说，若想对标国外科技巨头，布局AR+大模型应用，与国内头部大模型技术公司进行合作共建，优势互补，更符合实际需求，同时也更符合国产化替代、自主可控及数据安全的规范及趋势。

作为国际领先的空间计算及工业AR+AI技术提供商，谷东科技目前组建了光学、智能硬件、AI算法、软件平台四大核心研发团队，并与国际领先的院校实验室及科研机构达成合作，建立了AR前沿技术研究院，下设新材料研发中心、杭州光电产研中心，同时自建高精度纳米级全息光学实验室。通过持续投入AR+AI技术创新研发，公司自研的AR+AI数智化技术解决方案已在工业制造、航空、海关、能源、物流、汽车等众多垂直行业实现了应用落地。

在大模型布局方面，谷东科技在模型基础研发、算力、算法以及数据层面均有相应布局，公司正在构建AR+大模型的场景落地以及算力联盟，前者配备了近百种成熟AI算法，算力联盟则是谷东科技计划联合其他厂商推出的算力综合服务。在大模型基础研发方面，谷东科技不仅在大模型应用研发层为解决行业难题而探索，也在为大模型基础研究的发展做贡献，主要研究方向包括模型架构的突破、大模型的轻量化、针对小样本更高效的指令微调方法以及图文多模态大模型等领域。

众所周知，研发一个优秀的行业大模型，行业数据与模型训练是关键。通过与各垂直领域客户的深度技术合作，谷东科技获得了很多行业一手真实数据，对B端场景需求也有着深刻理解与实践经验，这是谷东科技布局AR+大模型应用的独特优势。

与此同时，在大模型训练与算法研究、多模态大模型、大模型的商业落地与效果验证等方面，智谱AI走在了行业前列。智谱AI致力于打造新一代认知智能大模型，专注于做大模型的中国创新，自研了具有完全知识产权的预训练框架GLM，并自建训练平台，拥有从零开始搭建、运维平台的能力。

基于在AR、大模型行业各自的领导地位，双方将自身优势最大化，通过深度融合AR+大模型技术，在AR空间计算与大模型两大时代浪潮交汇带来的机遇下，共同探索打造面向下一代的计算终端平台及应用生态。

审核编辑：刘清