0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SIGGRAPH 2023 | 初创企业借助 NVIDIA NeMo 撰写生成式 AI 的成功案例

NVIDIA英伟达 来源:未知 2023-08-10 20:15 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

“Writer”利用 NVIDIA AI 软件构建的大语言模型(LLM)帮助数百家公司创建内容。

机器学习帮助 Waseem Alshikh 在大学里读完了课本。如今,他正在利用生成式 AI 为数百家公司创建内容。

在叙利亚出生和长大的 Alshikh 不会说英语,但他精通软件。他在黎巴嫩上大学期间,将这一天赋发挥得淋漓尽致。

他回忆道:“第一天他们就给了我一摞课本,每本都有上千页厚,而且全是用英语写的。”

于是,他编写了一个粗糙但有效的统计分类器程序来生成这些课本的内容摘要,然后进行学习。

从提出概念到创业

2014 年,他向在迪拜工作时结识的企业家 May Habib 分享了自己的故事。他们一拍即合,决定创办一家初创企业,帮助总是要求“事半功倍”的营销部门利用机器学习快速创建网页、博客、广告等内容。

Alshikh 在该初创企业担任首席技术官。他表示:“最初我们无法实现这种技术。直到 Transformer 模型发布后,我们才基于此构建了这种技术。”

Writer 联合创始人、首席执行官 Habib

和首席技术官 Alshikh

“我们找了几位工程师,花了近六个月的时间建立了我们的第一个模型。这是一个几乎无法运行的神经网络,拥有约 1.28 亿个参数。”参数数量是衡量 AI 模型能力的常用指标。

一路走来,这家年轻的公司逐渐赢得了一些业务,更名为 Writer,并与 NVIDIA 建立了联系。

驶入快车道

他表示:“在开始使用 NVIDIA NeMo 后,我们就能够建立行业级模型了,参数量从 30 亿个增加到 200 亿个,再到现在的 400 亿个,而且还在不断扩大。”

NeMo 是一个可以帮助企业整理其训练数据集、构建和定制大语言模型(LLM),并在生产中大规模运行这些模型的应用框架。从韩国到瑞典,世界各地的企业都在使用它来定制本地语言和行业的大语言模型(LLM)。

Alshikh 表示:“在使用 NeMo 之前,我们需要四个半月的时间来构建一个新的十亿级参数模型。而现在我们只需要 16 天就能完成,这真令人难以置信。”

模型带来机遇

今年上半年,这家初创企业不到 20 名的 AI 工程师团队利用 NeMo 开发了 10 个模型,每个模型都有超过 300 亿个或更多的参数。

这带来了巨大的机遇。现在,已经有数百家企业在使用 NeMo 为金融、医疗、零售和其他垂直市场定制的 Writer 模型。

wKgaomToQomAN_aEAABuu4xVofE983.jpg

Writer 的 Recap 工具可根据采访

或活动录音制作书面摘要

这家初创企业的客户包括德勤、欧莱雅、财捷、优步等家喻户晓的 500 强企业。

Writer 使用 NeMo 取得的成功仅仅是故事的开始。目前,已经有数十家其他公司下载了 NeMo。

这款包含在 NVIDIA AI Enterprise 中的软件将很快可供使用。NVIDIA AI Enterprise 是一套专为加速生成式 AI 工作负载而优化,并以企业级支持、安全性和应用编程接口稳定性为保障的全栈式软件。

wKgaomToQomAHwqNAABJ4pmRHRs602.jpg

Writer 为企业用户提供全栈式平台

每月一万亿次 API 调用

一些客户在自己的系统或云服务上运行 Writer 的模型,另一些客户则要求 Writer 托管模型或者使用 Writer 的 API。

Alshikh 表示:“我们的云基础设施基本上由两个人管理,每月托管的 API 调用达万亿次,每秒生成 90,000 个单词。我们提供的高质量模型可以与团队规模更大、预算更多的公司所提供的产品相媲美。”

wKgaomToQoqAUIjbAAAvs79wke8525.jpg

NVIDIA NeMo 支持从数据整理

一直到推理的整个端到端生成式 AI 流程

Writer 使用与 NeMo 打包在一起的 Triton 推理服务器为其客户在生产中运行模型。Alshikh 表示,许多运行 LLM 的公司都在使用 Triton。与其他程序相比,Triton 可实现更低的延迟和更高的吞吐量。

“这意味着你可以将运行一些服务的成本从 10 万美元减少到 2 万美元,这样就能够投入更多资金构建有意义的功能。” Alshikh 说道。

广阔的视野

Writer 还是 NVIDIA 初创加速计划https://www.nvidia.cn/startups/)的成员,该计划旨在培育前沿初创企业。Alshikh 表示:“多亏了 NVIDIA 初创加速计划,我们才有机会尽早使用 NeMo,还有一些了不起的人指导我们如何寻找和使用所需的工具。”

如今,Writer 的文本产品已经开始受到关注,Alshikh 在佛罗里达州和加利福尼亚州两地奔波,探寻接下来的发展方向。在生成式 AI 这片广阔的“疆域”,他看到了图像、音频、视频、3D 等领域的机遇,而且这些机遇可能会同时出现。

他表示:“我们认为多模态是未来的趋势”。

此页面https://developer.nvidia.com/nemo)了解如何开始使用 NeMo。访问此页面https://developer.nvidia.com/nemo-framework-open-beta)了解多模态 NeMo 的抢先体验计划。

如果您喜欢这篇文章,请使用以下 Writer 建议的摘要转发给社交网络上的朋友:

“了解初创企业 Writer 如何利用 NVIDIA NeMo 软件为数百家公司生成内容,并以少量人员和预算获得可观的收入。”

SIGGRAPH 2023

NVIDIA 精彩发布

【1】SIGGRAPH 主题演讲:NVIDIA 首席执行官带来生成式 AI 多项创新 SIGGRAPH 2023 | NVIDIA 发布新一代 GH200 Grace Hopper 超级芯片平台 SIGGRAPH 2023 | NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级 SIGGRAPH 2023 | NVIDIA Omniverse 开启通往 OpenUSD 广阔天地的大门 SIGGRAPH 2023 | NVIDIA 与全球数据中心系统制造商大力推动 AI 与工业数字化的发展 SIGGRAPH 2023 | NVIDIA 与全球工作站厂商共同推出用于生成式 AI、LLM 开发、内容创作和数据科学的系统 SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企业加速采用自定义生成式 AI SIGGRAPH 2023 | NVIDIA 与 Hugging Face 将连接数百万开发者与生成式 AI 超级计算

更多精彩,仍在继续...

敬请持续关注

点击“阅读原文”,或扫描下方海报二维码,观看 NVIDIA 创始人兼 CEO 黄仁勋在 SIGGRAPH 现场发表的 NVIDIA 主题演讲回放了解 NVIDIA 的新技术,包括屡获殊荣的研究,OpenUSD 开发,以及最新的 AI 内容创作解决方案。


原文标题:SIGGRAPH 2023 | 初创企业借助 NVIDIA NeMo 撰写生成式 AI 的成功案例

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    23

    文章

    4047

    浏览量

    97814

原文标题:SIGGRAPH 2023 | 初创企业借助 NVIDIA NeMo 撰写生成式 AI 的成功案例

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    利用NVIDIA Cosmos开放世界基础模型加速物理AI开发

    NVIDIA 最近发布了 NVIDIA Cosmos 开放世界基础模型(WFM)的更新,旨在加速物理 AI 模型的测试与验证数据生成借助
    的头像 发表于 12-01 09:25 600次阅读

    Votee AI借助NVIDIA技术加速方言小语种LLM开发

    Votee AI 利用 NVIDIA 的 GPU 硬件、NeMo Curator 数据处理软件、NeMo Framework 模型训练框架及 Auto Configurator 优化工
    的头像 发表于 08-20 14:21 676次阅读

    Wandercraft借助NVIDIA技术开发个人外骨骼设备

    初创公司 Wandercraft 正借助 NVIDIA AINVIDIA Omniverse 仿真技术,开发个人外骨骼设备。这些外骨骼
    的头像 发表于 05-15 10:43 711次阅读

    企业使用NVIDIA NeMo微服务构建AI智能体平台

    已发布的 NeMo 微服务可与合作伙伴平台集成,作为创建 AI 智能体的构建模块,使用商业智能与强大的逻辑推理模型 (包括 NVIDIA Llama Nemotron) 处理更多任务。
    的头像 发表于 04-27 15:05 1026次阅读

    IBM如何基于SAP平台和数据推动生成AI成功应用

    “近日,IBM 商业价值研究院(IBV)与 SAP 研究洞察中心联合开展了一项大规模调研,覆盖全球 1200余位全球企业高管,其中 200位来自大中华区,以深入洞察组织如何基于 SAP 平台和数据推动生成
    的头像 发表于 04-17 10:20 836次阅读

    英伟达GTC2025亮点:Oracle与NVIDIA合作助力企业加速代理式AI推理

    基础设施以及生成 AI 服务首次实现集成,以帮助全球企业组织加速创建代理式 AI 应用。 此次 Oracle Cloud Infrast
    的头像 发表于 03-21 12:01 1213次阅读
    英伟达GTC2025亮点:Oracle与<b class='flag-5'>NVIDIA</b>合作助力<b class='flag-5'>企业</b>加速代理式<b class='flag-5'>AI</b>推理

    Oracle 与 NVIDIA 合作助力企业加速代理式 AI 推理

    ——Oracle 和 NVIDIA 今日宣布,NVIDIA 加速计算和推理软件与 Oracle 的 AI 基础设施以及生成
    发表于 03-19 15:24 479次阅读
    Oracle 与 <b class='flag-5'>NVIDIA</b> 合作助力<b class='flag-5'>企业</b>加速代理式 <b class='flag-5'>AI</b> 推理

    聚云科技获亚马逊云科技生成AI能力认证

    近日,云管理服务提供商聚云科技成功获得亚马逊云科技生成AI能力认证。此次认证标志着聚云科技在利用亚马逊云科技全托管的生成
    的头像 发表于 02-19 10:33 847次阅读

    聚云科技荣获亚马逊云科技生成AI能力认证 助力企业加速生成AI应用落地

    、数据处理、模型调优到应用集成与部署等方面,助力企业加速生成AI应用落地。此外,聚云科技还基于亚马逊云科技打造RAGPro企业知识库、
    发表于 02-14 13:41 332次阅读

    NVIDIA发布全新NIM AI Guardrail微服务

    ,致力于提升生成AI应用的安全性、精准度和可扩展性。 这些微服务以NeMo Guardrails为核心进行编排,充分利用了NVIDIA
    的头像 发表于 01-18 11:48 1069次阅读

    NVIDIA NeMo Guardrails引入三项全新NIM微服务

    NVIDIA NeMo Guardrails 包含全新 NVIDIA NIM 微服务,能够为各行业构建 AI企业提高
    的头像 发表于 01-18 09:39 1173次阅读

    NVIDIA 发布保障代理式 AI 应用安全的 NIM 微服务

    务是 NVIDIA NeMo Guardrails 软件工具系列的一部分。这些可移植且经过优化的推理微服务可帮助企业提高生成
    发表于 01-17 16:29 287次阅读

    NVIDIA Omniverse扩展至生成物理AI领域

    NVIDIA近日宣布,其Omniverse™平台再次实现重大突破,成功推出多个生成AI模型和蓝图,将Omniverse的应用范围进一步扩展
    的头像 发表于 01-13 10:56 1086次阅读

    NVIDIA推出多个生成AI模型和蓝图

    NVIDIA 宣布推出多个生成 AI 模型和蓝图,将 NVIDIA Omniverse 一体化进一步扩展至物理
    的头像 发表于 01-08 10:48 1056次阅读

    NVIDIA 推出高性价比的生成 AI 超级计算机

    Jetson Orin Nano Super 可将生成 AI 性能提升至1.7 倍,支持科技爱好者、开发者和学生使用的主流模型。     NVIDIA 推出了一款全新的尺寸小巧的
    发表于 12-18 17:01 955次阅读
    <b class='flag-5'>NVIDIA</b> 推出高性价比的<b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b> 超级计算机