0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

使用Fleet Command完成部署和管理AI应用程序

星星科技指导员 来源:NVIDIA 作者:Amanda Saunders 2022-04-07 14:40 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着在边缘部署人工智能应用程序的增长, IT 组织正在寻找部署和管理其边缘计算系统和软件的最佳方式。

NVIDIA Fleet Command 通过将 NVIDIA-Certified Systems 转化为安全边缘设备,并在几分钟内将其连接到云,为任何规模的企业带来安全边缘 AI 。在云中,你可以从 NGC Catalog 或你的 NGC 私有注册中心部署和管理应用程序,通过无线方式更新系统软件,并通过浏览器和互联网连接远程管理系统。

为了帮助组织测试 Fleet Command 的好处,您可以使用 NVIDIA LaunchPad 测试产品。通过精心策划的实验室, LaunchPad 让你可以使用专用硬件和 Fleet Command 软件,这样你就可以在边缘地带完成部署和管理人工智能应用程序的整个过程。

在这篇文章中,我将带你参观 LaunchPad 上的 Fleet Command 试用版,包括申请者的详细信息、完成策划的实验室体验需要多长时间,以及接下来的步骤。

谁应该试试舰队司令部?

Fleet Command 是为负责管理多个边缘位置的人工智能应用程序的 IT 和 OT 专业人员设计的。该产品的简单性允许任何技能水平的专业人士轻松使用。

策展实验室将完成演示应用程序的部署。对于即将进行 edge 项目的用户,演示应用程序可用于测试 Fleet Command 的功能,但仍需在现场进行全面测试。

Fleet Command 实验室体验旨在部署和管理边缘的人工智能应用程序。 NVIDIA LaunchPad 提供了其他实验室,用于使用 NVIDIA Base Command 管理训练环境, NVIDIA 人工智能企业 用于从企业数据中心优化人工智能的开发和部署。

Fleet Command 策划的实验室包括什么?

在本次试验中,您充当车队指挥系统管理员,部署计算机视觉应用程序,用于在交叉口清点车辆。整个审判大约需要一个小时。

在 NGC 中访问舰队司令部

Fleet Command 可以通过 NGC 从任何地方访问,这是一个 GPU 优化的人工智能软件中心,允许管理员远程管理边缘位置、系统和应用程序。

管理员会自动将 Fleet Command 添加到 NGC 控制台。

创建边位置

Fleet Command 中的位置代表安装物理系统的真实位置。在实验室中,您可以创建一个边缘位置,但客户可以在生产中管理数千个位置。

要添加新位置,请选择 Add Location 并填写详细信息。选择可用的最新版本。

图 1 。添加一个由NVIDIA 车队司令部管理的位置

添加一个边缘系统

接下来,向位置添加一个系统,它代表边缘的物理系统。完成此步骤将生成一个代码,您可以使用该代码使用 Fleet Command 操作堆栈在现场安全地配置服务器。然后选择刚刚创建的位置并选择 Add System 。

图 2 。将边缘系统添加到位置

添加系统名称和说明以完成该过程。

将系统添加到某个位置后,您将获得一个生成的激活码,用于将舰队命令与现场的物理系统配对。

图 3 。生成激活码,将 Fleet Command 中的系统连接到边缘服务器

将 Fleet Command 连接到 LaunchPad 服务器

NVIDIA LaunchPad 提供了一个系统控制台,用于访问与试用相关的服务器。按照提示完成安装。初始设置后,系统会提示输入在 Fleet Command 中创建系统时生成的激活码。

图 4 。将边缘服务器与 Fleet Command配对

输入激活码后,系统将完成与车队命令的配对。 Fleet Command 用户界面中的复选框显示服务器正在运行并准备进行远程管理。

图 5 。边缘服务器的完整配对,现在可以通过 Fleet Command 进行控制

部署人工智能应用程序

现在,本地安装程序已将系统与 Fleet Command 配对,您可以部署 AI 应用程序。应用程序可以托管在 NGC 私有注册表上,也可以直接托管在 NGC 目录上。

图 6 。将来自 NGC 的应用程序添加到该位置

人工智能应用程序使用 Helm 图表进行部署, Helm 图表用于定义、安装和升级 Kubernetes 应用程序。选择 Add Application 并在提示中输入信息。

现在应用程序已在 Fleet Command 准备就绪,可以部署到一个或多个系统上。通过选择创建的位置和应用程序,创建部署,确保选中启用应用程序访问复选框。

图 7 。创建部署

现在,应用程序已部署在服务器上,您可以在试用应用程序中查看在示例视频数据上运行的应用程序。

图 8 。用于计算汽车数量的计算机视觉应用程序正在生产中

就这样。我现在已经向您介绍了连接到边缘物理系统、创建部署以及将 AI 应用程序推送到边缘服务器的端到端过程。在不到一个小时的时间里,试验从断开连接的远程系统发展到完全管理、安全的远程边缘环境。

下一步

Fleet Command 是一个强大的工具,可以在不影响安全性、灵活性或规模的情况下简化边缘计算基础设施的管理。

关于作者:

Amanda Saunders 在 NVIDIA 负责 Edge 和企业计算解决方案集团的 Edge AI 产品营销。她为医院、商店、仓库、工厂等带来了智能的边缘计算解决方案。除了从事 edge 解决方案之外, Amanda 还在 NVIDIA 担任销售和营销角色,与 AI 、数据科学、虚拟 GPU 和许多不同行业合作。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    5496

    浏览量

    109094
  • 人工智能
    +关注

    关注

    1813

    文章

    49736

    浏览量

    261534
  • 应用程序
    +关注

    关注

    38

    文章

    3342

    浏览量

    59926
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    如何有效管理部署AI智能体

    随着人工智能技术的快速发展,AI智能体正从单一任务执行工具演进为具备自主决策能力的复杂系统。在这个演进过程中,如何有效管理规模化部署的智能体,确保其行为可控、协作高效,成为企业智能化转型面临的重要
    的头像 发表于 10-17 14:35 231次阅读
    如何有效<b class='flag-5'>管理</b>和<b class='flag-5'>部署</b>的<b class='flag-5'>AI</b>智能体

    新唐科技推出高效AI MCU部署工具NuML Toolkit

    随着 AI 技术加速导入各类嵌入式系统,如何将训练完成AI 模型顺利部署至资源有限的微控制器成为工程师面对的重大挑战。为协助开发者快速落地 AI
    的头像 发表于 08-01 17:21 1873次阅读

    ai_cube训练模型最后部署失败是什么原因?

    ai_cube训练模型最后部署失败是什么原因?文件保存路径里也没有中文 查看AICube/AI_Cube.log,看看报什么错?
    发表于 07-30 08:15

    【米尔RK3576开发板免费体验】1、开发环境、镜像烧录、QT开发环境搭建以及应用部署

    的设置如下。 完成上述配置后,即可进行QT应用程序的开发和部署。 3、QT示例程序编译和下载 在Buildroot中添加QT的示例程序选项
    发表于 07-14 11:26

    STM32F769是否可以部署边缘AI

    STM32F769是否可以部署边缘AI
    发表于 06-17 06:44

    AI端侧部署开发(SC171开发套件V3)

    AI端侧部署开发(SC171开发套件V3) 序列 课程名称 视频课程时长 视频课程链接 课件链接 工程源码 1 Fibo AI Stack模型转化指南------Docker Desktop环境操作
    发表于 04-16 18:30

    如何在RAKsmart服务器上实现企业AI模型部署

    AI模型的训练与部署需要强大的算力支持、稳定的网络环境和专业的技术管理。RAKsmart作为全球领先的服务器托管与云计算服务提供商,已成为企业部署A
    的头像 发表于 03-27 09:46 762次阅读

    MCP:连接AI应用程序的开放标准!

    作者:算力魔方创始人/英特尔创新大使刘力 扩展AI大模型的方式有两种,第一种是通过训练增强AI大模型自身的能力;第二种是让AI大模型与其它现有的应用程序(例如:数据库、浏览器、Gmai
    的头像 发表于 03-21 18:21 1881次阅读
    MCP:连接<b class='flag-5'>AI</b>与<b class='flag-5'>应用程序</b>的开放标准!

    如何部署OpenVINO™工具套件应用程序

    编写代码并测试 OpenVINO™ 工具套件应用程序后,必须将应用程序安装或部署到生产环境中的目标设备。 OpenVINO™部署管理器指南包
    发表于 03-06 08:23

    是否可以使用OpenVINO™部署管理器在部署机器上运行Python应用程序

    使用 OpenVINO™部署管理器创建运行时软件包。 将运行时包转移到部署机器中。 无法确定是否可以在部署机器上运行 Python 应用程序
    发表于 03-05 08:16

    SDRAM控制器设计之command.v代码解析

    command.v文件对应图中SDRAM指令执行模块,它会从SDRAM接口控制模块接收指令,然后产生控制信号直接输出到SDRAM器件来完成所接收指令的动作。
    的头像 发表于 02-25 10:32 932次阅读
    SDRAM控制器设计之<b class='flag-5'>command</b>.v代码解析

    C#集成OpenVINO™:简化AI模型部署

    在开源测控、机器视觉、数采与分析三大领域中,如何快速将AI模型集成到应用程序中, 实现AI赋能和应用增值? 最容易的方式是:在C#中,使用 OpenVINO工具套件 集成AI模型。 1
    的头像 发表于 02-17 10:03 2518次阅读
    C#集成OpenVINO™:简化<b class='flag-5'>AI</b>模型<b class='flag-5'>部署</b>

    添越智创基于 RK3588 开发板部署测试 DeepSeek 模型全攻略

    能精准理解自然语言,生成高质量文本,还免费向全球开发者开放,极大地推动了 AI 技术的普及与应用,为无数开发者打开了全新的探索大门。今天,我们就一起深入探讨如何在 RK3588 开发板上完成
    发表于 02-14 17:42

    ANACONDA——关于发布数据应用程序的新简单方法

    我们推出了一款用于发布数据应用程序的开创性解决方案:具有 Panel 应用程序部署功能的 Anaconda Cloud Notebooks。Panel 是一种开源 Python 工具,现在
    的头像 发表于 01-17 11:39 644次阅读
    ANACONDA——关于发布数据<b class='flag-5'>应用程序</b>的新简单方法

    企业AI模型部署攻略

    当下,越来越多的企业开始探索和实施AI模型,以提升业务效率和竞争力。然而,AI模型的部署并非易事,需要企业在多个层面进行细致的规划和准备。下面,AI部落小编为企业提供一份
    的头像 发表于 12-23 10:31 1300次阅读