0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Graphcore发布基于IPU开发者云,适用于AI模型的训练和推理

牵手一起梦 来源:中电网 作者:佚名 2020-07-09 14:28 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

7月8日消息,Graphcore今日正式发布基于IPU的开发者云,面向中国的客户、大学、研究机构和个人研究者免费使用,使得前沿的机器智能创新者可以轻松获取IPU进行前沿AI模型的云端训练与推理,从而在新的一波机器智能浪潮中取得关键突破。该开发者云是中国首款IPU开发者云,部署在金山云上,使用了IPU PCIe卡适配完成的浪潮NF5568M5服务器和戴尔DSS8440服务器。

中国众多的机器智能创新者活跃在各个AI领域的世界前端,通过IPU开发者云,前沿机器智能创新者可以快速便捷地获取IPU云,避开自建机房或者申购IPU服务器等繁琐内部流程,专注于在IPU上快速运行自己的AI模型结果。

“我们在与创新者交流时,很多创新者想要使用IPU来运行自己的算法模型,以期获得更好的运行结果,但受制于各种条件限制,难以达成。”Graphcore高级副总裁兼中国区总经理卢涛表示,“因此我们推出了IPU开发者云,开发者们可以很方便地使用IPU进行训练与推理任务,探索自己的算法模型的极致表现,并且它是免费的,我们的本地工程支持团队还会和开发者们一同制定工程计划,全程提供咨询与支持。”

开发者在运行先进的AI算法模型时,最常遇到两大困扰:一是他们将要求提供给算力平台部门时,经常得到的反馈是GPU目前不能够支持他们想要的低时延和高吞吐量;二是他们的算法模型在GPU上跑的速度非常慢,经常产生有可能是算法本身问题的误导。这是由于GPU从来不是为了满足机器学习的计算需求而设计的。而与当今的CPU和GPU完全不同,Graphcore从零设计的IPU是一种高度灵活、易于使用的并行处理器,专门适用于算力密集型的机器学习和深度学习任务,能在目前用于训练和推理的机器智能模型上实现最先进的性能。

借助IPU开发者云,创新者可以使自己的算法任务直达IPU,避开传统硬件的限制陷阱,使得自己的算法模型不用因硬件受阻而妥协。创新者们可以在IPU上最大程度地释放算法模型的潜能,使结果值抵达最优,并在IPU上探索更多的可能性,全方位触发创新。

• 对于商业客户来说,在较短的时间内(通常为三周或者按需适度延长),可以通过IPU极大优化现有模型,了解到模型现在及未来的性能提升空间,从而迅速行动,早竞争对手一步实现产品化和市场化,获得最大时间窗口优势,赢取市场先机。

• 大学、研究机构和个人研究者可以在较长的时间内(通常为6个月)免费访问,直至完成研究项目并发表结果。在IPU上,用于研究的算法模型得以极大优化,充分释放潜能,帮助缩短研究成果面世的时间,并触发新的研究方向,探索新领域。

• 专注于在机器智能方面取得新突破以扩大人类潜能的研究者可获得优先访问使用权。另外,全球范围内正在进行COVID-19相关研究的机构和个人可以获得最先使用权。

在收到使用请求并完成评估后,Graphcore工程团队会和商业客户、大学和研究者一起制定开发计划和使用周期,并全程提供技术咨询和支持。

Graphcore IPU开发者云使用了金山云提供的托管服务,金山云独特灵活的云物理机服务可以使Graphcore布置多种机型,目前已上线IPU PCIe卡配置完成的浪潮NF5568M5服务器和戴尔DSS8440服务器。如使用者有本地测试需求,金山云还会将机器运送到使用者本地配合测试,之后再返还数据中心。这为使用IPU的开发者提供了极高的灵活度、极大的创新空间和很好的本地技术支持。

金山云合伙人刘涛先生表示:“很高兴Graphcore IPU开发者云入驻金山云,期望看到越来越多的开发者在IPU开发者云上实现AI模型加速创新。金山云将和Graphcore共同为广大开发者提供助力,推动AI应用的产业化落地。”

IPU开发者云适用于先进和复杂的AI模型的训练和推理,按照场景大致分为五类:

1. 自然语言处理类,比如BERT;

2. 高级计算机视觉应用类,即以分组卷积为代表的一些机器视觉类的应用,比如ResNeXt、EfficientNet、ResNet;

3. 时序分析类,比如LSTM、RNN、GRU等大量应用于语音应用、广告推荐、金融算法等模型;

4. 排名与推荐类,比如Deep Autoencoder;

5. 概率模型,比如MCMC等用于算法交易的模型;

除了上述模型,IPU还非常适合在稀疏化的应用场景里进行前沿探索。

为了更好地赋能中国AI创新者,配合开发者云,Graphcore的创新社区现已全面正式上线,社区平台包含微信、知乎、微博以及Graphcore即将上线的中文创新社区网站。创新者们可以在自己常用的社交平台上轻松向Graphcore全球的科学家提问,获取IPU硬件产品与软件更新的最新资讯、阅读深度技术文章、并与其他创新者们一起交流成长。

“在中国建立IPU开发者云,是Graphcore对于中国创新社区的承诺。Graphcore积极拥抱中国的AI生态系统,通过IPU开发者云的免费使用和源源不断的知识输出,赋能尖端AI创新者,从而将中国最具有创新能力和求知精神的机器智能创新者们汇聚在一起,共同在社区中探索与收获。”Graphcore高级副总裁兼中国区总经理卢涛表示。

Graphcore联合创始人兼CEO Nigel Toon表示:“Graphcore非常专注于中国市场。机器智能方面的许多新突破将非常适用于中国客户和研究机构。通过为进行AI研究的创新者免费提供云计算中的IPU支持以及运营在中国的创新社区,我们可以支持中国最具创新精神的人才解决世界上最棘手的AI问题。”

责任编辑:gt

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 服务器
    +关注

    关注

    14

    文章

    10440

    浏览量

    91851
  • AI
    AI
    +关注

    关注

    91

    文章

    41976

    浏览量

    303077
  • PCIe
    +关注

    关注

    16

    文章

    1502

    浏览量

    89139
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    从手机芯片到通用计算平台:为什么开发者该重新认识高通

    开发板、学习工具或原型验证平台。但随着大模型、本地推理、低功耗 AI、私有数据和边缘设备逐渐结合,个人算力设备正在变成一个新的产品方向。 它会让开发
    发表于 05-21 10:32

    直播预告|玄铁 x Canonical:从本地推理AI 工厂,基于 RISC-V 的 AI 基础设施创新路径探讨

    模型浪潮下,AI 算力正向“本地推理”与“AI 工厂”两极延伸,而传统架构在低延迟与规模化之间往往顾此失彼。RISC-V 的可定制特性,提供了一条新路径——端侧精简高效,
    发表于 05-15 12:15

    从显存瓶颈到推理革命:vLLM 为何成为大模型服务的底层标配

    从显存瓶颈到推理革命:vLLM 为何成为大模型服务的底层标配 很多开发者都有一个共识:当模型基座的性能逐渐趋同,真正决定 AI 产品落地效率
    的头像 发表于 05-12 09:57 445次阅读
    从显存瓶颈到<b class='flag-5'>推理</b>革命:vLLM 为何成为大<b class='flag-5'>模型</b>服务的底层标配

    HM博学谷狂野AI模型第四期

    如何减少 GPU 显存碎片,提高吞吐量。通过对推理引擎源码的调试与优化,开发者将学会如何在不牺牲模型效果的前提下,榨干硬件性能,实现毫秒级的低延迟响应,这是将 AI 技术转化为高并发商
    发表于 05-01 17:30

    黑马-Java+AI新版V16零基础就业班百度网盘下载+Java+AI全栈开发工程师

    巨大潜力。传统 Java 开发者大可不必恐慌转型,而是应主动将 AI 作为能力增强点,扩展自身技术半径。掌握上述六大实战维度:架构范式选择、推理引擎优化、特征管线构建、模型热加载、大
    发表于 05-01 11:29

    边缘AI算力临界点:深度解析176TOPS香橙派AI Station的产业价值

    ) 根据昇腾社区开发者分享的实战经验,OrangePi AI Station已被用于部署具身智能领域的 ACT (Action Chunking with Transformers) 模型
    发表于 03-10 14:19

    一文了解Mojo编程语言

    CPU、GPU 和其他加速器的支持,简化了并行编程模型。 渐进式类型系统 结合静态类型检查和类型推导,既保证编译时安全性,又保留动态类型的灵活性。 应用场景 AI 与机器学习 用于训练
    发表于 11-07 05:59

    元服务发布配置开发者服务信息

    您作为开发者的相关信息将面向元服务发布区域的用户公开,其中客服联系方式可能会提供给用户,用于咨询相关问题。 登录AppGallery Connect,点击“APP与元服务”。 选择要发布
    发表于 10-31 17:58

    华为开发者共赢AI未来

    ,与开发者共赢”主题演讲,详细阐述了华为生态的最新进展,并宣布华为开发者空间全面升级,全新集成多种AI原生应用开发能力。
    的头像 发表于 09-20 15:58 1914次阅读

    亚马逊科技宣布推出Qwen3与DeepSeek-V3.1模型的完全托管服务

    亚马逊科技致力于成为运行开放权重模型的最佳平台,在Amazon Bedrock上新增五个模型选项,持续丰富模型选择,进一步满足客户需求。 主要亮点: · Qwen3系列提供
    的头像 发表于 09-19 10:11 1127次阅读

    模板驱动 无需训练数据 SmartDP解决小样本AI算法模型开发难题

    。但是这个平台不适用于小样本AI模型开发,特别是一些特殊行业,数据本来就不多,但又有着需求,因此陷于两难。面临这种市场困境,慧视光电推出了一个全新的
    的头像 发表于 09-09 17:57 1629次阅读
    模板驱动  无需<b class='flag-5'>训练</b>数据  SmartDP解决小样本<b class='flag-5'>AI</b>算法<b class='flag-5'>模型</b><b class='flag-5'>开发</b>难题

    Sigmstar-ssd2355-助力开发者AI产品

    丰富外设接口。适用于智能音箱、工业HMI、教育机器人等场景,具备双网口、多摄像头支持及音频处理能力。配套开源SDK、AI工具链和开发者社区,助力快速实现产品量产。开发板满负荷功耗<
    的头像 发表于 08-20 16:43 1724次阅读
    Sigmstar-ssd2355-助力<b class='flag-5'>开发者</b><b class='flag-5'>AI</b>产品

    迅龙软件参加昇腾 AI 开发者创享日・广东站,为开发者打造沉浸式实操体验

    AI软硬件平台,与开发者共同点亮人工智能的未来方向。作为昇腾APN钻石合作伙伴,迅龙软件受邀出席并发表《基于OrangePiAIStudio的大模型微调和推理》的
    的头像 发表于 07-23 17:18 1487次阅读
    迅龙软件参加昇腾 <b class='flag-5'>AI</b> <b class='flag-5'>开发者</b>创享日・广东站,为<b class='flag-5'>开发者</b>打造沉浸式实操体验

    超低延时重构AI推理体验!白山发布“大模型API”产品

    优势,打造超低延时、超稳定、简单易用的API接口服务,降低大模型应用成本和开发门槛,助力企业和个人用户快速开启AI创新之旅。专注边缘推理,构建“
    的头像 发表于 07-02 17:26 1330次阅读
    超低延时重构<b class='flag-5'>AI</b><b class='flag-5'>推理</b>体验!白山<b class='flag-5'>云</b><b class='flag-5'>发布</b>“大<b class='flag-5'>模型</b>API”产品

    华为开发者大会2025(HDC 2025)亮点:华为发布盘古大模型5.5 宣布新一代昇腾AI服务上线

    HarmonyOS、昇腾AI服务、盘古大模型等最新科技创新成果。 在主题演讲中,华为常务董事、华为计算CEO张平安宣布基于CloudMatrix384 超节点的新一代昇腾
    的头像 发表于 06-20 20:19 4780次阅读
    华为<b class='flag-5'>开发者</b>大会2025(HDC 2025)亮点:华为<b class='flag-5'>云</b><b class='flag-5'>发布</b>盘古大<b class='flag-5'>模型</b>5.5 宣布新一代昇腾<b class='flag-5'>AI</b><b class='flag-5'>云</b>服务上线