0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

什么是AI模型漂移 AI模型表现下降的原因

IEEE电气电子工程师 来源:IEEE电气电子工程师 2023-12-08 11:30 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

AI模型在实际运用中可能出现性能下降而达不到最初的标准,这种情况并不罕见。例如,也许你已经注意到你经常使用的生成人工智能服务的响应质量发生了变化。这些说法经常出现在新闻网站和社交媒体上。

但人工智能模型的性能是否会随着时间的推移而恶化?

事实上,人工智能模型的有效性可能会下降,并且容易产生“幻觉”。

用人工智能专家的语言来说,这种现象通常被称为“模型衰退”或“模型漂移”,这两种术语经常互换使用。

发生这种情况的原因多种多样。

为什么它很重要

人工智能越来越多地应用于日常生活的各个方面,包括拯救生命的行动和大额投资等。2023年3月,IEEE Spectrum上的一篇文章(https://spectrum.ieee.org/self-driving-cars-2662494269)强调了一个显著的现实风险:自动驾驶汽车中的人工智能模型出现故障,导致了严重的车祸。

定期更新和使用当前数据进行重新培训是维持这些模型在不断变化环境中有效的关键。

什么是AI模型漂移

IEEE会员Eleanor “Nell” Watson解释说,人工智能模型的准确性经常会因为现实世界中不断变化的环境而发生变化。

“例如,”Watson说,“考虑一个经过训练以预测消费者购买模式的模型。它是在代表某个时间点的消费者行为的数据集上训练的。部署后,消费者偏好和市场动态可能会因新趋势、经济变化甚至全球事件等各种因素而演变。由于该模型是在旧数据上训练的,它可能无法准确捕捉这些新模式,导致其预测的准确性或相关性降低。这是模型衰减的表现。”

对抗数据漂移非常重要。为了做到这一点,人工智能研究人员倾向于将人工智能漂移进一步分类。如果你想了解更多,请查看这篇IEEEXplore的论文:https://ieeexplore.ieee.org/document/9808752。

Watson说:“解决模型衰退问题包括定期监测、调整和用新数据更新模型,完善模型的架构,甚至在某些情况下从头开始重新训练。”同时还指出:“确保模型与当前数据的状态和动态保持一致,以及对于数据的合理使用,对于维护AI模型的准确性至关重要。”

合成数据:一个新出现的挑战

训练人工智能模型需要大量的数据,有时这些数据是稀缺的。为了弥补这一不足,研究人员转向了合成数据。

从本质上讲,合成数据是基于真实数据集生成的人工数据(https://standards.ieee.org/industry-connections/synthetic-data/#:~:text=Synthetic%20data%20is%20artificial%20data,e.g.%2C%20for%20AI%20training).)。它是实际的,同时也能够在统计上代表原来存在的数据。

研究人员明白,尽管合成数据有其存在的用途,但过度的依赖合成数据也可能导致性能下降,IEEE Spectrum发表的两篇研究论文探讨了这一想法:https://spectrum.ieee.org/ai-collapse。

Watson说,过度依赖合成数据“可能会缩小视角并强化偏见,因为模型可能会根据类似系统生成的数据进行训练”。生成人工智能的快速内容生产速度往往加剧了这个问题。

挑战可能更加严峻。人工智能模型的开发者经常通过人们的帮助来标记数据。例如,如果你想开发一个识别图像情感内容的人工智能模型,通常需要人们来对图像进行评分。或者有时,研究人员需要大量的调查数据,这种劳动力极其廉价——时薪不到1美元。这些被称为人类智能任务(https://www.designboom.com/technology/ai-has-generated-150-years-worth-of-photographs-in-less-than-12-months-study-shows-08-21-2023/)。

“一些人为生成的数据可能是不真实的,”Watson说,“外包给人工智能任务工作者的任务使用人工智能越来越自动化,导致潜在的偏见和不准确。公司所需要的自然、高质量的数据,可能需要额外的身份验证层来确保人工生成内容的真实性。”

审核编辑:黄飞

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    89

    文章

    38170

    浏览量

    296868
  • 人工智能
    +关注

    关注

    1813

    文章

    49752

    浏览量

    261623
  • 自动驾驶汽车

    关注

    4

    文章

    382

    浏览量

    41924

原文标题:AI模型表现下降的原因

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI模型的配置AI模型该怎么做?

    STM32可以跑AI,这个AI模型怎么搞,知识盲区
    发表于 10-14 07:14

    什么是AI模型的推理能力

    NVIDIA 的数据工厂团队为 NVIDIA Cosmos Reason 等 AI 模型奠定了基础,该模型近日在 Hugging Face 的物理推理模型排行榜中位列榜首。
    的头像 发表于 09-23 15:19 843次阅读

    关于NanoEdge AI用于n-Class的问题求解

    我想请教一下关于NanoEdge AI用于n-Class的问题。我使用NanoEdge AI的n-Class模式,训练好模型,设计了3个分类,使用PC端的模拟工具测试过,模型可以正常对
    发表于 08-11 06:44

    ai_cube训练模型最后部署失败是什么原因

    ai_cube训练模型最后部署失败是什么原因?文件保存路径里也没有中文 查看AICube/AI_Cube.log,看看报什么错?
    发表于 07-30 08:15

    如何赋能医疗AI模型应用?

    引言自ChatGPT掀起热潮以来,众多AI模型如雨后春笋般涌现,其中包括百度科技的文心一言、科大讯飞的讯飞星火、华为的盘古AI模型、腾讯的混元A
    的头像 发表于 05-07 09:36 526次阅读
    如何赋能医疗<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>应用?

    首创开源架构,天玑AI开发套件让端侧AI模型接入得心应手

    PIX GP模型的整合,并且针对模型进行全链路微秒级分析,以确保最佳的端到端性能表现。在双方的整个合作流程中,开发效率提升了30%。 天玑AI生态同样拓展到了智能座舱领域。联发科和绝影
    发表于 04-13 19:52

    训练好的ai模型导入cubemx不成功怎么处理?

    训练好的ai模型导入cubemx不成功咋办,试了好几个模型压缩了也不行,ram占用过大,有无解决方案?
    发表于 03-11 07:18

    霍尔电流传感器的原边端如何接入AI模型

    霍尔电流传感器的原边端如何接入AI模型,以便AI分析问题解决问题?话题会不会太超前?现在正式AI风口啊,猪都要起飞了
    发表于 03-03 15:18

    AI模型托管原理

    AI模型托管的核心在于将训练好的AI模型部署在云端或边缘服务器上,由第三方平台提供模型运行、管理和优化等服务。下面,
    的头像 发表于 02-26 10:31 919次阅读

    AI开发平台模型怎么用

    AI开发平台极大地简化了AI应用的开发流程,从环境搭建、模型训练到部署集成,每一步都提供了丰富的工具和资源。那么,AI开发平台模型怎么用呢?
    的头像 发表于 02-11 09:53 618次阅读

    企业AI模型托管怎么做的

    当下,越来越多的企业选择将AI模型托管给专业的第三方平台,以实现高效、灵活和安全的模型运行。下面,AI部落小编为您介绍企业AI
    的头像 发表于 01-15 10:10 735次阅读

    企业AI模型部署攻略

    当下,越来越多的企业开始探索和实施AI模型,以提升业务效率和竞争力。然而,AI模型的部署并非易事,需要企业在多个层面进行细致的规划和准备。下面,AI
    的头像 发表于 12-23 10:31 1309次阅读

    GPU是如何训练AI模型

    AI模型的训练过程中,大量的计算工作集中在矩阵乘法、向量加法和激活函数等运算上。这些运算正是GPU所擅长的。接下来,AI部落小编带您了解GPU是如何训练AI
    的头像 发表于 12-19 17:54 1345次阅读

    AI大语言模型开发步骤

    开发一个高效、准确的大语言模型是一个复杂且多阶段的过程,涉及数据收集与预处理、模型架构设计、训练与优化、评估与调试等多个环节。接下来,AI部落小编为大家详细阐述AI大语言
    的头像 发表于 12-19 11:29 1226次阅读

    开源AI模型库是干嘛的

    开源AI模型库是指那些公开源代码、允许自由访问和使用的AI模型集合。这些模型通常经过训练,能够执行特定的任务。以下,是对开源
    的头像 发表于 12-14 10:33 1301次阅读