0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

什么是AI模型漂移 AI模型表现下降的原因

IEEE电气电子工程师 来源:IEEE电气电子工程师 2023-12-08 11:30 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

AI模型在实际运用中可能出现性能下降而达不到最初的标准,这种情况并不罕见。例如,也许你已经注意到你经常使用的生成人工智能服务的响应质量发生了变化。这些说法经常出现在新闻网站和社交媒体上。

但人工智能模型的性能是否会随着时间的推移而恶化?

事实上,人工智能模型的有效性可能会下降,并且容易产生“幻觉”。

用人工智能专家的语言来说,这种现象通常被称为“模型衰退”或“模型漂移”,这两种术语经常互换使用。

发生这种情况的原因多种多样。

为什么它很重要

人工智能越来越多地应用于日常生活的各个方面,包括拯救生命的行动和大额投资等。2023年3月,IEEE Spectrum上的一篇文章(https://spectrum.ieee.org/self-driving-cars-2662494269)强调了一个显著的现实风险:自动驾驶汽车中的人工智能模型出现故障,导致了严重的车祸。

定期更新和使用当前数据进行重新培训是维持这些模型在不断变化环境中有效的关键。

什么是AI模型漂移

IEEE会员Eleanor “Nell” Watson解释说,人工智能模型的准确性经常会因为现实世界中不断变化的环境而发生变化。

“例如,”Watson说,“考虑一个经过训练以预测消费者购买模式的模型。它是在代表某个时间点的消费者行为的数据集上训练的。部署后,消费者偏好和市场动态可能会因新趋势、经济变化甚至全球事件等各种因素而演变。由于该模型是在旧数据上训练的,它可能无法准确捕捉这些新模式,导致其预测的准确性或相关性降低。这是模型衰减的表现。”

对抗数据漂移非常重要。为了做到这一点,人工智能研究人员倾向于将人工智能漂移进一步分类。如果你想了解更多,请查看这篇IEEEXplore的论文:https://ieeexplore.ieee.org/document/9808752。

Watson说:“解决模型衰退问题包括定期监测、调整和用新数据更新模型,完善模型的架构,甚至在某些情况下从头开始重新训练。”同时还指出:“确保模型与当前数据的状态和动态保持一致,以及对于数据的合理使用,对于维护AI模型的准确性至关重要。”

合成数据:一个新出现的挑战

训练人工智能模型需要大量的数据,有时这些数据是稀缺的。为了弥补这一不足,研究人员转向了合成数据。

从本质上讲,合成数据是基于真实数据集生成的人工数据(https://standards.ieee.org/industry-connections/synthetic-data/#:~:text=Synthetic%20data%20is%20artificial%20data,e.g.%2C%20for%20AI%20training).)。它是实际的,同时也能够在统计上代表原来存在的数据。

研究人员明白,尽管合成数据有其存在的用途,但过度的依赖合成数据也可能导致性能下降,IEEE Spectrum发表的两篇研究论文探讨了这一想法:https://spectrum.ieee.org/ai-collapse。

Watson说,过度依赖合成数据“可能会缩小视角并强化偏见,因为模型可能会根据类似系统生成的数据进行训练”。生成人工智能的快速内容生产速度往往加剧了这个问题。

挑战可能更加严峻。人工智能模型的开发者经常通过人们的帮助来标记数据。例如,如果你想开发一个识别图像情感内容的人工智能模型,通常需要人们来对图像进行评分。或者有时,研究人员需要大量的调查数据,这种劳动力极其廉价——时薪不到1美元。这些被称为人类智能任务(https://www.designboom.com/technology/ai-has-generated-150-years-worth-of-photographs-in-less-than-12-months-study-shows-08-21-2023/)。

“一些人为生成的数据可能是不真实的,”Watson说,“外包给人工智能任务工作者的任务使用人工智能越来越自动化,导致潜在的偏见和不准确。公司所需要的自然、高质量的数据,可能需要额外的身份验证层来确保人工生成内容的真实性。”

审核编辑:黄飞

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    91

    文章

    41107

    浏览量

    302589
  • 人工智能
    +关注

    关注

    1820

    文章

    50324

    浏览量

    266937
  • 自动驾驶汽车

    关注

    4

    文章

    386

    浏览量

    42940

原文标题:AI模型表现下降的原因

文章出处:【微信号:IEEE_China,微信公众号:IEEE电气电子工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI模型微调企业项目实战课

    自主可控大模型:企业微调实战课,筑牢未来 AI 底座 在人工智能席卷全球商业版图的今天,企业对大模型(LLM)的态度已经从“新奇观望”转变为“全面拥抱”。然而,随着应用层面的不断深入,一个严峻
    发表于 04-16 18:48

    RJ老师扁豆AI视频课,全流程创作课 (看讠果xingkeit-top)# AI # 扁豆AI视频

    AI模型
    jf_82580774
    发布于 :2026年04月16日 15:33:30

    模型 ai coding 比较

    序 我主要用途是 ai coding,从各种渠道获取到了很多 不同的大模型排序 最多的是 opus 4.6 > k2.5 > glm5 >
    发表于 02-19 13:43

    使用NORDIC AI的好处

    不依赖持续联网,整体系统可靠性更高。[Edge AI 概述; Nordic Edge AI 技术页] 覆盖从“小 MCU”到“高性能 SoC”的完整产品线 Neuton 模型 :超小模型
    发表于 01-31 23:16

    AI模型的配置AI模型该怎么做?

    STM32可以跑AI,这个AI模型怎么搞,知识盲区
    发表于 10-14 07:14

    什么是AI模型的推理能力

    NVIDIA 的数据工厂团队为 NVIDIA Cosmos Reason 等 AI 模型奠定了基础,该模型近日在 Hugging Face 的物理推理模型排行榜中位列榜首。
    的头像 发表于 09-23 15:19 1469次阅读

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、现阶段更智能、更接近AGI的6中算法与模型 1、MoE模型 MoE模型作为Transfomer模型的后继者,代表着AI技术的一项重大创新和
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    流体芯片 ⑤AI计算平台 ⑥基于AI的自主决策系统 ⑦基于AI的自主学习系统 2、面临的挑战 ①需要造就一个跨学科、全面性覆盖的知识库和科学基础模型 ②需要解决信息不准确和认知偏差问题
    发表于 09-17 11:45

    关于NanoEdge AI用于n-Class的问题求解

    我想请教一下关于NanoEdge AI用于n-Class的问题。我使用NanoEdge AI的n-Class模式,训练好模型,设计了3个分类,使用PC端的模拟工具测试过,模型可以正常对
    发表于 08-11 06:44

    在K230中,如何使用AI Demo中的object_detect_yolov8n,YOLOV8多目标检测模型

    在K230的AI开发教程文档中,可以看到有源码的AI Demo,其中包括yolov8n模型,在仓库里可以看到源码 我想请问各位大佬,如何使用这个程序?如何更改程序,替换为我自己的数据集和训练后的
    发表于 08-07 06:48

    Cognizant加速AI模型企业级开发

    -Cognizant推出AI Training Data Services,助力企业级AI模型加速开发 Cognizant是数据与AI模型
    的头像 发表于 07-31 17:25 814次阅读

    ai_cube训练模型最后部署失败是什么原因

    ai_cube训练模型最后部署失败是什么原因?文件保存路径里也没有中文 查看AICube/AI_Cube.log,看看报什么错?
    发表于 07-30 08:15

    如何赋能医疗AI模型应用?

    引言自ChatGPT掀起热潮以来,众多AI模型如雨后春笋般涌现,其中包括百度科技的文心一言、科大讯飞的讯飞星火、华为的盘古AI模型、腾讯的混元A
    的头像 发表于 05-07 09:36 797次阅读
    如何赋能医疗<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>应用?

    【「零基础开发AI Agent」阅读体验】+ 入门篇学习

    很高兴又有机会学习ai技术,这次试读的是「零基础开发AI Agent」,作者叶涛、管锴、张心雨。 大模型的普及是近三年来的一件大事,万物皆可大模型已成为趋势。作为大
    发表于 05-02 09:26