MediaTek联合快手推出高效端侧视频生成技术

MediaTek 与快手共同宣布，推出高效端侧视频生成技术，共同探索并推进生成式 AI 技术的革新。作为对 2024 世界移动通信大会（MWC 2024）上亮相的视频生成技术的延续，该技术结合快手的 AI 模型 I2V（image to video）Adapter 与 MediaTek 天玑 9300、天玑 8300 移动平台强劲的 AI 算力，在端侧实现由静态图像生成动态视频的创新体验。用户只需在设备上选取图片，应用即可智能地识别照片中的人物和场景，生成自然流畅的视频佳作，从而显著提升视频制作的创意表现和效率。

双方的合作充分借助 MediaTek 天玑移动平台先进的 AI 技术，携手攻克了模型底层适配优化及上层开发的系列技术及工程难题，为用户带来让人耳目一新的端侧生成式 AI 体验，将改变用户创作和分享内容的方式。

I2V-Adapter 是快手 AI 团队提出的一种适用于基于 Stable Diffusion 文生视频扩散模型的轻量级适配模块。作为即插即用的扩散模型轻量级模块，该模块专门用于由图像到视频的生成任务，能够在不需要改变现有文本到视频生成（T2V）模型原始结构和预训练参数的情况下，将静态图像转换成动态视频。此外，其解耦设计使得该方案能够与 DreamBooth、LoRa、ControlNet 等模块无缝兼容，实现个性化和可控的图像到视频生成。

MediaTek 天玑 9300 和天玑 8300 移动平台集成为生成式 AI 而设计的先进 NPU（神经网络处理单元），具备强劲算力和能效。在图像生成视频的应用中，它可以显著加速 AI 模型的运算，配合与快手 I2V Adapter 模型的适配和优化，实现更快的视频生成速度，同时兼具低功耗特性。与此同时，天玑移动平台可结合深度学习和实时渲染技术，对图像内容进行深度分析，捕捉关键帧，并据此生成流畅、逼真的视频画面效果。而 MediaTek 的实时渲染技术则能够确保视频在各类设备上均能带来高画质表现。

全球短视频市场正迎来高速增长期，行业对创新、高效的视频生成技术的需求日益迫切。MediaTek 与快手基于对市场需求和趋势的深刻洞察，为广大用户带来更加先进、便捷的视频生成工具，共同推动短视频生态的繁荣发展。未来，双方将持续深化合作，推动生成式 AI 技术的进一步发展，满足市场不断变化的需求，共同开创和探索短视频技术的新纪元。