0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

4种用于视频生成的尖端AI技术

倩倩 来源:互联网分析沙龙 2020-04-11 10:00 次阅读

我们研究视频到视频的合成问题,其目的是学习从输入源视频(例如,一系列语义分割掩码)到精确描述源视频内容的输出真实感视频的映射功能。

虽然它的图像对应物(图像到图像合成问题)是一个受欢迎的话题,但是视频到视频合成问题在文献中很少探讨。在不了解时间动态的情况下,将现有的图像合成方法直接应用于输入视频通常会导致视觉质量低下的时间不连贯视频。

在本文中,我们提出了一种在生成对抗性学习框架下的新颖的视频合成方法。通过精心设计的生成器和鉴别器架构以及时空对抗目标,我们可以通过多种输入格式(包括分割蒙版,草图和姿势)获得高分辨率,逼真的,时间上连贯的视频结果。在多个基准上进行的实验表明,与强基准相比,我们的方法具有优势。

尤其是,我们的模型能够合成长达30秒的街道场景的2K分辨率视频,从而大大提高了视频合成的最新水平。最后,我们将我们的方法应用于未来的视频预测,其性能超过了几个最先进的竞争系统。

我们的模型能够合成长达30秒的街道场景的2K分辨率视频,从而大大提高了视频合成的最新水平。最后,我们将我们的方法应用于未来的视频预测,其性能超过了几个最先进的竞争系统。

我们的模型能够合成长达30秒的街道场景的2K分辨率视频,从而大大提高了视频合成的最新水平。最后,我们将我们的方法应用于未来的视频预测,其性能超过了几个最先进的竞争系统。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 视频
    +关注

    关注

    6

    文章

    1886

    浏览量

    71826
  • 模型
    +关注

    关注

    1

    文章

    2671

    浏览量

    47571
  • 生成器
    +关注

    关注

    7

    文章

    300

    浏览量

    20113
收藏 人收藏

    评论

    相关推荐

    OpenAI视频生成工具Sora将于年内正式向公众推出

    OpenAI的首席技术官Mira Murati在近期采访中透露,公司正计划在今年晚些时候正式向公众正式推出其视频生成工具Sora。Murati表示,尽管具体的推出时间可能需要几个月,但OpenAI正在积极准备,并期待在未来能够为广大用户提供这一创新产品。
    的头像 发表于 03-19 11:41 325次阅读

    新火种AI|围攻光明顶:Sora效应下的AI视频生成竞赛

    Sora的出现,让AI视频生成领域真正“活”了起来
    的头像 发表于 03-16 11:12 188次阅读

    除了刷屏的Sora,国内外还有哪些AI视频生成工具

    。Sora的发布也让AI生成视频有了突破性进展。   过去一年多,全球科技公司都在发布各种大模型,然而AI生成内容更多集中在文本和图片方面,
    的头像 发表于 02-26 08:42 2932次阅读
    除了刷屏的Sora,国内外还有哪些<b class='flag-5'>AI</b><b class='flag-5'>视频生成</b>工具

    openai发布首个视频生成模型sora

    美国当地时间2024年2月15日 ,OpenAI正式发布文生视频模型Sora ,并发布了48个文生视频案例和技术报告 ,正式入局视频生成领域 。Sora能够根据提示词
    的头像 发表于 02-21 16:45 596次阅读

    马斯克称特斯拉视频生成技术超过Sora

    特斯拉CEO埃隆·马斯克在社交媒体平台上发表言论,声称特斯拉所掌握的视频生成技术超越了OpenAI最新发布的Sora模型。马斯克自信地表示,特斯拉在这一领域的技术实力堪称全球顶尖,甚至超越了OpenAI这一人工智能领域的佼佼者。
    的头像 发表于 02-20 14:16 212次阅读

    OpenAI发布Sora模型,瞬间生成高清大片

    近日,人工智能领域的领军企业OpenAI发布了一款名为“Sora”的视频生成AI模型,再次展示了其在AI技术领域的创新实力。Sora以其出色的视频生
    的头像 发表于 02-20 13:33 259次阅读

    探索OpenAI Sora视频AI生成技术及其应用如何使用指南

    OpenAI的Sora现已扩展其能力范围,进入视频生成领域,标志着人工智能技术在多媒体内容创作上的一个重大突破。Sora的视频AI功能使得用户能够根据文本描述自动
    的头像 发表于 02-20 12:01 699次阅读

    OpenAI新年开出王炸,视频生成模型Sora问世

    近日,OpenAI在AI生成视频领域取得重大突破,发布了全新的生成式人工智能模型“Sora”。该模型在视频生成方面展现出了惊人的能力,通过文
    的头像 发表于 02-20 11:46 329次阅读

    AI视频年大爆发!2023年AI视频生成领域的现状全盘点

    2023年,也是AI视频元年。过去一年究竟有哪些爆款应用诞生,未来视频生成领域面临的难题还有哪些?
    的头像 发表于 02-20 10:40 499次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>视频</b>年大爆发!2023年<b class='flag-5'>AI</b><b class='flag-5'>视频生成</b>领域的现状全盘点

    特斯拉视频生成技术超越OpenAI,展示真实模拟视频

    马斯克早先也曾指出,其公司自一年前便具备相似OpenAI的视频生成能力。不仅如此,一名X用户对此表示赞赏,认为OpenAI的研究成就证明了特斯拉的实力。
    的头像 发表于 02-19 16:52 461次阅读

    OpenAI发布文生视频模型Sora,引领AI视频生成新纪元

    在人工智能(AI)领域掀起新一轮革命浪潮的,正是OpenAI最新推出的文生视频大模型——Sora。这款被业界广泛赞誉的模型,以其“逼真”和“富有想象力”的视频生成能力,彻底颠覆了传统视频生成
    的头像 发表于 02-19 11:03 384次阅读

    OpenAI发布首个视频生成模型Sora

    OpenAI近日宣布推出其全新的文本到视频生成模型——Sora。这一突破性的技术视频创作带入了一个全新的纪元,为用户提供了前所未有的创作可能性。
    的头像 发表于 02-18 10:07 538次阅读

    阅流智作:一种全新的生成AI视频制作方式,或将颠覆专业视频生

    随着AIGC技术的兴起和发展,智能创作逐渐成为全球热议的焦点,而面向专业场景,可控的智能图片、视频生成式方向是所有内容创作者最关心的。 AI创作类工具的应用普及,创作者和设计师们在内容创作流程
    的头像 发表于 11-02 14:40 193次阅读

    基于文本到图像模型的可控文本到视频生成

    的文本到视频模型需要大量高质量的视频和计算资源,这限制了相关社区进一步的研究和应用。为了减少过度的训练要求,我们研究了一种新的高效形式:基于文本到图像模型的可控文本到视频生成。这个任务旨在根据文本描述和运动序列(例如深
    的头像 发表于 06-14 10:39 541次阅读
    基于文本到图像模型的可控文本到<b class='flag-5'>视频生成</b>

    NVIDIA 赋能 Cyanpuppets 打造实时 2D 视频生成 3D 骨骼 AI 转换模型

    技术公司。其自研 CYAN.AI 平台结合 NVIDIA GPU 算力,实现了 2D 视频生成 3D 动作数据,具备三维空间自由人体运动,能够为全球用户提供 AI 无穿戴动作捕捉
    的头像 发表于 04-07 02:30 379次阅读