日本智能影像生产技术:如何提升动画制作效率

随着5G技术的大规模商用，高分辨率的视频流量将呈指数级增长。移动视频行业委员会预测显示，至2028年5G流量的90%将来自视频，增强型视频（VR、AR、AGC）将是5G的第二大用例类型。

随后，英特尔发布《5G娱乐经济报告》进一步显示，5G视频内容消费加速，用户月均流量使用量将从当前的11.7GB增长至84.8GB，2021-2028年传媒和娱乐企业由此将受益新增营收1400亿美元，增强型视频（VR、AR、AGC）服务的营收潜力可达960亿美元。

报告分析师指出，“5G+AI技术红利”将驱动视频产业迎来增强型视频（VR、AR、AGC）内容快速发展，如何搭载5G顺风车，中国、日本、韩国等亚太地区的部分文娱企业已经率先开始使用人工智能技术辅助视频内容生产，开始大规模用AI生产技术解决5G时代的内容及图像质量。

中国智能影像生产技术：文娱全产业链基础建设

较其他国家及地区，中国媒体及娱乐企业对全面智能视频化保持热情。大部分企业认为，智能影像生产技术能切实可行的提高制作及分发效率，借助AI技术能够为用户提供量身定制和智能推荐的内容，它改变的是内容创作和分发的方式。包括《南方日报》、腾讯、澎湃、芒果TV、爱奇艺、华视传媒等在内的传媒和娱乐企业积极借助人工智能技术构建自主可控平台或提供优质视频内容产品。

目前，AI技术的应用已经贯穿整个文创产业链，包含剧本创作、选角、流量预测、审核、编码、剪辑、运营、搜索、推荐、宣发、热点预测、热点提取、追星、广告投放、在线交互等诸多环节，实现智能创作、智能生产、智能标注、智能分发、智能播放、智能变现、智能客服等七大方面的充分应用。

据Forrester发布的《2019-2020 Video AI技术预测》报告显示，90%的中国视频平台正在借助专业的视频识别技术以对视频进行数据结构化，在视频内容原创、视频营销、视频结构化商用、视频大数据领域、机器人流程化等领域产生财务绩效，通过自动化影像加工辅助技术、生产技术为产业升级提供动力。

在智能影像生产环节，国内人工智能公司影谱科技的视频内容自动化生产引擎—MAPE (Moviebook Auto-Production Engine)是一个人工智能平台，利用视频识别及视频生产技术为文娱企业提供内容生产平台。

在商业化环节，国内多个热门作品都采用了基于人工智能的内容生产技术，包括热播的《我的师傅》、《巅峰之夜》、《我最爱的女人们》、《女儿们的热爱》、《妻子的浪漫旅行》、《恋爱先生》、《楚乔传》等，这些热门节目的商业化技术实现与传统方式不尽相同，通过采纳影谱科技智能影像生产技术，让品牌主的广告画面成为原视频内容的一个部分，更有甚者是把原本不存在的品牌主物品以“虚拟广告道具”方式无违和感的植入视频播放/用户观影过程中。

不仅如此，除视频以外，图、文、音、影等不同信息载体之间无缝转换正成为智能传媒的重要基础设施。传统的图像、文字、音频、视频相互转化，通常人工需要一周时间，平均花费263美元，内容失真率却高达52%。而AI技术的加入，可以使信息介质融合互换更快速、更低价、更有效，如前端内容采写可通过AI技术一键生成与之匹配的视频、音频等，改变内容开发整个过程，从内容创造、生成机制、影响力提前预测、观察数据等方面。

虽然一些媒体和娱乐公司对AI的投入保持谨慎，但大多数专家预测中国的5G+人工智能发展速度较全球市场将更快一步。

日本智能影像生产技术：如何提升动画制作效率

显然，日本动画产业是这次AI+5G视频消费升级的核心。动画产业市场规模超过2兆日元的日本，在人工智能技术与效能方面也进行了具有个性化的探索，在动画预处理、动画动态、动画合成等全产业上已形成深度应用场景。

首先，AI生成工具提高绘画产业链生产效率。

自动上色AI 工具的成功商用，让画师的制作进一步简化。近期，白泉社（发行漫画期刊、漫画等为主的会社）和博报堂（日本知名的广告与传播集团）DY Digital 宣布开始使用 AI 技术来交付和销售自动着色的彩色漫画。第一部彩色漫画将在电子书店网站（如白泉社 e-net）发送。未来还将通过自动对其他作品进行着色来制作和分发彩色版本。

这是由日本科技企业Preferred Networks 研发的一款自动上色工具“PaintsChainer”，利用深度学习的 AI（人工智能），代替人工进行大量简单的上色线稿工作，用户只需上传一张黑白线稿，PaintsChainer 会通过神经网络算法自动上色，生成一张彩色漫画。

有了AI 的辅助之后，画师只需要完成部分轮廓和剪影的设计，计算机就可以自动生成细化的画面，之后输入黑白的线稿就可以涂画大体的颜色，最后画师只需要做一些细微的调整。这一生产方式的投入，成倍提高了新人的工作效率、每天作画张数的增加便可带来收入的提高。

除 Paintschainer 之外，另一项简化画师工作流程的项目也在日本引起了较大的关注。Edgar Simo-Serra 团队开发出一种将铅笔画的粗略草图转化成线稿的 AI 工具。该模型框架基于完全卷积神经网络，当输入一个粗略的草图图像模型后，即可获得一个干净的简化线稿。

不仅是漫画彩色化，并且能有助于解决目前日本动画制作现场的困境。最近上映的剧场版动画《FLCL Progressive》（《フリクリ プログレ》）采用Dwango公司旗下机械学技术研发部门“Dwango Media Village”开发的最新动画制作支持技术。

（Dwango Media Village研发AI技术拟人形象。图左：時季ヶ原 埋，担当工程:中割り。图右：時季ヶ原 写，担当工程:原画トレス）

该技术主要应对动画制作过程中的“中割”（中割り）和“原画临描”（原画トレス）两大环节。“中割”与“原画临描”在动画制作过程中属于让画面“动”起来的工作，往往需要大量的动画师花费不少时间去一张一张完成，但技术含量相对于原画等其他环节较低。事实上，“Dwango Media Village”即是通过计算机视觉识别及自动生成技术将这一部分的劳动量节省下来。

“电影制作过程中，虽然经过AI生成的画面，还需要作画监督进行修正”，担任《FLCL Progressive》第五话监督的末泽慧就表示，“但AI给工作带来的便利超过麻烦，随着AI学会的越多，需要人工修缮的地方就会越来越少”。

其次，显著减少动画制作企业成本，第二视频产业在日本觉醒。

对于动画制作公司来说，AI 的带来的好处是显而易见的，首先就是制作成本的降低。

近日，I.G port发布的最新财报显示，在动画制作事业上，公司本期（2017.6.1-2018.2.28）损失为3.99亿日元（去年同期为2.34亿日元的损失）。主要是为了制作出让观众满意的高质量动画，制作费用持续增加。与之相似的还有龙之子动画工作室（NTV 旗下），2017财年亏损了5000万日元。目前一部动画的参与制作人员平均百余人，较日渐增加的人工费用，将最底层工作交由计算机完成，是动画制作公司的最佳选择。

其次，AI 也能缓解日本动画公司人手不足的情况。在这种局面下，早稻田大学科森岛繁生研究室研发出了通过现实场景的照片自动生成背景的CG技术。该技术旨在让创作者能够更加便利、轻松地使用和工作。生成一张背景仅需10秒。进一步，除了静止的画面，让运动的影像也自动生成，效率大大提升。

自动内容生产技术（AGC）的引入将释放大量轻创作劳动，借助计算机视觉等AI技术减少动画制作时所需的人物力高消耗。

如前不久入围威尼斯电影节、由Production I.G制作的《攻壳机动队 新剧场版Virtual Reality Diver》，通过AI视频生成+VR技术带来更新的动画观赏体验。

早前，Pixiv推出过利用AI上色的功能。今年7月，P站又推一款“黑科技” VRoid Studio，让不懂三维建模技术的普通人也能轻松创作出自己的3D角色。

另外，日本虚拟偶像和动画的关系也越走越近，已有日本公司开始筹划使用VR+VTuber进行自动化动画生产（AGC）的制作方式。今年9月，日本VR技术公司XVI（株式会社エクシヴィ）和影像音乐集团爱贝克斯（Avex）共同成立的AniCast Lab.正是希望通过VTuber+VR的应用，将动画制作的周期缩短，减少人力劳动，以及节约成本。AniCast Lab.创造一种全新的动画制作方式，采用智能影像生产技术令普通人也能制作自己的动画并发布分享。

随着5G到来，智能影像技术正让日本动漫产业走向全数字化的可能，日本动画公司的抉择，也将影响到海外同行能否借机实现“变道超车”。

5G+AI视频娱乐已经不仅仅是一种技术想象，而是真实走进了一个产业周期中的快速上行通道。对于必须兼顾视频图像和内容质量的文娱创作企业而言，展开对全自动化视频生产技术的应用研究成为一种微妙的供给平衡手段。事实上，一些先行企业将取得“技术先发优势”作为最大的战略目标。