AI重塑短剧创作

HelloKitty 2024-07-25 15:32

扫一扫 在手机阅读、分享本文

1003

本文由 DoNews 撰写/授权提供,转载请注明原出处。

文章来源于:DoNews

作者:程书书

编辑:李信马

自从今年 2 月份 Sora 发布后,AI 生成视频的“魔盒”被彻底打开,国内的一众互联网大厂也争先跟进。

3 月 26 日,字节跳动旗下剪映 Dreamina(即梦)开放内测;4 月 27 日,AI 企业生数科技发布了号称国内首个自研视频大模型的 Vidu;6 月 6 日,快手可灵 AI 正式开放内测;7 月 4 日,世界人工智能大会上,商汤推出了最新的人物 AI 视频模型 Vimi,阿里达摩院也发布 AI 视频创作平台“寻光”.....

视频生成赛道激战正酣,最近又在短剧领域交出落地答卷。

6 月底,由中央广播电视总台影视剧纪录片中心制作的三部 AI 微短剧《英雄》《爱永无终止》《奇幻专卖店》一齐上线央视频;7 月 8 日,抖音视频大模型即梦提供技术支持的国内首部 AIGC 科幻短剧《三星堆:未来启示录》在抖音开播;7 月 13 日,由快手可灵大模型提供深度技术支持的国内首部 AIGC 原创奇幻微短剧《山海奇镜之劈波斩浪》在快手上线。

·.png

图源:微博

选择短剧作为视频大模型的落地试水,是因为短剧拥有比影视剧更短的故事单元,与当前 AI 生成的镜头更具适配性。试想一下,未来生成式 AI 能创造什么样的短剧?行业又会发生哪些转变呢

有惊喜,也有缺陷

《山海奇镜之劈波斩浪》和《三星堆:未来启示录》目前都已经播放至尾声,前者讲述的是一位少年为救母亲与海底巨兽展开殊死搏斗;后者则围绕三股势力代表人物共同进入数字生成的古蜀国冒险之旅展开。两部片子的故事脉络清晰,主人公形象鲜明。

2.gif

图源:抖音《三星堆:未来启示录》

再从视觉效果来看,虽然仍能一眼看出 AI 生成视频的典型风格,但是也有着明显的突破。此前 AI 生成的视频普遍存在难以准确模拟复杂场景物理原理的问题,但在《山海奇镜之劈波斩浪》中,共工破山的镜头,从侧身半蹲到站立转体的人物运动过程,不但呈现出“站起来”的动作,甚至于整个人物还实现了立体的转体,肌肉的质感和头发的飘逸,神话角色的大表情神态以及镜头的旋转配合得十分自然。海浪翻滚、山石崩塌等物体运动幅度较大,且符合物理世界规律。

3.gif

图源:快手(《山海奇镜之劈波斩浪》共工破山镜头)

然而,相较传统的影视作品,AI 短剧的故事呈现还是存在着“毛边”。可以看到,无论是《山海奇镜之劈波斩浪》还是《三星堆:未来启示录》,故事叙事都较为简单,剧中用到的镜头基本都在5秒之内,很多动作场面需要通过蒙太奇的剪辑来实现。

此外,人物表演上也有着明显的缺陷,如人物口型与发音对不上、肢体动作不够协调、人物面部表情僵化等问题。

《三星堆:未来启示录》技术总监李康康也表示,当前 AI 生成短剧仍面临诸多挑战,例如人物角色一致性的控制、画面一致性、动态可控性以及将 AI 和短剧高质量、高效结合等。

目前生成式 AI 在短剧领域的应用尚处于初级阶段,未来还有一段爬坡的过程。快手视觉生成与互动中心负责人万鹏飞就对 DoNews 表示:“我们会不断升级、迭代、更新线上的模型,今天呈现的效果和一个星期之后的效果很可能是不一样的。”

降本增效,和想象空间

即使目前存在诸多的缺陷,但大模型对短剧行业“降本增效”却有明显的作用。

通常情况下,拍摄一部短剧需要经历剧本创作、团队筹备、演员选角、实际拍摄、后期制作等多个环节。而大模型的加入,直接取消了中间的三个环节。

《山海奇镜之劈波斩浪》的导演陈坤说:“过去同样体量和质量的短剧,无论是实拍还是动画制作的形式,制作周期最少也需要3到6个月,而《山海奇镜之劈波斩浪》仅制作而言,只花费了 2 个月的时间,这在过去是‘不可思议’的。”

4.png

图源:快手(《山海奇镜之劈波斩浪》)

取消拍摄环节意味着省掉庞大的剧组团队,大大减少了人力成本。陈坤表示,通过当下的生成式 AI 技术,制作成本可以降低 1/4 甚至更多。

此外,生成式 AI 还能低成本呈现传统拍摄的大场面场景,降低特效成本。据博纳影业行政总裁蒋德富透露,在拥抱 AI 之后,电影后期制作的流程得到了很大程度的提升。原来《长津湖》等特效大片,需要委托后期公司帮忙处理镜头,而通过此次《三星堆:未来启示录》的尝试,博纳发现在即梦 AI 等工具的加持之下,很多镜头和后期特效可以自己来做,成本控制上也更加游刃有余。

5.gif

图源:抖音《三星堆:未来启示录》

相比于传统影视制作,AI 生成重工业大场景以及虚幻元素等画面更为省力省钱省时间,让内容制作者的创作思路和设计理念落地的速度大大提升,释放了他们创作的想象力,也使得短剧内容有着更多的可能性。

例如《三星堆:未来启示录》中的角色生产、人物表演、生图设计、场景设计、镜头设计、分镜设计、对话场景等,都可以通过控制 AI 来生成,幕后创作人员不再需要逐帧制作、调整影像。

而结合生成式 AI 技术后,短剧在交互方向也有了更多的想象空间,比如用户观看过程中可以直接和剧中人物聊天、语音甚至视频对话。观众也能够参与到剧情中去,替主角做选择,掌握剧情的发展方向。

结语

对快手、抖音来说,短剧并非大体量的业务板块,但它们仍然坚持推出 AI 短剧产品,且给出大量现金流量扶持,不仅是抢占赛道,也是为了探索 AI 能达到的上限,不断提升和迭代技术,再向更多场景延伸。快手研究院执行院长蔡雄山就曾表示:“进一步做大做强国产文生视频大模型,可以充分发挥短视频直播行业的优势。”

随着 AI 技术的不断进化,未来我们将在广告、短视频、影视等各个领域看到 AI 视频的身影。

微信图片_20240207151541.png

微信图片_20240313155219.jpg

微信图片_20230104175528.jpg

扫一扫 在手机阅读、分享本文

扫码关注公众号

获取更多技术资讯

客服微信
享受1V1专属服务
免费领取技术福利
发送名片申请入群
与CTO聊合作
(备注姓名、公司及职位)
热门文章