快手抖音争相上菜,AI短剧为什么会成为抢手货?

07-18 22:42

在汹涌澎湃的大海中,古代所有的神灵都出现了。渔村少年李行舟漂洋过海,与鱼搏斗,与水神戟搏斗,在海底游泳,拯救美人鱼,与九婴搏斗,最终带着母亲和村民涉海回家。


这是一部以《山海经》为背景的少年冒险奇幻剧——独特之处在于,主角、配角、妖兽、奇观都是AI生成的,剧情都是通过文生图片、图生视频完成的,但其效果并不逊色于电影的CG特效。自7月13日在Aautorapper上映以来,播放量已经超过600万。


从去年开始,短剧的热风吹进了今年,新的生产方式的出现将为这股热风再添一把火。


艺恩数据预测,2023年短剧客户规模超过5亿,短剧市场规模近400亿,接近电影市场70%。预计五年内市场规模将超过1000亿元。借助AI大模型视频的生成能力,短剧的生产速度正在加快。现在这三个月的制作时间只有半个月,短剧的主题也在扩大。幻想、科幻、穿越等主题越来越多。


它的背后是AI视频生成模型的快速发展。自年初Sora爆红以来,中国市场也出现了大量的AI视频生成模式:抖音的即梦AI、快手的可灵AI、PixVerser爱诗科技 、WHEE美图、Vidu共同发布的清华大学联合生数科技、Pixeling智象未来推出、右脑技术的VegaAI…所有镜头都是AI制作的短剧,是大模型应用的核心场景。


大模型给短剧行业带来了什么概率?AI短剧能成为单独的跑道吗?目前AI和短剧的融合有哪些限制?亿邦电力采访了短剧导演、平台负责人、AIGC创作者等。,并试图回答这些问题。


AI短剧,开启进入魔幻世界的新方法


不妨先来感受一下AI短剧的画面效果。


鱼身而鸟翼,声如鸳鸯,见则该邑洪水”:


参考《红楼梦》的风月宝鉴,也是《山海奇镜劈波斩浪》中的“镜子”:


大反派九婴, 「其状如牛而龙尾,九首,能洒水吐火,其声如婴儿,见则该邑洪水」:


电影院播放《山海奇镜之劈波斩浪》时,大屏幕上的大特写细致真实——海洋时而波涛如怒,时而遥远壮阔,妖兽时而遮天蔽日,凶狠残忍,古代神灵动或静,光滑流畅,老人沧桑的眼神和少年挣扎的表情在大屏幕上显露出来。


虽然导演陈坤多次指出,AI在视频生成过程中擅长奇观和妖兽的形成,不擅长人物表情和人物互动的生成,但《山海奇镜之劈波斩浪》中人物的面部特写依然可以承载大屏幕。


导演陈坤(AKA闲人一坤)是一个传统的影视人,工作了20多年。目前,他已经转型为AI电影。这是他推出的第一部AI短剧,所有镜头都是由Aautorapper的灵魂AI生成的。


据他介绍,《山海奇镜之劈波斩浪》于2023年12月成立,第一版于2024年5月完成,但团队对效果并不满意,“要么是PPT动画,要么是无法与背景完美结合。因此,他们试图使用ComfyUI来构建工作流程(一个基于节点的工作流程,将平稳扩散的过程转化为多个节点,实现准确的定制和可靠的再现),甚至想到了绿色屏幕的捕捉和绘制,但无论他们如何抽卡和编辑,他们总是达不到预期的效果。


六月七日可灵AI上线后,陈坤成为第一批试用者。在可灵AI完成的第一批镜头中,有一个场景是水神一起从山上站起来。只有通过图片和提示,他们才能一起完成仰头、挺胸、起身、站立的流畅画面,其中肌肉紧绷、头发飞舞、岩石破碎,效果真实。“这个镜头非常符合我们提示的要求,也非常符合物理定律。与之前的微调参数值不同,当我看到这个效果时,我意识到它是颠覆性的。”陈坤回忆道。



基于这种效果,陈坤决定所有的镜头都由可灵AI重新生成,然后重新编辑,重新制作音乐。“镜头重新生成并再次编辑,我们团队共有十几个人,半个月就完成了。”陈坤介绍。


由抖音联合博纳影业AIGMS制作的科幻短剧《三星堆:未来启示录》最近在抖音里线使用了抖音的即梦AI。



这部科幻短剧不仅有机甲大战和末日灾难,还有主角团穿越到中国古代。在竹海环绕的中国庭院里,与高冠博带的古蜀国人一起,揭开青铜神树的秘密,探索文明兴亡的奥秘。


《三星堆:未来启示录》成立于2022年,计划于2023年底。博纳电影制作总监、博纳AIGMS制作中心负责人曲吉小江表示,以最快的速度推出这部剧的目的之一就是让行业看到当前AI技术的极限是什么,未来的概率是什么。


曲吉小江发现:“现在的观众对AI影视的内容实际上充满了好奇和期待。目前AI创作的短视频片段一经发布就能获得百万流量的支持。观众仍然期待看到更震撼的视觉效果和更智能的视觉体验


截至目前,《山海奇镜之劈波斩浪》已更新4集,快手播放量677.3万,《三星堆:未来启示录》更新9集,抖音播放量1942.1万。


6月底,由中央广播电视总台影视剧纪录片中心制作的三部AI短剧《英雄》,除了抖音和快手的积极布局外,、爱情永远不会结束。、《奇幻专卖店》在央视上线。


《英雄》:讲述了一位普通人“胖子”跨越时空界限,与汉代著名将领霍去病并肩作战的成长故事。


爱情永远不会结束。:通过AI 真实的人,讲述了一个年轻人用AI技术创造了一个意外死亡的父亲形象,从而抚慰奶奶心灵的温暖故事。


《奇幻专卖店》:通过AI产生的虚拟形象和动物,科幻萌宠主题讲述了一个寻找与被发现、爱与被爱的故事。


另外,还有待播短剧:


美丽的西西里传说:悬疑 情感,主角穿行古今,逆风翻盘。


AI如果是AI的话:科幻 文旅提出了一个关于人工智能发展、现实与虚拟的界限、人类情感的复杂性和希望与绝望的对抗的故事。


《大宋喵喵志》:奇幻 滑稽,围绕拥有远大抱负的现代猫和宋代书生的滑稽生活,将宋代的社会风貌与宠物生活相结合。


可以看出,AI短剧侧重于科幻、玄幻等内容主题。“因为这两条跑道在过去的影视制作中受到CG特效成本高、周期长的限制,观众需求强,但供给弱。AI短剧最容易发挥自己的特长,在这个领域得到观众的认可。”陈坤指出。


与此同时,“中国文化”也成为AI短剧的关键词——深厚的历史积淀、悠久的奇异传奇、自身的文化影响力、丰富的文化主题和神秘元素,也为短剧行业带来了高质量的内容增量。


三国争霸的视频模型,AI短剧等临界点。


在AI短剧的背后,是今年能力突飞猛进的视频生成模式。


根据博纳影业AIGMS公众号,“三星堆:未来启示录”的定制化工作流程如下:


AI创意和文本创作:大语言模型(LLM)


视觉概念和分镜设计:变化模(Transformer Model)、从文本到图像生成(Text-to-Image Generation)


生成镜头画面:扩散模型(Diffusion Models)、产生对抗网络(GANs)、风格迁移(Style Transfer)、深度学习(Deep Learning)


提高图像质量:超分辨率技术 (Super-Resolution)


将图像转换为视频:时序生成模型 (Sequential Generative Models)


增强视频剪辑和媒体内容:自动化视频编辑算法 (Automated Video Editing Algorithms)


从文字到语音合成:语音合成技术 (Text-to-Speech Synthesis, TTS)


从文字到音乐创作:AI产生音乐 (Music Generation AI)


即梦AI相关负责人在《三星堆:未来启示录》观看会上表示,在这次合作过程中,即梦AI改进了“视频生成”的功能,包括支持24fps、30fps、补帧60fps,超分两倍的能力,新增镜头水平移动,上下移动,支持镜头移动的方向和幅度控制等。


2024年被视为“视频模型第一年”,年初Sora爆炸(点击阅读Sora爆炸,AI电商开启新世界之门),引发全球AI视频飓风,海外Runway、Pika、在Luma战争中,国内互联网公司和独角兽公司一起上阵,学习Sora的DiT架构,增加头尾帧控制、镜头控制、运动控制等功能,提高视频生成时间和质量。


"Runway去年8月带火了Diffusion。 UNet架构,世界上数百家视频生成公司开始使用这种架构。今年,Sora点燃了Diffusion。 目前国内大约有67个DiT架构,年底估计能跑出20多个Transformer架构。”运营AIGC创作者社区的宋东桓观察到。


"现在的视频模型正处于三国争霸状态。Runway发布了一个Motion。 Brush(用于视频内容控制的运动笔刷),PixVerse也是Magic。 Brush。一个模型率先推出超清功能,其他同行会立即跟进。每一个工具都在拼命追逐,想给创作者更多的工具。”陈坤指出。


此前,AI视频模型多用于电子商务素材营销(点击阅读AI视频爆发!一天10万,冲进TiktokAautorapper小红书)。随着短剧的流行,AI视频模型也大量进入短剧领域。


AIGC在创作者看来,不仅可以降低成本,而且可以创造“不可能”。


宋东桓观察到,AI可以帮助创作者制作同样的内容,并将成本降低十分之一,而制作成本一般在几万到几十万的动画剧中。


尝试使用3D协助宋东桓 DiT头尾帧可以实现转绘以外的另一种低成本、精准控制画面的效果,比转绘更聪明。“创作者不需要会做动画或者动画,只需要会做参考图就可以制作视频,进一步降低了创作者的创作门槛。”


通过“3D协助”宋东桓 制作DiT头尾帧(受访者提供)


曲吉小江认为,AI也可以创造全新的视觉体验,比如将电影转化为互动形式,观众可以在观看过程中做出决定,决定故事的发展方向。它还可以让剧中的人物逆势成长,产生高度逼真的虚拟人物,给创作带来更多的可能性。


然而,对创作者而言,他们的创作仍然受到当前技术上限的限制。


陈坤提及,当前AI技术的不足之处在于:人物一致性、场景一致性、人物表演、动作交互和运动范围。“由于技术限制,我们没有讲一个非常复杂的故事,也没有融入很多角色的表演。不是编剧写不出来,而是在目前的技术标准下做不好。我觉得不适合呈现一个非常复杂的故事,大家很容易理解。”


陈坤分析说:“我们在技术极限上反复横跳。”但是许多人看到的并不完美,我看到的正是无限的可能性。


AIGC 短剧,扛起平台半边天


”“在快手上,每天观看超过10集的重度短剧用户达到9400万,短片供应严重不足,我们也希望提高产能,有两种方法:一是增加创作者,二是提高创作者的生产效率。”在看电影《山海奇镜之劈波斩浪》的会上,快手娱乐业务负责人陈游说。


快手曾透露,2023年快手短剧日活跃用户2.7亿,平均日消费时间2小时,短剧内容创作者超过10万,短剧300多部。根据抖音的官方数据,2023年有500部短剧超过1亿部,其中12部超过10亿部,每天翻了一番。


作为试水之作,《山海奇镜之劈波斩浪》和《三星堆:未来启示录》不仅为短剧跑道增添了新内容,也为创作者提供了提高生产力的新工具。


新题材、新表现手法,如科幻、末世、古代传说,为短剧的发展带来了新的创作灵感和内容增量。《西西里的美丽传说》导演徐卓认为,随着观众群体的扩大和审美需求的提高,不仅需要主题和故事的创新,还需要系统的表达方式。在AI的帮助下,微剧的制作水平将得到全面提高。AI技术将开启微剧3.0时代。


除了增加主题类型外,今年年初,快手短剧还尝试了创意游戏玩法,利用AIGC工具的实时互动和身临其境的特点,激发用户互动的兴趣,吸引20多万用户参与。在收到良好反馈后,快手在3月举行的第11届在线视听会议上提出了“微短剧” AI“概念,以智能、高效的技术能力重塑星芒短剧的内容力。


与2023年短剧市场的井喷相比,2024年短剧已经开始向标准化、高质量发展。“早期付费剧的流量红利已经消失,长期内容收入才刚刚开始。”一些从业者说。


经过几年的发展,微剧已经基本形成了分工明确、阶段完善的产业链——上游是剧本创意、拍摄制作、控制约束;中游是内容分发,包括平台整合、购买量、分发等。下游是内容消费,包括在线播放、观看和观看后的充值消费。


然而,AI短剧仍然是一个新事物。陈坤、宋东桓和陈游不确定它是否能成为一个独立的跑道。如果你想成为一个独立的跑道,内容是否可以规模化,客户是否喜欢看,是否有商业模式,这些都需要验证。


AI短剧的商业模式也与传统短剧一致,包括广告推广、付费充值、版权分账、电商带货四种方式,其中B端广告推广和C端付费充值是实现微短剧最重要的来源。to B的品牌定制、广告植入、IP合作都是完善的商业模式,C端市场需要爆款。“现在一切都准备好了,只需要东风,只需要一部爆款作品就能打通C端消费的路径。”宋东桓说。


曲吉小江认为,假如这部剧能实现超过1亿的播放量,就会感受到商业化的门槛。。第2季可以采取付费模式,将来AI技术足够成熟之后,也有可能将AIGC作品搬到大银幕上。


陈坤还表示,第一部AI短剧只是一个探索,暂时不考虑赚钱。如果以后和可灵AI合作第二部和第三部微剧,可以一起探索一些新的商业化路径。


本文来自微信微信官方账号“亿邦动力”(ID:iebrun),作者:胡镤心,36氪经授权发布。


本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com