7月份,抖音和快手各自的首部AIGC+短剧作品上线日,依托快手视频大模型可灵AI的技术上的支持的《山海奇镜之劈波斩浪》对外发布预告片。
7月8日,抖音的视频大模型即梦支持的AIGC科幻短剧集《三星堆:未来启示录》上线。
快手和抖音在支持AIGC作品方面开启同题竞赛。当视频大模型,慢慢的变多地应用到短剧以及广告作品中,对短剧、电影以及广告行业带来哪些影响?演员有没可能被AI替代?未来商业化应用有哪些可能?
21世纪经济报道记者专访了《山海奇镜之劈波斩浪》导演陈坤以及清华大学新闻与传播学院和
学院双聘教授沈阳,以及部分影视制作行业的从业者。在行业人士看来,目前AIGC在短剧以及一些广告片领域的商业化应用,慢慢的开始热起来,技术水平目前还存在AI幻觉的问题,比如角色“AI感”依旧存在,但参与者对未来技术水平的提升持乐观态度,未来穿帮镜头会慢慢的少。
陈坤是一名80后导演,网名“闲人一坤”,有20余年的电影行业从业经历,《山海奇镜之劈波斩浪》是他用AIGC创作的第一部短剧作品。对于AIGC在短剧制作的参与度,陈坤告诉21世纪经济报道记者,并非从剧本创作到最后剪辑都是AIGC完成的,
陈坤说,中期创作阶段,没有一点一个镜头是拍摄完成的,全部是文生视频和图生视频的工作流程生成出来的素材。影视制造业,过去常用的绿幕、CG技术,大多数表现在做背景、特效辅助上,而AIGC在影视制作行业的参与度更高,对行业提高效率和减少相关成本的作用更明显。
以降低人员成本为例,传统影视制作行业涉及庞大的人员团队,比如一个剧组可能会有上百人,如果用到AIGC技术,最重要的包含前期剧本创作,中期的“提示师”,
人员数量上能减少超过三分之二。陈坤还提到“提示师”这个工作,工作人需要用精准的词句提示加上图片,在大模型上生成视频,这应该是AIGC时代的一个新工种。
21世纪经济报道记者尝试在某视频大模型上创作短视频,多次尝试,效果一般,提示词的使用还是相当需要技巧。
沈阳教授告诉21世纪经济报道记者,AI提示词的使用,是有一定复杂度的,也是一门技术和学问。他总结了五项做一个好的“提示师”的素养,首先写提示语的人要理解语言哲学,二是要理解检索语言,三是要理解自然语言,四是要理解编程语言,五是要能理解
大模型的基础原理。陈坤介绍,目前从他的AIGC短剧制作经验来看,普通人在使用提示词不太顺利的原因,包括没有受过视听语言的训练,比如要了解远景、特写这些各是什么状况,另外操作者对画面风格的描述不够准确。
对于成片效果,陈坤表示,在制作的步骤中,可灵生成的有些镜头的效果让他感到惊喜。但毋庸置疑的是,AIGC在影视行业的应用还处在初级阶段,未来还有一个爬坡的过程,现在可能仅仅是爬到半山腰,未来半年到一年时间,应该会有更大的技术突破。
目前技术还存在的短板,他总结为四个方面的短板,一是人物的一致性,二是场景一致性,三是人物表演,四是动作交互。比如,人物角色戴一个细边的红色眼镜,下一镜头中该角色可能又戴上了宽边的眼镜。
,比如,AIGC作品中,一个人说话只有嘴在动,口型和面部的动态匹配度不那么高;比如一个拳头打到脸上,面部的反应和动作交互还不是特别好。
陈坤直言,但是他相信技术层面的问题,是能够最终靠技术迭代去解决,目前不管是大模型的训练量,还是其对现实世界的理解,都还需要一些时间积累。但可预期的是,AIGC在影视作品中的应用,就跟人们用PPT和EXCEL一样的普及,成为常见的工具。
在微短剧《山海奇镜之劈波斩浪》的制作的步骤,快手视频生产大模型可灵提供深度技术上的支持。陈坤没有透露这部快手定制的微短剧的合作细节。
,工作人员的参与人数是传统剧组的十分之一,能确定的是,降本增效明显。至于商业化收益,陈坤表示,目前这部短剧的尝试是一个探索,在快手上播放也是不收费的,暂时不考虑挣钱。未来如果和快手的可灵合作第二部、第三部微短剧的话,可能会去一起去探索一些新的商业化的路径。
7月份上线的AIGC科幻短剧集《三星堆:未来启示录》是由即梦AI作为首席技术上的支持主要负责其中的图生视频,即梦AI是抖音旗下生成式
创作平台。同样在7月份上线的《山海奇镜之劈波斩浪》是由快手视频生产大模型可灵支持。陈坤和记者说,从他接触的投资方来看,目前影视行业不太景气,但和AIGC相关的影视剧项目,受到投资方的关注度还是更高一些。近些年影视行业也“卷”入一个瓶颈阶段,
沈阳教授日常在朋友圈持续更新通过AIGC创作的作品,对国内外的视频大模型都有应用实践。沈阳介绍,在大模型领域,视频大模型是中国和全球水平差距最小的一个领域。目前AI幻觉在视频生成过程中都还不能够做到百分之百的消失,但是会慢慢的少,也就是说穿帮镜头会慢慢的变少。整体而言,人工智能技术将成为提升视听内容生产力的重要工具,AI与人类智慧的交织融合正在重塑视听艺术的边界。
在沈阳教授的团队近期创作的200余条AI视频中,人工智能辅助生成的选题方案已涵盖文史、科技、美食、旅行、
等多个垂直领域,人工智能帮助策划者快速获取灵感、系统化拓展思路,为视听内容策划与制作的“想什么”赋能,当人工智能技术进一步成熟之后,视听内容创作效率将提升百倍千倍。沈阳透露,目前已经稳定的效益产出,覆盖一些文旅单位和企事业单位。21世纪经济报道记者正常采访了多位短剧和电影行业的从业者,大多数对AIGC技术还处在观望阶段,暂未参与AIGC影视作品的计划。相对竖屏短剧来说,电影对视频质量发展要求更高,未来电影行业是否有可能用到AIGC技术?
7月11日,一位在美国洛杉矶的华人电影导演和记者说,在美国的同行也有关于生成式人工智能的讨论,但还没有产生一些现象级的AIGC作品。也有业内人士透露,国内某知名导演已经有专门的覆盖AIGC技术应用的团队,在开始探索生成式AI在电影行业的应用。