中央广播电视总台首部采用ai与真人演出相结合的剧情式微短剧《爱永无终止》播出后，令人耳目一新。全剧运用ai技术生成意向场景，画面唯美细腻，情节跌宕起伏，讲述了一个家庭面对突如其来的变故，通过人工智能手段制作数字人视频抚慰心灵的故事。引人注目的是，天津美术学院实验艺术学院学生团队刘泽、刘奕伽、章一沁、章凌泽在刘姝铭教授的带领下，全程参与了该剧ai生成的创意和制作工作。这项艺术实践是天津美院科技艺术专业在ai生成艺术上的行业探索，在此次制作过程中这个师生团队做出了怎样的探索？在ai生成艺术方面又积累了哪些宝贵的实践经验？天津日报记者对天津美术学院实验艺术学院科技艺术系刘姝铭教授进行了专访。
从空间场景到表情细节，丰富ai生成视频的枝丫
在微短剧《爱永无终止》中，男主人公宝华人过中年，是一位优秀的企业工程师，在去给老母亲庆祝钻石婚纪念日的途中为了救助他人不幸去世，宝华的儿子阿健和妻子桂英担心老人家承受不了如此巨大的打击，通过人工智能手段制作数字人视频抚慰亲人心灵，展现了一家三代亲情的坚韧和爱的无尽力量的故事。该剧由实力派演员苇青、陶慧敏、曹力、陈冠宁倾情加盟演出。
天津美术学院刘姝铭教授带领学生团队，在该剧中承担了一部分创作任务，包括利用aigc（人工智能生成内容）技术生成分镜脚本、空间场景、真人合影、虚拟道具、主客观空镜、片名logo等。团队使用aigc技术生成出意外去世的父亲的影像，借助科技弥补逝去的亲情，让爱在虚拟世界里永续，为该剧增添了浓厚的科技属性和人文内涵。
“创作伊始，我们先根据故事情节确定影片的视觉基调，故事发生在初春，那么，我们考虑到北方的这个季节整体的色调偏清冷，而南方此时的环境色调更温暖一些，我们把故事的环境设定为中国南方的某城市，随后开始收集与之相匹配的视觉参考图，最后与导演沟通确定下来整个短片的视觉调性。同时，这些图片也为后续的aigc生成提供了基础视觉依据。”刘姝铭教授介绍，“利用aigc生成空间场景，主要是匹配剧情中人物的故事线发展，根据剧情中人物的身份、年龄、职业、生活方式等生成相应的室内外场景和房间的家具物件陈设，包括家中客厅、厨房、卧室和医院走廊、病房，航拍的城市空间日夜景等，起到推动剧情发展，增加视觉表现力的作用。比如奶奶家的场景，我们经过反复生成、调试确定为南方小城的老房子，装修简朴，屋里会有一些老物件，符合老年人的生活场景。为后续的演员表演提供光线、构图、景别、道具、运镜等预演依托。”
为了满足拍摄和演员表演分镜与景别切换的需求，刘姝铭教授带领团队基于选定场景的正视图，在保持场景一致性的基础上进行不同景别、不同角度与不同时间的其他分镜场景的生成。实现了同一个场景的多景别背景套系生成。现阶段的aigc细节处理能力一般，为了追求细节一致性，同学们协同多个图像处理软件深加工，以达到精益求精的细节效果。
在创作过程中，需要为剧中的奶奶这个关键角色生成不同年龄段的照片，有年轻时的黑白照，还有在剧中为了庆祝奶奶的钻石婚，使用ai还原的奶奶年轻时的婚纱照。现实问题在于演员的年龄是不可逆的，传统剧组拍摄中都会请长相相近的不同年龄的演员，来饰演同一角色的不同人生阶段，但在aigc技术的辅助下，团队经过多次尝试和调整，最终只采用了演员的一张写真照，就生成了不同年代和年龄的照片。包括仅利用剧中男主人公宝华扮演者的肖像照和网络上的非洲工作照，生成出了宝华与非洲工人同框的工作照片。
ai辅助创作深入影视全流程，极大提高拍摄工作的容错度
刘姝铭教授曾连续多年在央视多部纪录片中参与虚拟影像的创意工作。然而，带领学生参与央视的节目制作，这还是第一次。今年四月初，胡朝晖导演在筹备央视总台首部“ai+真人”的剧情式微短剧《爱永无终止》之际，恰好了解到刘姝铭带领学生们进行有关aigc的教学实践，于是经过深入沟通后，双方最终达成了此次合作。刘姝铭教授介绍：“这个项目的工作流程不同于其他剧组，几乎没有可供参考的先例，其实验与探索价值不言而喻。天津美院青年学生具备较高的美术修养和创新能力，尤其是勇于尝试挑战的综合学习能力极强，这也是央视和导演组看中的，加之我与他们在多年合作中建立起来的专业度和默契度，多种机缘之下就促成了这次合作，我带领四位学生参与这个非常有挑战性的央视项目。”
在此次制作中，刘姝铭教授与学生团队面临了四点挑战。
第一点在于如何把aigc生成的虚拟影像应用到实拍的影视剧中，如何将两者有机地结合起来。对团队来说，乃至于对整个影视行业来说，aigc技术与真人实拍相结合的方式在国内尚属空白，央视更是首次探索，因此可以供团队参考的资料、实操经验相对欠缺。如何使aigc技术更好地介入影视行业的工作流程并进行融合与创新，团队面临着在过程中摸索、修正，甚至试错的挑战。
该团队面临的第二点挑战是，区别于传统拍摄的工作流程，以往摄像会有较大的创作发挥空间，现在摄像要高度配合ai生成场景的角度、景别、透视关系，以保证后期剪辑的流畅度。因此该团队需要逐渐摸索出与剧组各个工种高度嵌套式配合的工作模式。
第三点是如何将aigc生成的虚拟场景与真人实拍的镜头无缝结合，并且生成的场景要足够自然，符合人物本身的角色定位与整个剧本的背景设定。这就需要团队在实际生成场景之前，将不同的人物特征加以总结归纳，设计出不同人物出现场景的独特元素与特点。有了场景的设计方向之后，学生们通过不断调整aigc生成的参数，最终实现了人物实拍镜头和aigc生成镜头拥有较高匹配度的完美呈现。
第四点挑战就是创作时间非常紧迫，从进组开始软硬件准备，到与摄像、灯光、服装、道具、化妆全流程配合，直到后期剪辑，只有十天的时间。
刘姝铭表示：“通过同学们夜以继日的讨论与实践，我们最终摸索出了一套完善的工作流程，同时也引入了多种软件协作的方式，解决单一aigc技术在图像细节和画面一致性方面的缺陷。这套完善的工作流程在同学们的合理分工与配合的过程中，也大大提高了项目的制作效率，按时完成了制作任务。”
这项艺术实践在ai生成艺术方面积累了宝贵的实践经验，刘姝铭教授表示，“我们的工作，概括来说是探索在影视拍摄过程中全流程的ai辅助创作；积累了aigc技术在艺术表达之外的行业实践经验；探索了aigc技术与实拍相结合的多种可能性和工作流程；颠覆了传统置景需要大量道具和空间的现实局限性，在aigc技术的助力下，任何场景都可以更加高效地进行产出和更换，在拍摄过程中也能够实时看到最终的合成效果，极大提高了拍摄工作的容错度。”
“团队在aigc的艺术性和情感表达方面进行了积极探索，遵循更加细腻地呼应主人公心境的原则，充分发挥aigc技术天马行空的表现力和创造力，创作了多个主观空镜，通过添加符合角色情绪和心情的背景或主观空镜，强化主人公心绪的渲染。”
例如，在表现奶奶等待儿子到来的喜悦心情时，为进一步烘托温暖恬静的气氛，通过aigc技术，制作组在奶奶的床头生成了一只小猫并与奶奶互动，既符合人物的环境设定，又增加了镜头的灵动性。为了烘托阿建痛失父亲的悲伤心情，最终画面形成雨夜场景，雨夜的树影映在阿健的窗前，既增加了窗的寂寥意境，又烘托了阿健的形单影只，使观众与角色产生共鸣。而在奶奶渐渐释然了儿子去世的消息后，这时用窗外怒放的杏花寓意希望。
“通过这些探索，我们积累了许多宝贵的实践经验，如何优化ai生成参数、如何处理生成结果中的细节问题、如何与实拍素材进行融合等，这次实践经历也为我们未来的创作和研究奠定了坚实的基础。”刘姝铭教授说。
打破传统创作局限，创造新的视觉效果
天津美院实验艺术学院的科技艺术专业在为学生提供专业知识的同时，鼓励并践行将最新的科技手段与艺术创作理念有机结合，探索科技艺术更为多元的应用场域。在此次参与央视的制作实践中，更是取得了多方面的创新与超越。
“此次实践项目中，我们将aigc技术与传统的影视制作相结合，以后期前置的方式，打破了传统创作的局限，创造了新的视觉效果。在aigc技术的应用上，我们进行了多次优化和创新，尝试使用不同的软件技术，如图生图、图生视频、文生视频、针对性训练lora模型等手段，使得生成效果更加逼真和生动。同时，在艺术创作中，我们更加注重通过ai技术实现独特的艺术表达，使作品既具备技术优势，又富有艺术美感。”刘姝铭教授表示。
天津美术学院实验艺术学院2021级研究生刘泽是此次项目的主创成员之一，刘泽同学感慨道：“作为一名在数字媒体艺术领域持续创作的艺术实践者，时刻都在体会科技与艺术的关系，在这次aigc技术的实践中，我更加深刻地认识到了这一点：aigc与影视微短剧的碰撞已经远远超出‘1+1>2’的效应，甚至是对传统影视行业的工作流程带来几何倍数的效率提升。我们只需要以既定的剧本设定进行场景生成，在短短一到两天的时间内，就可以迭代出数十版方案，并且生成的图像只需要进行局部细节的微调就可以投入实际的影视合成工作中。对于此类微短剧领域资金预算不够充足的情况，aicg技术也将有着更大的发挥空间，这对我们传统工作流程的影响无疑是巨大的。”
“除了对场景成本的优化，aigc甚至在提升拍摄技巧与演员表演方面也有着很大的潜力。比如，在一场夜景实拍的车祸戏中，一位临时到位的群演老人要表演出被飞驰的汽车撞击前的惊恐表情，这一特写镜头需要通过演员的面部表情体现出当时状况的突发性和危机感。然而，在拍摄结束后，群演老人的表情并没有达到预想的表演感。由于时间等诸多原因，这段镜头也无法补拍。于是，团队成员提出了使用aigc的图生图技术，在原来画面的基础上进行优化。我们将群演表情的单帧画面提取出来，通过提示词优化了演员的面部表情，并且使用了人物一致性的功能尽可能保留演员原有的面部特征。最后，在几个版本的迭代后，一个非常生动的惊讶表情的面部特写就完成了。最终我们再通过图生视频的方式，将这一帧画面导出为一段特写镜头，完美解决了演员表情不到位的问题。”刘泽同学对此记忆犹新。
ai技术推动影视行业向智能化转型，科技艺术作品需要坚守情感与温度
如今ai技术与内容创作相结合的方式，打破了影像创作的传统界限，呈现出一种全新的视觉风格与叙事方式。目前在影视中使用ai技术是否已经成为一种不可阻挡的趋势？它未来的发展方向如何？
对此，刘姝铭教授认为，“在本次实践过程中，我们团队深切感受到aigc作为一股新的技术力量在赋能未来影视制作上的实力，它在特效制作、场景生成、实时预演等方面具有明显优势。而且节约了大量的人力、物力和时间成本，省去了辗转多地拍摄的舟车劳顿，同时，也打破了拍摄季节、拍摄场地和设备的限制，即使在冬天也能生成春天里燕子在枝头呢喃的场景，实现了最大程度的降本增效。而且，ai模型具有不间断地从海量数据中学习的能力，这为影视行业源源不断地提供新的灵感和思路，有助于创作更具有创新性和市场竞争力的作品。ai技术在影视行业的应用正推动整个产业向智能化转型。”
“当然，aigc赋能影视的技术局限性也是显而易见的，例如aigc技术的广泛应用可能会对部分从业人员造成就业压力,导致相关岗位被替代。另外，其所生成内容的相关版权问题也是亟待解决的。更为重要的是ai生成的内容可能在情感表达、创意独特性等方面存在不足。”
刘姝铭教授表示，影视创作自诞生以来历经一百多年之所以魅力不减，在于它承载了人类的情感与梦想，它是一门充满人文关怀和美学价值的艺术形式。aigc技术虽然能够提升制作效率和效果，然而假如未来所有的影视创作过程中，演员都在抠像绿幕环境中进行无真情实感的表演，观众都带着aigc虚拟生成的主观预设去观影，那么，影像还是那个承载无数人梦幻与情感的不可或缺的精神纽带吗？“因此，我认为科技越发达，我们越要坚守住科技艺术作品的情感与温度，深思科技人文，倡导科技向善，充满节制地利用aigc技术，在科技的外衣下小心翼翼地保护好人类亘古弥新的道德与情感，方为科技进步造福人类的初衷之所在。”（天津日报记者：郭晓莹）
