中國首個aigc導演共創計劃將於12月6日正式上線。該計劃由快手自研視頻生成大模型產品「可靈ai」,聯合李少紅、賈樟柯、葉錦添、薛曉路、俞白眉、董潤年、張吃魚、王子川、王卯卯等9位知名導演共同發起。12月3日,快手發佈了「可靈ai導演共創計劃」的預告片,並公布了9部aigc電影短片的片名,題材涵蓋奇幻、志怪、親情、動畫等多元類型。
可靈ai導演合作計劃定檔海報
這9部具有實驗性質的電影短片,全部使用可靈ai進行視頻生成,電影導演完全依託視頻生成大模型,群體深度參與電影級內容創作,這在中國尚屬首次。「可靈ai導演共創計劃」的上線,不僅是一次新技術對影視創作和製作邊界的積極探索,也讓aigc技術深度參與影視內容生產的路線圖更加清晰。
隨着視頻生成大模型技術的發展,新技術、新工具有望促進產業融合,重構生產流程,推動內容創意產業革新,已經成為共識。
可靈ai自6月6日發佈以來,截至11月20日已累計服務超500萬用戶,生成5100萬個視頻和1.5億張圖片。國內首部aigc原創奇幻短劇《山海奇鏡之劈波斬浪》,由可靈ai提供深度技術支持,7月13日上線後15天內就實現正片5集播放量超過5200萬,全網話題曝光量超4.3億。9月9日,快手聯合9位知名導演發起「可靈ai導演共創計劃」,挑戰全部使用可靈ai生成電影級視頻內容。影視行業的每一次探索,都在拓寬視頻生成技術給影視創作帶來的想像力。
《年會不能停!》的編劇、導演董潤年在加入「可靈ai共創計劃」後,選擇創作一個在「新世界」中發生的奇幻故事,這是他過往創作生涯中幾乎沒有嘗試過的類型。「當我用各種各樣的語言描述給ai一個世界以後,ai根據我的描述呈現世界的方式與我的想像完全不一樣,它有它自己獨到的邏輯。這鼓勵我去嘗試我設想過但還沒有表達過的故事。我傾向於認為這是一種跟ai的合作,而不是簡單地使用一種工具。」董潤年說。
《獨行月球》的導演張吃魚則從知名科幻小說作者天瑞說符的作品《保衛南山公園》中獲得靈感,以重慶為故事背景創作了科幻電影短片《最後的防線》。在畫面生成過程中,主角在巨大的機械人頭頂擺桌子吃火鍋的鏡頭令人印象深刻。
張吃魚說,傳統電影生產流程中,這樣的鏡頭雖然也能實現,但要麼需要耗資巨大的置景,要麼通過需要藉助綠幕完成後期製作。而依託可靈ai的技術,可以用一種效率更高的工作流迅速將腦中的想法落實為具體的影像。
作為首個面向全球公眾開放測試的視頻生成大模型,可靈ai持續進行技術迭代和產品升級,在全球視頻生成大模型中持續保持領先。自6月6日發佈以來,可靈ai已經進行了十餘次功能升級,上線了1.5版本基礎模型,並推出了獨立app。
賈樟柯導演在創作生涯中首次嘗試讓機械人擔任影片主角,他面臨的最大技術挑戰是人物一致性。人物臉部特徵難以保持,是視頻生成大模型領域的一個關鍵難題。在「可靈ai導演共創計劃」製作期間,可靈ai推出了視頻人臉訓練模型功能。只用極少的視頻素材,就可以訓練出專屬的人臉模型,解決了以往ai視頻生成中無法塑造穩定人物的難題。基於這樣的新功能,導演團隊最終選擇以「長着人臉」的仿生機械人作為主角,順利完成了這部時長6分鐘的硅基人公路片。
此外,賈樟柯導演還應用了可靈ai新推出的「對口型」功能,並挑戰了「對口型」功能講方言的能力,該功能支持用戶在生成人物視頻後上傳音頻,並將音頻內容與視頻人物嘴型同步,以滿足影視創作中人物對白的基本需要。自嘲用普通話不會寫劇本的賈樟柯,在自己首部aigc電影短片《麥收》中,成功讓機械人說上了山西汾陽話。
影視文娛領域是aigc應用落地最快的領域之一,包括可靈ai在內的技術革新,正在極大地降低視頻內容製作的門檻,提升內容生產的效率。業內人士預測,隨着視覺生成大模型技術的不斷突破,未來一至兩年,在aigc領域有望落地影視工業級的生產工具,並規模化應用。
以可靈ai為代表的視覺大模型及產品將逐漸成為視覺行業的新基建和新工具。「可靈ai導演共創計劃」,旨在通過aigc製作電影級內容的探索,推動人文藝術與aigc技術的深度融合,讓人與ai共創成為新的創作形式和趨勢。
「電影創作的核心始終是人類的情感與思想」,參與可靈ai導演共創計劃的aigc應用師溫維斯認為,「ai為我們提供了前所未有的創作工具,讓我們能夠以前所未有的方式去講述故事,去表達情感」。
李少紅導演在職業生涯中經歷了從膠片時代向數字時代的技術飛躍,她將「可靈ai導演共創計劃」稱為一場實驗,她希望能通過這場實驗,找到人類作為創作者與不斷突破的ai技術之間如何共處的答案。「我覺得ai目前來講更多地可能是一個工具,它會非常有助於我們創作。」李少紅說。
快手科技副總裁、大模型團隊負責人張迪坦言,作為新技術、新應用,目前用戶對可靈ai這個新物種比較包容。未來快手會堅持在大模型方向的技術投入與創新,堅持在真場景中挖掘真價值,滿足用戶的真需求。
「在『可靈ai導演計劃』中,我們看到了人與ai在共創過程中的創意激發,也看到了應用瓶頸。希望可靈ai能在未來一年時間裏真正成為一個成熟的創作工具,能夠成為更多普通用戶的創意工具,能夠真正在影視級場景中大規模應用」。張迪還透露,可靈ai還將升級合作模式,針對影視行業提供更加個性化的企業級定製服務,以更好地服務於影視行業的產業智能化升級。