中國(guó)首個(gè)AIGC導(dǎo)演共創(chuàng)計(jì)劃將于12月6日正式上線,。該計(jì)劃由快手自研視頻生成大模型產(chǎn)品“可靈AI”,，聯(lián)合李少紅,、賈樟柯、葉錦添,、薛曉路,、俞白眉、董潤(rùn)年,、張吃魚(yú),、王子川、王卯卯等9位知名導(dǎo)演共同發(fā)起,。12月3日,，快手發(fā)布了“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的預(yù)告片，并公布了9部AIGC電影短片的片名,，題材涵蓋奇幻,、志怪、親情,、動(dòng)畫(huà)等多元類(lèi)型,。
圖 1 可靈AI導(dǎo)演合作計(jì)劃定檔海報(bào)
這9部具有實(shí)驗(yàn)性質(zhì)的電影短片，全部使用可靈AI進(jìn)行視頻生成,，電影導(dǎo)演完全依托視頻生成大模型,，群體深度參與電影級(jí)內(nèi)容創(chuàng)作，這在中國(guó)尚屬首次,。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的上線,，不僅是一次新技術(shù)對(duì)影視創(chuàng)作和制作邊界的積極探索，也讓AIGC技術(shù)深度參與影視內(nèi)容生產(chǎn)的路線圖更加清晰,。
視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力
隨著視頻生成大模型技術(shù)的發(fā)展,，新技術(shù)、新工具有望促進(jìn)產(chǎn)業(yè)融合,，重構(gòu)生產(chǎn)流程,，推動(dòng)內(nèi)容創(chuàng)意產(chǎn)業(yè)革新，已經(jīng)成為共識(shí),。
可靈AI自6月6日發(fā)布以來(lái),，截至11月20日已累計(jì)服務(wù)超500萬(wàn)用戶(hù)，生成5100萬(wàn)個(gè)視頻和1.5億張圖片,。國(guó)內(nèi)首部AIGC原創(chuàng)奇幻短劇《山海奇鏡之劈波斬浪》,，由可靈AI提供深度技術(shù)支持，7月13日上線后15天內(nèi)就實(shí)現(xiàn)正片5集播放量超過(guò)5200萬(wàn),，全網(wǎng)話題曝光量超4.3億,。9月9日，快手聯(lián)合9位知名導(dǎo)演發(fā)起“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”,，挑戰(zhàn)全部使用可靈AI生成電影級(jí)視頻內(nèi)容,。影視行業(yè)的每一次探索,，都在拓寬視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力。
《年會(huì)不能停,！》的編劇,、導(dǎo)演董潤(rùn)年在加入“可靈AI共創(chuàng)計(jì)劃”后，選擇創(chuàng)作一個(gè)在“新世界”中發(fā)生的奇幻故事,，這是他過(guò)往創(chuàng)作生涯中幾乎沒(méi)有嘗試過(guò)的類(lèi)型。“當(dāng)我用各種各樣的語(yǔ)言描述給AI一個(gè)世界以后,，AI根據(jù)我的描述呈現(xiàn)世界的方式與我的想象完全不一樣,，它有它自己獨(dú)到的邏輯。這鼓勵(lì)我去嘗試我設(shè)想過(guò)但還沒(méi)有表達(dá)過(guò)的故事,。我傾向于認(rèn)為這是一種跟AI的合作,，而不是簡(jiǎn)單地使用一種工具。”董潤(rùn)年說(shuō),。
《獨(dú)行月球》的導(dǎo)演張吃魚(yú)則從知名科幻小說(shuō)作者天瑞說(shuō)符的作品《保衛(wèi)南山公園》中獲得靈感,，以重慶為故事背景創(chuàng)作了科幻電影短片《最后的防線》。在畫(huà)面生成過(guò)程中,，主角在巨大的機(jī)器人頭頂擺桌子吃火鍋的鏡頭令人印象深刻,。
張吃魚(yú)說(shuō)，傳統(tǒng)電影生產(chǎn)流程中,，這樣的鏡頭雖然也能實(shí)現(xiàn),，但要么需要耗資巨大的置景，要么通過(guò)需要借助綠幕完成后期制作,。而依托可靈AI的技術(shù),，可以用一種效率更高的工作流迅速將腦中的想法落實(shí)為具體的影像。
產(chǎn)品升級(jí)迭代和產(chǎn)業(yè)應(yīng)用需求同步
作為首個(gè)面向全球公眾開(kāi)放測(cè)試的視頻生成大模型,，可靈AI持續(xù)進(jìn)行技術(shù)迭代和產(chǎn)品升級(jí),，在全球視頻生成大模型中持續(xù)保持領(lǐng)先。自6月6日發(fā)布以來(lái),，可靈AI已經(jīng)進(jìn)行了十余次功能升級(jí),，上線了1.5版本基礎(chǔ)模型，并推出了獨(dú)立App,。
賈樟柯導(dǎo)演在創(chuàng)作生涯中首次嘗試讓機(jī)器人擔(dān)任影片主角,，他面臨的最大技術(shù)挑戰(zhàn)是人物一致性。人物臉部特征難以保持,，是視頻生成大模型領(lǐng)域的一個(gè)關(guān)鍵難題,。在“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”制作期間，可靈AI推出了視頻人臉訓(xùn)練模型功能,。只用極少的視頻素材,，就可以訓(xùn)練出專(zhuān)屬的人臉模型,，解決了以往AI視頻生成中無(wú)法塑造穩(wěn)定人物的難題?；谶@樣的新功能,，導(dǎo)演團(tuán)隊(duì)最終選擇以“長(zhǎng)著人臉”的仿生機(jī)器人作為主角，順利完成了這部時(shí)長(zhǎng)6分鐘的硅基人公路片,。
此外,，賈樟柯導(dǎo)演還應(yīng)用了可靈AI新推出的“對(duì)口型”功能，并挑戰(zhàn)了“對(duì)口型”功能講方言的能力,，該功能支持用戶(hù)在生成人物視頻后上傳音頻,，并將音頻內(nèi)容與視頻人物嘴型同步，以滿(mǎn)足影視創(chuàng)作中人物對(duì)白的基本需要,。自嘲用普通話不會(huì)寫(xiě)劇本的賈樟柯,，在自己首部AIGC電影短片《麥?zhǔn)铡分校晒ψ寵C(jī)器人說(shuō)上了山西汾陽(yáng)話,。
人與AI共創(chuàng)將成為新的創(chuàng)作形式
影視文娛領(lǐng)域是AIGC應(yīng)用落地最快的領(lǐng)域之一,，包括可靈AI在內(nèi)的技術(shù)革新，正在極大地降低視頻內(nèi)容制作的門(mén)檻,，提升內(nèi)容生產(chǎn)的效率,。業(yè)內(nèi)人士預(yù)測(cè)，隨著視覺(jué)生成大模型技術(shù)的不斷突破,，未來(lái)一至兩年,，在AIGC領(lǐng)域有望落地影視工業(yè)級(jí)的生產(chǎn)工具，并規(guī)?；瘧?yīng)用,。
以可靈AI為代表的視覺(jué)大模型及產(chǎn)品將逐漸成為視覺(jué)行業(yè)的新基建和新工具。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”,，旨在通過(guò)AIGC制作電影級(jí)內(nèi)容的探索,，推動(dòng)人文藝術(shù)與AIGC技術(shù)的深度融合，讓人與AI共創(chuàng)成為新的創(chuàng)作形式和趨勢(shì),。
“電影創(chuàng)作的核心始終是人類(lèi)的情感與思想”,，參與可靈AI導(dǎo)演共創(chuàng)計(jì)劃的AIGC應(yīng)用師溫維斯認(rèn)為，“AI為我們提供了前所未有的創(chuàng)作工具,，讓我們能夠以前所未有的方式去講述故事,，去表達(dá)情感”。
李少紅導(dǎo)演在職業(yè)生涯中經(jīng)歷了從膠片時(shí)代向數(shù)字時(shí)代的技術(shù)飛躍,，她將“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”稱(chēng)為一場(chǎng)實(shí)驗(yàn),，她希望能通過(guò)這場(chǎng)實(shí)驗(yàn)，找到人類(lèi)作為創(chuàng)作者與不斷突破的AI技術(shù)之間如何共處的答案,。“我覺(jué)得AI目前來(lái)講更多地可能是一個(gè)工具,，它會(huì)非常有助于我們創(chuàng)作,。”李少紅說(shuō)。
快手科技副總裁,、大模型團(tuán)隊(duì)負(fù)責(zé)人張迪坦言,，作為新技術(shù)、新應(yīng)用,，目前用戶(hù)對(duì)可靈AI這個(gè)新物種比較包容,。未來(lái)快手會(huì)堅(jiān)持在大模型方向的技術(shù)投入與創(chuàng)新，堅(jiān)持在真場(chǎng)景中挖掘真價(jià)值,，滿(mǎn)足用戶(hù)的真需求,。
“在‘可靈AI導(dǎo)演計(jì)劃’中，我們看到了人與AI在共創(chuàng)過(guò)程中的創(chuàng)意激發(fā),，也看到了應(yīng)用瓶頸。希望可靈AI能在未來(lái)一年時(shí)間里真正成為一個(gè)成熟的創(chuàng)作工具,，能夠成為更多普通用戶(hù)的創(chuàng)意工具,，能夠真正在影視級(jí)場(chǎng)景中大規(guī)模應(yīng)用”。張迪還透露,，可靈AI還將升級(jí)合作模式,，針對(duì)影視行業(yè)提供更加個(gè)性化的企業(yè)級(jí)定制服務(wù)，以更好地服務(wù)于影視行業(yè)的產(chǎn)業(yè)智能化升級(jí),。
圖 1 可靈AI導(dǎo)演合作計(jì)劃定檔海報(bào)
這9部具有實(shí)驗(yàn)性質(zhì)的電影短片，全部使用可靈AI進(jìn)行視頻生成,，電影導(dǎo)演完全依托視頻生成大模型,，群體深度參與電影級(jí)內(nèi)容創(chuàng)作，這在中國(guó)尚屬首次,。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的上線,，不僅是一次新技術(shù)對(duì)影視創(chuàng)作和制作邊界的積極探索，也讓AIGC技術(shù)深度參與影視內(nèi)容生產(chǎn)的路線圖更加清晰,。
視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力
隨著視頻生成大模型技術(shù)的發(fā)展,，新技術(shù)、新工具有望促進(jìn)產(chǎn)業(yè)融合,，重構(gòu)生產(chǎn)流程,，推動(dòng)內(nèi)容創(chuàng)意產(chǎn)業(yè)革新，已經(jīng)成為共識(shí),。
可靈AI自6月6日發(fā)布以來(lái),，截至11月20日已累計(jì)服務(wù)超500萬(wàn)用戶(hù)，生成5100萬(wàn)個(gè)視頻和1.5億張圖片,。國(guó)內(nèi)首部AIGC原創(chuàng)奇幻短劇《山海奇鏡之劈波斬浪》,，由可靈AI提供深度技術(shù)支持，7月13日上線后15天內(nèi)就實(shí)現(xiàn)正片5集播放量超過(guò)5200萬(wàn),，全網(wǎng)話題曝光量超4.3億,。9月9日，快手聯(lián)合9位知名導(dǎo)演發(fā)起“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”,，挑戰(zhàn)全部使用可靈AI生成電影級(jí)視頻內(nèi)容,。影視行業(yè)的每一次探索,，都在拓寬視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力。
《年會(huì)不能停,！》的編劇,、導(dǎo)演董潤(rùn)年在加入“可靈AI共創(chuàng)計(jì)劃”后，選擇創(chuàng)作一個(gè)在“新世界”中發(fā)生的奇幻故事,，這是他過(guò)往創(chuàng)作生涯中幾乎沒(méi)有嘗試過(guò)的類(lèi)型。“當(dāng)我用各種各樣的語(yǔ)言描述給AI一個(gè)世界以后,，AI根據(jù)我的描述呈現(xiàn)世界的方式與我的想象完全不一樣,，它有它自己獨(dú)到的邏輯。這鼓勵(lì)我去嘗試我設(shè)想過(guò)但還沒(méi)有表達(dá)過(guò)的故事,。我傾向于認(rèn)為這是一種跟AI的合作,，而不是簡(jiǎn)單地使用一種工具。”董潤(rùn)年說(shuō),。
《獨(dú)行月球》的導(dǎo)演張吃魚(yú)則從知名科幻小說(shuō)作者天瑞說(shuō)符的作品《保衛(wèi)南山公園》中獲得靈感,，以重慶為故事背景創(chuàng)作了科幻電影短片《最后的防線》。在畫(huà)面生成過(guò)程中,，主角在巨大的機(jī)器人頭頂擺桌子吃火鍋的鏡頭令人印象深刻,。
張吃魚(yú)說(shuō)，傳統(tǒng)電影生產(chǎn)流程中,，這樣的鏡頭雖然也能實(shí)現(xiàn),，但要么需要耗資巨大的置景，要么通過(guò)需要借助綠幕完成后期制作,。而依托可靈AI的技術(shù),，可以用一種效率更高的工作流迅速將腦中的想法落實(shí)為具體的影像。
產(chǎn)品升級(jí)迭代和產(chǎn)業(yè)應(yīng)用需求同步
作為首個(gè)面向全球公眾開(kāi)放測(cè)試的視頻生成大模型,，可靈AI持續(xù)進(jìn)行技術(shù)迭代和產(chǎn)品升級(jí),，在全球視頻生成大模型中持續(xù)保持領(lǐng)先。自6月6日發(fā)布以來(lái),，可靈AI已經(jīng)進(jìn)行了十余次功能升級(jí),，上線了1.5版本基礎(chǔ)模型，并推出了獨(dú)立App,。
賈樟柯導(dǎo)演在創(chuàng)作生涯中首次嘗試讓機(jī)器人擔(dān)任影片主角,，他面臨的最大技術(shù)挑戰(zhàn)是人物一致性。人物臉部特征難以保持,，是視頻生成大模型領(lǐng)域的一個(gè)關(guān)鍵難題,。在“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”制作期間，可靈AI推出了視頻人臉訓(xùn)練模型功能,。只用極少的視頻素材,，就可以訓(xùn)練出專(zhuān)屬的人臉模型,，解決了以往AI視頻生成中無(wú)法塑造穩(wěn)定人物的難題?；谶@樣的新功能,，導(dǎo)演團(tuán)隊(duì)最終選擇以“長(zhǎng)著人臉”的仿生機(jī)器人作為主角，順利完成了這部時(shí)長(zhǎng)6分鐘的硅基人公路片,。
此外,，賈樟柯導(dǎo)演還應(yīng)用了可靈AI新推出的“對(duì)口型”功能，并挑戰(zhàn)了“對(duì)口型”功能講方言的能力,，該功能支持用戶(hù)在生成人物視頻后上傳音頻,，并將音頻內(nèi)容與視頻人物嘴型同步，以滿(mǎn)足影視創(chuàng)作中人物對(duì)白的基本需要,。自嘲用普通話不會(huì)寫(xiě)劇本的賈樟柯,，在自己首部AIGC電影短片《麥?zhǔn)铡分校晒ψ寵C(jī)器人說(shuō)上了山西汾陽(yáng)話,。
人與AI共創(chuàng)將成為新的創(chuàng)作形式
影視文娛領(lǐng)域是AIGC應(yīng)用落地最快的領(lǐng)域之一,，包括可靈AI在內(nèi)的技術(shù)革新，正在極大地降低視頻內(nèi)容制作的門(mén)檻,，提升內(nèi)容生產(chǎn)的效率,。業(yè)內(nèi)人士預(yù)測(cè)，隨著視覺(jué)生成大模型技術(shù)的不斷突破,，未來(lái)一至兩年,，在AIGC領(lǐng)域有望落地影視工業(yè)級(jí)的生產(chǎn)工具，并規(guī)?；瘧?yīng)用,。
以可靈AI為代表的視覺(jué)大模型及產(chǎn)品將逐漸成為視覺(jué)行業(yè)的新基建和新工具。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”,，旨在通過(guò)AIGC制作電影級(jí)內(nèi)容的探索,，推動(dòng)人文藝術(shù)與AIGC技術(shù)的深度融合，讓人與AI共創(chuàng)成為新的創(chuàng)作形式和趨勢(shì),。
“電影創(chuàng)作的核心始終是人類(lèi)的情感與思想”,，參與可靈AI導(dǎo)演共創(chuàng)計(jì)劃的AIGC應(yīng)用師溫維斯認(rèn)為，“AI為我們提供了前所未有的創(chuàng)作工具,，讓我們能夠以前所未有的方式去講述故事,，去表達(dá)情感”。
李少紅導(dǎo)演在職業(yè)生涯中經(jīng)歷了從膠片時(shí)代向數(shù)字時(shí)代的技術(shù)飛躍,，她將“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”稱(chēng)為一場(chǎng)實(shí)驗(yàn),，她希望能通過(guò)這場(chǎng)實(shí)驗(yàn)，找到人類(lèi)作為創(chuàng)作者與不斷突破的AI技術(shù)之間如何共處的答案,。“我覺(jué)得AI目前來(lái)講更多地可能是一個(gè)工具,，它會(huì)非常有助于我們創(chuàng)作,。”李少紅說(shuō)。
快手科技副總裁,、大模型團(tuán)隊(duì)負(fù)責(zé)人張迪坦言,，作為新技術(shù)、新應(yīng)用,，目前用戶(hù)對(duì)可靈AI這個(gè)新物種比較包容,。未來(lái)快手會(huì)堅(jiān)持在大模型方向的技術(shù)投入與創(chuàng)新，堅(jiān)持在真場(chǎng)景中挖掘真價(jià)值,，滿(mǎn)足用戶(hù)的真需求,。
“在‘可靈AI導(dǎo)演計(jì)劃’中，我們看到了人與AI在共創(chuàng)過(guò)程中的創(chuàng)意激發(fā),，也看到了應(yīng)用瓶頸。希望可靈AI能在未來(lái)一年時(shí)間里真正成為一個(gè)成熟的創(chuàng)作工具,，能夠成為更多普通用戶(hù)的創(chuàng)意工具,，能夠真正在影視級(jí)場(chǎng)景中大規(guī)模應(yīng)用”。張迪還透露,，可靈AI還將升級(jí)合作模式,，針對(duì)影視行業(yè)提供更加個(gè)性化的企業(yè)級(jí)定制服務(wù)，以更好地服務(wù)于影視行業(yè)的產(chǎn)業(yè)智能化升級(jí),。