作者 | 石瀨 阿虎

編輯 | 張潔

谷歌旗下首個(gè)AI視頻創(chuàng)作平臺(tái)Flow，首批合作導(dǎo)演名單里出現(xiàn)了唯一一個(gè)亞洲女性面孔：Junie。

基于Flow平臺(tái)，Junie制作的AI微電影《浮生若夢(mèng)》（Dear “Stranger”）于近日面向公眾發(fā)布。

這條短片講述了主人公Eden出生之時(shí)，她的祖母離開了。一列火車撞進(jìn)平行宇宙，時(shí)間裂解，記憶如潮水般涌入舞臺(tái)。女孩Eden穿越無(wú)數(shù)時(shí)空，尋找那個(gè)用沉默愛了她一生的女人。

幕后創(chuàng)作者Junie在AI影視創(chuàng)作領(lǐng)域有很多一線實(shí)踐經(jīng)驗(yàn)。她的AI短片《e^(i*π) + 1 = 0》曾在有“AI奧斯卡”之稱的Runway AI電影節(jié)中獲得銀獎(jiǎng)，又在柏林、阿姆斯特丹、翠貝卡等國(guó)際電影節(jié)上頻頻展映。她也是OpenAI Sora官方藝術(shù)家，去年還作為Runway中國(guó)社區(qū)負(fù)責(zé)人，完成了Runway中國(guó)社群的落地和推廣。我們?cè)M(jìn)行過(guò)幾次對(duì)話：

相關(guān)閱讀：對(duì)話全球首部AI電影制作人：幕后制作全流程揭秘；花1460元生成5個(gè)20秒高清視頻，剛上線的Sora還只是“丐版”？

這次的《浮生若夢(mèng)》是Junie跟谷歌Flow的深度合作。Flow整合了Veo、Imagen和Gemini等谷歌AI模型，它們分別對(duì)應(yīng)處理視頻、圖片、文本這三種模態(tài)，支持創(chuàng)作者一鍵生成8秒音畫同步的視頻，并且可以基于不同視頻片段、圖片素材組合進(jìn)行編排生成。

其中，谷歌新一代視頻模型Veo 3在音畫同步、畫面細(xì)節(jié)、物理模擬等多方面表現(xiàn)驚艷，強(qiáng)勢(shì)帶動(dòng)了“Veo 3+Flow”的話題討論熱度，更有創(chuàng)作者稱這開啟了“AI視頻創(chuàng)作新時(shí)代”。

Veo 3正式上線Flow后，“AI新榜”也第一時(shí)間氪金實(shí)測(cè)了多個(gè)案例（練習(xí)時(shí)長(zhǎng)兩年半，谷歌Veo 3刷屏，我們花900元做了一條AI“貓片”），不吹不黑谷歌這一次真的有兩把刷子，起碼在“一鍵生成有聲視頻”上帶來(lái)了新的體驗(yàn)。

為了進(jìn)一步了解深度體驗(yàn)者的創(chuàng)作體驗(yàn)，《浮生若夢(mèng)》正式發(fā)布后一天，“AI新榜”獨(dú)家對(duì)話了Junie。在對(duì)話中，她向我們分享了Flow誕生背后的故事，以及過(guò)去一年來(lái)她使用AI進(jìn)行影像創(chuàng)作和實(shí)驗(yàn)的經(jīng)驗(yàn)和見解。

以下是對(duì)話實(shí)錄：

AI新榜：這次短片所有工作流都是借助Veo 3和Flow完成的嗎？

Junie：其實(shí)不是。項(xiàng)目啟動(dòng)及主要制作階段，我們更多依賴的是Flow平臺(tái)及其底層的Veo 2模型能力。直到谷歌I/O大會(huì)前兩天，大約5月18號(hào)左右，Veo 3模型才正式開放給包括我在內(nèi)的少數(shù)內(nèi)部創(chuàng)作者進(jìn)行測(cè)試使用。因此，短片是基于Veo 2完成的，而Veo 3更多是在項(xiàng)目后期作為補(bǔ)充進(jìn)行了嘗試。

AI新榜：你們是怎么用Veo 3的？

Junie：我們內(nèi)部嘗試最多的例子就是，通過(guò)文字指令讓一名歌手在特定環(huán)境下唱Rap，Veo 3在這一方面效果做得挺好的。另外，Veo 3也可以通過(guò)上傳圖片生成視頻（注：該功能已于近期面向Ultra會(huì)員開放），可以利用圖片來(lái)控制人物一致性，然后再為這個(gè)角色添加聲音，這個(gè)對(duì)未來(lái)的影像創(chuàng)作影響挺大的。

AI新榜：與之前的AI視頻工具相比，F(xiàn)low在創(chuàng)意表達(dá)和敘事上是否有明顯的提升？

Junie：我認(rèn)為我們正在進(jìn)入AI視頻制作的“第四個(gè)時(shí)代”。最初AI視頻生成只有無(wú)聲的畫面，然后發(fā)展到“有聲”，但那時(shí)候制作流程很復(fù)雜，并且需要我們?cè)诙鄠€(gè)平臺(tái)之間切換。

現(xiàn)在只需一個(gè)想法，通過(guò)自然語(yǔ)言描述，就能直接生成有臺(tái)詞、有聲音的視頻畫面，還能保持人物形象和聲音的一致性。

Flow還有一個(gè)“Extend”（延長(zhǎng)）的功能，可以無(wú)限延長(zhǎng)視頻，并且保證角色形象的一致性。此外，我們也可以通過(guò)文字指令控制角色的下一步行動(dòng)，甚至實(shí)現(xiàn)空間的快速切換，比如從火車場(chǎng)景跳轉(zhuǎn)到草坪，再?gòu)牟萜旱酵馓?，只要指令不是過(guò)于離譜，它都可以實(shí)現(xiàn)。

AI新榜：制作這部9分鐘的短片大概耗時(shí)多久？與谷歌團(tuán)隊(duì)的協(xié)作模式是怎樣的？

Junie： 整個(gè)短片制作持續(xù)了三周，我們和谷歌團(tuán)隊(duì)保持了非常緊密的溝通節(jié)奏，幾乎每?jī)商炀蜁?huì)召開一次會(huì)議。這些會(huì)議上他們分享了很多沒有公開的技術(shù)文檔和實(shí)操技巧（Tips and Tricks）。例如，使用Flow時(shí)如何保持場(chǎng)景、人物一致性等等。

AI新榜：是有償合作嗎？

Junie：是的，我個(gè)人還沒有“無(wú)償”工作過(guò)。

AI新榜：那和谷歌合作下來(lái)，最大的感受是什么？

Junie：在這次與谷歌團(tuán)隊(duì)的合作中，我不僅僅是Flow平臺(tái)的使用者，更和他們的技術(shù)團(tuán)隊(duì)緊密合作、全程參與了Flow平臺(tái)的設(shè)計(jì)與調(diào)優(yōu)過(guò)程。

AI新榜：有什么具體的例子說(shuō)明嗎？

Junie：最開始Veo 2只有基礎(chǔ)的文生視頻、文生圖和圖生視頻功能，之后才陸續(xù)上線了一些重要的新功能。

一個(gè)是Ingredient（元素）功能，它是利用Gemini的能力把用戶上傳的圖片進(jìn)行解析和“翻譯”，作為元素融入到新生成的視頻中。

另一個(gè)內(nèi)部測(cè)試功能是，可以把人物和場(chǎng)景作為獨(dú)立“元素”導(dǎo)入平臺(tái)，并通過(guò)文字Prompt（指令）精確控制這些元素在視頻中的運(yùn)動(dòng)和互動(dòng)。例如，你可以指定一男一女在特定環(huán)境中做特定的動(dòng)作。

到了最后一周，一個(gè)比較重要的新功能是：它支持用戶上傳不同的圖片作為元素，并通過(guò)自然語(yǔ)言指令控制這些不同圖片元素在視頻中的行為和相互作用。另外Flow平臺(tái)上也加入了更多控制鏡頭移動(dòng)和視角變化的能力。

AI新榜：你提到通過(guò)人物、場(chǎng)景等元素控制，這是否可以理解為類似“圖層”的概念，可以獨(dú)立控制單個(gè)元素？

Junie： 可以這樣理解。不過(guò)，我認(rèn)為無(wú)論是Veo 2還是Veo 3，它們的核心優(yōu)勢(shì)在于真實(shí)性，比市面上其他一些AI視頻工具更偏向于真實(shí)感。在文字輸入的層面，只要你的指令足夠清晰詳細(xì)，除非是非常刁鉆的，模型都能比較準(zhǔn)確地遵循。這種通過(guò)元素和文字指令結(jié)合進(jìn)行控制的方式，確實(shí)提供了類似分層編輯的靈活性。

AI新榜：有什么使用技巧方便分享嗎？

Junie：我個(gè)人認(rèn)為，輸入的指令越詳細(xì)，F(xiàn)low能生成的內(nèi)容就越豐富、越符合預(yù)期。如果指令過(guò)于簡(jiǎn)單，比如只輸入“一個(gè)人在走路”，那么生成的結(jié)果可能就會(huì)相對(duì)普通。

這就又引發(fā)另外一個(gè)點(diǎn)，我們?nèi)绾紊稍敿?xì)的指令？

我覺得最好的辦法就是配合Gemini來(lái)使用，其實(shí)Flow平臺(tái)是基于Gemini的，用它生成指令的話，會(huì)更好地控制Veo 2。我覺得Flow TV這個(gè)平臺(tái)還蠻有意思的，這也是我覺得和Sora差異最大的地方。

Flow TV上集合了五花八門的案例，你可以搜索具體的元素或風(fēng)格，比如輸入“綠色”，平臺(tái)就會(huì)展示大量與“綠色”相關(guān)的、由其他用戶或官方生成的優(yōu)秀案例。這提供了一種更有針對(duì)性的、基于你創(chuàng)意意圖的案例搜索方式。

Flow TV：https://labs.google/flow/tv/channels

與Midjourney或Sora等平臺(tái)過(guò)去那種更偏向于“功能展示”或隨機(jī)案例的呈現(xiàn)方式不同，F(xiàn)low TV允許用戶通過(guò)關(guān)鍵詞搜索來(lái)學(xué)習(xí)別人是如何通過(guò)Prompt實(shí)現(xiàn)某種特定效果。

AI新榜：從去年Sora上線之后，我們體感上會(huì)覺得今年AI視頻的討論度不如以往，你會(huì)有這樣的感受嗎？

Junie：我覺得是因?yàn)闆]有“好作品”出現(xiàn)。很多人還是過(guò)分關(guān)注“AI視頻何時(shí)能媲美好萊塢”這樣的問(wèn)題上，一定程度上導(dǎo)致了行業(yè)內(nèi)缺乏具有創(chuàng)新性的故事。實(shí)際上，現(xiàn)在的AI視頻工具本身已經(jīng)非常出色，只是還沒有大量?jī)?yōu)秀的原創(chuàng)作品涌現(xiàn)。

我之前作為外部合作伙伴加入的生成式AI影視工作室Promise，我們會(huì)用AI和傳統(tǒng)影視相結(jié)合的方式創(chuàng)作，比如通過(guò)AI模型和動(dòng)捕技術(shù)來(lái)制作更具動(dòng)態(tài)張力的打斗鏡頭。

https://www.promisestudios.com/；Promise是一家AI影視工作室，近期獲得了來(lái)自a16z、谷歌以及North Road等資本投資，將與Google旗下DeepMind展開合作，在其自研平臺(tái)“MUSE”中集成Gemini、Veo等最新模型。

現(xiàn)在很多影視創(chuàng)作者都在積極探索不同的鏡頭表達(dá)方式。之前，他們可能因資源和預(yù)算限制而難以施展自己的創(chuàng)意，但隨著AI視頻工具的迭代優(yōu)化，他們可以實(shí)現(xiàn)自己真正想要表達(dá)的內(nèi)容，我相信，我們會(huì)看到越來(lái)越多新鮮且具有不同視角的AI影視作品。

AI新榜：推薦一些你覺得“本身已經(jīng)非常出色”的AI工具？

Junie：我個(gè)人覺得Flow、Sora都還蠻好用的，還有一個(gè)不能替代的AI工具是ElevenLabs?？赡芎蛣?chuàng)作習(xí)慣有關(guān)，我觀察到很多創(chuàng)作者會(huì)使用的工作流是“AI生成腳本-文生圖-圖生視頻-剪輯”，這或許是他們不太習(xí)慣Sora這類工具的原因，反而更傾向于可靈這種能精準(zhǔn)執(zhí)行預(yù)設(shè)指令的工具。

AI新榜：不用工作流的話，你給AI視頻創(chuàng)作者的建議是什么？

Junie：多多探索，多多實(shí)驗(yàn)。我想探索新的藝術(shù)表達(dá)和敘述方式，所以我會(huì)覺得“重制”已有的東西是沒有意義的，“創(chuàng)作”應(yīng)該是動(dòng)態(tài)的過(guò)程。你輸入靈感給AI后，你們不斷交流碰撞，再誕生整個(gè)劇本內(nèi)容。

當(dāng)然，藝術(shù)表達(dá)的方式很多元化，每個(gè)人對(duì)AI也會(huì)有不同的觀點(diǎn)。比如有的人制作視頻需要用AI降本增效，就要求它有強(qiáng)大的可控性，那可靈就很適合，這和每個(gè)人的使用喜好和習(xí)慣不同。

我最近聽了《黑天鵝》導(dǎo)演Darren Aronofsky的講座，他提到一個(gè)觀點(diǎn)很有意思，他會(huì)希望AI視頻工具能有一個(gè)“AI幻覺”功能——不是指錯(cuò)誤或混亂，而是AI能夠基于輸入的圖像或概念，進(jìn)行獨(dú)特的、非線性的視覺處理或抽象化重構(gòu)，然后將這些“幻覺式”的處理結(jié)果返還給創(chuàng)作者。這個(gè)過(guò)程并非為了直接生成成品，而是旨在激發(fā)創(chuàng)作思路，打開新的視角和可能性。

從更宏觀的角度看，AI工具的出現(xiàn)也鼓勵(lì)創(chuàng)作者去講述更多個(gè)人化、更貼近內(nèi)心的故事。因?yàn)橛耙晞?chuàng)作者所呈現(xiàn)的故事，是要和不同的人產(chǎn)生情感連接，這種連接是不同背景、不同經(jīng)歷的兩個(gè)靈魂之間碰撞的過(guò)程。這樣一個(gè)創(chuàng)作過(guò)程才是有意義的。

ps. 評(píng)論區(qū)留給你們，歡迎更多的朋友跟我們分享自己的AI創(chuàng)作體驗(yàn)。

---

     
        

      
         

       
          

        
           

         

        
           
        
           

         「AI新榜交流群」進(jìn)群方式：添加微信“banggebangmei”并備注姓名+職業(yè)/公司+進(jìn)群，歡迎玩家們來(lái)群里交流，一起探索見證AI的進(jìn)化。
        
           
        
           

         

        
           
       
          
      
         
     
        
      
         

        歡迎分享、點(diǎn)贊、推薦
      
         
      
         

        一起研究AI