當前位置: 妍妍網 > 碼農

海螺AI悄悄上線的這個新功能,我願稱為一致性的新王。

2025-01-11碼農

早上起床,看到 海螺的AI視訊,又雙叒叕加強了。

他們悄悄上了一個新功能:主體參考。

描述非常簡單:

Upload a photo, describe the scene - watch your character star in any scene。

一張照片+一段描述,讓你的角色出演任何場景。

這就是沖著「取代」演員來的。

人物參考,絕對會是AI視訊未來的標配。也是AI能進軍影視行業的必經之路。更是解決一致性的第一步。

X上老外已經玩瘋了。

比如這個,有老外做了一個 同一張臉在不同的服裝和場景劇情的case。

非常的穩定。

除了真人,3D角色效果也都不錯。

甚至還能做動物。

目前應該是全量了,因為我自己的小號也能用了= =

國內版網址在此:https://hailuoai.com/video

海外版:https://hailuoai.video/

不過我自己一般喜歡用海外版的,原因不說了,你懂的。

登入海螺後,進入AI視訊生成頁面。模型標簽欄裏選【主體參考】,海外版的叫【Subject Reference】

上傳你的角色照片,就點選【添加參考角色】,就會彈出角色庫。

傳圖就很簡單了,jpg、png啥的都可以,只要海螺能辨識出「臉」。而且你上傳的角色都會保存在角色柯瑞,如果之後還要復用這張臉,直接去柯瑞找就行。

【添加參考角色】的下方,就是寫Prompt的位置。

這裏沒啥好說的,就是強烈建議開啟海螺內建的提示詞最佳化功能,點一支筆的那個icon就行。roll出的視訊效果會好非常多,小白友好。

傳好你的角色人臉、寫好prompt,OK了。就這麽簡單兩步。

直接點選生成,坐等海螺給你跑出視訊就行。

我跑了幾個好玩的。

比如直接開啟了科技圈大佬們的衣櫃,讓他們來一個經典皮膚互換。

讓庫克穿上周老板紅色polo衫。你別說,是有內味兒了。

黃仁勛穿上黑色高領……好家夥,有一股子當年喬老爺子的味道了。

還有,讓阿特曼穿上皮衣來宣傳輝達顯卡。

就,非常的歡樂。

在我跑了幾個小時以後,總結一下我自己測評的感受,大概就是:

很強的人臉穩定性和一致性,以及無與倫比的情緒表演

一.很強的一致性

首先最重要的,一致性。

簡單來說就是:你給誰的照片,生成的視訊裏就穩定是誰的樣子,不會突然變成隔壁老王。

玩過AI視訊的都懂,人臉不穩定多讓人崩潰。

同一個prompt的結果,今天是馬冬梅,明天是馬東錫,後天不知道又變誰了。 尤其是想拍個完整劇情的時候,前後兩個鏡頭主角的臉對不上,觀眾直接出戲。

我去年4月做過的一個的CCTV6的短片,光調整人臉一致性就折騰了三天。。。= =

現在,人臉一致性就非常的爽。

比如這個case,老人面部的皺紋紋路、神態,細節穩定得不行,轉個頭都不帶跑偏的。

甚至面部彩繪都能完美保持。比如這個小醜的case,雖然肢體和附近的雜耍球有一點小崩,但臉賊還原,復雜的妝面效果和面部細節幾乎沒丟。

還有一個我摸索出來的很騷的玩法。就是只要用一張照片加個prompt,就能看到演員「增重」的效果。。。

這種效果要擱傳統拍電影,不得上CG、特效化妝折騰半天,現在寫個prompt的功夫就搞定,立省百分百。

二.連續性很強

其次連續性,也就是同一個視訊裏人臉得穩定。你總不能角色轉個頭的功夫,突然變成另一個人吧。

所以我測試了一下讓角色轉頭、擡頭、低頭……連貫展示多個面部角度。你們感受下這個穩定性。

只用一張照片就能做到這個效果,真的牛。

還有這個case。我讓角色:先戴上墨鏡,說話,然後突然摘下來。

這個銜接。。。縱享絲滑。墨鏡遮擋前後的五官細節一點沒變形。

三.表情演出穩定發揮

還有海螺AI的看家本領:角色表演。

海螺AI的人物表情細節和真實感,一直是我認為目前所有AI視訊模型裏做得最好的。

這次的S2V模型保持了情緒表演的優良傳統。雖然整體來說,我覺得有點不如海螺的T2V和I2V的演技好。但在同類的人臉參考模型裏,已經很不錯了。

比如這個女人的喜怒哀樂。

有了這個功能,以後大家拍視訊說不定真的能省下一大筆演員費。。。

用一張照片就能當演員,拍一個屬於你自己的大片,自此,真的不再是幻想。

在X上我還看到不少老萬拿自己的照片玩兒穿越,科幻片、動作片、文藝片。。。

啥風格都有,真就「重生之我是好萊塢巨星」。

我有一部很喜歡的電影【瞬息全宇宙】,裏面有一段很經典的剪輯,就是楊紫瓊在不同的平行宇宙的樣子快速切換。短短幾秒體驗了十幾種人生的感覺,很酷。

作為一個二次元加老中二病,我也想整個活,看看平行宇宙的自己是啥樣子。

於是, 我拿著自己的證件照,決定整個活,開啟我自己的「多元宇宙」之旅。

在【加勒比海盜】裏征服大海,在【哈利波特】懟伏地魔,在某部韓劇當霸總,在【賽博龐克2077】勇闖夜之城,在【007】搞定「Mission impossible」,在【飛馳人生】挑戰自我。。。甚至在【蝙蝠俠】守護哥譚市。

「地球Online2025」(錢不夠演員未定劇本暫無版),敬請期待。

我可太喜歡了。。。

最後來說一下缺點,海螺AI的人物參考很棒,但是也不是一點問題都沒有。

首先就是整體來說還是得抽抽卡,大概跑個三四次之後能roll出比較好的效果。

然後就是肢體方面,比較安靜的狀態和小振幅動作都挺穩的,但是舞蹈、蹦跳之類的大振幅動作,海螺確實還有進步空間,可以再練練。

其他的就沒啥可說的,瑕不掩瑜,海螺AI在AI視訊的道路上,還是一路向前的。

從23年到現在,我也算是一路看著AI視訊從最初的PPT,發展到現在逼近真實的質感。

一開始崩得不行的"吃面",早就克服了;情緒表演,比如海螺已經做得很出色了;舞蹈之類的大動作,可靈1.6也把天花板打得無限高,也越來越穩定。

再加上這次的人物參考,視訊越來越可控。

AI生成內容的頭頂一直有三朵烏雲:風格一致性、人物一致性、場景一致性 ,風格一致性以經被解決的很好了,人物一致性,現在海螺也能非常好的解決。

AI視訊的玩法也不再只是零散片段,它可以嘗試著,去完整地拍完一個故事了。

AI電影從概念照進現實,似乎,只差臨門一腳了。

那個臨門一腳,就是最後的,場景一致性。

期待海螺在這塊,能繼續叠代,給出一個很好的方案。

那曾經的幻想,我覺得都將成為可能。

我突然想起莊子在【逍遙遊】裏說的那只鯤鵬。

翅膀遮天蔽日,能淩空九萬裏。

這一次,我們都是鯤鵬。

工具已經擺在眼前,只待你腦海中精彩絕倫的故事。

每個人都將可以成為導演,

而AI,正在等待你的第一聲「Action」。