當前位置: 妍妍網 > 遊戲

【和平精英】中的AI數位人全鏈能力:改變遊戲行業的革命性力量

2024-06-21遊戲

「先秦淑女步 素~ 步步有態度 素~」

6 月 7 日,【和平精英】的新皮膚雙生神裝「鏡域雙華」一經上線,便在玩家群體中引發了熱烈的討論,大家邁著優雅的「先秦淑女步」從階梯飛行器一步步走下來的場景更是成了網路熱梗,截至目前,#和平精英鏡域雙華#抖音話題總播放量已突破2億+。

回過頭來看,這次的新神裝能火出圈,主要會有兩點原因。

第一,神裝本身品質較高,有足夠多的可以討論的點。新神裝跳出單純皮膚、外觀的概念,透過文字、動漫等方式塑造了一個「一體兩魂」的泛二次元人設。從基礎形態的「嬌弱憨萌妹妹」到戰鬥形態的「英姿颯爽姐姐」,再到炫耀合體形態,每個形態都有獨特的外觀表現和故事背景,滿足不同使用者的文化體驗。

第二,官方也為大眾使用者們做了破壁活動。透過與「天生建模臉」的張予曦進行合作,將雙生姐妹的角色形象以COS的形式呈現於現實之中,在相關物料中,張予曦仿佛是一個從二次元走進現實的人物,讓玩家一時之間分不清虛擬與現實的邊界到底在哪裏。

從年初至今,【和平精英】已經多次沖上熱搜,火到更廣闊的泛娛樂、現實世界。從「黃金木乃伊」火爆全網,到五周年的超大體量版本更新,再到如今的「鏡域雙華」讓玩家見識到了遊戲的更多可能。在龐大流量的背後,我們也看到了一些不同的東西:【和平精英】每一次受到的關註,表面上看都是一場與玩家之間的狂歡,在背後支持這場「狂歡派對」的卻是光子工作室群技術實力的縮影。比如「鏡域雙華」皮膚走出的「先秦淑女步」,需要在空中完成「淩空踏步」的效果,對模型和特效的呈現更加嚴苛,同時這一局的所有玩家都會看到特效,對伺服器和硬體最佳化也提出了要求。看似簡單的一個特效,其實是多年技術積累的底蘊。

說到技術,光子在【和平精英】上套用的黑科技,可遠不止於此。在剛剛結束的 China3DV大會上,騰訊首席科學家,騰訊AI Lab及騰訊Robotics X實驗室主任張正友就分享 了騰訊在AI數位人領域的最新研究成果,演示了以【和平精英】 AI數位代言人「吉莉」 為代表的全雙工對話數位人技術。 在吉莉身上,我們可以看到光子和遊戲的另一面。

數位代言人,從遊戲到現實

吉莉作為【和平精英】中備受玩家喜愛的IP角色,不僅僅是一個虛擬形象,更是遊戲品牌的代表。遊戲內,吉莉是【和平精英】與玩家溝通的視窗,她是與玩家相互陪伴的重要遊戲角色,以其獨特的魅力和個性,深受玩家們的喜愛;而在遊戲之外,吉莉更是品牌外延的一只觸手,有效地幫助遊戲重新整理大眾認知,搭建起與主流價值觀溝通的橋梁。

盡管吉莉是一個虛擬存在,但她的影響力卻不局限於數位世界。在【和平精英】與中國大熊貓保護研究中心的合作中,她化身為「99公益日數位愛心傳播官」,傳遞著公益的溫暖與力量。在2022年央視五四青年節特別節目中,吉莉以高保真的動態形象打破次元壁,與現實青年演員、歌手、高校學子們一同送出了別開生面的虛實融合表演,展現青年朝氣,號召青年朋友打破陳規,創新進取。

所以,我們如今看到的吉莉,並不是簡單的遊戲IP角色,而是頻繁活躍在多種套用場景中,與玩家、其他圈層品牌以及各類人群進行深度互動,不斷傳遞正向IP價值的【和平精英】數位代言人。為了更好地完成這些數位和物理世界中的任務,吉莉需要擁有更強大的表達能力,以及更接近人類的互動能力。而支撐這些能力的,正是光子工作室群多年來在AI技術領域的深入探索與積澱。透過不斷的技術創新,吉莉得以在虛擬與現實之間自由穿梭,成為了一個真正跨越界限的數位代言人。

聯手騰訊AI Lab,探索AI數位人

如果我們把吉莉所在的主要場景加以歸納,可以發現目前她主要集中在兩個場景中出現:第一種,與真人直接互動,如3DV演示的那樣。第二種,在各式短片、直播節目中當「演員」。

這兩種套用場景,正是對應著光子和騰訊AI Lab在AI數位人技術領域的兩個探索方向:全雙工語音對話AI數位人,以及AI動畫制作管線。

在全雙工語音對話AI數位人領域,吉莉負責幫助使用者更好地進行人機互動。具體來說,是更好地理解使用者,並即時、準確、生動地給予反饋,要想實作這種自然的反饋,就要從「聽」、「想」、「說」三個方面進行探索。

聽:在ASR語音辨識技術,VAD語音活動檢測技術,AEC聲學回聲消除技術以及語音、語意的打斷和拒識技術等多種能力的配合下,即時、準確地辨識多樣真人自然語言,實作真正意義上的「邊說邊聽」。

想:即透過LLM(大型語言模型)和RAG(檢索增強生成)技術的結合,使吉莉具備了個人化的人設表達和上下文邏輯理解能力。她能夠深入理解使用者的意圖,結合自身的知識和經驗,給出更加精準、個人化的回應;

說:透過TTS(文本轉語音)語音生成技術和SVC(歌聲轉換)技術的運用,使得吉莉能夠自然、流暢地主動表達,她能夠結合套用場景,實作主動對話甚至唱歌。無論是回答問題還是進行對話,吉莉的語音都顯得自然流暢,仿佛真人一般。

(落地套用:【和平精英】吉莉導覽騰訊 AIR² 展廳)

除了這些,我們還能看到的是,演示中的吉莉還能在聽、說同時,主動配合語意、場景做出自然的微表情、動作表達。這是光子正在探索的新玩意:讓全雙工語音對話AI數位人從語言互動邁向動畫互動,如真人般,可以透過表情、動作等視覺訊號表達資訊。透過運用Speech2Face臉部AI驅動演算法和LLM-based動作預測技術,吉莉能夠實作更多樣、精準的口型、微表情變化和身體動作表達,進一步提升了與使用者的互動體驗。

在AI動畫管線的套用上,光子和AI Lab成功構建了一套整合多種先進技術的AI動畫制作管線。該管線不僅融合了3D雲渲染、口型表情動畫曲線生成、語音生成等核心功能,還創新性地引入了動作預測與配置、表情驅動等前沿技術。經過多次叠代和最佳化,最新的AI動畫管線3.0演算法利用高品質動畫數據訓練了能支持多語言、多情緒、多個性的預訓練模型,並針對吉莉的人設和個性進行了全面的音訊、情感、面部動畫數據采集和模型最佳化。這使得吉莉的面部表達更加完美、細膩,能夠呈現出個人化的演繹效果。

這套AI動畫管線在【和平精英】的各類宣傳視訊中得到套用,比如亞運期間,吉莉擔任「騰訊亞運報道助威官」 亮相騰訊亞運直播間,為體育健兒加油;在【和平精英】與國家反詐中心合作,吉莉與反詐民警的聯動,向廣大遊戲玩家普及詐騙案例、相關法規及反詐手段。這些內容使用AI動畫制作管線進行面部表情生成、口型動畫曲線生成、動作配置及動畫渲染,並使用AR和虛擬演播廳技術進行節目的制作合成,透過多種技術手段提升了節目的專業性和趣味性。

目前,這套管線已經使得動畫制作周期縮短近50%,提升了內容制作效率,使團隊得以集中資源提升內容品質,也在內容上給玩家帶來了更好的體驗。據悉,使用AI管線支持的內容,在推薦、播放、點評贊等數據上均獲得了大幅提升,已經成為了官方工作人員的好幫手。

在全雙工語音對話技術、人設化大模型技術、 Al 動畫管線和其他黑科技的加持下,吉莉作為AI數位人已經展現出更大的潛力,也可以代表【和平精英】官方和玩家去做更多有價值、有意義的事情。當然,全雙工對話AI數位人技術只是光子套用到【和平精英】「黑科技」的冰山一角,光子工作室群在多個領域都擁有深厚的技術積累,這些技術都在遊戲中得到了廣泛套用。

更多「黑科技」持續融入遊戲

經過多年的實踐與技術積累,【和平精英】及其背後的光子團隊成功實作了跨領域技術的融合與創新,為玩家帶來了更多新奇體驗,也獲得了玩家的認可。從目前的情況來看,玩家不僅接受了吉莉數位代言人的設定,還透過多年的陪伴,與吉莉之間產生情感羈絆,【和平精英】數位人的落地套用可以說是初見成效。

在社會價值方面,吉莉和遊戲IP積極響應號召,以自身為媒介,以遊戲為載體向社會傳遞正向價值觀。五四青年節相關話題在當時多次登上熱搜,和平青年、大熊貓保護等話題正是吉莉與【和平精英】為社會帶來的正能量。

遊戲內,得益於先進的局內視聽技術、引擎技術的全面支持,【和平精英】能夠不斷推出高品質的遊戲外觀、玩法創新以及畫質升級。這使得玩家能夠享受到更加流暢、逼真的遊戲體驗。

比如在震動反饋上,手遊因為是純虛擬按鍵,所以「手感」上的一部份缺失需要透過震動互動來彌補,普通的遊戲,就是調動馬達不斷的增加震動頻率。【和平精英】的震動效果來自騰訊遊戲CROS MTGPA團隊研究的觸覺反饋技術,可以透過頻率、強度和振幅時長傳遞不同的資訊,實作200多種不同的震動效果,最大限度的去模擬真實的觸感。同時,騰訊與生態夥伴一起建立了該領域第一個行業標準,並推動其成為國際標準,確保使用者在不同終端上獲得同品質的互動體驗。

在視聽功能上,【和平精英】也是下足了功夫,戰術射擊遊戲對團體交流有著很高的需求,作為一款全民遊戲,日常的語音社交也是很重要的使用者體驗。光子在語音編解碼器上不斷實作技術突破,率先實作了AI Codec 更低碼率更高品質的語音編碼,並成功套用於【和平精英】遊戲中,為玩家間的溝通提供了更加清晰、流暢的語音體驗;同時,HDR技術的運用使遊戲整體畫質得到極大提升,為玩家帶來更具沈浸感和真實感的遊戲視覺體驗。

在玩家的眼中,流暢的語音通話,精美的遊戲畫質,豐富的震動手感可能都是最基礎的需求,但是從技術角度來說,玩家手中的裝置五花八門,要讓這些不同的裝置同時體驗到最好的視聽享受,不是一件易事,背後是光子工作室群在技術領域數年如一日的不斷投入與鉆研。

(AI繪畫、AI捏臉系統以及AI+音訊等在遊戲中的運用,極大地豐富了玩家的社交體驗,為遊戲的長線營運提供了有力的支撐)

光子,不止於遊戲

騰訊高級副總裁馬曉軼曾指出:「遊戲其實是一個由技術驅動的、有很多可能性的數位化場景……它和現實世界的相互影響越來越多,提供了更廣泛的人與社會的連線方式,並且還能夠創造現實價值。」光子在持續提升使用者體驗的同時,更積極踐行騰訊「科技向善」的核心價值觀。他們以實際行動,將遊戲的力量延伸至文化傳承和公益等諸多領域中,為社會發展註入新動力。

AI數位人吉莉不僅作為全球首位出席聯合國婦女署活動的AI數位人發表主題演講,以自身在遊戲世界中的經歷,向世界傳遞開放、多元的正能量;更化身為反詐大使,向廣大遊戲玩家普及詐騙案例、相關法律法規及防範的手段。

(和平精英吉莉攜手民警科普詐騙案例、

相關法規及反詐手段)

值得一提的是,2023年,騰訊向社會免費開放了四件最初套用於【和平精英】遊戲振動觸覺反饋技術的專利。這些技術專利的開放,對於推動無障礙技術的普及和發展具有深遠的意義。

(振動觸覺反饋技術運用於出行導航場景,使用者偏移或回歸正確方向時,會得到長短不同振動模式提醒)

結語: 光子工作室群透過不斷探索,創新數位化手段,積極拓展技術的邊界和套用場景,憑借著更為多元、創新的能力與方式,為更為廣泛的商業、文化等諸多領域源源不斷地帶來積極正向的價值。

在遊戲外部,前沿技術的套用,特別是以AI數位人為代表的技術,不僅為遊戲帶來了新的市場行銷策略,更改變了與使用者溝通的方式,使競爭更加差異化,更具吸重力,為【和平精英】註入了新的活力。無論是局內還是局外,這些技術支持都是【和平精英】能夠全域滿足使用者需求的堅實基礎,也是其保持領先地位的重要支柱。

遊戲,正是光子工作室群展現技術實力,實作正向價值傳播的最好載體,【和平精英】是光子「黑科技」套用的主要舞台,透過數位人吉莉的展現,讓我們看到了虛實融合的可能,也更深刻的理解了AI發展的最終形態是人類的好朋友、好幫手,而不是很多人擔心的取代人類。在未來,我們期待看到,光子能在更廣闊的領域持續發光發熱,為社會進步和發展貢獻更多的力量。