AI賦能伴播形象生產(chǎn)及驅(qū)動(dòng) 虎牙持續(xù)提升直播互動(dòng)體驗(yàn)
2021-08-05 14:05
來(lái)源: 深圳新聞網(wǎng)

AI賦能伴播形象生產(chǎn)及驅(qū)動(dòng) 虎牙持續(xù)提升直播互動(dòng)體驗(yàn)

人工智能朗讀:

讀特客戶端·深圳新聞網(wǎng)2021年8月5日訊(記者 張俊達(dá))隨著直播行業(yè)的發(fā)展,用戶對(duì)個(gè)性化的直播內(nèi)容、多元的直播互動(dòng)體驗(yàn)有了更高的需求,為主播提供個(gè)性化的伴播形象,成為直播平臺(tái)的重要?jiǎng)?chuàng)新路徑。

近日,虎牙直播在開(kāi)播端推出了AI工業(yè)化形象生產(chǎn)系統(tǒng),通過(guò)該系統(tǒng)智能生成主播伴播形象,服務(wù)于廣大主播,進(jìn)一步提升用戶的觀看和互動(dòng)體驗(yàn)。

AI2D虛擬形象工業(yè)化生產(chǎn)應(yīng)用高效實(shí)現(xiàn)千人千面

虎牙本次推出的AI工業(yè)化形象生產(chǎn)系統(tǒng),是業(yè)界首創(chuàng)的AI2D虛擬形象工業(yè)化生產(chǎn)應(yīng)用,可通過(guò)AI算法自主學(xué)習(xí)與真人轉(zhuǎn)換動(dòng)漫形象兩種路徑,協(xié)同美術(shù)設(shè)計(jì)把關(guān),實(shí)現(xiàn)個(gè)性化2D伴播形象的智能生成。

每個(gè)伴播形象都可搭配多個(gè)表情和動(dòng)作,表情動(dòng)作可根據(jù)送禮、進(jìn)場(chǎng)等事件自動(dòng)觸發(fā),AI形象也被賦予了優(yōu)秀的表現(xiàn)力。

同時(shí),為進(jìn)一步增強(qiáng)用戶的直播互動(dòng)體驗(yàn),每個(gè)AI伴播形象都配備了專屬的表情包,主播使用某一伴播形象后,直播間觀眾便可使用該伴播形象的專屬表情包發(fā)送彈幕進(jìn)行互動(dòng)。

image.png

AI伴播形象專屬表情包彈幕演示

據(jù)悉,虎牙還將于近期上線一套AI智能匹配構(gòu)件,該構(gòu)件可根據(jù)AI伴播形象的設(shè)定自動(dòng)生成直播間相應(yīng)匹配模板,使得直播間更具美感和辨識(shí)度。

虎牙公司直播產(chǎn)品部總經(jīng)理曾星表示:對(duì)主播而言,專屬的伴播形象可輔助滿足主播的情感化表達(dá)需求,使主播從攝像頭前解放出來(lái),專注于為觀眾呈現(xiàn)最佳的游戲狀態(tài)和直播效果;對(duì)觀眾而言,可以在主播專心游戲操作的時(shí)候,獲得更具互動(dòng)性的直播觀看體驗(yàn)。

據(jù)介紹,目前伴播形象在虎牙主播端滲透率已達(dá)18%,受到主播和觀眾歡迎。

從單點(diǎn)性AI能力到集合式AI解決方案虎牙自研輕量化動(dòng)漫驅(qū)動(dòng)

在伴播形象生成上,虎牙AI工業(yè)化形象生產(chǎn)系統(tǒng)采用提升算法、自研編碼器等方式,實(shí)現(xiàn)素材高精度分割與對(duì)應(yīng)修復(fù)、千人千面實(shí)時(shí)轉(zhuǎn)化,在增加伴播形象的多樣性和豐富度的同時(shí),更大限度提升了與真人形象的相似度,令A(yù)I伴播形象更生動(dòng)、更具情感化。

為增強(qiáng)伴播形象的清晰度及前端表現(xiàn)力,虎牙AI技術(shù)團(tuán)隊(duì)自研了輕量化動(dòng)漫驅(qū)動(dòng),在滿足AI伴播形象驅(qū)動(dòng)要求的同時(shí),將專業(yè)美術(shù)提供的素材有機(jī)結(jié)合到動(dòng)作庫(kù)中,可供主播自主組合呈現(xiàn),令伴播形象的表現(xiàn)力得到了極大提升。

為進(jìn)一步提升形象渲染能力、增強(qiáng)伴播形象的可拓展性,虎牙AI技術(shù)團(tuán)隊(duì)通過(guò)重構(gòu)渲染引擎,將多個(gè)引擎統(tǒng)一配置,滿足渲染效果需求的同時(shí),大大降低了開(kāi)發(fā)工作量和后續(xù)系統(tǒng)維護(hù)難度。

與此同時(shí),將生成、驅(qū)動(dòng)、分割、渲染等多個(gè)單點(diǎn)AI能力整合的AI解決方案與美術(shù)設(shè)計(jì)融合,基于自研AI算法的驅(qū)動(dòng)引擎與原生引擎融合。通過(guò)這種技術(shù)線路A+B融合的方式,產(chǎn)品的運(yùn)行和應(yīng)用變得更加高效、穩(wěn)定,最終達(dá)到“1+1>2”的效果。

image.png

開(kāi)播效果演示

“在工業(yè)化內(nèi)容生產(chǎn)上,虎牙AI團(tuán)隊(duì)擁有長(zhǎng)期的技術(shù)積累,本次AI工業(yè)化形象生產(chǎn)系統(tǒng)的上線,是我們AI技術(shù)研發(fā)與直播場(chǎng)景結(jié)合的有效落地體現(xiàn)?!被⒀拦続I技術(shù)負(fù)責(zé)人許佳說(shuō),“未來(lái)我們將進(jìn)一步提升AI核心能力,在形象生成、驅(qū)動(dòng)、渲染等多個(gè)方向發(fā)力,以不斷創(chuàng)新的AI技術(shù)助力產(chǎn)品業(yè)務(wù)創(chuàng)新?!?/p>

據(jù)了解,虎牙產(chǎn)品和技術(shù)團(tuán)隊(duì)就AI工業(yè)化形象生產(chǎn)系統(tǒng)已經(jīng)提交了8項(xiàng)相關(guān)專利、2件軟件著作權(quán)申請(qǐng)。未來(lái),虎牙將依托AI優(yōu)勢(shì),通過(guò)產(chǎn)品持續(xù)創(chuàng)新,為用戶創(chuàng)造頂尖的數(shù)字互動(dòng)體驗(yàn)。

[編輯:何暢]