央視新聞聯合百度智能雲打造的首個「冬奧AI手語主播」來了 | 人人都是產品經理

編輯導語:不知不覺中,冬奧會也快要到來,那麼對於聽障人士而言,他們要如何了解比賽動態呢?基於這個需求,央視新聞聯合百度智能雲打造的首個AI手語主播今日正式亮相。而在這一亮相背後,也缺少不了技術的支持。

「從北京冬奧會開始,我將全年無休用AI智慧為聽障用戶提供手語服務,讓他們快捷的獲取比賽資訊」 ,11月24日,央視新聞聯合百度智能雲傾心打造的總台首個AI手語主播正式亮相。

她有著「真人般」的皮膚、頭髮、眼睛,形象親切自然,氣質優雅獨特。

萬眾期盼的2022年北京冬奧會將在2月4日舉行,歷時16天。這是中國歷史上第一次舉辦冬季奧運會。

在關注冬奧會的觀眾中,有一個特殊的群體,他們聽不到賽場的聲音。但他們關注著冬奧賽事,希望了解比賽動態,渴望感受比賽的激情。全球約4.3億人有中度及以上程度的聽力障礙。根據全國第二次殘疾人抽樣調查數據,中國有聽障人士2780萬。

「我們用技術跨越聲音的障礙」,這是央視新聞聯合百度智能雲推出AI手語主播的初心。

一、用AI聆聽冬奧新聞的背後

百度智能雲采⽤語⾳識別、⾃然語⾔處理等⼈⼯智能技術,構建出⼀套複雜⽽精確的⼿語翻譯引擎,實現了⽂字及⾳視頻內容到⼿語的翻譯;再通過專為⼿語優化的⾃然動作引擎,進⾏虛擬形象的驅動,將⼿語實時演繹為數字⼈的表情動作。這使得央視新聞AI手語主播具備高可懂度的手語表達能力和精準連貫的手語呈現效果。

央視新聞AI手語主播掌握的手語辭彙規範都來自《國家通用手語詞典》標準,經過長時間的智能學習,能夠為觀眾朋友提供專業、準確的手語解說。

二、數字人的開發變得簡單、快捷、高效

央視新聞AI手語主播由百度智能雲的「數字明星運營平台」提供技術支持和服務。「數字明星運營平台」集數字人生成、內容生產為一體的平台級產品,為廣電、互娛、品牌等客戶提供一站式的虛擬主持人、虛擬偶像、品牌代言人的創建與運營服務,可以降低數字虛擬人的應用門檻。

目前,「數字明星運營平台」在生成維度支持二次元、2D、3D高精多種數字人風格,不僅通過全棧的AI能力實現了二次元數字人的「一句話生成」,還通過基於任意單個2D人臉重建高精度3D人臉技術,對虛擬人人臉3D模型進行編輯,實現將任意2D人臉低成本替換到3D虛擬人上,解決了2D數字人風格豐富性差的痛點難點,更將可被AI驅動的高精3D數字人生成成本由3個月降低到一星期。

在內容生產維度,支持真人驅動、AI驅動、融合驅動等多種直播方式;支持真人場景下多樣化內容的視頻快速生成。 基於面部4D數據(3D+時序)的高精數字人「文字到形狀的跨模態面部表情生成技術」,使得口型合成準確性達98.5%。

「數字明星運營平台」 讓數字虛擬人的開發和運營變得簡單、快捷、高效。這也就意味著,現有眾多高創作力、低技術能力的IP開發方,直接具備轉化自己的IP為虛擬人的能力,可以無需建模、快速做出自己的數字虛擬人,甚至是虛擬偶像。

這個冬奧會,讓我們通過央視新聞AI手語主播,更酣暢淋漓地感受冰雪運動的激情與榮耀。