讓“無聲”世界感受冬奧魅力

編者按：奮進的中國再度點燃激情與夢想的圣火，世界翹首以待的北京冬奧會將于2022年2月4日開幕。

“水立方”變身“冰立方”、“百米級、分鐘級”精準氣象預報、國家速滑館世界跨度最大的單層雙向正交馬鞍形索網屋面、5G信號覆蓋所有場館、8K比賽畫面實時傳輸……科技冬奧是北京2022年冬奧會和冬殘奧會的主要特色，是體現我國綜合國力的舞臺，更是實現高水平科技自立自強的舞臺。

中國科協網開設“科技冬奧的背后故事”專題，挖掘冬奧高科技的幕后故事、幕后英雄，展現中國科協所屬全國學會及廣大科技工作者在“科技冬奧”中的拼搏、奉獻、創新、超越，記錄科技工作者助力北京冬奧冰雪史詩的感人故事。

數次聯系左家平，她都在忙。

“我們一直在北京廣播電視臺做技術方面的溝通對接，估計到今年1月底才能圓滿完成。”左家平回復說。

左家平是智譜AI公司的高級副總裁。作為課題組成員，左家平和中國計算機學會中文信息技術專業委員會副主任、清華大學教授、北京智源人工智能研究院副院長唐杰等人一起，研發了“手語播報數字人”系統。

基于該手語播報數字人，北京2022年冬奧會、冬殘奧會舉行時，聽障人士將享受基于人工智能（AI）技術的精準手語播報服務。

“這個手語播報數字人將應用于北京2022年冬奧會、冬殘奧會的賽事報道場景中，提供全流程智能化的數字人手語生成服務，用手語根據文字自動播報相關信息。”唐杰表示。

作為構建未來虛擬世界諸多應用的主干，如何創造栩栩如生的虛擬數字人，一直是計算機視覺、計算機圖形學與多媒體等 AI 相關學科密切關注的重要研究課題。

“手語播報數字人能夠方便聽障人士收看賽事專題報道，提升他們的社會參與度和幸福感。”唐杰說。

事實上，手語播報數字人的研發離不開超大規模人工智能預訓練模型的支持。這個手語播報數字人基于“悟道2.0”大模型開發，由“科技冬奧”專項支持，智譜AI、凌云光和北京廣播電視臺聯合打造。

賦予手語播報數字人、科普機器人理解和表達知識的能力，是研發的難點。項目團隊成員、清華大學計算機系博士生于濟凡表示，科普機器人目前已經學習了百萬級別的知識圖譜，也接入了超大規模的中文預訓練模型，相比很多其他智能問答類產品，進一步減少了人工規則，加強了智能學習和提升能力。

而讓手語播報數字人這樣一款創新產品真正應用于賽事報道中，也并非易事。“需要不斷與電視臺方面去溝通，進行技術調試，讓手語播報數字人真正解決聽障人士收看冬奧賽事的問題。”左家平說。

在工程實現上，團隊也做了大量創新。項目團隊成員、智譜AI工程師譚棋洋表示，為了增加機器人對人工智能模型的兼容性，并為機器人定制合適的動作，讓它能在不同的場景用更準確合理的姿勢增加交流的親密性和表達的準確性，團隊重構了機器人底層的交互邏輯。

“手語主要靠手勢來傳遞信息，由于不同的人有不同的手勢習慣，容易造成信息傳遞偏差。”唐杰介紹，人工智能可避免“千人千面”，始終保持統一。手語播報機器人能提供全流程智能化的精確播報服務，方便聽障人士收看賽事專題報道。