體現“科技奧運會”理念的“冬奧會手語廣播數字人”系統將在全國范圍內推廣。這項技術為冬奧會期間全國聾人提供了精準、自然、流暢的實時手語翻譯服務,解決了電視欄目不能完全覆蓋聽障人群和手語翻譯人員不足的問題。
據悉,這項技術得到了北京市科委科技冬奧會的支持,智譜AI、凌云光與北京廣播電視臺聯合打造,實現了北京冬奧會體育新聞節目的實時手語翻譯廣播,并于2月5日起在北京衛視節目中成功試用。
“數字人”技術具有強大的技術應用能力,將在全國范圍內推廣。
2月9日,北京市科委在北京智譜華章科技有限公司(以下簡稱“智譜AI”)舉辦了“科技冬奧會企業之行”大型主題系列采訪活動,參與創建改應用項目的智譜AI副總裁左家平、凌云光科技有限公司副總裁楊藝向中國工業報證實,“冬奧會手語廣播數字人”系統將在全國范圍內進行公益推廣,惠及眾多聽障人士,可先應用于各電視臺、網絡平臺、大屏幕等多媒體渠道。
北京冬奧會于2022年正式開幕,既是體育節,也是科技賦能的“智慧”節。北京電視臺新聞中心副主任王毅在活動現場表示,“冬奧會手語廣播數字人”技術表現出強大的科技應用能力,既有公益推廣價值,又有商業應用價值。它具有很大的綜合社會價值,希望得到推廣和使用。
科技賦能奧運會,惠及2700萬殘疾聽障人員
隨著人工智能技術的快速發展和應用,它正在成為推動人類進入智能時代的決定性力量。作為推動AI研究從單一模型向多場景同用模型范式轉變的關鍵技術,超大型智能模型在2021年繼續成為國際AI前沿研究和應用的熱點。與此同時,隨著新時期消費者對虛擬內容和服務的需求不斷增加,以及元宇宙概念的全球興起,虛擬現實和人工智能技術也成為全球關注的焦點。
據智譜AI副總裁左家平介紹,根據中國第二次殘疾人統計調查數據,中國有2700多萬殘疾聽力障礙者。這次冬奧會是中國歷史上第一次舉辦冬奧會,聽力障礙者也期待對比賽信息有更深入的了解。“冬奧會手語廣播數字人”的科技賦能方式,讓他們更全面地感受到這場精彩優秀的奧運會。
集體智慧構建最大的多模式手語語料庫
左家平介紹,“冬奧會手語廣播數字人”得到了北京市科委、中關村管委會等單位的支持,由智譜AI支持。、由凌云光和北京廣播電視臺聯合打造,清華大學賈伽教授團隊和中國科學院計算研究所陳益強研究員團隊也參與了相關關鍵技術的研發,得到了北京市殘聯和市殘聯聾人協會的幫助和支持。該系統以超大規模預訓練模型為關鍵技術,獨立構建多模態肢體動作、表情、手指同步采集系統,利用跨模態擬人生成算法、極高精度現實數字人等行業領先技術,實現冬奧會期間專業手語翻譯廣播比賽。
2018年,《國家通用手語常用詞表》和《國家通用盲文方案》作為語言文字規范正式發布。為了推廣和普及國家通用手語,《冬奧會手語廣播數字人》系統完成了《國家通用手語詞典》收集和錄制的8214種通用手語,語法以聽障人群習慣玩法為準,保證了手語廣播成果的準確性和專業性,更好地為聽障人群服務。
由于目前國內缺乏完善的手語材料數據,在北京殘聯和市殘聯聾人協會的支持下,研發人員邀請了40多名聾人教師和手語專家進行手語文本轉寫和技術指導,并對聽障人群進行了大規模評估。最后,他們建立了中國最大的多模態手語材料庫,符合國家通用手語標準,總詞匯和句子規模超過10萬。
超大規模預訓練打造“智能數字大腦”,實現高自然手語動作姿勢。
中國工業報從項目開發人員的數據中了解到,為了構建一個能夠理解和翻譯語音和手語的智能數字大腦,“冬奧手語廣播數字人”系統以超大規模的預訓練模型為關鍵技術,通過語義蒸餾和手語翻譯快速編制模型,將新聞廣播中的語音蒸餾成語義高度接近的手語,并將其翻譯成符合手語習慣的語序。最后,手語數字大腦可以通過計算機模仿聽障人士的大腦來驅動手語廣播。
為了實現高精度、高自然性的人物形象和手語動作姿勢,R&D部門還建立了多模態肢體動作、表情和手指同步采集系統。通過采集多模態動作捕捉數據,利用跨模態擬人生成算法,自然流暢地驅動和渲染超現實數字人群,完成文本內容的手語廣播。其中,面部采集是通過肌肉綁定技術驅動實現的,結合行業領先的語音識別和超清晰視頻生成技術,向聽障人群展示了親近自然的冬奧會手語廣播服務。
多模態動作捕捉數據收集現場
應用前景廣闊,使科技溫度更高
據活動組織者現場介紹,手語廣播中數字人的應用場景比較常見。一方面可以為新聞媒體提供全流程智能數字人手語生成服務,方便聽障人士快速了解新聞簡訊;另一方面,聲音廣播的內容可以轉化為手語,為聽障人士廣播冬奧會賽事和賽場成績,方便獲取即時信息。
冬奧會開幕后,“冬奧會手語廣播數字人”每天繼續在北京衛視“北京你早”節目中用手語廣播“冬奧會合集”和“一起看冬奧會”,不僅為聽障人士提供手語信息廣播服務,降低冬奧會運營成本,還方便聽障人士觀看比賽專題報道,提高社會參與度和幸福感。此外,手語廣播數字人的推廣可以加快國家通用手語的推廣,推動國家通用手語標準的普及,為殘疾人平等參與社會生活創造一個無障礙的環境,讓科技更有溫度。更重要的是,這本書體現了尊重北京的城市。
智譜AICTO張鵬表示:“冬奧會手語廣播數字人的應用,展現了企業‘讓機器像人一樣思考’的愿景。聽障人士不僅可以快速獲取冬奧會的信息,還可以將無障礙環境的概念傳遞給數億人。智譜AI將繼續深化數據與知識融為一體的戰略,打造強大通用的人工智能系統,通過創新幫助中國人工智能生態建設,讓技術帶來更多價值?!?/p>
【新聞鏈接:智譜AI】
北京智譜華章科技有限公司于2021年12月2日當選北京市第七批“專精特新”中小企業名單。
智譜AI作為國家高新技術企業,依托清華大學團隊十余年的知識智能技術積累,匯聚了一批有激情的AI有志之士,努力打造下一代人工智能系統,數據與知識融為一體,實現“讓機器像人一樣思考”的愿景,推動第三代人工智能的浪潮。
智譜AI參與開發了超大規模的預訓練模型“悟道”,構建了高精度的通用知識地圖,開發了中國最大的科技情報分析和挖掘平臺AMiner,讓人工智能了解科學,預測科技發展趨勢和人才發展?;凇皵祿焙汀爸R”的虛擬數字大腦,結合人工智能技術和人類認知模式,智譜AI將大規模預訓練模型和知識地圖有機融合,使虛擬數字人可以不斷學習、推理和抽象。研發應用包括科普數字人科技、冬奧會手語廣播數字人等。相關技術領域,北進教育和知識產品。
未經數字化報網授權,嚴禁轉載或鏡像,違者必究。
特別提醒:如內容、圖片、視頻出現侵權問題,請發送郵箱:[email protected]。
風險提示:數字化報網呈現的所有信息僅作為學習分享,不構成投資建議,一切投資操作信息不能作為投資依據。本網站所報道的文章資料、圖片、數據等信息來源于互聯網,僅供參考使用,相關侵權責任由信息來源第三方承擔。
數字化報(數字化商業報告)是國內數字經濟創新門戶網站,以數字技術創新發展為中心,融合數字經濟和實體經濟發展,聚焦制造業、服務業、農業等產業數字化轉型,致力為讀者提供最新、最權威、最全面的科技和數字領域資訊。數字化報并非新聞媒體,不提供新聞信息服務,提供商業信息服務;
Copyright ? 2013-2023 數字化報(數字化報商業報告)
數字化報并非新聞媒體,不提供新聞信息服務,提供商業信息服務
浙ICP備2023000407號數字化報網(杭州)信息科技有限公司 版權所有浙公網安備 33012702000464號