融合視角下AI手語播報在新聞報道中的發展與突破

胡琳

摘要：人工智能技術的發展推動了AI手語技術的更新迭代，并在我國新聞報道中得到了一定的運用。目前中國有2700萬聽障人士，他們與外界溝通的難度極大。為了解決這些特殊群體的實際問題，在媒體融合發展的實踐中，我國開始注重對現有AI手語播報進行優化改進。目前，AI手語技術主要在新聞、氣象、科教、綜藝等節目中廣泛應用。本文主要從媒體融合視角，分析AI手語在新聞報道中的發展現狀，并從技術賦能、數據庫建設、多媒介交流等多維度分析其突破路徑。

關鍵詞：媒體融合 AI手語 新聞報道 人工智能

2020年11月，國家廣電總局頒布《廣播電視技術迭代實施方案（2020-2022年）》，提出要推進內容生產便捷化和智慧化，其中包括“編制智能機器人AI播報、機器人手語技術方案，逐步推動虛擬主播、動畫手語等技術在新聞、綜藝、氣象、科教等節目中的應用等”。AI手語播報是依托于人工智能技術，以虛擬人主播為主體呈現在各類終端的一種新型技術。虛擬人主播具有形象逼真、肢體語言連貫自然、學習能力效率超強等特點。AI手語使主流社會信息在聽覺障礙群體中得到更廣泛的傳播，為構建無障礙的媒介環境發揮重要作用。

在媒體融合的背景下，可視化媒介資源、多元化媒介窗口、迭代化傳媒技術以及戰略性的IP打造等成為AI手語技術與新聞報道結合的關鍵錨點，而媒體融合、深度報道技術以及信息無障礙環境則成為二者結合的關鍵突破方向。對此，筆者結合長沙市廣播電視臺在AI手語新聞播報方面的實踐，對媒體融合大背景下AI手語技術與新聞播報相結合的發展與突破進行深入剖析，以期為今后人工智能技術更好地應用于媒體之中提供借鑒。

一、AI手語技術在新聞報道中的應用現狀

我國有2700萬聽障人士，手語是聽障人士之間溝通交流、獲取信息的主要語言。但受到手語主持人數量的限制，目前許多電視節目和新聞直播中都缺少手語主播。為了讓聽障群體也能夠快捷、準確、全面地獲取新聞資訊，各地廣電媒體紛紛開設手語欄目，或是將AI手語技術應用到日常節目之中。AI手語技術使主流社會信息在聽障人群中得到更廣泛地普及，為構建無障礙城市做出了重要貢獻。

1.手語主播的類型劃分。在新聞報道節目中，手語主播主要有3種類型，即健全人、聽障人和虛擬人。第一類是健全人。目前，由健全人來進行新聞報道直播是最普遍的，一般都是專門的手語老師或者殘疾人協會的工作人員。作為健全人，他們在與新聞采編人員溝通方面具有較大的優越性，但是由于不是聽力障礙者，不能設身處地理解聽障人群的需求，因此在聽障群體中沒有得到很好的認可。北京師范大學2012年針對接近一萬名聽障人士開展的跨地區調查顯示，健全人打的手語只有8%的聽障人能夠全部看懂，56%的聽障人能看懂部分，29%的聽障人基本看不懂。第二類是聽障人。一些電視臺聘請了部分文化素養較高的聽障人來充當手語主持人，這些人對聽障人士的信息環境比一般人要了解得多，更符合聽障人士的實際。但是，在對復雜文稿的理解上也存在很多不足之處。第三類是借助于人工智能技術研發而成的AI手語主播。近年來，具有數據化、標準化等特點的AI手語技術已日趨完善。2020年6月，長沙廣電將自主研發的人工智能手語電視播報系統應用于《長沙新聞》欄目中，打造手語信息化的新聞場景應用，實現了AI手語技術與時政電視新聞的結合，致力于構建無障礙傳播的媒介環境。目前該系統已安全平穩運行近三年的時間，播出時長超過20000分鐘。

2.AI手語新聞播報的主要呈現方式。目前，國內AI手語播報有3種呈現方式，并衍生出了各種形式的手語節目。第一類是以新聞主播為主視窗，AI手語主播為輔視窗，主視窗在畫面中的比例超過80%，而輔視窗則安排于主視窗畫面前的左下角或右下角，形成“畫中畫”的視覺效果。這種也是目前最常用的一種呈現方式。第二類是以AI手語主播為主視窗，新聞主持人為輔視窗，手語主播占據了屏幕的主要畫幅。這類呈現方式主要面向聽障人群，更多的是在殘疾人教學中使用，并未在大眾媒體中進行普及。第三類是AI手語主播與主持人的畫幅相同，兩部分播放框處于并列關系，而這種呈現方式相比于第一類、第二類，在國內的應用更少，僅出現在少數廣播電視臺。如北京冬奧會期間，為了推介AI虛擬人手語主播，央視主持人朱廣權和AI手語主播進行線上語速PK，就是采用的畫幅相同的呈現方式。

二、媒體融合視角下AI手語技術在新聞報道中應用的關鍵點

在媒體融合時代，AI手語技術在新聞報道中得到廣泛應用。尤其是通過可視化的媒介資源、多元化的媒介窗口、迭代化的媒體技術、戰略性的IP運營，讓AI手語更有助于聽障人士了解政策資訊，實現傳播效果的最大化和最優化。

1.可視化的媒介資源。可視化是一門新興的交叉學科，通過可視化的表達與交互傳感技術，使得用戶能夠親眼看到、親自探索以至深入理解深層次的抽象化的大量信息。人工智能在新聞播報中的“破圈”，就是以信息可視化技術的發展迭代為基礎的。信息可視化創建了以直觀易懂的形式表達抽象信息的手段和方法，結合語音識別、計算機翻譯等人工智能技術，構建起一套復雜而精準的手語翻譯引擎，將文字、音頻、視頻等成功翻譯為手語，再通過專門為手語優化而研發的自然動作引擎，進行虛擬形象的驅動。這些技術使AI手語主播具備了高識別度的手語表達能力和精準流暢的手語呈現效果。

2.多元化的媒介窗口。在新聞報道中，聽障群體受語言交流的局限，容易對信息資訊的理解產生歧義或誤區。伴隨著“互聯網+新聞報道”的推廣和人工智能的應用，各個媒體的技術硬件得到了升級，新聞報道的配套軟件也越來越人性化。利用這些新型技術，將新聞報道以圖片、動畫、視頻的形式展現在聽障群體面前，并輔以AI手語主播、字幕等多種形式，將抽象思維以一種直觀易懂的方式向他們傳達出來。此外，AI手語主播還應用在手機小屏上，采用大小屏聯動的方式，突破新聞播報的時空限制，確保聽障用戶能夠隨時隨地收看。

早在2020年，長沙廣電就利用人工智能技術，實現了一個AI手語主播與一個專業播音員同屏呈現進行新聞直播，將新聞報道技術與聽障群體認知規律相結合，研發了“三視融合”新聞報道形式，構建了“三窗同屏”新聞報道模式，進行了“三視融合+三窗同屏”的混合新聞報道改革，突破聽障群體對于新聞報道的解讀障礙，有效促進信息的平等傳播。

“三視融合”是依據殘障觀眾依賴于視覺獲得資訊的認識模式，運用新聞直播軟件、影像制作軟件，把政策信息、時事熱點、民生民情等報道內容制作成“視頻+AI手語+字幕”的新聞報道（如圖1），通過即時通訊媒體、AI手語在線播報及直播平臺等媒介，以打破聽障群體對新聞報道的聽覺障礙，減少聽障群體的信息閱讀困難，提高聽障群體觀看新聞報道的興趣，實現“處處皆新聞”。

“三窗同屏”是在聽障受眾觀看常規新聞報道或在線直播的時候，利用信息技術、人工智能和智能裝置，將播報內容窗口、互動窗口、語音轉換文字窗口同步到智能播報畫面上，從而實現“播報內容窗口+AI手語互動窗口+語音文本轉化”的視覺效果（如圖2）。聽障受眾只需在一個屏幕上就能看到所需的新聞資訊。“三窗同屏”技術既可以作為新聞報道的呈現模式，還可以作為遠程教學的實況轉播。

3.迭代化的媒體技術。AI手語技術應用于視頻傳播，其核心問題在于確保傳播的安全和穩定，實現技術先進性、理論科學性和實踐性的統一。尤其是在技術要求上，要符合廣電總局有關廣播電視節目播出的產業標準，這樣才能跟得上媒介技術的不斷發展。

升級迭代AI手語技術，具體包括網絡直播中虛擬主持人形象的優化、新聞素材的充實、手語翻譯的更新、手語播放的更新等，技術的升級才能給殘疾人用戶帶來更好的觀賞體驗。長沙廣電的AI手語欄目經過了三輪技術升級，被長沙市耳聾學會會長和聽力障礙者代表紛紛點贊，認為現在的AI手語主播已經日趨成熟，表達準確，動作流暢，有助于聽力障礙者更好地了解新聞信息和社會發展。截至2023年3月底，已有337家機構安裝了人工智能的視頻直播系統，覆蓋30個省級行政區（國家級1家、省級臺10家、省會臺17家、市級臺95家、縣級臺211家、公司3家）。AI手語廣泛應用于如“兩會”報道等時政新聞報道中，得到殘障人士的廣泛好評。雖然只是一個小小的熒屏，但它為聽障人士開啟了一扇了解政策資訊的窗口，方便聽障人士了解政務信息，也讓政府的聲音第一時間傳達到基層百姓。

4.戰略性的IP運營。除了先進的技術優勢、精準的用戶群體和精美的形象設計外，打造一名AI手語主播還需要有推廣運營的戰略思維。把握好投放的時機，密切關注新聞熱點，整合媒介資源，運用新媒體的傳播手段以及IP運營的思維，幫助其進行宣傳推廣，形成具有記憶點的品牌IP。

以北京冬奧會AI手語主持人為例，AI手語主持人在2021年11月正式上線，這位形象親切自然，動作精確、實時轉譯的主播不僅僅是手語主持工具人，更擁有自己的性格特點、興趣愛好。通過各種關于北京冬奧會AI手語主持人上線的新聞報道、短視頻、海報、文案的宣發，一篇又一篇的人工智能應用技術文章的發布提高了公眾對于人工智能手語主持人的認知程度，有助于IP形象深入人心，進一步提升傳播效果。

三、媒體融合視角下AI手語在新聞報道中的突破

2020年9月，習近平總書記到湖南考察調研，在參觀馬欄山影視文化創意園區過程中察看了長沙廣電研發推出的AI手語技術電視播報系統，并對其在電視臺新聞直播轉播中的使用給予了充分的認可。為貫徹落實習近平總書記指示精神，長沙廣電積極推進“文化+科技”的戰略，在AI手語播報上做出有益的嘗試與應用。

1.技術賦能是保障。目前長沙廣電主要是采用基于視頻信號處理的人工智能手語新聞播報系統。該系統能夠對電視畫面進行精確的總結，并通過人工智能對電視畫面中的手勢語言進行運算，最終生成一個由虛擬主播所呈現的手勢語言，經過與視頻合成，最終形成聽障人士也能無障礙接收信息的節目。經過多次迭代，目前技術已經比較成熟，將為全國各級廣播電視臺充分發揮手語人工智能、虛擬主持人等技術在電視欄目中的推廣和應用，為各廣電臺落實《廣播電視技術迭代實施方案（2020-2022年）》的有關要求提供借鑒，并為破解媒體融合發展中的技術“瓶頸”打下堅實的理論依據。

而下一步，要想實現 AI手語在新聞報道中應用的突破，還需要對技術研發進行更多的強化，尤其是對人工智能手語電視播報系統進行升級、軟硬件配套研發、應用場景開發、項目孵化等，積極對接上下游企業，打造新型產業鏈。

2.數據庫建設是關鍵。AI手語播報系統建設是基于人工神經網絡的智能演算方法，而持續地對各大媒體進行詞庫收集、不斷完善其數據庫的建設、打上更多的數據標簽，提升人工智能系統的學習能力，是系統更新迭代的關鍵所在。因此，一方面需要由當地廣電部門主動向上級部門爭取政策支持和資金支持，從上至下推廣，不斷完善AI常用手語大數據庫，除了《國家通用手語詞典》外，還要采集多種場景下的靜態手勢、動態手勢、唇語等各種數據；另一方面，可以邀請有關部門領導和業內權威專家組成專家小組，把AI手語列入國家標準，推動AI在聽障群體中的普及，從而收集更多聽障人士提供的一手數據。

3.無障礙環境建設是目標。AI手語播報項目的推進，將為2700萬聽障群體提供一座連接外部世界的橋梁，是我國實現“無障礙化”戰略的重大舉措。隨著項目的發展成熟，將會產生一套全新的、具有自主知識產權的、滿足國內廣電行業需求的AI手語技術新聞播報系統。同時，打造出一位具有自身性格特點的虛擬主播，成為聽障人士的“代言人”。與媒體產業和媒體渠道進行整合后，還將努力構建一個聽障人士共享的集手語教學、文化培訓和交友互動為一體的多功能互聯網平臺，為營造全社會的無障礙環境努力。

AI手語播報技術對推動我國殘疾人工作實現高質量發展具有重大意義。該技術將人工智能技術與新聞行業相結合，還有待于在實踐中進一步優化、深化、普及并最終形成產業，其應用范圍也可以從現有的新聞領域拓展到政務服務、公共交通、養老陪伴等多個板塊，在媒體融合不斷深化的大趨勢之下，實現AI手語在公共傳播領域中的全方位應用與突破。

作者系長沙廣播電視集團經營管理部主任

參考文獻

[1]秦秀宇.媒介融合背景下電視輿論引導面臨的挑戰及對策[J].中國廣播電視學刊，2022（12）.

[2]郭曉磊.機器人搖臂及AI手語播報系統在新聞演播室中的應用[J].廣播與電視技術，2022（11）.

[3]張怡，王琳.尋源與開流：新時代傳媒業融合之守正創新發展策略研究[J].新聞愛好者，2022（10）.

[4]喻國明，傅海鑫.AI手語主播的技術可供性：代償性機制下認知重構的發展版圖——以聽覺感知重構為例探知未來媒體的聚合式發展邏輯[J].教育傳媒研究，2022（04）.

[5]文琳.AI技術在電視新聞手語播報中的應用淺析[J].聲屏世界，2021（12）.

【編輯：陳琦】