警察廣播電台初次AI主播真人建模！ 與ChoozMo合作AI影片
May 16, 2023
隨著 COVID-19 疫情迎來解封，全新數位產業生態正快速成形中， 因應 AI 技術不斷發展及改良，如今全球越來越多的智能形象運用在 播報上，「AI 主播」為人工智慧在媒體產業應用的一種新形態，是集科技、人文及藝術融合的產物。 近半年來 ChatGPT 掀起的生成式 AI 熱潮，帶給受眾群不同的觀感和體驗。
以生成式 AI 技術應用為主軸
透過廣播主持人的專業性帶動結 合 AI 虛擬主播，營造出有讓人為之一亮的節目型態 也是亞洲首位將廣播節目結合 AI 擬真影像，展現台灣廣播跨界與科技的軟實力
AI主播是廣播人的助手，並非取代主持人工作
藉虛擬實境直播互動延伸廣播的限制，並賦予 AI 虛擬角色的多變來報導內容，一反過去對於 AI 機器人冷冰冰的印象。 同時為符合新南向政策，增加「多國語系翻譯」，以觸及更多聽眾及觀眾，拓展潛在的族群。加入 「手語版本」，提供手語翻譯，期盼讓身障者一起享受節目，達到無障礙的共融社會! 手語版【新聞播報 就愛NEW新聞】2023全國歌仔戲比賽
雙 AI 主播的呈現為世界首例
ChoozMo開發的AI主播再次達到新高度，能讓雙AI主播流暢使用多國語言對談 亦能根據每一國語言，創建具有當地風格的虛擬人來做為主播最為合適
多國語言AI主播
- 將語音資料與 AI 人物技術模組整合，模擬講話內容與嘴型變化。
- 文字轉語音(TTS)採用深度學習的 End-to-End FastSpeech 最新技術 (架構圖示意如下)，對比過往 TTS 模型，推論速度快速，在擬真程度 上表現極佳，在效率上遠高於過往人工合成模型。 日文AI主播影片 印尼文AI主播影片 泰文AI主播影片 馬來文AI主播影片 英文AI主播影片 越南文AI主播影片
臺灣是一個自由、開放、包容多元的國家， 以上影片的AI 主播隨著國度不同而更換臉孔，並讓身上的服飾 換裝，打進國外市場。 例如:身穿穆斯林包巾的虛擬女主播說著流利 的印尼語，服裝上就很符合印尼的國情特色，整體效果出色又新潮， 營造出強烈共鳴性，就連說其它外語也不是問題，實現一源多用。 聲音也全部由程式生成
台灣AI主播
臺語AI主播影片 原住民語AI主播影片 國語AI主播影片 客語AI主播影片
深植本土在地，才能放眼國際，播報影片皆納入臺語、客語及原住民(阿美族語) 彙集成「臺灣在地語系」播放清單。此舉使臺灣 AI 主播發展空間更 有彈性。另外在新聞的選材上，特別著墨在本土文化，將歌仔戲發揚 光大推廣至全世界，好讓更多的國際人士能夠感受臺灣之美。
而本次 AI 主播的語音，在國語、閩南語、客語、原住民(阿美族語) 重新運用真人聲音 1:1 錄製，由主持人 Lucas 攜手臺內長官、記者， 及歌手事先錄製聲音完成，發揮各自語言專長，將聲音表情融入其中 再由系統搭配虛擬人臉合成產出，取代坊間 AI 機器人的讀稿發音， 藉別具特色的不同人聲，賦予 AI 靈魂。
角色介紹
AI主播小王子：盧卡斯
AI小尖兵：志哥
由ChoozMo 進行真人建模 → 變身為可以講多國語言的AI主播
而AI茱莉亞為全虛擬的AI主播，可以根據不同國情改變樣貌與穿著
AI主播技術
ChoozMo「AI 主播」主要運用深度神經網路、深度學習、Deep Fake 技術，透過虛擬人技術的支持下，藉由人臉的關鍵特色偵測、 人臉特徵擷取、臉部重構、唇語辨別、情感及表情分析等等先進科技 合成 AI 主播，並結合圖像及語音等資料庫建立模型，並且將模型的 訓練精準化，生成與真人高度相似的虛擬分身，進而合成 AI 主播。
由 AI 合成的主播能將所輸入的中英文文稿自動生成相對應之影片， 在播報過程中，AI 主播的音頻、表情以及唇語嘴型可保持自然一致， AI 主播完全展現出與真人主播無差異的資訊傳達效果。 透過電腦視覺及 Deep Learning 技術，擷取臉部的 Facelandmark， 將語音檔的說話聲音，對應到嘴型變化，並將其套用於虛擬主播形象 讓 AI 能隨著不同內容而變換嘴型。
客製化AI主播建模流程圖
警廣建模花絮照
點我了解更多AI主播！ https://ai.choozmo.com/ai-presenter/info/