微軟VALL-E只需3秒模擬真實聲音。圖片來源：VALL-E
微軟新的AI模型「VALL-E」帶來新革命，用戶僅提供3秒鐘的音訊，該模型便能模擬本人說話的聲音、語調及說話時的情緒，甚至連音訊背景的「聲音環境」，也能如法炮製，不過如此功能可能被詐騙人士利用，微軟也開發檢測模型，區分該音訊是否經由VALL-E合成，且制定相關AI原則，避免惡意濫用。
微軟研究人員表示，VALL-E基於Meta在2022年10月發表的EnCodec技術，所打造而成的「神經編碼解碼器語言模型」，不同於一般透過操控波形合成語音的常見文字轉語音法，而是從文字與聲音提示，產生個別音訊編碼解碼器程式碼，並透過EnCodec，將資訊分解成可稱為「標記」（Token）的個別元件，進而分析人類發音。
微軟指出，VALL-E能對比訓練資料與「學會」的聲音，只要上傳3秒鐘的音檔，即可複製該語調來說話，為了建構VALL-E的語音合成能力，微軟採用內含7千多人、約 6 萬小時說話內容的LibriLight音訊庫訓練，以提供用戶數十個的AI模型執行範例音訊。
微軟強調，由於VALL-E還可模擬音訊背景的「聲音環境」，簡單來說，如果音訊來自不同場合，像講電話、搭乘交通工具、開車等背景，接聽者會感覺音訊是經該背景所傳遞而來，因此，微軟準備應對的檢測模型，辨別真假音訊，預防VALL-E成為詐騙和網路攻擊的武器。
延伸閱讀： 在中國購買Android手機 走到天涯海角都被追蹤 蘋果屹立不搖關鍵 庫克：用人4原則成很好公式 張忠謀的禁忌！年後面試台積電不能這樣回答 迪士尼裁員7千人 考慮將作品授權給對手
1指點入看錢景： 找工作快上1111人力銀行 https://www.1111.com.tw/ 想找更多兼職打工 https://parttime.1111.com.tw/ 科技新知請上科技島https://www.technice.com.tw youtube強檔影音 1111人力銀行一次滿足 https://www.1111.com.tw/162804/ 1111產經新聞網 職場產業最核心 https://www.1111.com.tw/news