Meta啟動AI配音口型同步

Meta推出利用AI的短片翻譯配音功能。Meta

社媒巨頭Meta於19日在全球推出其全新的Reels短片配音功能,運用生成式人工智能(AI)翻譯語音,並可選配口型同步。Meta執行長朱克伯格早在去年Meta Connect 大會上首次預覽該功能。

目前,此翻譯功能僅支援英語和西班牙語兩者間的翻譯,Meta稱更多語言將陸續推出。至少在初期,該功能僅限擁有1000名以上粉絲的臉書(Facebook)創作者使用,以及任何擁有Instagram公開帳號的人。

該工具會根據用戶的原聲進行訓練,並產生與其語調相符的翻譯音軌。口型同步插件會將用戶的口型動作與翻譯後的語音進行配對。

若要使用該功能,可在發布短片Reels作品之前選擇「使用Meta AI翻譯您的語音」選項,也可同時選擇新增的口型同步功能。發布前可以選擇查看AI翻譯版本。其他用戶會看到一個彈出窗口,提示這是 AI 翻譯。

Meta表示,該功能最適合面對面視訊,建議用戶避免遮住嘴巴或添加過多的背景音樂。該功能最多支援兩位發言者同時使用,最好避免講話內容重疊。本報訊

科技-三藩市版