Meta 公布 Reels 短视频音频翻译功能, 利用 AI 多语言配音对口型

IT之家8月24日消息，Meta现已正式公布一项Reels短视频音频翻译功能，首批上线Facebook与Instagram平台，主要利用AI将短视频内的人物说话声自动翻译成不同语言，该功能可大幅降低多语言视频制作成本，帮助已经具备多语言内容的创作者更高效地分发作品。

据介绍，相应AI模型支持嘴型对齐、可同步翻译两人对谈内容，同时可根据双方音色特性合成与本人声线相似的翻译音轨进行区别细分，使视频表现更加自然。

IT之家注意到，目前相应功能暂仅支持英语、西班牙语，官方建议创作者在拍摄时采用面向镜头的“直述型内容”，保持清晰发音、减少背景噪音，以提高翻译与嘴型同步的准确度。

除了自动翻译外，Meta还为Facebook端提供多语言音轨上传选项，创作者可通过MetaBusinessSuite的Reels编辑器，为单条视频上传最多20条不同语言的音轨，并标注语言类别，相应音轨可在发布前或发布后进行增删或替换，观众会根据其语言设置自动播放对应版本。