AI热点 7小时前 137 阅读 0 评论

Meta 公布 Reels 短视频音频翻译功能,利用 AI 多语言配音对口型

作者头像
AI中国

AI技术专栏作家 | 发布了 246 篇文章

IT之家 8 月 24 日消息,Meta 现已正式公布一项 Reels 短视频音频翻译功能,首批上线 Facebook 与 Instagram 平台,主要利用 AI 将短视频内的人物说话声自动翻译成不同语言,该功能可大幅降低多语言视频制作成本,帮助已经具备多语言内容的创作者更高效地分发作品。

据介绍,相应 AI 模型支持嘴型对齐、可同步翻译两人对谈内容,同时可根据双方音色特性合成与本人声线相似的翻译音轨进行区别细分,使视频表现更加自然。

IT之家注意到,目前相应功能暂仅支持英语、西班牙语,官方建议创作者在拍摄时采用面向镜头的“直述型内容”,保持清晰发音、减少背景噪音,以提高翻译与嘴型同步的准确度。

除了自动翻译外,Meta 还为 Facebook 端提供多语言音轨上传选项,创作者可通过 Meta Business Suite 的 Reels 编辑器,为单条视频上传最多 20 条不同语言的音轨,并标注语言类别,相应音轨可在发布前或发布后进行增删或替换,观众会根据其语言设置自动播放对应版本。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

作者头像

AI前线

专注人工智能前沿技术报道,深入解析AI发展趋势与应用场景

246篇文章 1.2M阅读 56.3k粉丝

评论 (128)

用户头像

AI爱好者

2小时前

这个更新太令人期待了!视频分析功能将极大扩展AI的应用场景,特别是在教育和内容创作领域。

用户头像

开发者小明

昨天

有没有人测试过新的API响应速度?我们正在开发一个实时视频分析应用,非常关注性能表现。

作者头像

AI前线 作者

12小时前

我们测试的平均响应时间在300ms左右,比上一代快了很多,适合实时应用场景。

用户头像

科技观察家

3天前

GPT-4的视频处理能力已经接近专业级水平,这可能会对内容审核、视频编辑等行业产生颠覆性影响。期待看到更多创新应用!