谷歌 DeepMind 新研究：利用 AI 模型为无声视频配音_科技资讯

创始人

2024-06-18 22:41:37

0次

IT之家 6 月 18 日消息，据谷歌DeepMind新闻稿，DeepMind 近日公布了一项利用AI为无声视频生成背景音乐的“video-to-audio”技术。

IT之家获悉，当前 DeepMind 这款AI模型依然存在局限性，需要开发者使用提示词为模型预先“介绍”视频可能的声音，暂时不能直接根据视频画面添加具体音效。

据悉，该模型首先会将用户输入的视频进行拆解，此后结合用户的用户文字提示，利用扩散模型反复运算，最终以生成与视频画面协调的背景声音，例如输入一条“在黑暗中行走”的无声视频，再添加“电影、恐怖片、音乐、紧张、混凝土上的脚步声”等文字提示，相关模型就能生成恐怖风格的背景音效。

DeepMind同时表示，该“video-to-audio”模型可以为任何视频生成无限数量的音轨，还能够通过提示词内容判断生成的音频“正向性”或“反向性”，从而令生成的声音更贴近某些特定场景。

展望未来，DeepMind表示研究人员正进一步优化这款“video-to-audio”模型，计划未来能够让模型直接根据视频内容，无须通过提示词即可生成视频背景音，同时还将改善视频中人物对白的口型同步能力。

透视关于！aapoker安装包... 透视关于！aapoker安装包怎么使用，aapoker ai插件（透视）果然是真的技巧（哔哩哔哩）1...

透视普及！德普之星私人局辅助免... 透视普及！德普之星私人局辅助免费，德普之星私人局辅助免费（透视）都是真的有器（哔哩哔哩）暗藏猫腻，小...

脚本教你！wepoker代打辅... 脚本教你！wepoker代打辅助，we poker游戏下（透视）确实存在有软件（哔哩哔哩）1、下载好...

脚本开挂！hhpoker辅助软... 脚本开挂！hhpoker辅助软件下载，hhpoker作必弊码（透视）好像存在有器（哔哩哔哩）1、玩家...

透视专业！wepoker插件辅... 透视专业！wepoker插件辅助，wepoker私人局辅助器怎么用（透视）竟然真的是有插件（哔哩哔哩...

透视解谜！aapoker辅助怎... 透视解谜！aapoker辅助怎么用，aapoker破解侠是真的吗（透视）果然真的有器（哔哩哔哩）1、...

脚本详细！hhpoker是真的... 脚本详细！hhpoker是真的吗，hhpoker软件安装包（透视）好像有软件（哔哩哔哩）暗藏猫腻，小...

脚本解密！德普之星透视辅助软件... 脚本解密！德普之星透视辅助软件是真的吗，德普之星透视辅助软件下载（透视）确实真的是有挂（哔哩哔哩）1...

脚本解谜！wepoker如何设... 脚本解谜！wepoker如何设置透视，wepoker私人局透视方法（透视）都是是有脚本（哔哩哔哩）1...

透视辅助！aapoker发牌逻... 透视辅助！aapoker发牌逻辑，aapoker怎么开辅助器（透视）确实存在有脚本（哔哩哔哩）1、金...