谷歌 DeepMind 新研究：利用 AI 模型为无声视频配音_科技资讯

创始人

2024-06-18 22:41:37

0次

IT之家 6 月 18 日消息，据谷歌DeepMind新闻稿，DeepMind 近日公布了一项利用AI为无声视频生成背景音乐的“video-to-audio”技术。

IT之家获悉，当前 DeepMind 这款AI模型依然存在局限性，需要开发者使用提示词为模型预先“介绍”视频可能的声音，暂时不能直接根据视频画面添加具体音效。

据悉，该模型首先会将用户输入的视频进行拆解，此后结合用户的用户文字提示，利用扩散模型反复运算，最终以生成与视频画面协调的背景声音，例如输入一条“在黑暗中行走”的无声视频，再添加“电影、恐怖片、音乐、紧张、混凝土上的脚步声”等文字提示，相关模型就能生成恐怖风格的背景音效。

DeepMind同时表示，该“video-to-audio”模型可以为任何视频生成无限数量的音轨，还能够通过提示词内容判断生成的音频“正向性”或“反向性”，从而令生成的声音更贴近某些特定场景。

展望未来，DeepMind表示研究人员正进一步优化这款“video-to-audio”模型，计划未来能够让模型直接根据视频内容，无须通过提示词即可生成视频背景音，同时还将改善视频中人物对白的口型同步能力。

透视ai！aapoker发牌逻... 透视ai！aapoker发牌逻辑，aapoker真的假的，教你攻略（有挂揭秘）1、下载好aapoke...

透视安装！wpk有辅助器吗，w... 透视安装！wpk有辅助器吗，wpk模拟器是什么，介绍教程（原来真的是有挂）；1、完成wpk模拟器是什...

透视挂透视！aapoker怎么... 透视挂透视！aapoker怎么设置抽水，aapoker真的假的，微扑克教程（有挂方法）aapoker...

透视数据！wpk刷入池率脚本，... 透视数据！wpk刷入池率脚本，wpk真的有透视嘛，技巧教程（本来存在有挂）1、实时wpk真的有透视嘛...

透视软件！aapoker辅助插... 透视软件！aapoker辅助插件工具，aapoker透视怎么用，靠谱教程（有挂规律）运aapoker...

透视存在！如何下载wpk透视版... 透视存在！如何下载wpk透视版，wpk辅助器，解密教程（果然真的有挂）1、如何下载wpk透视版ai机...

着力构建产业强市绘就宁夏银川... “十四五”以来，宁夏银川市将产业结构优化升级作为核心引擎，在工业、农业、服务业三大领域实现多点突破，...

多领域布局，北芯生命以四大技术... 深圳北芯生命科技股份有限公司(以下简称“北芯生命”)是一家专注于心血管精准介入高性能医疗器械自主研发...

透视神器！aapoker透视方... 透视神器！aapoker透视方法，aapoker辅助插件工具，可靠教程（有挂插件）进入游戏-大厅左侧...

透视游戏！wpk作弊最怕三个东... 透视游戏！wpk作弊最怕三个东西，wpk私人辅助，wpk教程（原来真的是有挂）1、wpk作弊最怕三个...