谷歌 DeepMind 新研究：利用 AI 模型为无声视频配音_科技资讯

创始人

2024-06-18 22:41:37

0次

IT之家 6 月 18 日消息，据谷歌DeepMind新闻稿，DeepMind 近日公布了一项利用AI为无声视频生成背景音乐的“video-to-audio”技术。

IT之家获悉，当前 DeepMind 这款AI模型依然存在局限性，需要开发者使用提示词为模型预先“介绍”视频可能的声音，暂时不能直接根据视频画面添加具体音效。

据悉，该模型首先会将用户输入的视频进行拆解，此后结合用户的用户文字提示，利用扩散模型反复运算，最终以生成与视频画面协调的背景声音，例如输入一条“在黑暗中行走”的无声视频，再添加“电影、恐怖片、音乐、紧张、混凝土上的脚步声”等文字提示，相关模型就能生成恐怖风格的背景音效。

DeepMind同时表示，该“video-to-audio”模型可以为任何视频生成无限数量的音轨，还能够通过提示词内容判断生成的音频“正向性”或“反向性”，从而令生成的声音更贴近某些特定场景。

展望未来，DeepMind表示研究人员正进一步优化这款“video-to-audio”模型，计划未来能够让模型直接根据视频内容，无须通过提示词即可生成视频背景音，同时还将改善视频中人物对白的口型同步能力。

第3分钟开挂"东阳四... 第3分钟开挂"东阳四副牌辅助"原生有开挂透视辅助脚本(有挂规律);1、让任何用户在无需AI插件第三方...

盘点开挂！wepoker有没有... 盘点开挂！wepoker有没有挂，天蝎大厅辅助，开挂（透视）辅助安装（有挂技术）;1、很好的天蝎大厅...

透视神器！四川麻将口诀顺口溜，... 透视神器！四川麻将口诀顺口溜，微乐三带辅助（透视）开挂辅助挂新版2026教程;相信小伙伴都知道这个透...

第1分钟辅助"财神十... 第1分钟辅助"财神十三张辅助"原本有开挂辅助脚本(有挂透视);是一款可以让一直输的玩家，快速成为一个...

详细开挂！约局吧德州可以透视吗... 详细开挂！约局吧德州可以透视吗，浙江游戏茶苑脚本修改，开挂（透视）辅助脚本（有挂猫腻）;1、这是跨平...

透视app！兴动互娱辅助，新漫... 透视app！兴动互娱辅助，新漫游免费辅助器（透视）开挂辅助下载黑科技教程；小薇（透视辅助）致您一封信...

第五分钟开挂"掌中乐... 第五分钟开挂"掌中乐游戏修改器"原先有开挂辅助脚本(有挂技巧)；掌中乐游戏修改器软件透视开挂作为一款...

传授开挂！hhpoker俱乐部... 传授开挂！hhpoker俱乐部是干嘛的，新广西老友辅助在，开挂（透视）辅助脚本（证实有挂）;亲，有的...

透视线上！粤友会辅助，新全游辅... 透视线上！粤友会辅助，新全游辅助器（透视）开挂辅助软件解密教程；透视线上！粤友会辅助，新全游辅助器（...

第四分钟开挂"心悦游... 《第四分钟开挂"心悦游戏万能透视辅助器免费"原先有开挂辅助挂(有挂实锤)》心悦游戏万能透视辅助器免...