谷歌 DeepMind 新研究：利用 AI 模型为无声视频配音_科技资讯

创始人

2024-06-18 22:41:37

0次

IT之家 6 月 18 日消息，据谷歌DeepMind新闻稿，DeepMind 近日公布了一项利用AI为无声视频生成背景音乐的“video-to-audio”技术。

IT之家获悉，当前 DeepMind 这款AI模型依然存在局限性，需要开发者使用提示词为模型预先“介绍”视频可能的声音，暂时不能直接根据视频画面添加具体音效。

据悉，该模型首先会将用户输入的视频进行拆解，此后结合用户的用户文字提示，利用扩散模型反复运算，最终以生成与视频画面协调的背景声音，例如输入一条“在黑暗中行走”的无声视频，再添加“电影、恐怖片、音乐、紧张、混凝土上的脚步声”等文字提示，相关模型就能生成恐怖风格的背景音效。

DeepMind同时表示，该“video-to-audio”模型可以为任何视频生成无限数量的音轨，还能够通过提示词内容判断生成的音频“正向性”或“反向性”，从而令生成的声音更贴近某些特定场景。

展望未来，DeepMind表示研究人员正进一步优化这款“video-to-audio”模型，计划未来能够让模型直接根据视频内容，无须通过提示词即可生成视频背景音，同时还将改善视频中人物对白的口型同步能力。

2026版教程！wepoker... 2026版教程！wepokerplus作弊，德州局HHpoker透视脚本，真是真的是有挂（有挂实锤）...

手机维修避坑攻略：常州本地靠谱... 常州人每天的生活节奏快，手机几乎是半刻不离手的工具——上班回消息、通勤刷视频、午休点外卖、下班扫码乘...

追觅在IFA发布物理AI三大技... 9月4日，追觅在德国柏林IFA 2026集中发布全域感知系统、家庭通用模型和智能控制系统三大物理AI...

2026版教学！拱趴大菠萝开挂... 2026版教学！拱趴大菠萝开挂方法，hhpoker作弊码，切实确实有挂（有挂解密）1、在拱趴大菠萝开...

2026版辅助挂！hhpoke... 2026版辅助挂！hhpoker哪个俱乐部靠谱，wepoker破解是真的还是假的，一贯是真的有挂（有...

随着！wejoker手机版透视... 随着！wejoker手机版透视脚本，wepoker提高好牌率，真是存在有挂（有挂猫腻）wejoker...

据通报！安装不了wepoker... 据通报！安装不了wepoker，德普之星辅助工具如何设置，切实是真的有挂（有挂方略）1、玩家可以在德...

第三方插件！微扑克微乐辅助，拱... 第三方插件！微扑克微乐辅助，拱趴大菠萝自动计算机器人，切实存在有挂（有挂神器）拱趴大菠萝自动计算机器...

明白辅助挂！hh poker透... 明白辅助挂！hh poker透视器下载，大菠萝免费辅助器，果然是有挂（有挂规律）1、实时大菠萝免费辅...

有消息称！wpk私人辅助，有没... 有消息称！wpk私人辅助，有没有人wepoker，其实是有挂（有挂神器）1、任何有没有人wepoke...