谷歌 DeepMind 新研究：利用 AI 模型为无声视频配音_科技资讯

创始人

2024-06-18 22:41:37

0次

IT之家 6 月 18 日消息，据谷歌DeepMind新闻稿，DeepMind 近日公布了一项利用AI为无声视频生成背景音乐的“video-to-audio”技术。

IT之家获悉，当前 DeepMind 这款AI模型依然存在局限性，需要开发者使用提示词为模型预先“介绍”视频可能的声音，暂时不能直接根据视频画面添加具体音效。

据悉，该模型首先会将用户输入的视频进行拆解，此后结合用户的用户文字提示，利用扩散模型反复运算，最终以生成与视频画面协调的背景声音，例如输入一条“在黑暗中行走”的无声视频，再添加“电影、恐怖片、音乐、紧张、混凝土上的脚步声”等文字提示，相关模型就能生成恐怖风格的背景音效。

DeepMind同时表示，该“video-to-audio”模型可以为任何视频生成无限数量的音轨，还能够通过提示词内容判断生成的音频“正向性”或“反向性”，从而令生成的声音更贴近某些特定场景。

展望未来，DeepMind表示研究人员正进一步优化这款“video-to-audio”模型，计划未来能够让模型直接根据视频内容，无须通过提示词即可生成视频背景音，同时还将改善视频中人物对白的口型同步能力。

此事引发网友热议!新道游正版作... 此事引发网友热议!新道游正版作(辅助)好像存在有辅助软件(真是有挂)新道游正版作脚本下载中分为三种模...

代打辅助挂!龙岩优优辅助(辅助... 代打辅助挂!龙岩优优辅助(辅助)一贯真的是有辅助挂(发现有挂)龙岩优优辅助破解侠是真的助透视。每个模...

最新消息!盛世透视辅助器(辅助... 最新消息!盛世透视辅助器(辅助)本来真的有辅助脚本(有挂攻略)在进入盛世透视辅助器软件靠谱后，参与本...

值得注意的是!同城游抓狗腿辅助... 值得注意的是!同城游抓狗腿辅助(辅助)总是存在有辅助神器(真是有挂)所有人都在同一条线上，像星星一样...

第三方插件!顺兴茶楼开挂(辅助... 第三方插件!顺兴茶楼开挂(辅助)都是确实有辅助插件(有挂分析)1、下载好顺兴茶楼开挂脚本下载之后点击...

第三方辅助!龙岩优优辅助(辅助... 第三方辅助!龙岩优优辅助(辅助)切实是有辅助插件(有挂秘诀)进入游戏-大厅左侧-新手福利-激活码辅助...

据相关数据显示!hhpoker... 据相关数据显示!hhpoker大菠萝有没有作比(辅助)都是是有辅助攻略(有挂分享)1）hhpoker...

据公告内容!哈局八张有没有透视... 据公告内容!哈局八张有没有透视挂(辅助)竟然真的是有辅助软件(有挂教学)暗藏猫腻，小编详细说明哈局八...

据报道!四川乐易麻将辅助脚本(... 据报道!四川乐易麻将辅助脚本(辅助)真是是真的有辅助教程(有挂攻略)小薇（辅助器软件下载）致您一封信...

据通报!winner辅助软件(... 据通报!winner辅助软件(辅助)好像确实有辅助器(有挂头条)1、下载好winner辅助软件透视辅...