当前位置:首页 > 科技  > 资讯

谷歌 DeepMind 新研究:利用 AI 模型为无声视频配音

来源: 责编: 时间:2024-06-20 08:55:10 286观看
导读来源:IT之家 据谷歌 DeepMind 新闻稿,DeepMind 近日公布了一项利用 AI 为无声视频生成背景音乐的 "video-to-audio" 技术。IT 之家获悉,当前 DeepMind 这款 AI 模型依然存在局限性,需要开发者使用提示词为模型预先 " 介绍

来源:IT之家 Ri728资讯网——每日最新资讯28at.com

据谷歌 DeepMind 新闻稿,DeepMind 近日公布了一项利用 AI 为无声视频生成背景音乐的 "video-to-audio" 技术。Ri728资讯网——每日最新资讯28at.com

IT 之家获悉,当前 DeepMind 这款 AI 模型依然存在局限性,需要开发者使用提示词为模型预先 " 介绍 " 视频可能的声音,暂时不能直接根据视频画面添加具体音效Ri728资讯网——每日最新资讯28at.com

据悉,该模型首先会将用户输入的视频进行拆解,此后结合用户的用户文字提示,利用扩散模型反复运算,最终以生成与视频画面协调的背景声音,例如输入一条 " 在黑暗中行走 " 的无声视频,再添加 " 电影、恐怖片、音乐、紧张、混凝土上的脚步声 " 等文字提示,相关模型就能生成恐怖风格的背景音效。Ri728资讯网——每日最新资讯28at.com

Ri728资讯网——每日最新资讯28at.com

DeepMind 同时表示,该 "video-to-audio" 模型可以为任何视频生成无限数量的音轨,还能够通过提示词内容判断生成的音频 " 正向性 " 或 " 反向性 ",从而令生成的声音更贴近某些特定场景Ri728资讯网——每日最新资讯28at.com

展望未来,DeepMind 表示研究人员正进一步优化这款 "video-to-audio" 模型,计划未来能够让模型直接根据视频内容,无须通过提示词即可生成视频背景音,同时还将改善视频中人物对白的口型同步能力。Ri728资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-16-94985-0.html谷歌 DeepMind 新研究:利用 AI 模型为无声视频配音

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 再次亮相欧洲杯,容声冰箱硬核诠释中国制造“新模样”

下一篇: 微软承认 4 月 /5 月更新导致 Win10 开始菜单 / 任务栏应用交互 BUG

标签:
  • 热门焦点
  • 把LangChain跑起来的三个方法

    使用LangChain开发LLM应用时,需要机器进行GLM部署,好多同学第一步就被劝退了,那么如何绕过这个步骤先学习LLM模型的应用,对Langchain进行快速上手?本片讲解3个把LangChain跑起来
  • 十个简单但很有用的Python装饰器

    装饰器(Decorators)是Python中一种强大而灵活的功能,用于修改或增强函数或类的行为。装饰器本质上是一个函数,它接受另一个函数或类作为参数,并返回一个新的函数或类。它们通常用
  • JavaScript学习 -AES加密算法

    引言在当今数字化时代,前端应用程序扮演着重要角色,用户的敏感数据经常在前端进行加密和解密操作。然而,这样的操作在网络传输和存储中可能会受到恶意攻击的威胁。为了确保数据
  • 签约井川里予、何丹彤,单视频点赞近千万,MCN黑马永恒文希快速崛起!

    来源:视听观察永恒文希传媒作为一家MCN公司,说起它的名字来,可能大家会觉得有点儿陌生,但是说出来下面一串的名字之后,或许大家就会感到震惊,原来这么多网红,都签约这家公司了。根
  • 疑似小米14外观设计图曝光:后置相机模组变化不大

    下半年的大幕已经开启,而谁将成为下半年手机圈的主角就成为了大家关注的焦点,其中被传有望拿下新一代骁龙8 Gen3旗舰芯片的小米14系列更是备受大家瞩
  • 2纳米决战2025

    集微网报道 从三强争霸到四雄逐鹿,2nm的厮杀声已然隐约传来。无论是老牌劲旅台积电、三星,还是誓言重回先进制程领先地位的英特尔,甚至初成立不久的新
  • OPPO K11搭载长寿版100W超级闪充:26分钟充满100%

    据此前官方宣布,OPPO将于7月25日也就是今天下午14:30举办新品发布会,届时全新的OPPO K11将正式与大家见面,将主打旗舰影像,和同档位竞品相比,其最大的卖
  • OPPO K11采用全方位护眼屏:三大护眼能力减轻视觉疲劳

    日前OPPO官方宣布,全新的OPPO K11将于7月25日正式发布,将主打旗舰影像,和同档位竞品相比,其最大的卖点就是将配备索尼IMX890主摄,堪称是2000档位影像表
  • 英特尔Xe HPG游戏显卡:拥有512EU,单风扇版本

    据10 月 30 日外媒 TheVerge 消息报道,英特尔 Xe HPG Arc Alchemist 的正面实被曝光,不仅拥有 512 EU 版显卡,还拥有 128EU 的单风扇版本。另外,这款显卡 PCB
Top