当前位置:首页 > 元宇宙 > AI

输入配音文件即可生成人物对话场景,Meta 公布 audio2photoreal AI 框架

来源: 责编: 时间:2024-01-15 09:17:53 369观看
导读 1 月 9 日消息,Meta 日前公布了一项名为audio2photoreal 的 AI 框架,该框架能够生成一系列逼真的 NPC 人物模型,并借助现有配音文件自动为人物模型“对口型”“摆动作”。▲ 图源 Meta 研究报告(下同)从官方研究报

1 月 9 日消息,Meta 日前公布了一项名为audio2photoreal 的 AI 框架,该框架能够生成一系列逼真的 NPC 人物模型,并借助现有配音文件自动为人物模型“对口型”“摆动作”。t5O28资讯网——每日最新资讯28at.com

t5O28资讯网——每日最新资讯28at.com

t5O28资讯网——每日最新资讯28at.com

▲ 图源 Meta 研究报告(下同)

从官方研究报告中得知,Audio2photoreal 框架在接收到配音文件后,首先生成一系列 NPC模型,之后利用量化技术及扩散算法生成模型用动作,其中量化技术为框架提供动作样本参考、扩散算法用于改善框架生成的人物动作效果。t5O28资讯网——每日最新资讯28at.com

研究人员提到,该框架可以生成 30 FPS的“高质量动作样本”,还能模拟人类在对话中“手指点物”、“转手腕”或“耸肩”等不由自主的“习惯性动作”。t5O28资讯网——每日最新资讯28at.com

t5O28资讯网——每日最新资讯28at.com

t5O28资讯网——每日最新资讯28at.com

研究人员援引自家实验结果,在对照实验中有43%的评估者对框架生成的人物对话场景感到“强烈满意”,因此研究人员认为 Audio2photoreal 框架相对于业界竞品能够生成“更具动态和表现力”的动作。t5O28资讯网——每日最新资讯28at.com

t5O28资讯网——每日最新资讯28at.com

据悉,研究团队目前已经在GitHub公开了相关代码和数据集,感兴趣的小伙伴可以点此访问。t5O28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-45-3193-0.html输入配音文件即可生成人物对话场景,Meta 公布 audio2photoreal AI 框架

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: AI 助力微软发现新材料:80 小时完成 20 年筛选任务,电池中锂用量有望减少 70%

下一篇: 用于防范 AI 语音诈骗,杀毒软件公司 McAfee 推出 Mockingbird 项目

标签:
  • 热门焦点
  • AI界地震!美国对OpenAI展开调查!监管风暴来袭!

    来源:清元宇宙还记得5月OpenAI在国会山听证会上的自信、坦诚、游刃有余的问答吗?那时的Sam Altman可谓意气风发,在耐心、友好的国会议员面前,就AI立法、大模型安全性问题侃侃而
  • 企业热、用户冷,元宇宙第一站将是“营销场”?

    如果说2021年底什么最火热,那元宇宙当之无愧。“万物皆可元宇宙”似乎成为新的流行语,在广告中也常常听到“社交元宇宙”“购物元宇宙”等等。就在近日,有消息传
  • 江西将探索成立元宇宙联盟,韩国将加强对NFT和元宇宙的监管

    《元宇宙新鲜事》有:江西将探索成立元宇宙联盟,支持南昌规划建设元宇宙试验区;韩国金融监督局将加强对NFT和元宇宙的监管;任天堂社长表示暂时不打算加入元宇宙。【
  • 冰墩墩还能火多久?

    作者:田巧云题图源自北京2022年冬奥会官方微博如果要问2022年的开年明星是谁,冰墩墩当仁不让。几乎所有人都被那个抖雪的动作实力圈粉。在社交媒体的助推,以及日
  • 这个好莱坞影视制作公司涉足NFT,让持有者在制作中发挥作用

    前米高梅首席执行官Roger Birnbaum和AOL的接班人Mark Kimsey成立了一个新的好莱坞工作室,提供 NFT,让持有者在制作中发挥作用Electromagnetic Productions 创始
  • 元宇宙需要的5个重要安全功能

    元宇宙的可能用途使其成为一个令人难以置信的概念,但是,就像科技界的任何事物一样,需要做一些事情来控制其使用。元宇宙的安全功能需要仔细考虑和开发,以保护用户
  • 为什么元宇宙将永远改变体育和你的生活?

    自从Facebook更名为Meta以来,Metaverse这个词已经被大家所熟知。但是当Metaverse仍然被许多人视为一个虚拟的平行世界时,一些项目已经显示出Metaverse将如何永远
  • 融资千万美元的元宇宙平台UGC到底是什么?

    据获悉,全球化元宇宙社交平台BUD Technologies, Inc.(以下简称“BUD”)宣布完成1500万美元A+轮融资,本轮融资由启明创投领投,老股东源码资本、GGV纪源资本、云九资
  • 初探元宇宙

    2021年可以被称为“元宇宙”元年。继2021年3月沙盒游戏平台Roblox将“元宇宙”概念放入招股书中,被称为“元宇宙”第一股后,Facebook更名为Meta, 引发全球范围内
Top