当前位置:首页 > 科技  > 网络

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!

来源: 责编: 时间:2024-09-12 16:38:36 228观看
导读 让AI视频中任意主体保持一致!就在刚刚,人人都可轻松做到了。而且只需一张图片,就能实现。——上面的每一个马斯克视频,都来自同一张照片。想玩的话,只需要用上清华系AI视频玩家生数科技旗下Vidu的新功

让AI视频中任意主体保持一致!就在刚刚,人人都可轻松做到了。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

而且只需一张图片,就能实现。NMO28资讯网——每日最新资讯28at.com

——上面的每一个马斯克视频,都来自同一张照片。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

想玩的话,只需要用上清华系AI视频玩家生数科技旗下Vidu的新功能,主体参照(Subject Consistency)。NMO28资讯网——每日最新资讯28at.com

该功能能够实现对任意主体的一致性生成,让视频生成更加稳定,也更加可控。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

“现在生成AI视频内容,想要做到‘言出法随’其实还很难,不确定性让视频内容对运镜、光效等的精细控制还是得不断抽卡。”生数科技CEO唐家渝表示,“角色一致性只能让人脸保持一致,而主体参照让主体整体造型都能保持一致,给了更大的创作空间。”NMO28资讯网——每日最新资讯28at.com

这是继今年7月,生数Vidu面向全球用户上线文生视频与图生视频能力(单视频长生成8s)后的再次更新。NMO28资讯网——每日最新资讯28at.com

这次功能上新依然非常友好:NMO28资讯网——每日最新资讯28at.com

面向用户免费开放,注册即可体验。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

仅需一张图片实现主体可控NMO28资讯网——每日最新资讯28at.com

先来看看Vidu是怎么定义这个新功能的。NMO28资讯网——每日最新资讯28at.com

主体参照:允许用户上传任意主体的一张图片,然后由Vidu够锁定该主体形象,通过描述词任意切换场景,输出主体一致的视频。NMO28资讯网——每日最新资讯28at.com

划重点:任意主体NMO28资讯网——每日最新资讯28at.com

也就是说,无论是人还是动物,无论是真人还是动漫形象or虚构主体,无论是家具还是商品,都能通过这个功能在视频生成中实现一致性和可控性。NMO28资讯网——每日最新资讯28at.com

目前,所有的视频大模型中,仅有Vidu率先支持这种玩法。NMO28资讯网——每日最新资讯28at.com

不必光说不练,我们来看看真实效果。NMO28资讯网——每日最新资讯28at.com

人物主体NMO28资讯网——每日最新资讯28at.com

首先来看看以人物为主体。NMO28资讯网——每日最新资讯28at.com

上传一张87版《红楼梦》林妹妹的定妆照:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

以画面中林妹妹为主体,利用主体参照功能,生成两条视频。NMO28资讯网——每日最新资讯28at.com

突然,林妹妹上台演讲了:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

又一眨眼,妹妹已经坐在星爸爸喝咖啡了:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

当然啦,真人可以作为生成视频的主体参照,虚拟角色/动漫人物同样可以。NMO28资讯网——每日最新资讯28at.com

比如输入一张漫画女孩:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

生成视频效果是酱紫的:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

这里附上一些官方给的小tips:NMO28资讯网——每日最新资讯28at.com

如需重点保持主体面容一致,需仅截取单一主体的清晰面容图NMO28资讯网——每日最新资讯28at.com

如需重点保持主体半身一致(面容+上半身服饰),仅需截取单一主体的清晰半身图NMO28资讯网——每日最新资讯28at.com

如需重点保持主体全身一致(全身特征),仅需截取单一主体的清晰全身图NMO28资讯网——每日最新资讯28at.com

动物主体NMO28资讯网——每日最新资讯28at.com

谁能不爱可爱狗狗!NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

把这张照片丢给Vidu,就能实现狗狗走草地上,一步一步靠近你。NMO28资讯网——每日最新资讯28at.com

镜头后拉和主体运动幅度表现都还不错。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

商品主体NMO28资讯网——每日最新资讯28at.com

当把商品作为需要参照的主体时,在生成的视频中,商品外观和细节能在不同于图片的场景中保持一致。NMO28资讯网——每日最新资讯28at.com

就像下面这样:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

沙发所在的场景,说变就变。NMO28资讯网——每日最新资讯28at.com

上面还能睡一个盖了毯子的小女孩,遮挡住沙发原有部分。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

需要注意的是,当前版本仅支持单一主体的可控。NMO28资讯网——每日最新资讯28at.com

如果上传的图片有多个人物/物体,需要框选出单一主体进行生成。NMO28资讯网——每日最新资讯28at.com

Be Like:NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

不再“两步走”了NMO28资讯网——每日最新资讯28at.com

无论是制作短视频、动画作品还是广告片,“主体一致、场景一致、风格一致”都是共同的追求。NMO28资讯网——每日最新资讯28at.com

因此,AI视频生成内容想要有叙事效果,就需要不断往三个一致方面尽力靠拢。NMO28资讯网——每日最新资讯28at.com

尤其是就现实情况而言,实际的视频创作,内容往往围绕特定的对象展开——这往往也是视频生成内容容易变形、崩坏的一点,尤其在涉及复杂动作和交互的情况下。NMO28资讯网——每日最新资讯28at.com

挠头,脑阔痛。NMO28资讯网——每日最新资讯28at.com

给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!NMO28资讯网——每日最新资讯28at.com

业界首先想到的办法是先AI生图、再图生视频。NMO28资讯网——每日最新资讯28at.com

说人话,就是用Midjourney、SD什么的,生成分镜镜头画面,让每张图里的主体保持一致,然后再进行图生视频,后把每个视频片段拼接剪辑。NMO28资讯网——每日最新资讯28at.com

但一听就发现了,这样搞,无论是保持AI画图的一致性,还是后期拼拼剪剪,工作量都很大。NMO28资讯网——每日最新资讯28at.com

生数Vidu“主体参照”跟这个思路的不一样之处,就是不再两步走了。NMO28资讯网——每日最新资讯28at.com

而是通过“上传主体图+输入场景描述词”的方式,直接生成视频素材。NMO28资讯网——每日最新资讯28at.com

后,我们来厘清以及区分三个概念:NMO28资讯网——每日最新资讯28at.com

图生视频(Image to Video)NMO28资讯网——每日最新资讯28at.com

角色一致性(Character to Video)NMO28资讯网——每日最新资讯28at.com

主体参照(Subject Consistency)NMO28资讯网——每日最新资讯28at.com

图生视频基本是现在AI视频生成的基操了。NMO28资讯网——每日最新资讯28at.com

它把输入的图片作为视频首帧,然后基于首帧画面的连续生成。NMO28资讯网——每日最新资讯28at.com

Bug是无法直接输出目标场景,限制了视频内容的多样性和场景的自由度。NMO28资讯网——每日最新资讯28at.com

角色一致性,主要集中在人物形象上起效果。NMO28资讯网——每日最新资讯28at.com

它能保证人物面部特征在动态视频中保持一致,但一般来说“一致性”只顾脸,不顾整体形象。NMO28资讯网——每日最新资讯28at.com

主体参照,面向任意主体。NMO28资讯网——每日最新资讯28at.com

同时在面向人物主体时,既可选择保持面部一致,也可选择保持人物整体形象的高度一致。NMO28资讯网——每日最新资讯28at.com

后附上生数科技视频试玩链接,感兴趣的朋友可趁排队人不多,赶紧冲一波!NMO28资讯网——每日最新资讯28at.com

毕竟,免费的就是香,对吧(doge)。NMO28资讯网——每日最新资讯28at.com

体验直通车:www.vidu.studioNMO28资讯网——每日最新资讯28at.com


文章出处:量子位

本文链接:http://www.28at.com/showinfo-17-113728-0.html给我一张脸、视频背景随你换:林黛玉都被清华理工男玩废了!

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 张朝阳建议游泳馆应免费:游泳缓解颈椎压力 还能求生

下一篇: 魏哲家内部信流出:台积电是世界的台积电!

标签:
  • 热门焦点
  • Redmi Pad评测:红米充满野心的一次尝试

    从Note系列到K系列,从蓝牙耳机到笔记本电脑,红米不知不觉之间也已经形成了自己颇有竞争力的产品体系,在中端和次旗舰市场上甚至要比小米新机的表现来得更好,正所谓“大丈夫生居
  • 石头自清洁扫拖机器人G10S评测:多年黑科技集大成之作 懒人终极福音

    科技圈经常能看到一个词叫“缝合怪”,用来形容那些把好多功能或者外观结合在一起的产品,通常这样的词是贬义词,但如果真的是产品缝合的好、缝合的实用的话,那它就成了中性词,今
  • 2023 年的 Node.js 生态系统

    随着技术的不断演进和创新,Node.js 在 2023 年达到了一个新的高度。Node.js 拥有一个庞大的生态系统,可以帮助开发人员更快地实现复杂的应用。本文就来看看 Node.js 最新的生
  • 服务存储设计模式:Cache-Aside模式

    Cache-Aside模式一种常用的缓存方式,通常是把数据从主存储加载到KV缓存中,加速后续的访问。在存在重复度的场景,Cache-Aside可以提升服务性能,降低底层存储的压力,缺点是缓存和底
  • Flowable工作流引擎的科普与实践

    一.引言当我们在日常工作和业务中需要进行各种审批流程时,可能会面临一系列技术和业务上的挑战。手动处理这些审批流程可能会导致开发成本的增加以及业务复杂度的上升。在这
  • 多线程开发带来的问题与解决方法

    使用多线程主要会带来以下几个问题:(一)线程安全问题  线程安全问题指的是在某一线程从开始访问到结束访问某一数据期间,该数据被其他的线程所修改,那么对于当前线程而言,该线程
  • 腾讯VS网易,最卷游戏暑期档,谁能笑到最后?

    作者:无锈钵来源:财经无忌7月16日晚,上海1862时尚艺术中心。伴随着幻象的精准命中,硕大的荧幕之上,比分被定格在了14:12,被寄予厚望的EDG战队以绝对的优势战胜了BLG战队,拿下了总决
  • 大厂卷向扁平化

    来源:新熵作者丨南枝 编辑丨月见大厂职级不香了。俗话说,兵无常势,水无常形,互联网企业调整职级体系并不稀奇。7月13日,淘宝天猫集团启动了近年来最大的人力制度改革,目前已形成一
  • 华为和江淮汽车合作开发百万元问界MPV?双方回应来了

    8月1日消息,郭明錤今天在社交平台发文称,华为正在和江淮汽车合作,开发售价在100万元的问界MPV,预计在2024年第2季度量产,销量目标为上市首年交付5万辆。
Top