当前位置:首页 > 元宇宙 > AI

小红书联合复旦推出InstanceAssemble:AI绘画精准构图新突破,技术开源赋能创作

来源: 责编: 时间:2025-12-26 14:23:54 12观看
导读AI绘画领域迎来重要突破,小红书与复旦大学联合研发的InstanceAssemble技术,在布局控制生成方向实现关键进展。这项基于扩散变换器架构的创新方案,通过引入"实例拼装注意力"机制,成功解决了复杂场景下图像生成的布局对齐难

AI绘画领域迎来重要突破,小红书与复旦大学联合研发的InstanceAssemble技术,在布局控制生成方向实现关键进展。这项基于扩散变换器架构的创新方案,通过引入"实例拼装注意力"机制,成功解决了复杂场景下图像生成的布局对齐难题,相关研究成果已被国际顶级学术会议NeurIPS 2025收录。D5q28资讯网——每日最新资讯28at.com

传统布局控制生成技术面临三大挑战:物体位置偏移、语义理解偏差以及计算资源消耗过大。研究团队针对这些痛点,开发出无需模型重训练的轻量化适配方案,仅需增加约7100万个参数(相当于Stable Diffusion3-Medium模型的3.46%),即可实现高精度布局控制。当适配Flux.1模型时,额外参数需求更降至0.84%,显著降低技术落地门槛。D5q28资讯网——每日最新资讯28at.com

该技术的核心创新在于构建了动态实例注意力网络。用户输入边界框坐标与物体描述后,系统会先定位空间关系,再通过语义解码器生成符合物理规律的图像内容。实验数据显示,在包含90万个实例的密集场景测试中,InstanceAssemble的布局准确率较现有方法提升42%,语义一致性指标提高37%。即使在训练时仅接触稀疏布局(≤10个实例),面对密集场景(≥10个实例)仍能保持稳定性能。D5q28资讯网——每日最新资讯28at.com

为建立标准化评估体系,研究团队同步推出Denselayout基准测试集和Layout Grounding Score(LGS)评估指标。该测试集包含5000张高分辨率图像和9万个标注实例,覆盖室内设计、城市景观等八大场景。LGS指标通过三维空间匹配度、语义关联性等六个维度,实现了对布局生成质量的量化评估。D5q28资讯网——每日最新资讯28at.com

目前,这项技术已实现完整开源,代码库和预训练模型均可在GitHub平台获取。实际应用测试表明,在广告设计领域,设计师通过调整边界框参数,可将单张海报的制作时间从3小时缩短至45分钟;在动漫创作场景中,分镜脚本到视觉画面的转化效率提升60%。技术团队表示,未来将持续优化多物体交互关系的生成逻辑,探索在虚拟制片、工业仿真等领域的延伸应用。D5q28资讯网——每日最新资讯28at.com

   更多>同类资讯马斯克实测无安全员Robotaxi:主驾无人流畅应对复杂路况,称体验“完美”12-26京东内测“京东AI购”APP:智能购物新体验,生活服务一站式搞定12-26智元远征A2旗舰版V1.3升级:技能拓展、速度提升,运输更便捷12-26中国品牌闪耀巴黎:Shein实体店受捧,Labubu成圣诞热门之选12-26红果短剧11月剧本分账成绩亮眼 2家工作室5名编剧分账破记录12-26存储涨价潮来袭,年末换机正当时——三款热门机型助你精准选购在当前存储涨价背景下,可以预见的是2026年旗舰机型的大内存版本价格将会大幅上升,所以目前选购大内存版本旗舰机型是更有前瞻性的选择,强劲的性能配合大内存可以稳稳的撑过漫长的涨价周期。推荐16GB+512GB版…12-26电动化浪潮下的硬派传承 Jeep Recon以纯电之姿重塑越野新体验作为承载全球无数消费者越野情怀的标杆品牌,Jeep并未在市场变革中迷失方向,尽管其电动化转型的节奏相对比较缓慢,但是凭借深厚的品牌底蕴以及技术积淀,简单“露一手”就尽显功力。很多人都不喜欢纯电动力系统,但是不…12-26AI人才争夺白热化:科技巨头以百万年薪及顶级资源提前锁定顶尖实习生12-26卢伟冰口误引热议 小米17Ultra徕卡版设计亮眼市场抢手12-26比亚迪携手火山引擎:豆包大模型上车,开启智能座舱全系AI化新篇章12-26英伟达200亿美元获Groq技术授权,补短板应对竞争重塑AI布局12-26OpenAI联手博通打造10GW定制芯片,2026年部署开启AI硬件新篇章12-26开源新星BU-30B-A3B-Preview:低成本高效率,引领浏览器自动化新潮流12-262025汽车行业大变革:十大创新技术引领,开启智能移动空间新纪元比亚迪腾势N8L搭载的AI助手可理解复杂语义逻辑,吉利星睿大模型与DeepSeek-R1融合后,能根据用户驾驶习惯主动提供个性化服务;在上汽大众的高快NOA系统中,DeepSeek与百度文心双模型协同,大幅提…12-26马斯克点赞宇树机器人伴舞王力宏演唱会,创始人王兴兴:喜爱超预期12-26点击查看更多 +全站最新特斯拉FSD新动向:行驶中就能提交反馈,优化体验再进一步特斯拉FSD新动向:行驶中就能提交反馈,优化体验再进一步汽车保养别被忽悠!老司机教你盯紧3个关键部位,拒绝花冤枉钱汽车保养别被忽悠!老司机教你盯紧3个关键部位,拒绝花冤枉钱极氪回归赋能吉利:量价齐飞,开启“一个吉利”新征程极氪回归赋能吉利:量价齐飞,开启“一个吉利”新征程技术普惠与全球布局:MG2025年以创新破局开启新百年征程技术普惠与全球布局:MG2025年以创新破局开启新百年征程合资新能源SUV“新势力”崛起:多款车型凭实力重塑市场格局合资新能源SUV“新势力”崛起:多款车型凭实力重塑市场格局极狐领跑!京AA0001Z上路,L3自动驾驶从蓝图迈向真实交通流极狐领跑!京AA0001Z上路,L3自动驾驶从蓝图迈向真实交通流热门内容
  • 阿里千问接入万相2.6,功能比肩Sora2,AI应用领域再掀新热潮
  • 对话丽江市古城区旅拍行业协会:小红书过去一年让当地旅拍行业损失超500万,将发起集体诉讼
  • 长征十二号甲首飞倒计时!“国家队”立下“双成功”目标志在必得
  • 雷军回应懂车帝高环续航测试:小米YU7续航最长,SU7达成率领先
  • 阿里“千问”月活用户突破3000万,23天成全球增长最快AI应用
  • 京东折扣超市安徽首店落户合肥 供应链优势激活区域消费新活力
  • 双11清洁赛道“王者”诞生:石头科技凭何让智能家电成家庭健康新标配?
  • 朱雀三号首飞时间成谜?商业航天新进展与市场期待交织
  • 快手直播涉黄遭攻击后紧急行动:报案同时启动安全岗位大规模招聘
  • 快手直播间现涉黄内容,官方紧急回应:遭黑灰产攻击已报警并修复
  • 刘强东父母京东食堂帮厨显质朴 老家发年货获村民感激点赞
  • 万宁中国内地业务将全面停摆 2026年线下门店全部关闭线上商城同步关停
  • 快手到底惹了谁?
  • 豪威OVB0D手机CMOS传感器登场 2亿像素对标索尼LYTIA 901看点足
  • 米哈游蔡浩宇新作AnuNeko:AI聊天新体验,游戏领域再布局
本栏最新技术普惠与全球布局:MG2025年以创新破局开启新百年征程技术普惠与全球布局:MG2025年以创新破局开启新百年征程湖北荆州4A景区元旦免费开放!网红唐艺连唱3天,楚风游园盛宴等你来赴湖北荆州4A景区元旦免费开放!网红唐艺连唱3天,楚风游园盛宴等你来赴雷军暂别发布会舞台 小米17 Ultra携徕卡登场 售价上探7000元档位雷军暂别发布会舞台 小米17 Ultra携徕卡登场 售价上探7000元档位从汽车到金融:百度伐谋如何让AI成为产业升级的“超级引擎”从汽车到金融:百度伐谋如何让AI成为产业升级的“超级引擎”红旗HS6 PHEV上市:以亲民价重塑大五座SUV,家庭出行新优选红旗HS6 PHEV上市:以亲民价重塑大五座SUV,家庭出行新优选小米17 Ultra徕卡版来袭!影像升级巨大,光学变焦长焦首发登场小米17 Ultra徕卡版来袭!影像升级巨大,光学变焦长焦首发登场

本文链接:http://www.28at.com/showinfo-45-28777-0.html小红书联合复旦推出InstanceAssemble:AI绘画精准构图新突破,技术开源赋能创作

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 万亿风口下的抢滩战!上市公司密集布局脑机接口

下一篇: 钉钉携手小冰推出AI前台Hi1 以智能接待重塑企业门面新体验

标签:
  • 热门焦点
  • 元宇宙终究没火过两年

    来源:传播体操在ChatGPT快速破圈的同时,元宇宙的热度却一泻千里。虽然互联网大厂们都没有否认元宇宙的长期想象力,但在行动上却都纷纷表示了对元宇宙短期前景的悲观。号称改变
  • AI网红能年赚百万,普通人的新机会来了?

    来源|运营研究社作者 | 张知白编辑 | 杨佩汶设计 | 晏谈梦洁2023 年 ,数字人成为了当红的“流量话题”和“商业机会"。不管是 AI 孙燕姿走红网络,还是 AI 数字
  • 数字虚拟人23年最新变化!

    作者:小资来源:米塔之家自2021年元宇宙“爆炸”后,作为现实世界连接元宇宙的媒介之一,大批虚拟人跑步入场。到了2022年底,据天眼查数据显示,我国目前企业名称或经营范围
  • 银保监会:打击以“元宇宙”为名义的违法行为

    今日,银保监会发布《关于防范以“元宇宙”名义进行非法集资的风险提示》,全文如下:近期,一些不法分子蹭热点,以“元宇宙投资项目”“元宇宙链游”等名目吸收资金,涉
  • Meta 在衰落吗?

    扎克伯格已经很久没有出现在公众视野里了,近日,他罕见的接受播客采访,在两个小时的时间里畅谈了Meta、Facebook、Instagram、元宇宙的未来。正方观点:是的阿伦·达
  • 元宇宙平台会是上世纪末的互联网吗?

    “元宇宙”火了好几个月,互联网大厂忙于布局,资本市场热烈追捧。然而很多人还是看不明白,更多的人觉得这是一场泡沫,一场骗局。一开始接触这个怪里怪气的名词,感觉
  • Steam 禁止NFT和加密货币原因曝光

    近日,Valve(V社)总裁Gabe Newell接受PC Gamer采访时解释了该平台禁止NFT和加密货币的原因。早在2021年10月18日,PC Gamer就报道Steam推出的新规:使用区块链或允许交
  • Ceramic:为Web3.0社交应用打造的中间件

    大家关注老雅痞公众号这么久,对Web3的概念不陌生吧?让我们做一个简短的回顾,Web3主要被描述为去中心化的网络,旨在实现无服务器、去中心化的互联网,即用户掌握自己
  • 爆发在即的Layer2赛道百花齐放,谁将是领跑者?

    还记得几年前最早我们提起ETH扩容,首先想到就是Layer2,而Layer2里,首先想到的是闪电网络,状态通道,Plasma…然后折腾了几年,发现并没有什么用,许多项目方和资本也等不
Top