哇塞！复旦和小红书联手搞的InstanceAssemble，啥来头？
作者：佚名 时间：2025-12-28 08:51
字号
InstanceAssemble是什么
InstanceAssemble 是小红书与复旦大学联合推出的轻量级的布局到图像生成框架。框架通过创新的“实例组装注意力”机制，实现从简单到复杂、从稀疏到密集布局的精准图像生成。用户只需提供物体的边界框位置和内容描述，AI 能在对应位置生成符合语义的图像。InstanceAssemble 基于扩散变换器架构，采用轻量级适配方式，仅需少量额外参数能适配主流模型，大幅降低使用门槛。
InstanceAssemble的主要功能
InstanceAssemble的技术原理
轻量级适配（LoRA）：为高效适配现有扩散模型，InstanceAssemble 使用低秩适配（LoRA）技术，仅在注意力模块中引入少量可训练参数（如低秩矩阵），在不改变基础模型能力的前提下，实现布局控制功能。
评估与基准测试：为更准确地衡量布局与图像的匹配程度，InstanceAssemble 提出“布局锚定分数”（Layout Grounding Score, LGS）评估指标，创建了包含 5000 张图像和 90000 个实例的“DenseLayout”基准测试集，用于评估复杂布局条件下的生成性能。
InstanceAssemble的项目地址
InstanceAssemble的应用场景
责任编辑：CQITer新闻报料：400-888-8888 本站原创，未经授权不得转载
继续阅读
;){kind=link}
;){kind=link}
;){kind=link}
;){kind=link}