InstanceAssemble:AI 绘画精准布局新突破

小红书与复旦大学合作推出InstanceAssemble,实现复杂图像排版的精准还原,为AI绘画带来新阶段。

10效率工具AI绘画精准布局InstanceAssemble小红书

InstanceAssemble:AI 绘画精准布局新突破

12月26日,小红书与复旦大学共同推出InstanceAssemble技术,该技术通过创新“实例组装注意力”机制,实现了从简单到复杂、稀疏到密集布局的精准图像生成,标志着AI绘画进入“可精准构图”的新阶段。

InstanceAssemble基于扩散变换器架构,用户只需提供每个物体的边界框位置和内容描述,AI就能在对应位置生成符合语义的图像内容。无论是简单物体还是复杂场景,InstanceAssemble都能保持高精度的布局对齐和语义一致性。

值得一提的是,InstanceAssemble采用轻量级适配方式,无需重新训练整个模型,仅通过约7100万个参数就能适配Stable Diffusion3-Medium模型,适配Flux.1模型更是低至0.84%。

小红书开源 InstanceAssemble:让 AI 精准还原复杂图像排版插图

该技术已在GitHub开源,代码和预训练模型可供获取。

更多详情请访问:InstanceAssemble技术介绍