跳转到主要内容

小红书全新AI工具让你像专业人士一样构图

小红书与复旦在AI图像生成领域取得突破

Image

社交媒体平台小红书与复旦大学的合作催生了InstanceAssemble这项突破性技术,终于让用户能够真正控制AI生成图像中物体的位置。这项被著名NeurIPS 2025会议收录的创新,解决了创作者长期抱怨的问题——AI容易错置元素或误解空间关系。

解决定位难题

虽然当前的文生图系统能产生惊艳的视觉效果,但在要求精确定位物体时常常出错。想要一只猫坐在特定的椅子上?AI可能会把它放在椅子旁边——或者更糟,变成某种猫椅混合体。InstanceAssemble通过其"实例组装注意力"机制改变了这一现状。

"这就像给AI赋予了空间意识,"复旦大学计算机科学系的李文博士解释道,"用户只需为每个元素定义边界框和描述,系统就能在正确的位置生成内容。"

轻量却强大

该技术的效率令人印象深刻。相比需要完整模型重新训练,InstanceAssemble仅需添加:

  • Stable Diffusion3-Medium的3.46%参数
  • Flux.1模型的区区0.84%

这种轻量级方法使得开发者能够轻松地在现有系统中采用该技术。

基准测试进展

团队并未止步于核心技术。他们还发布了Denselayout——一个包含90,000个实例的基准数据集——以及新的评估指标来标准化全行业的性能测量。

随着所有代码和预训练模型在GitHub上公开,InstanceAssemble可能彻底改变从平面设计到广告等多个领域,最终让创作者对AI生成的构图实现像素级精准控制。

关键点:

  • 🎯 精确定位通过创新的"实例组装注意力"机制实现
  • 极小开销为现有模型增加不到4%的参数
  • 🔓 完全开源包括预训练模型和基准测试工具

喜欢这篇文章?

订阅我们的 Newsletter,获取最新 AI 资讯、产品评测和项目推荐,每周精选直达邮箱。

每周精选完全免费随时退订

相关文章

智谱与华为联合发布完全基于国产技术的突破性AI图像模型
News

智谱与华为联合发布完全基于国产技术的突破性AI图像模型

中国AI企业智谱与华为合作推出GLM-Image,这是一款完全基于国产硬件训练的革命性多模态模型。这一创新系统结合了文本与图像生成能力,尤其在汉字渲染和复杂视觉任务方面表现优异。现已作为开源软件发布,有望使先进的AI图像创作更加普及。

January 14, 2026
AI创新国产技术计算机视觉
MIT自动化'运动工厂'赋予AI物理直觉
News

MIT自动化'运动工厂'赋予AI物理直觉

来自MIT、NVIDIA和加州大学伯克利分校的研究人员攻克了视频分析领域的一大难题——教会AI理解物理运动。他们的自动化'FoundationMotion'系统无需人工干预即可生成高质量训练数据,帮助AI系统以惊人准确度掌握轨迹与时机等概念。初期测试显示其性能超越更庞大模型,标志着机器真正理解物体运动规律的进展。

January 12, 2026
计算机视觉AI训练运动分析
中国研究人员教会AI在图像生成中自我纠错
News

中国研究人员教会AI在图像生成中自我纠错

中国高校取得突破性进展,解决了AI的'视觉读写障碍'——图像系统能理解概念却难以正确呈现的问题。他们的UniCorn框架如同内部质检团队,能在创作过程中捕捉并修正错误。早期测试显示其在空间准确性和细节处理方面有显著提升。

January 12, 2026
AI创新计算机视觉机器学习
News

科技行业资深人士创立liko.ai,推出更智能的隐私保护家用摄像头

美团前硬件负责人李瑞安(Ryan Li)的新创企业liko.ai已获得商汤科技和科大讯飞关联公司的投资。这家初创公司旨在通过基于边缘的人工智能技术革新家用安防摄像头——该技术在本地而非云端处理视频,既解决了日益增长的隐私担忧,又增添了更智能的检测功能。他们的首批产品预计将于2026年年中面市。

January 7, 2026
智能家居计算机视觉边缘计算
News

智能家居初创公司liko.ai获得边缘AI视觉技术融资

人工智能初创企业liko.ai已获得首轮融资,投资方包括商汤国香资本和东方财富海等知名机构。这家由智能硬件资深人士Ryan Li领导的公司,旨在通过基于边缘的视觉语言模型(在本地而非云端处理数据)来改变家庭自动化。其AI家庭中心承诺提供更智能、更私密的智能家居体验。

January 6, 2026
边缘计算智能家居计算机视觉
字节跳动StoryMem为AI视频注入记忆增强能力
News

字节跳动StoryMem为AI视频注入记忆增强能力

字节跳动与南洋理工大学研究人员开发的StoryMem系统创新性地解决了AI视频生成的持续性难题。通过模拟人类记忆机制,该系统保持了跨场景的角色一致性——即便是Sora和Kling等模型也面临的挑战。该方案巧妙地将关键帧存储为参考,同时保持计算成本可控。早期测试显示在视觉连贯性和用户偏好评分方面均有显著提升。

January 4, 2026
AI视频生成字节跳动计算机视觉