多主体驱动生成能力达SOTA，字节UNO模型可处理多种图像生成任务

文章预览

作者：昭昭 编辑：李宝珠 转载请联系本公众号获得授权，并标明来源 「UNO：通用定制化图像生成」教程已上线至 HyperAI超神经官网的教程板块中，欢迎体验！ 如今，主体驱动生成 (subject-driven generation) 已经广泛应用于图像生成领域，但其在数据可扩展性和主体扩展性方面仍面临诸多挑战，例如从单主体数据集转向多主体并对其进行扩展尤为困难； 目前的热门研究方向是单主体，在面对多主体生成任务时表现欠佳。 针对于此，字节跳动 Intelligent Creation 团队利用扩散 Transformer 模型本身具备的上下文生成能力，生成了具有高度一致性的多主体配对数据，并以 FLUX 为基础模型提出了 UNO 模型，能够处理图像生成任务中的不同输入条件。其借助「模型-数据共同进化」的新范式，在优化模型性能的同时，丰富训练数据，提高生成图像的质量和多样性。 研究 ………………………………