InstantCharacter 投稿 量子位 | 公众号 QbitAI GPT-4o带火的漫画风角色生成，现在有了开源版啦！ 腾讯混元携手InstantX团队合作打破次元壁，开源 定制化角色生成插件——InstantCharacter 。 以往针对角色驱动的图像生成方法，都存在一定的缺陷。 例如，基于适配器的方案虽然基本实现主体一致和文本可控，但在泛化性、姿势变化和风格转换的开放域角 色方面仍然存在困难。基于微调则需对模型进行重新训练，从而浪费过长的时间。更不必说，费用高昂的推 理时间的微调。 为了更好地适应DiT模型，研究员提出了一种可扩展的 full-transformer适配器 ，它作为角色图像与基础模 型潜在生成空间之间的关键连接，通过增加层深度和隐藏特征尺寸实现可扩展性。 而现在这个插件基于 DiTs（Diffusion Transformers） ，能在保证推理效率和文本可编辑性的同时，完 美实现角色个性化创作。 那么一起看看它具体是如何实现的？ 方法介绍 现代 DiTs与传统的UNet架构相比，展现出前所未有的保真度和容量，为生成和编辑任务提供了更强大的基 础。基于此，InstantChara ...