AI虚拟试衣开源。。。

你好，我是郭震

老铁们，有没有想过一天：

梅西穿上科比球衣，在篮球场上助攻。

魔笛穿上詹姆斯球衣，篮球场上杂耍。

詹姆斯穿上巴西球衣，足球场上狂奔。

大姚穿上巴黎圣日耳曼的球衣，足球场上玩头球。

这几天，Github开源了这样一款AI虚拟试衣框架。

1 AI虚拟试衣

更多虚拟试衣效果图：

并且支持：不同场景下，虚拟试衣：

还支持卡通风格的，虚拟试衣：

左侧四列：一位在沙滩边的年轻女孩；右侧四列：在公园里的一个美女：

图、文多模态混合，这么神奇的效果如何实现的？

2 实现原理

为了满足虚拟试穿系统中灵活且可控的定制需求，提出了 IMAGDressing-v1。

具体来说，引入了一个服装 UNet，它可以从 CLIP 中捕获语义特征，从 VAE 中捕获纹理特征。

混合注意模块包括一个冻结的自注意和一个可训练的交叉注意，将这些特征集成到一个冻结的去噪 UNet 中，以确保用户控制的编辑。

将发布一个全面的数据集 IGPair，其中包含超过 300,000 对服装和穿着图像，并建立标准的数据组装管道。

此外，IMAGDressing-v1 可以与 ControlNet、IP-Adapter、T2I-Adapter 和 AnimateDiff 等扩展相结合，以增强多样性和可控性。

3 如何上手玩

ending