网购时，你是不是也被买家秀和卖家秀的巨大差异伤到过?明明是同一件衣服，穿在模特身上时尚感爆棚，怎么到自己身上就变得“惨不忍睹”?别担心!德国比勒费尔德大学的机器学习团队开发了一项名为 TryOffDiff 的 AI 黑科技，可以将照片中的人物“去掉”，只留下衣服本身，生成一张标准的商品展示图!
这项技术利用了强大的“扩散模型”人工智能技术，能够从一张照片中识别出衣服的形状、颜色、纹理等信息，并将这些信息“还原”成一张高清的商品展示图。 生成的图片不仅细节清晰逼真，还能自动去除背景，就像专业摄影师的作品一样!
TryOffDiff 的工作原理是什么呢?简单来说，它就像一个技艺精湛的“裁缝”。首先，它会使用一种名为 SigLIP 的图像编码器，从照片中提取出衣服的特征信息，包括颜色、纹理、图案等等，就像裁缝仔细观察布料一样。 然后，它会将这些信息“喂”给Stable Diffusion 图像生成模型。Stable Diffusion 就像一台神奇的“缝纫机”，能够根据输入的信息生成各种各样的图像。 最后，Stable Diffusion 会根据提取到的衣服特征信息，生成一张标准的商品展示图，并将衣服“穿”在一个虚拟模特身上，就像裁缝制作出一件完美的成衣一样。
为了测试 TryOffDiff 的效果，研究人员使用了一个名为 VITON-HD 的数据集进行训练和测试。 实验结果表明，TryOffDiff 的效果非常出色，它生成的服装图片不仅细节清晰，而且非常逼真，甚至可以媲美专业摄影师的作品! 与现有的虚拟试衣技术相比，TryOffDiff 在保留服装细节方面表现更加出色，尤其是在图案和logo等方面。
这项技术的应用前景非常广阔，它不仅可以帮助消费者更好地了解商品信息，还可以帮助电商平台提升商品展示效果，降低退货率。 未来，你网购衣服时，可能只需要上传一张自己的照片，就能看到自己穿上不同衣服的效果，再也不用担心买家秀和卖家秀的“货不对板”了!
在线体验：https://huggingface.co/spaces/rizavelioglu/tryoffdiff
项目地址：https://rizavelioglu.github.io/tryoffdiff/