无言以对 发表于 2025-1-11 10:36:35

FitDiT - 腾讯联合复旦开源的轻量版高保真虚拟试衣模型 4G显存可使用 本地一键整合包下载



FiTDiT 是腾讯和复旦大学联合推出的一种利用 DiT 的新型服装感知增强技术,旨在实现高保真虚拟试衣。你只需要上传一个人像图像和一个衣物图像,就可以生成一个展示人物穿着所提供衣物的图像。与传统的基于 U-Net 的 LDM 相比,FiTDiT 能够将更多参数和注意力分配给高分辨率特征,从而更好地保留服装纹理,并达到尺寸感知的试衣效果。

FiTDiT 在虚拟试穿中表现出色,解决了各种场景中与纹理感知保存和尺寸感知试穿相关的挑战。且FiTDiT对硬件资源占用做了优化,不同算法的性能对比,分辨率为768x1024,20步去噪。结合CPU offload技术,FitDiT推理需要的显存可以进一步降低到6G。


FitDiT方案相比现有的开源算法有以下优势:
1. 更清晰的纹理信息
2. 更好的衣服版型维持能力
3. 更少的推理耗时
4. 更低的资源占用,最低4G显存可运行

项目地址:https://github.com/BoyuanJiang/FitDiT

使用教程:建议N卡,显存4G起(4G显卡生成速度略慢,效果略差,建议8G起最佳)
上传一张模特图片,一张衣服图片(支持上半身、下半身、连衣裙),设置相关参数,生成即可。
如遇到报错,请将文件夹选项设置为显示隐藏文件,把deepface这个文件夹隐藏属性去掉即可。


下载地址:
迅雷云盘:https://pan.xunlei.com/s/VOGIe5n0ww3_tBec9FJAe-BMA1?pwd=9z5q
夸克网盘:**** 本内容需购买 ****
百度云盘:**** 本内容需购买 ****

解压密码:https://deepface.cc/
注,解压密码是复制上面的网址,不是点进去。复制不要有空格,复制完整。

sponge 发表于 2025-1-12 11:12:34

模型的源代码在github.com/BoyuanJiang/FitDiT
可以关注下后面还会有效果更好的模型放出。

pisota 发表于 2025-1-11 13:31:21

看着不错

nsctt 发表于 2025-1-11 14:59:16

好像不错

479135884 发表于 2025-1-11 18:12:20

Traceback (most recent call last):
File "<frozen __main__>", line 3, in <module>
File "<frozen app>", line 4, in <module>
File "F:\FitDiT\preprocess\humanparsing\run_parsing.py", line 8, in <module>
    from parsing_api import onnx_inference
File "F:\FitDiT\preprocess\humanparsing\parsing_api.py", line 8, in <module>
    import torch
File "F:\FitDiT\deepface\lib\site-packages\torch\__init__.py", line 148, in <module>
    raise err
OSError: 找不到指定的模块。 Error loading "F:\FitDiT\deepface\lib\site-packages\torch\lib\shm.dll" or one of its dependencies.
请按任意键继续. . .
奇怪的是 F:\FitDiT\deepface\lib\site-packages\torch\lib\shm.dll 这个文件明明有的

无言以对 发表于 2025-1-11 18:24:42

479135884 发表于 2025-1-11 18:12
Traceback (most recent call last):
File "", line 3, in
File "", line 4, in


参考这个文档
https://www.bilibili.com/opus/967745334024339490

无言以对 发表于 2025-1-12 11:23:09

sponge 发表于 2025-1-12 11:12
模型的源代码在github.com/BoyuanJiang/FitDiT
可以关注下后面还会有效果更好的模型放出。 ...

阁下是作者吗?

sponge 发表于 2025-1-14 10:54:23

无言以对 发表于 2025-1-12 11:23
阁下是作者吗?

是的,欢迎大家使用。

myacc0851 发表于 2025-2-5 11:58:03

   :::::::::       ::::::::::       ::::::::::       :::::::::       ::::::::::         :::      ::::::::       ::    :+:    :+:      :+:            :+:            :+:    :+:      :+:                :+: :+:   :+:    :+:      :+:   +:+    +:+      +:+            +:+            +:+    +:+      +:+               +:+   +:+    +:+             +:+   +#+    +:+      +#++:++#         +#++:++#         +#++:++#+       :#::+::#         +#++:++#++:   +#+             +#++: +#+    +#+      +#+            +#+            +#+             +#+            +#+   +#+   +#+             +#+   #+#    #+#      #+#            #+#            #+#             #+#            #+#   #+#   #+#    #+#      #+#    #########       ##########       ##########       ###             ###            ###   ###    ########       #######-----------------------------------------------------
更多实用好玩的AI应用,访问 https://deepface.cc
软件WebUI正在启动中,请稍后...
-----------------------------------------------------
Traceback (most recent call last):
File "<frozen __main__>", line 3, in <module>
File "<frozen app>", line 4, in <module>
File "D:\FitDiT\preprocess\humanparsing\run_parsing.py", line 8, in <module>
    from parsing_api import onnx_inference
File "D:\FitDiT\preprocess\humanparsing\parsing_api.py", line 8, in <module>
    import torch
File "D:\FitDiT\deepface\lib\site-packages\torch\__init__.py", line 148, in <module>
    raise err
OSError: The specified module could not be found. Error loading "D:\FitDiT\deepface\lib\site-packages\torch\lib\fbgemm.dll" or one of its dependencies.
Press any key to continue . . .
大佬显示这个是在根目录下8G显存3070卡

ohw886 发表于 2025-3-23 14:35:25

谢谢分享。。。
页: [1] 2
查看完整版本: FitDiT - 腾讯联合复旦开源的轻量版高保真虚拟试衣模型 4G显存可使用 本地一键整合包下载