Fashion-VDM只需要给定一张衣物图像和一段人物视频,它就能帮你生成一段新的视频，展示该人物穿上输入衣物后的视频效果，且该人物的动作、表情和身体姿势保持一致。
亮点直击
支持上传人物视频，将衣服穿在模特身上 可以生成360度无死角试衣视频 能模拟衣服的动态变化，比如褶皱、摆动等等
相关链接
主页：https://johannakarras.github.io/Fashion-VDM/
介绍
Fashion-VDM能清晰地展示衣物的复杂细节，如纹理、光泽、褶皱等， 生成的视频表现出更真实的衣物外观，相较于其他视频虚拟试穿方法，衣物的细节更加丰富且自然。
与现有的虚拟试穿方法相比，Fashion-VDM生成的视频在时间维度上表现出更好的一致性。视频中的人物动作流畅且没有跳帧或断层，确保了整体的连贯性。
与传统的图像虚拟试穿相比，视频虚拟试穿能够更加生动地展示衣物如何与人物的运动互动。例如，衣物的动态形态变化（如随人物动作而产生的褶皱、摆动等）被准确捕捉。
但Fashion-VDM也有不足：人物体型不够精准、试穿效果中出现瑕疵。由于输入的衣服图片通常只有一个角度，因此在无法看到的区域，可能会出现一些"凭空生成"的不真实细节。
方法
Fashion-VDM 的训练分为多个阶段，每个阶段的帧长度都会增加。我们首先对图像模型进行预训练，只在图像数据集上训练空间层。在后续阶段，我们会在视频数据集中越来越长的连续帧批次上训练时间和空间层。
感谢你看到这里，也欢迎点击关注下方公众号并添加公众号小助手加入官方读者交流群，一个有趣有AI的AIGC公众号:关注AI、深度学习、计算机视觉、AIGC、Stable Diffusion、Sora等相关技术，欢迎一起交流学习💗～
没有评论:
发表评论