iPERCore - Liquid Warping GAN with Attention:人类图像合成的统一框架

Created at: 2020-11-17 23:36:25
Language: Python
License: Apache-2.0

模仿者++

更新新闻

查看开发日志的详细信息。

Liquid Warping GAN with Attention: A Unified Framework for Human Image Synthesis,包括人体运动模仿、外观迁移和新视角合成。目前该论文正在接受 IEEE TPAMI 的审查。它是我们之前 ICCV 项目impersonator的扩展,与之前的 ICCV 版本相比,它具有更强大的泛化能力并产生更高分辨率的结果(512 x 512、1024 x 1024)。

🧾 Colab 笔记本 发布 (Windows) 📑 📱 网站 📂 数据集 💡 哔哩哔哩 论坛
在 Colab 中打开 [用法] 网站 数据集 哔哩哔哩 论坛

安装

install.md 中查看更多详细信息,包括系统依赖项、python 要求和设置。请先按照install.md 中的说明进行安装。

请注意,

imags_size=512
至少需要 9.8GB GPU 内存。如果你使用的是中级GPU(例如RTX 2060),则应将其更改
image_size
为384或256。 可以参考下表:

图片尺寸 预处理 个性化 运行_模仿者 推荐GPU
256x256 3.1 GB 4.3 GB 1.1 GB 腾讯通 2060 / 腾讯通 2070
384x384 3.1 GB 7.9 GB 1.5 GB GTX 1080Ti / RTX 2080Ti / 泰坦 Xp
512x512 3.1 GB 9.8 GB 2 GB GTX 1080Ti / RTX 2080Ti / 泰坦 Xp
1024x1024 3.1 GB 20 GB —— RTX 泰坦 / P40 / V100 32G

运行演示

1. 在谷歌 Colab 上运行

在 Colab 中打开

2.以控制台(脚本)模式运行

有关更多详细信息,请参阅scripts_runner

3.GUI模式运行

即将推出!

引文

@misc{liu2020liquid,
      title={Liquid Warping GAN with Attention: A Unified Framework for Human Image Synthesis}, 
      author={Wen Liu and Zhixin Piao, Zhi Tu, Wenhan Luo, Lin Ma and Shenghua Gao},
      year={2020},
      eprint={2011.09055},
      archivePrefix={arXiv},
      primaryClass={cs.CV}
}

@InProceedings{lwb2019,
    title={Liquid Warping GAN: A Unified Framework for Human Motion Imitation, Appearance Transfer and Novel View Synthesis},
    author={Wen Liu and Zhixin Piao, Min Jie, Wenhan Luo, Lin Ma and Shenghua Gao},
    booktitle={The IEEE International Conference on Computer Vision (ICCV)},
    year={2019}
}