yunjey/stargan là dự án Python với 5.3k sao trong nhóm AI Tools. StarGAN - Official PyTorch Implementation (CVPR 2018)
Tóm tắt dựng từ metadata GitHub của chính dự án — chưa có bài review TopGit. Trang sẽ tự động cập nhật khi bài review đầy đủ được xuất bản.
VÌ SAO CHƯA CÓ REVIEW
TopGit viết bài đầy đủ cho repo có nhiều sao nhất và được yêu cầu nhiều nhất. Trang này là snapshot trong thời gian chờ — xem README gốc ở tab READ ME.
***** New: StarGAN v2 is available at https://github.com/clovaai/stargan-v2 *****
This repository provides the official PyTorch implementation of the following paper:
StarGAN: Unified Generative Adversarial Networks for Multi-Domain Image-to-Image Translation
Yunjey Choi1,2, Minje Choi1,2, Munyoung Kim2,3, Jung-Woo Ha2, Sung Kim2,4, Jaegul Choo1,2 1Korea University, 2Clova AI Research, NAVER Corp. 3The College of New Jersey, 4Hong Kong University of Science and Technology
https://arxiv.org/abs/1711.09020
Abstract:Recent studies have shown remarkable success in image-to-image translation for two domains. However, existing approaches have limited scalability and robustness in handling more than two domains, since different models should be built independently for every pair of image domains. To address this limitation, we propose StarGAN, a novel and scalable approach that can perform image-to-image translations for multiple domains using only a single model. Such a unified model architecture of StarGAN allows simultaneous training of multiple datasets with different domains within a single network. This leads to StarGAN's superior quality of translated images compared to existing models as well as the novel capability of flexibly translating an input image to any desired target domain. We empirically demonstrate the effectiveness of our approach on a facial attribute transfer and a facial expression synthesis tasks.
Dependencies
Python 3.5+
PyTorch 0.4.0+
TensorFlow 1.3+ (optional for tensorboard)
Downloading datasets
To download the CelebA dataset:
git clone https://github.com/yunjey/StarGAN.git
cd StarGAN/
bash download.sh celeba
To download the RaFD dataset, you must request access to the dataset from the Radboud Faces Database website. Then, you need to create a folder structure as described here.
Training networks
To train StarGAN on CelebA, run the training script below. See here for a list of selectable attributes in the CelebA dataset. If you change the selected_attrs argument, you should also change the c_dim argument accordingly.
# Train StarGAN using the CelebA dataset
python main.py --mode train --dataset CelebA --image_size 128 --c_dim 5 \
--sample_dir stargan_celeba/samples --log_dir stargan_celeba/logs \
--model_save_dir stargan_celeba/models --result_dir stargan_celeba/results \
--selected_attrs Black_Hair Blond_Hair Brown_Hair Male Young
# Test StarGAN using the CelebA dataset
python main.py --mode test --dataset CelebA --image_size 128 --c_dim 5 \
--sample_dir stargan_celeba/samples --log_dir stargan_celeba/logs \
--model_save_dir stargan_celeba/models --result_dir stargan_celeba/results \
--selected_attrs Black_Hair Blond_Hair Brown_Hair Male Young
To train StarGAN on RaFD:
# Train StarGAN using the RaFD dataset
python main.py --mode train --dataset RaFD --image_size 128 \
--c_dim 8 --rafd_image_dir data/RaFD/train \
--sample_dir stargan_rafd/samples --log_dir stargan_rafd/logs \
--model_save_dir stargan_rafd/models --result_dir stargan_rafd/results
# Test StarGAN using the RaFD dataset
python main.py --mode test --dataset RaFD --image_size 128 \
--c_dim 8 --rafd_image_dir data/RaFD/test \
--sample_dir stargan_rafd/samples --log_dir stargan_rafd/logs \
--model_save_dir stargan_rafd/models --result_dir stargan_rafd/results
To train StarGAN on both CelebA and RafD:
# Train StarGAN using both CelebA and RaFD datasets
python main.py --mode=train --dataset Both --image_size 256 --c_dim 5 --c2_dim 8 \
--sample_dir stargan_both/samples --log_dir stargan_both/logs \
--model_save_dir stargan_both/models --result_dir stargan_both/results
# Test StarGAN using both CelebA and RaFD datasets
python main.py --mode test --dataset Both --image_size 256 --c_dim 5 --c2_dim 8 \
--sample_dir stargan_both/samples --log_dir stargan_both/logs \
--model_save_dir stargan_both/models --result_dir stargan_both/results
To train StarGAN on your own dataset, create a folder structure in the same format as RaFD and run the command:
To download a pre-trained model checkpoint, run the script below. The pre-trained model checkpoint will be downloaded and saved into ./stargan_celeba_128/models directory.
$ bash download.sh pretrained-celeba-128x128
To translate images using the pre-trained model, run the evaluation script below. The translated images will be saved into ./stargan_celeba_128/results directory.
$ python main.py --mode test --dataset CelebA --image_size 128 --c_dim 5 \
--selected_attrs Black_Hair Blond_Hair Brown_Hair Male Young \
--model_save_dir='stargan_celeba_128/models' \
--result_dir='stargan_celeba_128/results'
Citation
If you find this work useful for your research, please cite our paper:
@inproceedings{choi2018stargan,
author={Yunjey Choi and Minje Choi and Munyoung Kim and Jung-Woo Ha and Sunghun Kim and Jaegul Choo},
title={StarGAN: Unified Generative Adversarial Networks for Multi-Domain Image-to-Image Translation},
booktitle={Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition},
year={2018}
}
Acknowledgements
This work was mainly done while the first author did a research internship at Clova AI Research, NAVER. We thank all the researchers at NAVER, especially Donghyun Kwak, for insightful discussions.
yunjey/stargan thuộc nhóm AI Tools trên TopGit, cùng 5 topic GitHub. Trang Trending và Topics liệt kê các repo cùng số sao và cùng ngôn ngữ để so sánh.
Đọc thêm về yunjey/stargan ở đâu?
Trang TopGit này là một snapshot — tab "Readme" hiển thị nguyên văn README của repo (đã bỏ link, giữ ảnh). Repo GitHub ở github.com/yunjey/stargan là nguồn chính thức.
Vì sao yunjey/stargan được xếp vào nhóm AI Tools?
TopGit xếp yunjey/stargan vào nhóm AI Tools dựa trên GitHub topics và mô tả của repo (gắn thẻ: "cvpr2018", "generative-models", "image-to-image-translation"). Việc phân loại dựa trên metadata thật của repo, không phải đoán theo cảm tính biên tập.
yunjey/stargan có bao nhiêu sao?
yunjey/stargan có 5.3k sao GitHub — tải lại trang để xem số mới nhất, hoặc xem trực tiếp github.com/yunjey/stargan. TopGit phản chiếu số sao của GitHub nhưng không cam kết đến từng phút.
yunjey/stargan có những chủ đề gì?
GitHub topics của yunjey/stargan: "cvpr2018", "generative-models", "image-to-image-translation", "pytorch", "stargan". TopGit xếp repo vào nhóm AI Tools.
yunjey/stargan còn đang phát triển không?
Commit gần nhất trên yunjey/stargan là 5.8 năm trước (theo timestamp GitHub). Repo có 951 fork — một chỉ báo về mức độ quan tâm của cộng đồng.
yunjey/stargan viết bằng ngôn ngữ gì?
yunjey/stargan chủ yếu viết bằng Python. Trường "language" của GitHub dựa trên phần lớn byte ở nhánh mặc định.
Đọc đầy đủ README ở tab phía trên.
Muốn nghe thêm một ý kiến về stargan?
Hỏi một AI đọc được trang này — một cú bấm là có ngay nhận định về stargan.