# 【5分でわかる】CycleGANの仕組みをわかりやすく解説！

> 当サイト【スタビジ】の本記事では、CycleGANの仕組みを出来るだけ分かりやすく解説していきます！教師なし学習で画像変換を実現する非常に重要な手法ですのでぜひ理解しておきましょう！

- URL: https://toukei-lab.com/cyclegan
- 公開: 2023.12.20 / 更新: 2025.09.19
- サイト: スタビジ（https://toukei-lab.com）

:::talk{who="umatan"}
当サイト【スタビジ】の本記事では、CycleGANの仕組みを出来るだけ分かりやすく解説していきます！教師なし学習で画像変換を実現する非常に重要な手法ですのでぜひ理解しておきましょう！
:::

こんにちは！データサイエンティストのウマたん([@statistics1012](https://twitter.com/statistics1012?lang=ja))です！

この記事では、<mark>画像を変換する非常に画期的な技術</mark>であるCycleGANについてわかりやすく解説していきます！

非常に重要な手法ですのでしっかり理解しておきましょう！

以下のYoutube動画でも詳しく解説していますのでチェックしてみてください！

::youtube{#MR-Nr4yPB1w}

## CycleGANとは？

CycleGANは2017年に発表された手法で論文は以下です。

:::box
[Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks](https://arxiv.org/pdf/1703.10593.pdf)
:::

以下の画像は論文内から引用したもの。

![GAN](/wp-content/uploads/2023/08/GAN2.jpg) ![GAN](/wp-content/uploads/2023/08/GAN3.jpg)

リアルな画像を有名な画家の絵のタッチに変換したり馬をシマウマに変換したりすることが可能なのです！

画像変換の画期的な手法として当時話題になりました。

## CycleGANの仕組み

それでは、CycleGANとはどのようなアプローチなのでしょうか？

先ほどもお伝えした通り、CycleGANは特定の画像を別の画像に変換するアプローチ。

改めて論文は以下です。

:::box
[Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks](https://arxiv.org/pdf/1703.10593.pdf)
:::

それではそんなCycleGANの仕組みを見ていきましょう！・・・といきたいところですが、まずはCycleGANのベースとなっている**GAN**（Generative Adversarial Networks）という技術を確認しておきましょう！

### ベースとなっているGAN

GAN（Generative Adversarial Networks）は2014年に発表された手法で、論文は以下です。

:::box
[**Generative Adversarial Nets**](https://proceedings.neurips.cc/paper_files/paper/2014/file/f033ed80deb0234979a61f95710dbe25-Paper.pdf)
:::

GANの仕組みは非常にシンプル。

1. 2つのGeneratorとDiscriminatorと呼ぶ[ニューラルネットワーク](/nn)を用意します。
2. Generatorは偽物のデータを生成します
3. DiscriminatorはGeneratorが生み出した偽物のデータと本物のデータを判別しま
4. これらを競い合わせ2・３を繰り返すことで、Generatorが生み出すデータが本物に限りなく近いものになっていきます。

![GAN](/wp-content/uploads/2023/08/GAN6.jpg)

シンプルな仕組みですが、2つのニューラルネットワークを競い合わせることにより高精度の画像を生成できるモデルが構築できるのです。

<mark>両者を競い合わせることからこのアプローチはGAN（敵対的生成ネットワーク）と呼びます！</mark>

GANについてよりもっと詳しく知りたいという方は以下の記事をチェックしてみてください！

<https://toukei-lab.com/gan>

### pix2pixと比較して分かる教師なし学習による画像変換

CycleGANの凄さを知るために比較対象として知っておいて欲しい手法にpix2pixというものがあります。

pix2pixのアーキテクチャは以下のようなイメージ。

![pix2pix](/wp-content/uploads/2023/11/pix2pix_2.jpg)

pix2pixは「**変換前の元データ**」と「**変換後の本物データ**」のペアの正解画像を用意しておき、それを元に変換前の元データ画像からGeneratorを通して「**本物データに近い偽物データ**」を生成します。

そしてDiscriminatorはそれらの組み合わせが偽物か本物か判断します。

GANと同じ要領で、「**本物データ**」と「**偽物データ**」の差分が小さくなるように学習します。

すなわち最初から元データと本物データのペアが存在する、**教師あり学習**なのです。

pix2pixの論文（[Image-to-Image Translation with Conditional Adversarial Networks](https://arxiv.org/pdf/1611.07004.pdf)）に掲載されている画像変換の例は以下です！

![pix2pix](/wp-content/uploads/2023/11/pix2pix.jpg)

左上の「Labels to Street Scene」というやつは、[セマンティックセグメンテーション](/semantic_segmentation)で自動車などの対象物を「セグメントした画像」と「元々の画像」のペアであり、他の画像も「変換前の画像」と「変換後の画像」のペアが存在するものになってます。

では一方で以下のCycleGANの変換前と変換後の画像はどうでしょう？

![GAN](/wp-content/uploads/2023/08/GAN2.jpg)

背景も同じで全く同じ動作をしている馬とシマウマの写真など手に入れることは可能でしょうか？

なかなか不可能に近いですよね？

そうなんです、馬とシマウマの変換や写真と画家の画像の変換など、**本来なかなかペアの画像が存在し得ないもの**の変換に成功しているのです！

<mark>つまりCycleGANは明確な教師データが存在しない教師なし学習になるのです！！！</mark>

<https://toukei-lab.com/learning-nonlearning>

:::talk{who="umatan"}
これがめちゃくちゃ画期的！
:::

以下はCycleGANの論文から引用したものです。

![CycleGAN](/wp-content/uploads/2023/12/CycleGAN3.jpg)

(出典：[Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks](https://arxiv.org/pdf/1703.10593.pdf))

左はペア画像になっていて、右はペアになっていないことが分かります。

**右のようにペアになっていない「風景写真のデータセット」・「風景絵画のデータセット」を投入していい感じに相互変換するモデルが作れるのがCycleGANなのです！**

### CycleGANのアーキテクチャ

それではお待ちかね、CycleGANのアーキテクチャを見ていきましょう！

以下は論文から引用したものです。

![CycleGAN](/wp-content/uploads/2023/12/CycleGAN2.png)(出典：[Unpaired Image-to-Image Translation using Cycle-Consistent Adversarial Networks](https://arxiv.org/pdf/1703.10593.pdf))

その名の通り、なにやらXとYというペアになっていないデータセットをサイクルしてます。

DxとDyがそれぞれGANのDiscriminatorのことで、GとFがそれぞれGeneratorになります。

これをもう少し分かりやすく描くと以下のようになります。

![GAN](/wp-content/uploads/2023/08/CycleGAN4.jpg)

Xというデータセット（例：色付きの絵画）とYというデータセット（例：色なしの絵画）のそれぞれをGeneratorで相互変換しDiscriminatorで真贋を判別するアプローチ。

1. **Xを一旦Yに変換し、その状態でYの偽物データが本物かどうかをDiscriminatorが判断します。**
2. **変換後のYをXに再変換し、再変換後のXが元の画像なのか変換後の画像なのかを別のDiscriminatorが判断します。**

すなわちここでは通常のGANで使われる**敵対的損失（Adversarial Loss）**&#x306B;加えてサイクルで元に戻した時の損失である**サイクル一貫性の損失（Cycle Consistency Loss）**&#x3068;いう2つの損失を最小化するような学習が行われるのです！

これによりペア画像でない教師なし学習でも前述のような画像変換が可能になっているのです！

## CycleGAN　まとめ

ここまでご覧いただきありがとうございました！

本記事では**CycleGAN**について解説してきました！

CycleGANのPythonでの実装は以下のGithubに詳しくまとめてあります。

:::box
[github：pytorch-CycleGAN-and-pix2pix](https://github.com/junyanz/pytorch-CycleGAN-and-pix2pix)
:::

[PyTorch](/pytorch)を使うパターンとTensorFlowを使うバージョンがあります。

興味のある方は実装してみましょう！

他にも多くのディープラーニングのモデルがあります。

ディープラーニングの様々なモデルを知りたい方は以下の記事を参考にしてみてください。

:::related
・[RNN](/rnn)\
・[AlexNet](/alexnet)\
・[ResNet](/resnet)\
・[Transformer](/transformer)
:::

より詳しくディープラーニングや最近の大規模言語モデルについて知りたい方は当メディアが運営する教育サービス[「スタアカ（スタビジアカデミー）」](https://toukei-lab.com/achademy/)の講座をチェックしてみてください。

:::box
**[スタアカ「大規模言語モデル（LLM）・生成系AIコース」](https://toukei-lab.com/achademy/courses/llm/)\
[スタアカ「08.ディープラーニングコース」](https://toukei-lab.com/achademy/courses/deep-learning/)**
:::

:::box
**AIデータサイエンス特化スクール「スタアカ」**

![スタアカ（スタビジアカデミー）のトップページ](/wp-content/uploads/2026/10/achademy-top.jpg)
:::

<table class="table">
<tbody>
<tr>
<th>【価格】</th>
<td>ライトプラン：1,280円/月（全コースが受講し放題）<br>
プレミアムプラン：129,800円（通常149,800円・買い切り）</td>
</tr>
<tr>
<th>【オススメ度】</th>
<td><span class="stars" role="img" aria-label="5点中5点" data-value="5"></span></td>
</tr>
<tr>
<th>【サポート体制】</th>
<td><span class="stars" role="img" aria-label="5点中4点" data-value="4"></span></td>
</tr>
<tr>
<th>【受講形式】</th>
<td>オンライン形式</td>
</tr>
<tr>
<th>【学習範囲】</th>
<td>統計学・機械学習・ディープラーニングを網羅的に学ぶ<br>
生成AI（LLM・RAG・プロンプトエンジニアリング）を学ぶ<br>
SQLとPythonを組み合わせて実データを使った様々なワークを行う<br>
実践的なビジネスフレームワークを学ぶ<br>
マーケティングの実行プラン策定</td>
</tr>
</tbody>
</table>

データサイエンティストとしての自分の経験をふまえてエッセンスを詰め込んだのがこちらのスタビジアカデミー、略して「[スタアカ](https://toukei-lab.com/achademy/)」！！

月額1,280円のライトプランで、統計学から機械学習・生成AIまで全コースが受講し放題です！

<mark>プレミアムプランでは、24時間以内の質問対応と現役データサイエンティストとの1on1（30分×4回）を実施します！</mark>

カリキュラム自体は、他のスクールと比較して圧倒的に良い自信があるのでぜひ受講してみてください！

他のスクールのカリキュラムはPythonでの機械学習実装だけに焦点が当たっているものが多く、実務に即した内容になっていないものが多いです。

<mark>そんな課題感に対して、実務で使うことの多いSQLや機械学習のビジネス導入プロセスの理解なども合わせて学べるボリューム満点のコース</mark>になっています！

Pythonが初めての人でも学べるようなカリキュラムにしておりますので是非チェックしてみてください！

ウォルマートのデータを使って商品の予測分析をしたり、実務で使うことの多いGoogleプロダクトのBigQueryを使って投球分析をしたり、データサイエンティストに必要なビジネス・マーケティングの基礎を学んでマーケティングプランを作ってもらったりする盛りだくさんの内容になってます！

:::box
**・BigQuery上でSQL、Google Colab上でPythonを使い野球の投球分析**\
**・世界最大手小売企業のウォルマートの実データを用いた需要予測**\
**・ビジネス・マーケティングの基礎を学んで実際の企業を題材にしたマーケティングプランの策定**\
**・生成AIのAPIを使ってチャットボットやAIエージェントを作る**
:::

::button[スタアカの受講はこちら]{href="https://toukei-lab.com/achademy/" note="＼今すぐ試す／"}