Drag Your GAN について巷の記事を調べてみた

調べます。操作方法がセンセーショナルなので、驚き記事は多いのですが、論文をベースに解説記事はあまり見つかりませんでした（もしくは単に埋もれている）。

こちらはGigazineの記事です。

「顔を右に」「口を開く」など画像の動かしたい部分をAIがいい感じに修正してくれるツール「DragGAN」のソースコード＆デモが公開される

https://gigazine.net/news/20230627-drag-your-gan/

「AIを使って画像を生成する時、「ちょっとだけ修正を加えたい」と思うことは多いもの。そんな人たちの夢をかなえるツールが「DragGAN」です。DragGANは画像の中で動かしたいポイントを指示するだけでAIが自動で修正してくれるというもので、2023年5月に論文 だけが提出されていましたが、2023年6月22日にソースコードが公開され、同時にデモも登場しました。」

GitHub - XingangPan/DragGAN: Official Code for DragGAN (SIGGRAPH 2023)

https://github.com/XingangPan/DragGAN

Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

https://vcai.mpi-inf.mpg.de/projects/DragGAN/

要するに、画像をドラッグするとそれに対して対応した画像が出力される生成モデルということみたいです。

「なお、今回公開されたコードで生成する画像には「AI Generated」の透かしを入れる必要があるほか、ライセンスはDragGAN関連部分が「CC BY-NC 4.0 」で、それ以外のほとんどのコードが「NVIDIA Source Code License for StyleGAN3 」となっており、ともに商用利用は不可となっている点に注意が必要です。」

利用には注意が必要ということです。

輪読会の記事が見つかりました。

【DL輪読会】Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

https://www.slideshare.net/DeepLearningJP2016/dldrag-your-gan-interactive-pointbased-manipulation-on-the-generative-image-manifold-258909825