「忙しい?これが拡散モデルのブラックボックスを開くためのクイックガイドです」

Busy? This is a quick guide to opening the black box of diffusion models.

デコードステーブル拡散:トレーニング、新しい画像の生成、および与えられたコンテキストを使用した制御

プロンプト:「変なポジションで眠っているおかしな猫のオイルパステルの絵」[著者によるイメージ- DALL-Eを使用して生成]

もし私の記事を開いたのであれば、おそらくDALL-E、Midjourney、またはStability AIなどのサービスからのテキストから画像を生成するモデルを使用したことがあるでしょう。

それらはすべて拡散モデルに基づいています。

魔法のブラックボックスとして扱いたいとしても、その内部でどのように機能するかについての直感を持つことは、より良い芸術を生成するのに役立ちます。

この記事では、拡散モデルが新しい画像を生成し、新しいデータセットでトレーニングされ、与えられたコンテキスト(テキスト、他の画像、カテゴリなど)に基づいて制御される方法についての直感を提供することを目指しています。

技術的な詳細にはあまり深入りせず、拡散モデルが機能する主要な要素に概念的に焦点を当てます。

目次

  1. 拡散モデルの動作についての直感を得る
  2. 拡散モデルが新しい画像を生成する方法
  3. 拡散モデルのトレーニングのクイックガイド
  4. 与えられたコンテキストで安定した拡散モデルを制御する

#1. 拡散モデルの動作についての直感を得る

例として、猫のデータセットを使用します。

したがって、新しい猫を生成するために安定した拡散モデルをトレーニングしたいとします。

それでは、次のようにします:

データセットを生成する- ガウスノイズを追加する

データセットからすべての画像を取り、徐々にそれらにガウスノイズを追加します。

これで、初期の猫の画像ごとにさまざまなノイズレベルが含まれる複数の画像が得られます。

モデルをトレーニングする- ノイズを除去する

モデルの実際の役割は、ノイズのある画像を受け取り、そのノイズを除去することです。

したがって、拡散モデルをトレーニングする際には:- ノイズのある画像を入力として受け取ります- ノイズを除去しようとします- 「クリーンな」画像と元のノイズのない画像の間の損失が計算されます

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!

Share:

Was this article helpful?

93 out of 132 found this helpful

Discover more

データサイエンス

2023年にAmazonのデータサイエンティストになる方法は?

ほとんどのビジネスは現在、膨大な量のデータを生成し、編集し、管理しています。しかし、ほとんどのビジネスは、収集したデ...

人工知能

「マーシャンの共同創設者であるイータン・ギンスバーグについてのインタビューシリーズ」

エタン・ギンズバーグは、マーシャンの共同創業者であり、すべてのプロンプトを最適なLLMに動的にルーティングするプラットフ...

人工知能

ベイリー・カクスマー、ウォータールー大学の博士課程候補 - インタビューシリーズ

カツマー・ベイリーは、ウォータールー大学のコンピュータ科学学部の博士課程の候補者であり、アルバータ大学の新入教員です...

人工知能

「ジャスティン・マクギル、Content at Scaleの創設者兼CEO - インタビューシリーズ」

ジャスティンは2008年以来、起業家、イノベーター、マーケターとして活動しています彼は15年以上にわたりSEOマーケティングを...

データサイエンス

「3つの質問:ロボットの認識とマッピングの研磨」

MIT LIDSのLuca CarloneさんとJonathan Howさんは、将来のロボットが環境をどのように知覚し、相互作用するかについて議論し...

機械学習

もし芸術が私たちの人間性を表現する方法であるなら、人工知能はどこに適合するのでしょうか?

MITのポストドクターであるジヴ・エプスタイン氏(SM '19、PhD '23)は、芸術やその他のメディアを作成するために生成的AIを...