画像ベース生成Image-to-Image

ノイズの代わりに絵から出発します

文章だけを渡して絵を作るとき、生成器はノイズだらけの画面から出発して一歩ごとにノイズを取り除きます。画像ベース生成は出発点だけを変えます。純粋なノイズの代わりに、渡された絵にノイズをほどよく混ぜた画面から始めます。

ノイズに半ば隠れた下絵が出発点なので、取り除いている間に下絵の大きな塊と明暗の場所がそのまま生きます。それでいて細部は文章とモデルの癖に沿って新しく作られます。原本の上に上塗りするのではなく、原本に似た絵を最初から描き直すようなものです。

どれだけ変えるかを決めるつまみ

道具ごとに名前は違いますが、変化の度合いを決める値が必ずあります。この値がそのまま、最初にどれだけノイズを混ぜるかを決めます。ノイズを少ししか混ぜなければ原本がはっきり残り、多く混ぜれば原本はぼんやりした跡だけが残ります。

値をごく低くすると原本とほぼ同じ絵が出るので、手を加えた跡が目立ちません。反対に目一杯上げると、下絵を渡した意味がなくなります。原本の構図だけを借りて残りは新しく得たいなら、中くらいがちょうどよいです。最初は低めから始めて少しずつ上げながら、どこまでが気に入るか探すのが早いです。

下絵と文章が役割を分けます

下絵が決めるのは場所です。何が画面のどこに置かれ、どこが明るくどこが暗いか、視線がどちらへ流れるかは下絵から来ます。文章が決めるのは中身です。その場所に置かれた塊が何なのか、どんな色と質感なのかを文章が定めます。

だから二つがずれると結果もずれます。横長の下絵に縦長の場面を頼むと無理のある絵が出ます。下絵に大きく占めている塊を文章でまったく触れないと、見当違いのもので埋まることもあります。下絵にすでにあるものを文章でも一度触れておくと、結果がずっと安定します。

どこで使うとよいか

一番うれしい使い道は、下手なスケッチを生かすことです。色の塊をいくつか適当に置いて場所を決め、文章で中身を説明すると、その配置を守ったそれらしい絵が出ます。頭の中の構図を文章で長く説明するより、ずっと速くて正確です。

写真をもとに違う質感の絵を得るときにもよく使います。自分で撮った路地の写真を入れて絵のような質感を頼むと、その路地の配置を守ったまま質感と筆致だけが変わった絵が出ます。画面に何がどこにあるかを説明する必要がないので、文章もずっと短くなります。

すでに気に入った絵があるとき、質感だけを変えて何枚も出すのにもよいです。同じ下絵に文章を少しずつ変えて入れると、構図は保たれたまま雰囲気だけが違う一組ができます。写真の配置をそのままにして季節や時間帯を変えることも同じ方式です。