Stable diffusion にChilloutMixを導入
実写系のリアルな画像を生成してくれる「ChilloutMix」モデルを導入してみました。
目次
ChilloutMixとは
下の画像のようにリアルな画像を生成してくれるモデルですが、商用利用不可や公開条件に制限がありそうです。最新のライセンス条件を確認して使用してください。
ChilloutMixのインストール
公式URL
ダウンロードはstable diffusionのモデル共有サイト「Civitai」からダウンロードする必要があります。そして、「ChilloutMix」の場合はログインが必要となります。
まず、公式URLアクセスすると下記画面が表示されますので、「Log in to view」をクリック
私の場合、「Discord」アカウントを使用しましたので「Discord」をクリック
「Discord」アカウントの「メールアドレス」、「パスワード」を入力して「ログイン」をクリック
「認証」をクリックしてログイン完了です。
ログインすると下記画面が表示されモデルがダウンロード可能となります。
※版権が分からなかったので、モザイクかけてます。
モデルのダウンロード
少し下にスクロールすると「Versions」という表示があり、その下に各モデルのバージョン一覧が表示されています。
ここで「ChilloutMix-Ni-pruned-fp32-fix」をクリック、右側の「Download」をクリックするとモデルのダウンロードが開始されます。
ダウンロードした「chilloutmix_NiPrunedFp32Fix.safetensors」ファイルを下記フォルダに移動。
stable-diffusion-webui\models\Stable-diffusion
なお、このモデルはVAEファイルを含んでいるため、別途、VAEファイルをダウンロードする必要はありません。
設定
①「Stable Diffusion checkpoint」に「chilloutmix_NiPrunedDp32Fix.safetensors」指定
②「Settings」タブをクリック
③ 左端の「Stable Diffusion」をクリック
④「SD VAE」に「None」指定
注）私の環境は④を行わないと正常な画像が得られませんでしたが、通常は②〜④の作業は不要かと思います。
画像生成
ダウンロードページのサンプルに私好みのサイバーっぽいのがありましたので、そのプロンプトを参考に猫型アンドロイドを幾つか生成してみました。
猫型サイボーグ１
プロンプト
complex 3d render ultra detailed of a beautiful porcelain profile cat android , cyborg, robotic parts, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>,Negative prompt: easynegative, nsfwSteps: 20, Sampler: Euler a, CFG scale: 7, Seed: 566464262, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
猫型サイボーグ２
プロンプト
complex 3d render ultra detailed of a beautiful porcelain profile cat android , cyborg, robotic parts, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>,Negative prompt: easynegative, nsfwSteps: 20, Sampler: DPM++ 2M Karras, CFG scale: 6, Seed: 4107013248, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
初音ミクぽいアンドロイド
プロンプト
hatune miku, cyborg, robotic parts, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>,Negative prompt: easynegative, nsfwSteps: 20, Sampler: DPM++ 2M Karras, CFG scale: 7, Seed: 3163667480, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
初音ミクぽい女子１
プロンプト
hatune miku riding a motorcycle, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>,smile, looking at each other,Negative prompt: easynegative, nsfwSteps: 21, Sampler: Euler a, CFG scale: 7.5, Seed: 270516056, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
初音ミクぽい女子２
プロンプト
atune miku riding a motorcycle, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>,smile, looking at each other,Negative prompt: easynegative, nsfwSteps: 20, Sampler: Euler a, CFG scale: 7, Seed: 1232556131, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
バイク女子
プロンプト
complex 3d render ultra detailed of a beautiful , Cyborg woman riding a motorcycle, robotic parts, 150 mm, beautiful studio soft light, rim light, vibrant details, luxurious cyberpunk, lace, hyperrealistic, anatomical, facial muscles, cable electric wires, microchip, elegant, beautiful background, octane render, H. R. Giger style, 8k, best quality, masterpiece, illustration, an extremely delicate and beautiful, extremely detailed ,CG ,unity ,wallpaper, (realistic, photo-realistic:1.37),Amazing, finely detail, masterpiece,best quality,official art, extremely detailed CG unity 8k wallpaper, absurdres, incredibly absurdres, <lora:japaneseDollLikeness_v10:0.1>, <lora:koreanDollLikeness_v10:0.5>, looking at each other,laug,Negative prompt: easynegative, nsfw, bad fingersSteps: 19, Sampler: DPM2 Karras, CFG scale: 5.5, Seed: 620172953, Face restoration: CodeFormer, Size: 512x512, Model hash: fc2511737a, Model: chilloutmix_NiPrunedFp32Fix
あとがき
このモデルは驚くべき高画質な画像を生成してくれますが、学習データに伴う著作権問題はかなり抱えているように感じます（私見）。
しかしながら、想像力を掻き立てられるモデルであることは間違いないです。
ライセンスに基づいて適切に使用すれば、とても有用なツールだと思います (^^)
なお、正確にライセンスを理解しているわけではありませんので、このブログに載せているが画像などに問題があればご指摘お願いいたします。
