Fluxは最近、多くの模型愛好家から好評を得ており、出力画像の質はSD3やMJを凌駕しています。多くの人がFluxこそが理想のSD3だと評しているため、私もその実力に非常に興味を持ち、インストール手順を皆さんと共有したいと思います。

公式サイトの参考画像:

image.png

Flux公式サイト:https://blackforestlabs.ai/

人工知能スタートアップ企業であるBlack Forest Labsは、同社を設立し、最初のテキストから画像へのAIモデルであるFLUX.1を発表しました。ドイツに本社を置くこの企業は、Stable Diffusionの開発者によって設立され、画像とビデオのための高度な生成AIの開発を目指しています。

モデルは全部で3種類あり、Pro版、Dev版、Schnell版があります。

Black Forestのチャートによると、Pro版とDev版はこれまでで最高の画像生成器であり、機能が限定的なSchnell版はMidjourney v5とIdeogramの中間程度の性能とのことです。

image.png

3つのバージョンの説明:

  • Pro版は効果が最も優れていますが、クローズドソースで、APIは有料です。

  • Dev版はオープンソースですが、商用利用はできません。動作には最低24GBのVRAMが必要です。

  • Schnell版はオープンソースで商用利用可能です。

オンラインで体験したい場合は、オンラインサイトもあります:

Schnell版:https://replicate.com/black-forest-labs/flux-schnell

Dev版:https://replicate.com/black-forest-labs/flux-dev

Pro版:https://replicate.com/black-forest-labs/flux-pro

ローカル環境への導入

現在のComfyUI最新バージョンはFLuxモデルと互換性があります。カーネルを最新バージョンに更新するだけで体験できます。

そのため、まずComfyUIを更新しましょう。

公式のComfyUI統合パッケージを使用している場合は、この更新ボタンをクリックしてください。

image.png

秋葉のランチャーを使用している場合は、下記の画像の手順に従ってカーネルを更新してください。

image.png

VRAMが少ない場合は、ローカルでの実行は難しいかもしれません。私のパソコンはそこそこスペックが高いので、Schnell版を試してみます。

大規模モデルのダウンロード:https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main

このリンクから、23.8GBの大規模モデルと335MBのVAEモデルをダウンロードする必要があります。

  • ダウンロード後、大規模モデルをComfyUI/models/unet/フォルダに配置します。

  • VAEはComfyUI/models/vae/フォルダに配置する必要があります。

image.png

パソコンのスペックが低い場合は、11.9GBのFlux-fp8軽量版をダウンロードできます:https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-dev-fp8.safetensors

VAEは汎用のae.sftを使用します。

image.png

大規模モデルとVAEに加えて、CLIPモデルもダウンロードする必要があります:https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main

これは実際にはSD3のCLIPモデルです。スペックが高い場合はfp16を、そうでない場合はfp8を選択し、clip_lは必ずダウンロードしてください。

ダウンロード後、ComfyUI\models\clipフォルダに配置します。

image.png

上記の大規模モデル、VAE、CLIPをすべてインストールしたら、ワークフローを実行できます。公式サイトでは、簡単なComfyUIワークフローを提供しています:https://comfyanonymous.github.io/ComfyUI_examples/flux/

公式サイトから画像を保存します。

image.png

そして、画像をComfyUIにドラッグアンドドロップします。面倒な場合は、私たちの交流グループに参加してワークフローを入手することもできます。

ワークフローでモデルが正しく読み込まれていることを確認したら、キューに追加して生成を待ちます。

image.png

生成画像

プロンプト1:a bottle with a rainbow galaxy inside it on top of a wooden table on a table in the middle of a modern kitchen

image.png

プロンプト2:photograph of a black board in an old classroom. On the black board in chalk are the words “Lets make some really pretty stuff together” with a red chalk heart after the words. Sunlight is streaming in from the window

image.png

プロンプト3:filmic photo of a group of three women on a street downtown, they are holding their hands up the camera

image.png

プロンプト4:macro photography of a miniature little village on top of a flower

image.png

FP8版、プロンプト5:close up fujifilm photo of a mans eye and fac

image.png

プロンプト6:beautiful anime artwork, a cute anime girl standing alone at night darkness wearing an oversized black raincoat with a small bag. she is holding a black umbrella, the umbrella has multicolored LED hidden inside that shine down on her, small rose petals flutter through the air around her, anime screencap style, red eyes, medium hair

image.png

まとめ

全体として、テストの結果は非常に良好で、FLUXはSD3よりも優れています。

  1. 手の生成が安定しており、手足が変形するケースが少ないです。

  2. 蒸留版は生成速度が速く、30秒以内で完了します。Dev版は生成時間が長くなりますが、生成画像の質はより優れています。

  3. モデルの互換性が高いです。二次元、人物、写実的、風景など、あらゆるスタイルで良好な結果が得られます。

----------------------------------------------------------------------------------------

站長素材AI教程は站長之家傘下のAIイラストチュートリアルプラットフォームです

大量のAI無料チュートリアルを継続的に更新しています。

より詳細なAIイラストチュートリアルを学びたい方は、站長素材AI教程サイトをご覧ください:

https://aisc.chinaz.com/jiaocheng/