タグ検索の該当結果が少ないため、タイトル検索結果を表示しています。
【画像生成AI】Stable Diffusion webUI と ComfyUI どちらを使う？ 登場から比較してみよう！｜きまま / Easygoing
【画像生成AI】Stable Diffusion webUI と ComfyUI どちらを使う？ 登場から比較してみよう！ はじめにこんにちは、きまま / Easygoing です。 今回は、いろいろな画像生成 AI ツールをその登場から比較してみます。 Stable Diffusion webUI と ComfyUI今日の 画像生成 AI ツールで普及しているのは、Stable Diffusion webUI と ComfyUI です。 ComfyUI と Stable Diffusion webUI の検索数 | Google Trendsローカルで画像生成をはじめるとき、どのツールを使うのか迷いますが、それぞれのツールが 登場した時期 とその 背景 を見ながら、分かりやすく比較してみます。 画像生成 AI ツールの歴史まずは、主な 画像生成 AI ツールの登場時期を見てみます。 上の
プロンプト：1 girl, photorealistic, solo, perfect lighting, sailor dress, looking at viewer, long hair, black hair, two side up, ネガティブプロンプト：illustration, 3d render, (worst quality:2), (low quality:2), (normal quality:2), signature, watermark, username, open mouth
AIアニメの作りかた ComfyUI｜852話
AIアニメの作り方を説明していきます。 ざっくりな説明は上の動画を見ていただければわかるんですが、 少し細かい説明がこの記事になります。 完成物これはワンダープロジェクトJ2というゲームの二次創作アニメですが、30年近く前の作品です。 今回の流れは ・AIの一枚立ち絵を用意する ・AnimateAnyone-Evolvedで骨に沿って動かす ・AAEでつくった画像をControlnetをかけつつAIブラッシュアップ ・AfterEffectsで背景抜き ・AI背景一枚絵を用意する ・Runwayで動かす（ComfyUIでもできるが質がいいし時短になる） ・キャラの後ろに配置、キャラの画像を複製して影にして足元に配置 ・完成 です。 作業はComfyUIで行います。 ・AIの一枚立ち絵を用意する ・AnimateAnyone-Evolvedで骨に沿って動かす 骨を抜いたのはこちらのフリー動画
画像生成ソフトウェア「ComfyUI」のノードにキーロガーが仕込まれていたことが発覚、クレジットカード情報やパスワードなど全ての入力が筒抜けに
ノードベースの画像生成ソフトウェア「ComfyUI」向けに作られたノードの一つ「ComfyUI_LLMVISION」にマルウェアが仕込まれていることがわかりました。発覚後、ComfyUI_LLMVISIONのGitHubリポジトリが削除されています。 PSA: If you've used the ComfyUI_LLMVISION node from u/AppleBotzz, you've been hacked byu/_roblaughter_ incomfyui クリエイターのロブ・ラフター氏がRedditで共有したところによると、ComfyUI_LLMVISIONをインストールして使用した場合、ブラウザのパスワード、クレジットカード情報、閲覧履歴がWebhook経由でDiscordサーバーに送信されてしまうとのこと。 ラフター氏自身も影響を受け、ComfyUI_LLMVISIO
前回はStable Diffusionをブラウザーで利用するためのUIとして「Stable Diffusion web UI（AUTOMATIC1111版）」、「Fooocus」と共に多く使われている「ComfyUI」のインストール方法を紹介した。とりあえず画像の生成はできたので、あらためてインターフェースを詳しく見ていこう。 まずは前回の手順に従いインストールした「ComfyUI」を起動。この画面が出ていなければ「Load Default」をクリックしよう。 いくつかの四角いパーツが、カラフルなケーブルのようなもので接続されているのが見える。 ComfyUIでは配置されたそれぞれのパーツを「ノード」と呼ぶ。それぞれのノードは「モデルをロードする」「プロンプトを書く」といった機能を持っている。これらをブロックのように組み合わせて利用したい機能を構築していくのが「ノードベース」と呼ばれるCo
sponsored MSI「MAG X870 TOMAHAWK WIFI」レビュー Ryzen 7 9800X3Dで高性能ゲーミングPCを組みたいならX870マザーボードは耐久性能と程よい価格で選べば間違いなし sponsored 店舗スタッフが自作パソコン完成まで徹底サポート 業界最安値級から2万円引き!? 普通に買うよりお得・手ブラでPCが組めるアプライドの自作イベント sponsored 2004年から業界をリード！ マウスコンピューターのゲーミングPCブランド「G TUNE」が20周年を迎えた 【今売れているゲーミングPCのスペックはコレ！】「G TUNE」で見る最新ゲーミングPCの最先端 sponsored JN-IPS27G200F-PPをレビュー 約2.6万円のパープル200Hzゲーミングディスプレー、女性的にはアリ？ 盲牌でわかるボタンとは？ sponsored 黒くてデカ
突然だが、上記はこの連載の第2回の冒頭部分だ。連載をはじめた当初は右も左もわからない状態だったので「Stable DiffusionはMacでは使えない」と断言してしまった。思い出すたびに冷や汗が出る。 とはいえご存知の通りStable Diffusionを動かすのにNVIDIAビデオカード搭載のWindows機が向いているのは事実なので、これまではすべて新規購入したゲーミングPCで作業することになんの不満も感じていない。 だが、前回紹介したStable DiffusionのUI環境のインストールや更新がワンクリックで可能になる「Stability Matrix」を使えば、PythonやPipのバージョンといった難しいことを考えなくてもMacで画像生成環境を作れるのではないかと考えた。 お詫びから7ヵ月、ずいぶん遅くなったがようやく伏線回収である。 Stability MatrixでM1
生成AIグラビアをグラビアカメラマンが作るとどうなる？第17回：新技術をすぐ試せるComfyUIのインストール・使いかた (西川和久) | テクノエッジ TechnoEdge
ComfyUIが流行ってる？Stable Diffusionで生成AI画像を作る時、もっとも一般的なインターフェースはAUTOMATIC1111だろう。デファクトスタンダードと言ってもいいほどで、検索すると、インストール方法や使い方など、それこそ山盛り出てくる。 ところが最近、ComfyUIがちょっとした人気だ。以前軽くご紹介したが、カスタムNodeを組み合わせ自由にWorkflowを構築できる結構マニアックなアプリなのに何故？ ComfyUI。カスタムNodeを接続してWorkflowを作る…と結構マニアックなアプリ。これは筆者が日頃使っているWorkflowの1つこれには理由があり、12月頃から以降、Stable Video Diffusion、Kohya's HiresFix、SDXL Turbo、LCM、FaceID、PhotoMaker、InstantID、様々なControlN
※当noteで掲載しているワークフローについては各記事公開時点のComfyUI環境で動作を確認しています。その後のComfyUI/カスタムノードのアップデートにより最新の環境では不具合が生じる可能性があるので、あらかじめご了承ください。 このnoteは、いま注目されているAI動画生成ツール「AnimateDiff」のハウツーをまとめた初心者ガイドです。 「AnimateDiff」は2023年7月に公開されたオープンソースの技術で、誰でも無償で利用することができます。AnimateDiffについては以下の記事が参考になります。 導入編1. ComfyUI のすすめ「AnimateDiff」は、単体では細かなコントロールが難しいため、現時点では以下のパッケージのどれかを選んで使うことが多いです。 AnimateDiff-CLI-Prompt-Travel コマンドラインでAnimateDiff
「音楽AIで生成した日本語曲を動画AIに歌ってもらう」のが、思ったよりも自然にできて感動したので、記事にしてみました。 Sunoで生成した曲AI音楽生成サービスのSunoでつくった曲を使いました。バージョンはv4.0、プロンプトは「mellow cute chip tune, female husky vocals」です。 同じ歌詞で生成した以下の4曲のうち、2番目の曲をえらびました。 この曲とAI動画生成を組み合わせて「歌ってみた」ができないかな、と思っていろいろ試した結果、FLOATという生成AIに行きつきました。 FLOATとは人物画像と発話音声をもとにリップシンク動画を生成する「AIポートレート・アニメーション」系の技術です（いわゆるAIアバターの一種）。 この系統の生成AIは数多く公開されていて、古くはSadTalker、最近ではAniPortrait、Hallo、Sonic、F
生成AIグラビアをグラビアカメラマンが作るとどうなる？ 第22回：Stable Diffusion 3リリース。ComfyUIを使いAPI経由で生成（西川和久） | テクノエッジ TechnoEdge
API経由ながらStable Diffusion 3が利用可能に！今年、2024年2月24日に次世代Stable Diffusion、Stable Diffusion 3が発表された。いろいろな特徴があるのだが、画像品質の向上はもちろんのこと、Stable Diffusion (XL) が苦手だった文字 (但し日本語などは除く) にも対応し、早く使いたかったものの、まだ一般が試せる状態ではなかった。 ところがつい先日の4月17日、Stability AI Developer PlatformのAPI経由で利用可能となったので、使ってみたのが今回の内容となる。 APIを使うにあたって必要なAPI Keyは、Stability AI にアカウントを作ると用意され、自動的に24クレジットが付加される。1枚作って消費するクレジットは以下の通り。 Stable Diffusion 3は1枚6.5クレ
ComfyUI 解説 (wiki ではない)
Stable Diffusion の web UI でありバックエンドでもある ComfyUI について、主にアーティスト向けに、内部動作や背景にある理論も含めて感覚的に捉えられるように解説していきます。 (充実しつつある公式 README や公式サンプルに書いてあることは、多分このサイトでは説明しません) 重要な外部リンク ComfyUI 公式リポジトリ ComfyUI 公式サンプル ComfyUI 公式チュートリアル (未完らしい) 有志によるマニュアル (ほぼ準公式) 最近の主な更新 公式に取り込まれた: ConditioningConcat 新ノード: ConditioningZeroOut SDXL 関連のノード追加: CLIPTextEncodeSDXL、CLIPTextEncodeSDXLRefiner モデルの保存が出来るようになった: CheckpointSave SDX
生成AIグラビアをグラビアカメラマンが作るとどうなる？第21回：ComfyUI応用編。ControlNetでポーズ・構図を指定する (西川和久) | テクノエッジ TechnoEdge
現役グラビアカメラマンでありエンジニアでもある西川和久氏による生成AIグラビア連載の第21回は、画像生成モデル Stable Diffusionの最新技術がいち早く試せるインターフェース 『ComfyUI』 の応用編。 写真や線画をもとに構図やポーズを指定できる『ControlNet』の具体的な使い方を解説してゆきます。 『生成AIグラビアをグラビアカメラマンが作るとどうなる？連載』
GitHub - comfyanonymous/ComfyUI: The most powerful and modular diffusion model GUI, api and backend with a graph/nodes interface.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
生成AIグラビアをグラビアカメラマンが作るとどうなる？第18回：バレンタイン編。ComfyUIの環境を整える (西川和久) | テクノエッジ TechnoEdge
今回追加する要素は3つ。 1つはa1111-sd-webui-tagcompleteの様に、Prompt入力途中でキーワードなどの候補を上げてくれる機能。基本的にPromptは英語。ミススペル防止や、途中まで入れるといろいろな候補が並び、こんなのあるのか！的な発見もできる。 次に入れるのはWorkflow管理系。処理したい内容によって毎回ComfyUIへjsonファイルをドラッグ and ドロップするのは面倒。Workspaceに分けて置きっぱできる機能だ。 最後はリソースモニタ。WindowsやLinuxでこの手のモニタ系アプリはあるが、やはりComfyUI内で見えた方が便利。同時に痒い所に手が届くNodeも追加される。 各カスタムNodeのインストール方法は、メジャーどころはComfyUI-Managerの一覧に入っているので[Install Custom Node]を選び、左側のFi
ComfyUIでFP8/GGUF版のQwen-Imageを試す（要VRAM 12～16GB）｜まゆひらa
Last update 8-7-2025 ※ 関連記事は、ComfyUIの記事一覧にまとめてあります。 ※ (8-7-2025) GGUF版の説明を少し変更しました。 ※ (8-6-2025) GGUF版の内容を修正して、Text EncoderをGGUF版に変更しました。ワークフローも入れ替えています。 ※ FP8版は、VRAM 12GBでは少し厳しいと思われますが動作報告は見かけています。GGUF版の方が確実であると考えられます。 ■ 0. 概要▼ 0-0. はじめに 本記事では、ComfyUIで「Qwen-Image」を利用するための手順を説明します。モデルはFP8版とGGUF版を利用します。 ComfyUIのインストール方法は、下記の記事をご覧ください。 ▼ 0-1. Qwen-Imageについて Qwen-Imageは、Alibabaが開発しているQwenファミリーの一つとして登
0. はじめに先日 Stream Diffusion が公開されていたみたいなので、ComfyUI でも実行できるように、カスタムノードを開発しました。 Stream Diffusionは、連続して画像を生成する際に、現在生成している画像のステップに加えて、もう次の生成のステップを始めてしまうというバッチ処理をするそうです。 学者ではないので、詳しくはわかりませんが、上記のようなことを公式のYouTubeチャンネルでお話しされていたみたいなので、興味のある方はのぞいてみてください。 実際のリポジトリをのぞいてみると、Diffusers を使って書かれていたため、そのままではカスタムノードにできないので、いっそ Diffusers をComfyUIで使えるようにして、それを使って Stream Diffusion を動かそうという魂胆のもと、開発しました。 この記事以降も開発は続けますので、
【ComfyUI 中級】 VRAM を制御して最高の性能を引き出す設定！｜きまま / Easygoing
はじめにこんにちは、きまま / Easygoing です。 今回は ComfyUI 中級編で、ComfyUI のベストなセッティングを考えます。 初級編 ComfyUI は速い！私が Stable Diffusion webUI Forge から ComfyUI に移行したとき、最初に驚いたのは 動作の速さ でした。 それまで使っていた Stable Diffusion webUI Forge も軽快に動作していましたが、ComfyUI は工程がリアルタイムで表示されて 常に VRAM と RAM の使用量を確認 できるので、さらに最適化を行うことができます。 ComfyUI は、最適なセッティングを行えば、Flux.1 / SD 3.5 / AuraFlow は VRAM 12GB、SDXL は VRAM 6 GB で動作します！ VRAM が大事画像生成を行うときに一番重要なのが VR
を一通りまとめてみるという内容になっています。 Stable Diffusionを簡単に使えるツールというと既に「Stable Diffusion web UI」などがあるのですが、比較的最近登場した「ComfyUI」というツールがノードベースになっており、処理内容を視覚化できて便利だという話を聞いたので早速試してみました。 ここではこのComfyUIについて 概要と主な特徴 簡単なインストール方法 基本的な使い方 などを書いていきますね。 ※2023/08/08追記： ComfyUIでStable Diffusion XLモデルを動かす方法を解説した記事を書きました。
2024年10月21日、この連載でも何度か紹介している画像生成AIツール「ComfyUI」が大幅アップデートを受け、「ComfyUI V1」としてリリースされた。 このバージョンでは、従来のブラウザーベース形式を引き継ぎつつ、インストールが簡単な「ComfyUI Desktop（以下デスクトップ版）」を新たに追加。Python環境の構築が不要となり、初心者でも簡単に利用できるようになった。 当初はクローズドベータ版として限られたユーザーのみが利用できたが、11月27日には一般公開され、誰でも無料で利用可能になった。さっそくインストールして、新機能を確認してみよう。 ComfyUI Desktopとは？ デスクトップ版「ComfyUI Desktop」は、「ComfyUI V1」の一部として新たに提供されたインストール型アプリケーション。200MB以下という軽量パッケージで提供され、Wind
はじめに前回、初めて私の記事でComfyUIを取り上げましたが、FLUX.1のモデルマージという、ComfyUIを触ったことがある人向けの内容となりました。 この記事では、初心者の方には取っ付きにくい内容となってたと思います。 そこで、ComfyUIを始めるにあたって、必要となる最低限の環境構成と、基礎的な知識を学んでいきたいと思います。 出来る限り分かりやすく説明していって、皆さんが扱えるようなれれば幸いです。 ComfyUIとは？誰でもわかる！を心掛けて書いていくので、難しいことは今回言いません！ ComfyUIの読み方は「コンフィユーアイ」、アメリカ英語的発音になると「(↑)カンフィ(↓)ユーアイ」になります。 Comfyは元々「Comfortable」の略語で、日本語訳としては「快適な、簡単な、楽な」という意味になります。 と、どうでもいいお話を踏まえて説明していきます。 Comf
生成AIグラビアをグラビアカメラマンが作るとどうなる？第19回：ComfyUIで最新のStable Cascadeを試す＋アナログ風の後処理ProPost (西川和久) | テクノエッジ TechnoEdge
画像生成AI「Stable Diffusion」の基本から最新テクニックまで。グラビアカメラマンが教える、生成AIグラビア実践ワークショップ（第5回）参加者募集 | テクノエッジ TechnoEdge 後処理でアナログ写真っぽく=ProPost前回標準のWorkflowにLoRAを追加してみたが、今回は画像が出来た後、つまり後処理用のNodeを追加してみたい。 好みにもよるだろうが、筆者の場合、Promptでアナログフィルム固有のノイズ(Grain)を乗せたり、モノクロ化せず、Photoshopなどを使い処理することが多い。これをNodeで対応できるのが、ご紹介するProPostだ。 機能的には、GrainとVignette。どちらも独立したNodeになっているので、Grainした後にVignetteすることも可能。 インストール方法は簡単で、Manager > Install Custo
こんにちは。映像作家で小説家の榊正宗です。 ルックバックという作品が話題になってますよね。最初は「作品の完成度の高さ」から、そして今は、「作中の犯罪描写と書き直しについて」が話題になっています。 今日はこの騒動についてわたしの個人的な見解を書きたいと思います。 🔳ルックバック騒動について 今回、下記の部分が修正されたことがとくに話題になっているようです。この件を説明するために、該当箇所をあえて画像でアップして引用しております。（問題がありましたら削除しますので権利者からご連絡お願いします） ネットでは、こちらの内容が変更されたことについて、その経緯と意義が議論されているようです。 まず、わたしの意見を書く前に、わたしがどういう人間か説明しておきたいと思います。 わたしは、2年前にネットの誹謗中傷事件に巻き込まれ、うつ病を発症し、5ヶ月間ほど閉鎖病棟に入院したことがあります。自殺も考えまし
【ComfyUI】Stable Diffusion3 Mediumをローカル環境で動かす方法｜AI-Bridge Lab
1.SD3 Mediumで生成した画像例ゲーム風、実写風、アニメ風…幅広く対応できます。また、プロンプトの効きもかなり強いので色々と試行錯誤の甲斐がありそうです。 ベースモデルでこれだけ高い性能があれば、ファインチューニングモデルはクオリティ面でもMidjourneyに並ぶかそれ以上のモデルになりそうですね。 FPSゲーム画面風雑誌モデル風テレビアニメ風その他、過去記事でSD3のAPIを使って作成した画像はこちらからご覧いただけます。 ・stable-diffusion-3-mediumからモデルをDL 以下からいずれかをダウンロードしておきます。 sd3_medium.safetensors MMDiT および VAEモデルが含まれますが、テキスト エンコーダーは含まれません。 sd3_medium_incl_clips_t5xxlfp16.safetensors T5XXL テキスト
【初心者歓迎】FLUX.1 dev の使い方❗️LoRA・Controlnetも使える、キング・オブ・画像生成AI『FLUX.1』のベストモデル、［dev］をComfyUIで動かす方法を完全解説❗️〜S｜葉加瀬あい (AI-Hakase)🎈動画&Note でAI解説🎥https://x.gd/F2Mvl
FLUX.1の使い方：おうちのパソコンでもクラウドでもOK！実践ガイドで画像生成AIをマスターしよう！ どうも皆さん！スーパーの袋詰め、レジのお姉さんのスピードについていけない葉加瀬あいです！ 今回は、話題の画像生成AI「FLUX.1 dev」を、あなたのPCやクラウド環境で使う方法を解説していきます！ また、私のメンバーシップに入門されている方は、今回の記事の内容を動画で確認できます！スキマ時間で最新のAI情報を手軽にキャッチしたい方はこちらからどうぞ！ 前回の記事では、FLUX.1の概要やその驚きの性能についてご紹介しましたよね。 あのStable Diffusionを作ったチームが開発したとあって、AI業界でも大きな注目を集めているんです！ 前回のおさらい：FLUX.1ってどんなAI？前回の記事では、FLUX.1の基礎知識をお届けしました。 簡単に振り返ると、 Midjourneyや
GitHub - AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin: A user-friendly plug-in that makes it easy to generate stable diffusion images inside Photoshop using either Automatic or ComfyUI as a backend.
You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
突然ですが、ガチャ禁止法案の成立を支持します！ 「ゲーム1日60分は“違憲” 男子高校生と母親が提訴 」という香川県の条例に対して裁判を起こした高校生のニュースが話題になってますよね。 https://www.fnn.jp/articles/-/90783?fbclid=IwAR0FTM86t9aoMjsXAulFAyMbB9VIgvJuUh-0rIvy-oFiSsVz-2FKlG1XWJs いきなりタイトルと逆の事を言いますが、この香川県の条例は流石におかしいと思います。というか絶対におかしい。なんで、プレイヤー側に対して規制してるのかと。これは、麻薬もそうなんですけど、売ってる側を主に罰しろよと言いたい。 この条例については私も絶対に反対です。 たしかにゲームは依存症を引き起こします。というか、そうなるように設計して作ります。ゲームクリエイターとして言いますが、面白いゲームってのは、そ
ローカル生成の環境構築は「StabilityMatrix」 a1111、Forge系、ComfyUIを一発導入・一括管理｜AIイラストが理解る！【スタジオ真榊】｜pixivFANBOX
こんばんは、スタジオ真榊です。こちらは「StabilityMatrix」という便利なアプリケーションを使って、Automatic1111版のStableDiffusionWebUI（以下SDwebUI）やForge、reforge、ComfyUIといったローカル生成環境を一発導入・一括管理する方法についてまとめたHowto記事です。 AIイラストの初心者向け解説については「AI...
The most powerful open source node-based application for creating images, videos, and audio with GenAI. The most powerful open source node-based application for creating images, videos, and audio with GenAI. The most powerful open source node-based application for creating images, videos, and audio with GenAI.
この記事は、「AnimateDiffをComfyUI環境で実現する。簡単ショートムービーを作る」に続く、KosinkadinkさんのComfyUI-AnimateDiff-Evolved（AnimateDiff for ComfyUI）を使った、AnimateDiffを使ったショートムービー制作のやり方の紹介です。今回は、ControlNetを使うやり方を紹介します。ControlNetと組み合わせることで、制御できることの幅が一気に広がります。 AnimateDiff for ComfyUIは、ControlNetに対応しています。ただし、使い方に少し癖があり、公式ページではあまり詳しく解説が行われていないため、引っかかりやすい状態になっています。この記事は、公式ページを補完する目的で書いています。 Control Net付きのサンプルワークフロー サンプルのワークフローを含んだ画像がい
今回もComfyUIに関して新しい章になります！ 初心者ガイドの枠組みを超えて、ComfyUIを技術観点の習熟から応用していく記事になります。 一発目の応用術は、最近話題のFramePackを使ったComfyUI構築術になります。 基礎知識がないと比較的難しいので、是非ComfyUIの使い方をある程度覚えてから始めるのをお勧めします！ FramePackとは、あのイリヤ氏が提唱している動画生成AIへのアプローチ方法です。 従来の動画生成AIでは「ドリフト」と呼ばれる現象が発生し、それが劣化の原因となっていました。 ドリフトとは、次点のフレームを生成するごとにエラーが蓄積し、次第にサンプリングが劣化していく現象のことで、動画生成AIの品質低下の原因となっていました。 これを抑制し、かつ低コストで長尺動画を生成する方法ということでイリヤ氏が提唱している技術が「FramePack」になります。
2. Fluxの画像生成Fluxの画像生成の手順は、次のとおりです。 (1) 「Stability Matrix」で「ComfyUI」をインストールして起動。 起動時のログで「ComfyUI」フォルダのパスを確認できます。 (2) 以下のファイルをダウンロードし「ComfyUI/models/clip/」に配置。 32GB以上のRAMがある場合はfp16が推奨されます。 ・t5xxl_fp16.safetensors (または t5xxl_fp8_e4m3fn.safetensors) ・clip_l.safetensors (3) 以下のファイルをダウンロードし「ComfyUI/models/vae/」に配置。 ・ae.safetensors (4) 以下のファイルをダウンロードし「ComfyUI/models/unet/」に配置。 ・flux1-dev.safetensors ・flu
こんにちは、たねやつです。 先日、ComfyUIで最新のText to Videoモデル「Wan2.2」を試したものの、RTX3060ではスペック不足でまともに動作しないという悔しい結果に終わりました。 しかし、諦めきれません！ 海外の掲示板で、Wan2.1用の軽量化LoRAをWan2.2に適用して動作させている猛者を発見し、早速試してみたところ、ついに私の環境でも動画を生成することに成功しました！今回はそのリベンジの記録です。 前の記事 この記事でできること Redditで救世主を発見！ 手順 1. 必要なモデルとLoRAをダウンロード 2. ワークフローを読み込んで実行 最後に 次の記事 前の記事 www.taneyats.com この記事でできること Wan2.2をRTX3060 (VRAM 12GB)環境で動作させる方法がわかる 軽量化LoRAを使ったComfyUIのワークフローが
HunyuanVideoとはまた新しいオープンソースの動画生成ＡＩが発表されていました。その名も「HunyuanVideo」。 これは130億パラメータのビデオ基盤モデルとのことです。ひえ～～～えらい数字！ 下記がプロジェクトページです。めちゃ動いている！
「ComfyUI」で「IPAdapter + ControlNet」を試したので、まとめました。 1. ComfyUI_IPAdapter_plus「ComfyUI_IPAdapter_plus」は、「IPAdapter」モデルの「ComfyUI」リファレンス実装です。メモリ効率が高く、高速です。 ・IPAdapter + ControlNet 「IPAdapter」と「ControlNet」の組み合わせることができます。 ・IPAdapter Face顔を参照画像として設定し、テキストプロンプトを入力することで、「Face Swap」することができます。ノイズ除去を高くすれば、img2img でも動作します。 ・Masking (Inpainting) IPAdapter を領域に適用する最も効果的な方法は、Inpaintワークフローを使用することです。Inpaintには特定のチェックポ
ComfyUIのノードを本当に理解する｜gcem156
ComfyUIの使い方なんかではなく、ノードの中身について説明していきます。以下のサイトをかなり参考にしています。 モデルのロード系 まずはモデルのロードについてみていきましょう。 CheckpointLoader チェックポイントファイルからModel(UNet)、CLIP(Text encoder)、VAEをロードします。UNetのkey名からyamlファイルを推察しているようです。v_predictionかどうかは最後の重みの値でチェックしているみたいです（意味不明ですね）。 LoRALoader LoRAをロードします。patchesという変数に各keyに対応する重み(upやdown等)を保持しておき、KSamplerに入力されると、重みとマージします。そしてCPUに元の重みのバックアップしておき画像出力時に元の重みに戻します。画像生成に対してマージの計算はそこまで大きくないと思う
生成AIグラビアをグラビアカメラマンが作るとどうなる？第20回：MシリーズMacでもComfyUI+フロントUIが動く！ComflowySpaceの使い方(西川和久) | テクノエッジ TechnoEdge
ComfyUI使ってみたいけど…。この連載では、これまで3回にわたってComfyUIのインストール、設定、カスタムNode、そしてWorkflowのことを書いてきた。記事を見て実際に動かして頂いているのなら嬉しい限りだ。 ただ「最新技術に即対応するので、やってみたいのは山々だけど、あのUIが何ともとっつき難い」と言う話をよく聞く。また「うちはMacなので…」との声も。 Macは写真や画像編集に使うことが多く、生成AI画像もMacで動かしたい。ただM1 / M2 / M3内蔵のGPUは内蔵のiGPUとしては速いのだが、流石に何万円もする外付けのdGPUには勝てない。結果無理に動かしても遅くストレスが溜まる。 この2つを何とかするのが、今回ご紹介するComflowyspace。見た目のとっつき難さは軽くフロントUIでデコレーションして改善したうえ、WindowsとmacOSに対応だ(Ubunt
ComfyUIでSDXLを試してみる
StableDiffusion用のUI ノードベースでパイプラインを作って処理を行う というものらしい。 stable-diffusion-web-uiでのSDXLサポートがまだ足りないようで、こちらが使われている記事などをちらほら見かけたので、試してみた。（ComfyUI自体はSD1.X/2.Xにも対応している） インストール pyenv-virtualenvのpython-3.10.11でやってみる。 $ pyenv virtualenv 3.10.11 ComfyUI $ git clone https://github.com/comfyanonymous/ComfyUI && cd ComfyUI $ pyenv local ComfyUI $ pip install torch torchvision torchaudio --extra-index-url https://d
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
画像生成AI「Stable Diffusion」使うなら「ComfyUI」のワークフローが便利です (1/4)
画像生成AI「Stable Diffusion」使い倒すならコレ！ 「ComfyUI」基本の使い方 (1/3)
画像生成AI「Stable Diffusion」を使い倒す！ モジュラーシンセみたいな「ComfyUI」をインストール (1/3)
Macで始める画像生成AI 「Stable Diffusion」ComfyUIの使い方 (1/5)
【西川和久の不定期コラム】 ComfyUIのWebUIを作りました！普段使うWorkflowが固定ならこの方が見やすいかも！？
【AIアニメ】ComfyUIでAnimateDiffをはじめよう！｜Baku
【動画生成】Sunoで作ったオリジナル曲をComfyUI-FLOATで歌ってもらうゾ！｜Baku
ComfyUI で Stream Diffusion を動かす｜.com
便利なノードベースのウェブUI「ComfyUI」の使い方まとめ【Stable Diffusion】
人気の画像生成AIツール「ComfyUI」デスクトップアプリがめっちゃラク 初心者にオススメ (1/6)
【西川和久の不定期コラム】 話題のFLUX.1をComfyUIで画像生成してみる！基本系とControlNetのWorkflow(json)公開
今から始めても遅くない！ComfyUI初心者ガイド - ①環境構築と基本操作｜とーふのかけら
ルックバック騒動について｜榊正宗＠Blender＆ComfyUI
榊正宗はガチャ禁止法案の成立を支持します！｜榊正宗＠Blender＆ComfyUI
ComfyUI | Generate video, images, audio with AI
AnimateDiffにComfyUI環境でのControlNetを適応する｜Alone1M
ComfyUI技術指南書 Vol.1 | ComfyUIでFramePackを使ってみる｜とーふのかけら
ComfyUI で FLUX.1 の画像生成とLoRAを試す｜npaka
ComfyUIでWan2.2をLoRAを使って軽量化し、RTX3060で動かす - たねやつの木
新しい動画生成AI「HunyuanVideo」をComfyUIで試してみる｜SUTO💡
ComfyUI で IPAdapter + ControlNet を試す｜npaka
kuranishitibet.hatenablog.com
www.maff.go.jp
www.nikkei.com
rehaon.com
note.com/ai_curator
osouji-kagoshima.link18.jp