誰でもわかるStable Diffusion 新バージョン「SDXL」の概要 - 人工知能と親しくなるブログ
Stable Diffusionが登場してもう1年近く経ちます。登場以来、この画像生成AIは世界中にとてつもないインパクトを与えました。 AIはものすごい勢いで進化していますが、Stable Diffusionも例外ではありません。バージョン1からバージョン2にアップグレードし、最近になってさらにアップデートしたバージョン「XL」が登場しました。 今回はこの新バージョンが前バージョンと何が違うのか見てみましょう。 ※私はまだXLを触っていないので、ここで解説する情報ははXLの紹介ページから得たものです。間違いがある場合は教えてください。 Stable Diffusion XLの特徴 Stable Diffusion XLの変更点 Transformerブロックの数が増えた テキストエンコーダーが増えた プロンプトの各トークンのベクトルが大きくなった いろいろな解像度を取り込んだ 「見切れ」
【AI漫画実験／第１回】画像ＡＩのSDXL＋加筆で、手描きに近い白黒漫画を作れないか実験してみた｜野火 城
これは「今までガチガチに手描きで漫画を描いてきた奴が、ＡＩをフルに作って従来の白黒漫画と同じフォーマットの原稿を作るとどうなるか」という実験の記録です。私は手描き漫画にＡＩを生かせないかと思っており、その上で期待しているのは、 ①原稿作成の時間短縮 ②クオリティアップ です。ＡＩで超絶クオリティの漫画が描きたい！というよりは、普段の自分と同じクオリティで構わないから、ＡＩを使う事で時短できたらいいな～と。せっかくなら適度にクオリティも上がったらいいなと。 今の画像ＡＩローカルの主流ＳＤ１系はＮＡＩリーク問題という爆弾を抱えているのであまり触れないようにしていましたが、先日SDの新バージョンＳＤＸＬが出てきて試したところ、これは実用でも使えるな？と手ごたえを感じ、今回の実験を思い立ちました。 そんなわけで生成画像は全てＳＤＸＬベースモデル製です。 今回は下記のモデルとネガティブＴＩを使用しま
cagliostrolab/animagine-xl-3.0 · Hugging Face
Animagine XL 3.0 is the latest version of the sophisticated open-source anime text-to-image model, building upon the capabilities of its predecessor, Animagine XL 2.0. Developed based on Stable Diffusion XL, this iteration boasts superior image generation with notable improvements in hand anatomy, efficient tag ordering, and enhanced knowledge about anime concepts. Unlike the previous iteration, w
Announcing Animagine XL 3.0 - CagliostroLab
Generation Parameter { "prompt": "1girl, arima kana, oshi no ko, solo, idol, idol clothes, one eye closed, red shirt, black skirt, black headwear, gloves, stage light, singing, open mouth, crowd, smile, pointing at viewer, masterpiece, best quality", "negative_prompt": "nsfw, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low qualit
SDXL1.0のLoRA作成メモ (RTX3060 12GB)｜TlanoAI
SDXL1.0でLoRA作りました見出しの通り、7/27に公開されたSDXL1.0でLoRAを作成しました。 こんな感じのケモキャラ生成LoRAです。 サンドイッチを食べるチビケモちゃん私自身はそれほどLoRA作成に手慣れているわけでもなく、経験も少ないですが、とりあえず出来たは出来たということで、設定値等を共有したいと思います。 （細かい部分はあまり分かっていないので聞かれても答えられないと思います。雰囲気でAIをやっている。） 使用したグラフィックボードRTX3060 12GBで作成しています。 SDXLのLoRA作成はSD1系よりもメモリ容量が必要です。 （これはマージ等も同じ） ですので、1系で実行出来ていた設定ではメモリが足りず、より低VRAMな設定にする必要がありました。 学習に使用した素材1系で使用した画像データをそのまま流用しました。 過去に1系/2系でLoRA作成をしたこ
サマースクール2023：大規模言語モデル講座 | Deep Learning JP
本講座はサマースクールの一環として大規模言語モデル（Large Language Models, LLM)に関して体系的に学べる講座を目的として開催されます。 具体的には以下のスキルを身につける事を目的としています。 LLMの原理について，事前学習からRLHFまでの一連の流れや意味合いを理解する LLMの学習や推論を支える技術について理解する 既に公開されているLLMモデルやAPIなどの活用方法を理解する 本講座では、東京大学Deep Learning基礎講座・応用講座を公開してきた松尾研究室が全面的に演習コンテンツを監修・作成しています。実践的な演習を通して、手を動かしながら技術を深く理解し、幅広いトピックを網羅します。 ※本講座はページ下部の前提条件をご確認の上、条件が当てはまる方を対象としています。 LLMのモデルのアーキテクチャーまで取り扱う実践的な講義のため、ご自身のレベルに見合
画像生成AIに2度目の革命を起こした「ControlNet」 (1/4)
画像生成AI「StableDiffusion」の進化が止まりません。昨年8月にオープンソースとしてリリースされてから、世界中のプロアマ問わず多数の人たちが様々な研究成果を反映させ、毎日と言っていいほど新機能を誰かが発表するという状況が起きています。 StableDiffusion登場当初は、画像の品質のランダム性が高く、構図やポーズなどを指定できないという弱点を抱えていました。1枚の画像をもとに画像を生成する「i2i（image2image）」である程度コントロールすることはできても、「キャラクターに特定のポーズをとらせる」といったことは非常に難しかったんですね。 その状況を一変させる新機能が今年2月に登場しました。その名も「ControlNet」。プロンプトによる制約を克服するための、とてつもないポテンシャルを持つ技術でした。Stable Diffusionに次ぐ「2度目の炸裂」と言って
世界に衝撃を与えた画像生成AI「Stable Diffusion」を徹底解説！ - Qiita
追記: U-Netの中間層は常にSelf-Attentionとなります。ご指摘いただきました。ありがとうございます。（コード） オミータです。ツイッターで人工知能のことや他媒体の記事など を紹介しています。 @omiita_atiimoもご覧ください！ 世界に衝撃を与えた画像生成AI「Stable Diffusion」を徹底解説！ 未来都市にたたずむサンタクロース（Stable Diffusionで生成） 2022年8月、世界に大きな衝撃が走りました。それは、Stable Diffusionの公開です。Stable Diffusionは、テキストを受け取るとそれに沿った画像を出力してくれるモデルです1。Stable Diffsuionは10億個近いパラメータ数をもち、およそ20億個の画像とテキストのペア（LAION-2B）で学習されています。これにより、Stable Diffusionは入
Reddit - Dive into anything
Welcome to the unofficial Stable Diffusion subreddit! We encourage you to share your awesome generations, discuss the various repos, news about releases, and more! Be sure to check out the pinned post for our rules and tips on how to get started! Prompt sharing is highly encouraged, but not required. All the good boys This is the basic system I use to override video content while keeping consisten
Kubric：機械学習用アノテーション付き動画生成パイプライン
久しぶりにコンピュータビジョン系の話題。 Google Researchから機械学習用のアノテーション付き動画を生成するためのツールがオープンソースで公開された↓ Kubricは、Instance SegmentationマスクやDepthマップ、オプティカルフローなどのリッチなアノテーション付きのセミリアルな動画を作成するためのデータ生成パイプラインです。 ※このプロジェクトはまだアルファ段階であり、大幅に変更される可能性があります。 モチベーションと設計 機械学習システムの訓練と評価、特にunsupervised multi-object video understandingにおいてはより良いデータが必要です。既存のシステムは、toy datasetsでは上手く行くものの、現実世界のデータでは失敗してしまいます。複雑さの異なる適切なデータセットをオンデマンドで作成できれば、進歩を大幅
AIの著作権問題が複雑化 (1/4)
以前、画像生成AIを使ったイラストの模倣、「AIトレパク」が問題になっているという話をしましたが、画像生成AIと著作権の問題は国際的にも複雑化しています。まだ、現時点ではどうなるのかがはっきりしない混沌とした状況が進み続けています。しかし、現時点で大きなボトルネックになっているのは、計算をするGPUのチップ性能であるため、長い目で見たときには、今後必ず起きると予測できるのは、画像生成AIがリアルタイムに使われるようになり、それで生み出されるコンテンツが登場する未来です。 画像生成AIが集団訴訟を起こされる アメリカで、1月に画像生成AIを開発し、サービスを展開しているStablity AIやMidjourneyなどを相手取って集団訴訟が提起されました（米The Vergeの記事）。著作権侵害を理由に、損害賠償と利用差し止めを求めています。プレスリリースでは「LAION-5Bデータセットに含
22/12/23 AI挿絵付きWeb小説を投稿し始めて2ヶ月経った話 - LWのサイゼリヤ
kivantium.hateblo.jp adventar.org 創作+機械学習 Advent Calendar 2022の18日目、及び画像生成AI Advent Calendar 2022の23日目です。 ～お詫び～ 当初は上記二つのAdvent Calendarに ・実際にWeb小説にAIで挿絵を付けてみた話 ・イラストAIを用いた作品制作についてプランナーとして思うこと をそれぞれ分けて投稿する予定だったのですが、内容的にまとめた方が見通しが良かったので一つの記事にまとめてしまいました。禁止されていないとはいえ、結果的にあまり推奨されない重複投稿の形になってしまったことをお詫びします。 一記事に二記事分のコンテンツがあるということで勘弁してもらえれば幸いです。 AI挿絵付きWeb小説を投稿し始めて2ヶ月経った話 イラストAIと創作に対して思うこと 問題意識：素材と作品の間には溝が
NovelAIでの衣装呪文一覧カタログ、全身女性立ち絵呪文と絵文字立ち絵構文のカタログ、novel ai呪文辞典 | サザノノポートフォリオ
絵文字構文 基礎構文 Ctrl＋Cでコピーできます。 プロンプト ((ultra-detailed)),masterpiece,best quality,(1 girl),(illustration),((((full-length figure)))), paint right up to the tip of the head,((transparent background)),(solo),standing,(wearing shoes on feet), ((is wearing ●●●)),good girl, beautiful detailed eyes,good looking,((an extremely delicate and beautiful)),make the eyes the same shape and color on both sides, ネガティ
サンプラーの違い・全サンプラーの比較【Stable Diffusion web UI(AUTOMATIC1111版) / Sampler】 – 忘却まとめ
画像生成AIでは様々なサンプラーが選べ、それぞれ絵の結果だけではなく速度やステップごとの挙動が違うなどの特徴がある。 結果だけはなくステップごとの挙動・速さ・特徴などで選ぶのがよさげ。 ベースとなる絵 下記のようなプロンプト・同じシード値で全サンプラーを比較してみる。 プロンプト：ロリ、ナース、青髪緑目で羽根の生えた、小さな胸、ベッドに座っている、病室、背景に森と街 ((((masterpiece)))), high quality, very high resolution, large filesize, 1girl,solo, (pale blue hair), very long hair, messy hair, ((((loli)))), ((small breast)), nurse clothes, white narse, cosplay, nurse hat, (whi
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
「ControlNet 1.1」の新機能まとめ！新しいモデルや改善点を紹介【Stable Diffusion】
ヒツジ先生の「AIイラストで成人向けマンガを作ろう」が実践的かつわかりやすい
Reddit - Dive into anything
Stable Diffusion WebUI 忘備録｜かたらぎ
GitHub - Zuntan03/CharFramework: AI画像生成でキャラクターの扱いをしくみ化してフレームワークにしてみる
https://kawaiiprompter-streamlit-word-searcher-app-fgs90p.streamlit.app/