StableDiffusion＆ControlNet＆SegmentAnythingを使って線画の自動下塗り＆レイヤー分けツールを作った話

前置き こんにちは、抹茶もなかです。 先日、一枚絵のレイヤー分けツールについて紹介した記事を書きました。 今回は、その時得た知見を応用して線画を自動的に下塗りし、ついでにレイヤー分けまでやってもらおうという試みです。 実際に作ったものはこちら こんな感じで線画を入力すると下塗りをしてレイヤーで別れたPSDを出力してくれます。 なんで作ろうと思ったか レイヤー分けツールを世に放った後、Twitterで作ったツールの反応をみていたところ、「線画を下塗りしてレイヤー分けする部分をAIにやって欲しい」という声を多く見かけた事からこのツールを作ることを考えました。 また、画像生成AIを一枚絵ポン出し以外の用途で実務に活用することはできないのか？という点をテーマとしてツールを作っているので、その目的にも合致していた、という点が大きいです。 自分でデジ絵を描いているときの肌感としても、下塗りとレイヤー分