Dify API と GASのカスタム関数を組み合わせてスプレッドシートからLLMを利用する
この記事では、LLMアプリケーション開発プラットフォームであるDifyとGoogle Apps Script（GAS）のカスタム関数を使って、スプシに記載した画像URLに写っているのがわんこかどうかをDifyを使って自動で判定してみました。 なぜDifyとGASカスタム関数の組み合わせなのか？ GASのカスタム関数から直接OpenAIなどのAPIを叩くのが実装としては一番早いのですが、RAGを使いたい、複数のGASから呼び出したい、GAS以外からも呼び出したい、LLMのモデルを柔軟に変えたい、などが発生することも多いです。 そのため実際にLLMアプリケーションを作っていく際は単純にAPIを叩くだけでは解決できないことがおおく、LLMに関わる処理をどこかにまとめておき、まとめておいたものをAPI経由で呼び出すという形にするのが好ましいです。 そこで登場するのがDifyです。 Difyはチャッ
Gemini API を使いスマホでスキャンした表やグラフから自動的にスプレッドシートを作ってみる
Gemini API を少し触ってみて、画像関連でいくつか応用できそうに思えました。 そこで、Google Drive でスキャンした画像(PDF)から自動的にスプレッドシートを作成するような GAS 用スクリプトを試作してみました。 どのようなスクリプト？ Google Drive で以下のような画像をアップロード(スキャン)しておくと Gemini API を利用してスプレッドシートを作成します。 図 1-1 紙の表をスキャンしたファイル 図 1-2 紙の表から作成したスプレッドシート また、スキャン元の画像にはグラフも利用できます。ただし、グラフ内に値が表示されていないと多くの場合で正確な値にはなりません。 図 1-3 画面に表示されているグラフをスキャンしたファイル 図 1-4 グラフから作成したスプレッドシート 表として取り込む仕組み(プロンプト) 基本的にはドキュメントに従って
Power Apps & GPT-4oを使って超高速で画像解析アプリを作る！ - Qiita
GPT-4o凄すぎる！！ 出たときから騒ぎまくっていましたが、GPT-4oの登場で興奮しっぱなしの私です。 先日こちらのQiitaの記事を拝読し、「Power Appsでやったらどうなるだろう🧐」という思いが抑えられず、作ってみたら超高速で画像解析アプリが作成できました！ あらためて記事を出してくださったことに感謝いたします！ まずは初弾！ということでGPT-4oを使って、 Power Appsで画像解析アプリを作成する方法 を書いていきます！ まずは見た目（Power Apps）から！ まずはPower Appsでサクっと画面を作ります！ PowerPoint感覚で作れることが強みですからね！ 最低限のもので構成しています。 画面 ├─ ScreenContainer - スクリーン全体 ├─ HeaderContainer │ └─ Header - ヘッダーコントロール ├─ Bo
OpenAI APIを利用してTerraformから構成図っぽいMermaidを出力してくれるコマンドを作った話
前段 ※社内ブログの内容を個人発信する許可をいただいたためzennでも公開しています。 ChatGPTで話題のOpenAIのモデルは、現在画像の取り扱いはまだ発展途上です。文章から画像を作るAPIや画像入力が検討されていますが、システム運用にクリティカルに使えそうになるのはもう少し待つ必要がありそうです。 そこで現状魅力的に映るのがMermaidです[1]。 Mermaid（マーメイド）は、テキストベースの記述によってフローチャート、シーケンス図、ガントチャートなどの図を生成するためのツールです。Mermaidは、Markdownやプレーンテキストなどのテキスト形式で図を記述し、それを自動的にグラフィカルな図に変換します。(by Chat-GPT) 画像化はJavascriptで実装されており、現在はgithubのmarkdownプレビューやNotionの専用ブロックなどで利用可能です。
IIIF - digitalnagasakiのブログ
IIIFに関する日本語情報の私的なまとめ （2019/11/14版：2024/7/31、少しだけ追記） IIIF (International Image Interoperability Framework) に関してこのブログで色々記事を書いてきましたが、それを中心にしつつ、他の方々が書かれたものも含め、日本語の記事に関して情報をまとめてみました。ご参考になりましたら幸いです。 構築の仕方についても、下の方にリンク＆解説を用意しておりますので、構築について悩んでいる人はぜひ一度ご覧になってみてください。 なお、英語を読むことに支障がない人は、ぜひ「Awesome IIIF」もご覧ください。 2024/7/31、オープンアクセスの解説書『IIIFで拓くデジタルアーカイブ』が刊行されました。PDFでは読みづらいという人のために紙の本としても販売されています。ぜひご覧ください。 IIIFとは
簡単なIIIFビューワを作ってみよう：まとめ
IIIF Presesntation APIを理解する上で、IIIF ビューワを作ってみるとよいのではないかと思いまして、ちょっとチュートリアル的なものを作ってみました。 と言っても、一から作るわけではなく、画像表示部分はOpenSeadragonにおまかせ、という話です。OpenSeadragonが担当してくれるところは、ほぼIIIF Image APIと重なるので、そこはまた別の機会にということで、今回は、OpenSeadragonを核にしてIIIF Presentation APIを活用して閲覧システムを作ろう、という話です。 基本的に、作成に際してはサーバは不要で、ローカルで動かすシステムです。ただ、外部のIIIF Manifestファイルを読み込むという話ですので、ネットにつながっている必要はあります。 以下、順番に解説を読みながら取り組んでいただくと、IIIF Presenta
IIIFの導入方法のまとめ（コンテンツホルダー・一次公開者向け） - digitalnagasakiのブログ
IIIFの導入の仕方がよくわからない、という声を結構あちこちで聞きます。ブログ記事として断片的に書いてきているのですが、それをいちいち探して読んでいただくのも大変ですので、改めて簡潔に記しておきます。ただし、既存のサーバ環境やサーバ・ネットワーク運用ポリシーによってできることは結構違ってくることがありますので、その点はよくご注意ください。 それから、IIIFの場合、「導入」と言っても、コンテンツホルダーや一次公開者向けの「導入」とは別に、既存の公開IIIFコンテンツを素材とする二次利用公開という観点での「導入」があります。これは今までは「利活用」と呼ばれてきたものだと思いますが、たとえば地図年表上に他所のIIIFコンテンツをマッピングできるシステムの例などをみますと、もはや「導入」と言ってしまってもいいような雰囲気があるように思っております。が、ここでは、あくまでも、一次公開者向けの導入方
Remove.bgからWin, Mac, Linux対応のアプリがリリース！複数画像の切り抜きもドラッグ＆ドロップでまとめてできる優れモノ
先日紹介した「Remove.bg」ついにPhotoshopに対応も便利でしたが、なんと今度は、Windows, macOS, Linux対応の無料アプリがリリースされました！ 単体アプリなので、ブラウザもPhotoshopも不要。しかも、複数の画像をドラッグ＆ドロップして、背景だけを画像から切り抜くこともできます。 写真: ぱくたそ 人物が2人でもできるかなと思いましたが、問題なくできました。食べかけの苺もキレイに残っています。 remove.bg Appの特徴 remove.bg Appのインストール remove.bg Appの使い方 remove.bg Appの特徴 remove.bg Appは、Windows, macOS, Linux対応のアプリです。 無料版と有料版があり、無料版は0.25メガピクセルの画像まで、月50枚まで、と制限があります。 ドラッグ＆ドロップによる背景の自
ROIS-DS人文学オープンデータ共同利用センター(CODH)
ROIS-DS人文学オープンデータ共同利用センター（Center for Open Data in the Humanities / CODH）は、情報学・統計学の最新技術を用いて人文学資料（史料）を分析する「データ駆動型人文学」や、人文学研究の成果に基づき構築したデータセットを超学際的に活用する「人文学ビッグデータ」など、オープンサイエンス時代の新しい人文学研究を展開します。[もっと詳しく..][CODHパンフレット..] 重要なお知らせ 2023-11-02 歴史×技術の出会いの場として、第1回ヒストリーテック勉強会を11月22日にオンラインで開催します。参加無料です。 2023-10-18 歴史的地名の「行政区画変遷」を大規模オープンデータ化～『日本歴史地名大系』を平凡社地図出版との協働により機械可読データとして強化～ >> お知らせ一覧 X (Twitter) - Timeline
ウノウラボ Unoh Labs: PHPの画像処理の紹介と簡単な比較
Keita です。 僕は、フォト蔵チームではないので、フォト蔵の画像処理については見ていませんが、個人的に画像処理に興味があるためPHPにおいての画像処理を簡単に調べたことがあります。 その時の結果をお話させていただきたいとおもいます。 この他に、もし、こういう選択肢があるよというのがあれば、教えていただけると大変うれしいです。 主要なライブラリの一覧 GDで処理 LibGDを操作するPHP標準のライブラリです。 ほぼ、レンタルサーバなどで利用できる反面、対応形式が、JPEG,GIF,PNG,WBMP,GD{,2}にしか対応していないなどのいくつか機能的に制限があります。 （WBMPは、Wireless Bitmapという、WindowsBitmapとは別の形式です） imagick ImageMagick/GraphicsMagickという画像編集ソフトのPECLの拡張で
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
(新)マーカーイメージ(ピン・アイコン・画像URL)｜Google マイマップ
AIが表現する“インスタ映え”。DeepAIで着色・生成・〇〇風変換してみた | Ledge.ai