Claude.aiをつかって画像内の文字を正確に抽出する方法を見つけました - Qiita

例えば、こちらのブログですが、グラフィカルな解説部分が、画像になっています。 Claudeはマルチモーダルに対応しているので、画像を添付した状態で「文字を抽出して」というと文字を抽出してくれますが、日本語で要約して回答したり、元の文章を正確に抽出する のは、意外と難しいと感じていました。 以下は、Claude.aiを使って「添付画像から文字を抽出して」と依頼した際の結果です。 原文そのままを正確に抽出したいときってありますよね？それを解決する方法を編み出しました。 方法は、「 HTMLで再現させる 」です！ 本投稿の先頭の画像を添付して「添付画像をHTMLで再現して」と依頼した際の結果がこちらです。 感動！！！ （注：右側が画像をもとに生成したHTMLを、プレビューした状態です。Claude.aiのArtifactsという機能です） アイコンがちょっと違うとか省略されてるとかはありますが、

[kmiura]

それ「光学文字認識(OCR)」というのだがもはや死語になるのか。

[ayakohiroe]

画像をAcrobatで開いて編集ボタンを押して文字認識させてから、PDF翻訳にかけるとよい

[hihi01]

これはすごい！やってみよう！

[suneo3476z_tn]

なるほど。html→markdownという経路がよさそうだ。

[Insite]

っhttps://claude.site/artifacts/3e97dd97-a841-45cf-b289-78a1fb7b4697

[rgfx]

あー…まあなんだ、わからなくもないけど…。そういうもんか…（ほなら†神†Excelにしてくれ言うたらやってくれるんかと

[naggg]

“方法は、「 HTMLで再現させる 」です！ 本投稿の先頭の画像を添付して「添付画像をHTMLで再現して」と依頼した際の結果がこちらです。”

[stabucky]

本当か？後で試す。

[misshiki]

“本投稿の先頭の画像を添付して「添付画像をHTMLで再現して」と依頼した際の結果がこちらです。 感動！！！”

[snaflot]

“原文そのままを正確に抽出したいときってありますよね？それを解決する方法を編み出しました。 方法は、「 HTMLで再現させる 」です！ 本投稿の先頭の画像を添付して「添付画像をHTMLで再現して」と依頼”

[urd0401]

いっかくうさぎ

[yarumato]

“Claudeは「画像から文字を抽出して」と指示すると、要約して回答したりする。「画像をHTMLで再現して」だと、レイアウトを維持したまま要約しない忠実な日本語訳になる。”

[Falky]

なるほどかしこい

[ftype]

正確にって言葉も安くなってしまったな…

[jintrick]

プロンプトは「添付画像をHTMLで再現して」

[kaos2009]

“本投稿の先頭の画像を添付して「添付画像をHTMLで再現して」と依頼した際の結果がこちらです。”

[mr_mayama]

Claudeは課金する価値あるぞ

[mangabon]

文字を精度よく抽出するために、「HTMLで出力」させると