PythonでPDFからテキスト/表情報の抽出精度を比較してみた - Taste of Tech Topics
はじめに こんにちは。ついにジム通いを始めて四六時中筋肉痛を感じながら過ごしているイワツカです。 最近はLLM（大規模言語モデル）とRAG（検索拡張生成）を用いて企業内ドキュメントを活用する取り組みが多く見受けられます。 ドキュメントは基本PDFで保存されているため、PDFからテキストを抽出して、検索対象にすることが必要です。 そこで今回は、PythonでPDFからテキストを抽出するためのライブラリを比較して、どれが良いのか検証しました。 はじめに 概要 実装 PyMuPDF pdfplumber unstructured 比較結果 テキスト抽出 サンプル1のテキスト抽出結果 サンプル2のテキスト抽出結果 表の抽出 サンプル3の表抽出結果 サンプル4の表抽出結果 検証結果 まとめ 概要 今回はPDF読み取りライブラリとして、PyMuPDF、pdfplumber、unstructuredの3
防衛省と外務省の職員は「マイナ保険証」が“嫌い”？…自治体でもほとんど活用されず、会計検査院にも「ムダ」と烙印を押された理由とは | 弁護士JPニュース
現行の保険証を廃止してマイナンバーカードに保険証の機能を統合する「マイナ保険証への一本化」が12月2日に迫っている。他方で、マイナ保険証の利用率は低調に推移しており、厚労省の発表によれば、8月時点で12.43%にとどまっている。 「哲学系ゆーちゅーばーじゅんちゃん」こと北畑淳也氏は、早くからマイナ保険証への一本化に関するさまざまな問題に着目し、YouTube等を通じた情報発信を行ってきた。 北畑氏は、マイナ保険証への一本化の背景にある「デジタル化」が本質からずれたイデオロギーに堕していること、税金を無駄遣いして既存の有用なしくみを壊すものであること、何の価値も生まない無駄な業務により膨大な時間が浪費されていること等を指摘する。 本連載では、上記の点について、北畑氏に、政府自身が公表しているデータをはじめ、信頼性のある資料をもとに語ってもらう。 第2回は、国家公務員のマイナ保険証の利用率が低
防衛省と外務省の職員は「マイナ保険証」が“嫌い”？…自治体でもほとんど活用されず、会計検査院にも「ムダ」と烙印を押された理由とは（弁護士JPニュース） - Yahoo!ニュース
現行の保険証を廃止してマイナンバーカードに保険証の機能を統合する「マイナ保険証への一本化」が12月2日に迫っている。他方で、マイナ保険証の利用率は低調に推移しており、厚労省の発表によれば、8月時点で12.43%にとどまっている。 【画像】マイナ保険証「キャンペーン」後の8月時点でも利用率12.43%… 「哲学系ゆーちゅーばーじゅんちゃん」こと北畑淳也氏は、早くからマイナ保険証への一本化に関するさまざまな問題に着目し、YouTube等を通じた情報発信を行ってきた。 北畑氏は、マイナ保険証への一本化の背景にある「デジタル化」が本質からずれたイデオロギーに堕していること、税金を無駄遣いして既存の有用なしくみを壊すものであること、何の価値も生まない無駄な業務により膨大な時間が浪費されていること等を指摘する。 本連載では、上記の点について、北畑氏に、政府自身が公表しているデータをはじめ、信頼性のある
大雨による災害の増加を受けて、全国各地に設置されたレーダー雨量計の精度を検証するための測定器が、東北地方では、配備されて以来一度も使われていなかったことが、会計検査院の調査でわかりました。指摘を受けた国土交通省は、使用状況を一元的に把握する仕組みを作ったうえで、公費で購入した機器をきちんと活用するよう各地方整備局に周知しました。 国土交通省は、大雨災害の激甚化や局地的な大雨による被害の増加を受けて、平成22年度から250メートル四方の間隔で雨雲を捉えることができる高性能の「Xバンドレーダー」の配備を進め、気象庁のウェブサイトなどで情報を公表するとともに河川の管理などに役立てています。 これまでに39基が設置され、さらに、レーダー雨量計の精度を検証する測定器も各地の出先機関に数台ずつ配備されていましたが、会計検査院がこの測定器の使用状況を調べたところ、東北地方整備局では、配備された6台すべて
老朽化した公営住宅の撤去費用に充てるための交付金が、国の通知に反して入居者が無断で増築した部屋などを取り壊す費用にも使われ、6000万円近くが余分に支出されていたとして、会計検査院は、国土交通省に対し、無断増築物の撤去費用は交付金の対象外だと全国の自治体に周知するよう求めました。 公営住宅は、令和3年度末時点で全国に210万戸余りあり、耐用年数30年の木造物件を中心に、老朽化した建物の撤去工事が進められています。 国は自治体に交付金を支出して工事費用の半分を支援していますが、会計検査院が令和4年度までの5年間に行われた公営住宅の撤去工事を調べたところ、12の府と県の合わせて805戸の工事で、不適切な形で交付金が使わていたことがわかったということです。 具体的には、部屋の少なさや狭さを補うため、無断で建物の外壁の一部を壊し庭やベランダまで部屋を拡張するなどしたケースで、無断建築物が確認された
公営住宅１０００戸で「無断増築物」…会計検査院、入居者が現状回復行うよう国交省に求める（読売新聞オンライン） - Yahoo!ニュース
解体工事が行われた１７府県の公営住宅約１万８０００戸のうち、約１０００戸で入居者が違法に部屋などを増築していたことが会計検査院の調べでわかった。解体には国の交付金が充てられるが、検査院は３０日、こうした「無断増築物」の撤去に交付金を使うべきではないとして、国土交通省に対し、現状を把握した上で入居者に原状回復させるよう求めた。 【写真】誰が設置したのか「勝手橋」
マイナ保険証へ一本化で「コスト削減」の政府試算は“幻想”だった…莫大な税金のムダ遣い？ 試算から除外された「隠れコスト」の正体 | 弁護士JPニュース
現行の保険証を廃止してマイナンバーカードに保険証の機能を統合する「マイナ保険証への一本化」が12月2日に迫っている。他方で、マイナ保険証の利用率は低調に推移しており、厚生労働省の発表によれば、8月時点で12.43%にとどまっている。 「哲学系ゆーちゅーばーじゅんちゃん」こと北畑淳也氏は、早くからマイナ保険証への一本化に関するさまざまな問題に着目し、YouTube等を通じた情報発信を行ってきた。 北畑氏は、マイナ保険証への一本化の背景にある「デジタル化」が本質からずれたイデオロギーに堕していること、税金を無駄遣いして既存の有用なしくみを壊すものであること、何の価値も生まない無駄な業務により膨大な時間が浪費されていること等を指摘する。 本連載では、上記の点について、北畑氏に、政府自身が公表しているデータをはじめ、信頼性のある資料をもとに語ってもらう。 第3回は、政府が「マイナ保険証への一本化」
【読売新聞】 解体工事が行われた１７府県の公営住宅約１万８０００戸のうち、約１０００戸で入居者が違法に部屋などを増築していたことが会計検査院の調べでわかった。解体には国の交付金が充てられるが、検査院は３０日、こうした「無断増築物」の
自民党総裁候補者に問う 「日本の官公庁のデータは中国人が作成している実態」をご存じか？（遠藤誉） - エキスパート - Yahoo!ニュース
自民党総裁候補者が14日、日本記者クラブで討論会を開催。その質疑応答は見ごたえがあった。何名かの立候補者が対中防衛策やデータの絶対的機密性を必要とするマイナンバーなどの実行を強調しておられたが、「日本の官公庁のデータのほとんどは中国人が作成している実態」をご存じだろうか？ 防衛や経済安全保障は声高に叫ばれても、誰一人、それを実行するための膨大なデータ作成を誰がやっているかに関する認識はないように（あるいは知っていても見ぬふりをしているように）見受けられた。 日本の官公庁のデータ作成に関する実態の一端を指摘し、各立候補者にネットを通して問いを投げかけたい。 ◆日本の全省庁統一資格が隠れ蓑 周知のように日本のすべての官公庁には＜全省庁統一資格＞が設けられている。このリンク先に書いてある通り、全省庁統一資格とは「各省庁における物品の製造・販売等に係る一般競争（指名競争）の入札参加資格（全省庁統一
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
東北のレーダー雨量計検証機器 配備も使用されず 会計検査院 | NHK
老朽公営住宅の無断増築物撤去に交付金不適切支出 会計検査院 | NHK
公営住宅１０００戸で「無断増築物」…会計検査院、入居者が現状回復行うよう国交省に求める