行政の統計資料のような非構造化データをGPTで構造化データに変換する｜mah_lab / 西見 公宏
今朝方GPT-4が発表されて、みなさん死ぬほど盛り上がってますねー。 GPT-4を使えば一発でできそうなネタではありますが、GPT-4 APIのお値段は3.5よりもお高めの設定なので、これからはどのように上手くGPTのバージョンを使い分けていくかが問われていくと思います。 というわけで今日は非構造化データを構造化データに変換する話です。 問題の背景行政が定期的に公開している統計資料をご覧になったことはありますでしょうか。ディスる訳ではないですが、以下に示すのは私が住んでいる富士吉田市の統計資料です。 統計ふじよしだ令和元年度版 - 商業 このように分かりやすい表で情報を提供してくれるのはありがたいのですが、数値データにはなっていないので分析に活用することができません。 GPTのパワーを使って、このような非構造化データを構造化データに変換できないか？というのが本日のお題になります。 コードP
お役所や大企業がIT調達の呪縛から逃れるためには - ku-sukeのブログ
宮坂さんのTweetを拝見し、僕もここ数年DXだとかFintechだとかよくわからない業界でもがいてきて少し見えてきたことがあるので言語化してみたい。 勉強になった。行政ではIT調達なる言葉を使うが、ソフトウェア/デジタルサービスは「調達」という言葉に馴染まないのではと。サービスが顧客期待に応えるかは事前に積算できず不確実性が。顧客に聞きながら改善するしかない。これが今の予算/調達制度に抜群に相性が悪い仮説。 https://t.co/RUV1HzrDoe— 宮坂学 Manabu Miyasaka (@miyasaka) 2020年9月19日 おさらい。IT調達の呪縛とは まずはじめに、この国の遅れたIT化や、いけてない（ようにみえる）システムがなぜ起きているか、その原因の多くが、システム開発を「モノの調達」と同じフローに載せていることである。 たとえば、コピー機を100台、カラーレーザー
政府統計データ、API提供開始 実際に取得し可視化してみた:オープンデータ情報ポータル
2013/06/21 データジャーナリズム 総務省では、６月10日から統計データのAPI（Application Programming Interface）提供を開始した。インターネットを通じて機械的にデータを取得し、自社の持つシステムやウェブサイトで活用することができる。 独立行政法人統計センターが運用している「次世代統計利用システム」で試験的に行っているもので、登録すれば誰でも利用できる。現在ＡＰＩで提供されているのは、国勢調査、住宅・土地統計調査、地域メッシュ統計、消費者物価指数など総務省統計局所管の統計で、データ量は表にして約32,000、約47億セルに及ぶ。 政府から最新データが提供されると、利用者側のウェブサイトでも自動的に同期して更新するようにしたり、政府データとその他のデータをシステム上で組み合わせて分析する、といった利用を想定している。 総務省ではこの試験運用でノウハウ
中日新聞:鯖江市が行政データ「ＸＭＬ」形式で提供 全国初、加工可能に:福井(CHUNICHI Web)
トップ > 福井 > 1月15日の記事一覧 > 記事 【福井】 鯖江市が行政データ「ＸＭＬ」形式で提供 全国初、加工可能に Tweet mixiチェック 2013年1月15日 タブレット型多機能端末に表示された指定避難所までの経路＝鯖江市役所で 鯖江市は、自治体としては全国で初めて高互換性コンピューター言語「ＸＭＬ」を活用し、市民参加型の情報提供を進めている。ＸＭＬ形式は従来の形式に比べて情報処理量が無限大に近く、必要に応じて情報の加工が可能。行政情報に市民の情報を加えることで情報が充実する上、多機能携帯電話（スマートフォン）などで市民が情報を活用できる。 タブレット型多機能端末の画面に市内の地図が浮かぶ。現在地を示す緑の矢印と、災害時の指定避難先を示す赤い印。現在地から最寄りの避難場所までの最短ルートが青い線で表示される。避難所をタップすると、住所や電話番号を表示。もちろん地図や情報
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
