Opendata@tokyowebmining
Automatic variational inference (ADVI) can be implemented in Stan to automate variational inference for any probabilistic model specified in Stan. ADVI determines an appropriate variational family and optimizes the variational objective without any input from the user beyond providing the model and data. ADVI handles nonconjugate models by automatically deriving an inference algorithm. It scales t
自治体のExcelファイルを“5つ星”オープンデータ化 jig.jpがプラットフォーム開発 鯖江市が採用
jig.jpは6月4日、自治体向けのオープンデータプラットフォーム（odp）の販売を開始した。自治体が持つExcelデータをWebサイトからアップロードするだけで、汎用性の高いRDF形式に変換して公開できる。まず福井県鯖江市が採用し、民間の開発者によるデータ活用に期待。今後、全国の自治体に導入を働きかける。 オープンデータとは、誰もが自由に再利用できるようデータを公開すること。欧米政府を中心に取り組みが進んでおり、例えば米国政府は、保有するさまざまなデータセットを提供するサイト「Data.gov」を運営している。国内自治体では鯖江市を皮切りに、千葉県流山市など30以上の自治体がさまざまなデータを公開。民間の開発者などがデータを活用し、サービスやアプリを開発している。 ただ、公開されたデータの形式がふぞろいだと、アプリなどで再利用しにくくなる。Webの考案者で、オープンデータを推進しているテ
DATA GO JP/open data
データセット データセットとは、ファイルやURLなどの「オープンデータ」が登録された入れ物を指します。 データポータルでは、複数の切り口からデータセットを探すことができます。
政府、オープンデータ活用サイトを12月20日に開設 全省庁1万のデータ群を開放する「DATA.GOV」日本版 - 日本経済新聞
政府は2013年12月20日、国が保有するデータを無償で入手できるポータルサイトの運用を始める。全省庁が参加し、統計や調達、防災などに関連する約1万個のデータ群が最終的に公開される見通しだ。企業や公共団体がこれらのデータを活用し、低コストかつ短期間にアプリケーションやサービスを開発できるようになる。政府のサイト名称は「データカタログサイト」。広く開かれた利用が許可されているデータをオープンデー
総務省｜ICT利活用の促進｜地方公共団体のオープンデータの推進
総務省「オープンデータを推進する地方公共団体職員の人材育成等に関する実証の請負」事業において実施する、オープンデータの推進に必要な知識・技術等を習得するための各種研修教材等を利用いただくためのポータルサイトです。 オープンデータ研修ポータル： https://www.opendata-training.org/ オープンデータの意義・目的 国民参加・官民協働の推進を通じた諸課題の解決、経済活性化 行政の高度化・効率化 透明性・信頼の向上 オープンデータの定義 国、地方公共団体及び事業者が保有する官民データのうち、国民誰もがインターネット等を通じて容易に利用（加工、編集、再配布等）できるよう、次のいずれの項目にも該当する形で公開されたデータをオープンデータと定義する。 営利目的、非営利目的を問わず二次利用可能なルールが適用されたもの 機械判読に適したもの 無償で利用できるもの 〈参照：オープ
日本のいま、そして未来を、世界に正しく伝える｜株式会社ニューズ・ツー・ユーホールディングス
Accurately conveying Japan, present and future, to the world. Mission Providing trustworthy information that deepens understanding of, and generates interest in, Japan. 世界中で、日本に興味を持つ人を増やし、日本についての理解を深めるために、私たちは、信頼できる情報を提供します。 Vision Contributing to a better world through the promotion of mutual understanding between Japan and various international communities. 日本と世界の相互理解を推進することで、よりよい世界の実現に貢献します。
データを解き放て 〜 オープンデータで行こう - Nothing ventured, nothing gained.
津田くんという若者がいる。石巻に住む大学生だ。釣りが好きなので、周りからはフィッシュと呼ばれている。 彼はイトナブという石巻の次世代を担う若者を対象にした拠点でプログラミングを勉強している。 IT技術を学ぶ東北Tech道場の成果発表会が先週東京で行われたのだが、そこで彼が披露したアプリケーションが「つなっぷ」だ。石巻市内でこのアプリを起動すると、その地点での東日本大震災の際の津波の高さを教えてくれる。残念ながら、データの関係で、このアプリは石巻限定だ。 アプリ制作のうちプログラミング部分でも難儀していたようだが、津波データの取得にも苦労したらしい。 石巻市内の各地点での津波データは公開されていない。そこで彼は石巻市役所に掛けあって、そのデータを入手した。もらったのは紙に印刷されたデータ。それを彼は1日半かけて自分でデジタルデータとして入力した。 東北Tech道場の成果発表会で私は彼に次のよ
オープンデータで運行情報を NHKニュース
首都圏の鉄道各社と東京都は、電車が今、どこを走っているかを示すリアルタイムの運行データの公開に乗り出すことになりました。政府が進める「オープンデータ」の取り組みの一環で、新しいサービスの開発や災害時の活用につながると期待されます。 この取り組みに参加するのは、ＪＲ東日本や東京メトロ、小田急電鉄など首都圏の鉄道１２社と東京都交通局で、国土交通省や総務省、東京大学も協力します。 ここでは、これまで個別に管理され公開されていなかった、車やバスが今どこを走っているか示す位置や時刻のデータ、それに駅の混雑の情報などを、「オープンデータ」として公開していきます。 これによって、交通情報を使ったサービスを自由に開発できるようになり、例えば電車が走っている位置をスマートフォンの地図にリアルタイムで表示したり、目の不自由な人向けに運行情報を音声に変換して提供したりといった活用が期待されます。 さらに、災害な
データをつないで新たなアイデアを NHKニュース
政府や企業などが公開しているさまざまなデータを組み合わせることで、社会問題の解決に役立てたり、新たなイノベーションにつなげたりしようというコンテスト「LOD Challenge 2013」が始まることになり、１０日、東京・渋谷で具体的なアイデアを考えるイベントが開かれました。 LOD Challenge 2013 インターネット上では、政府や企業などが保有するデータを、コンピューターを使って自由に利用したり加工したりできる形で公開する「オープンデータ」と呼ばれる取り組みが広がっています。 「LOD Challenge 2013」は、こうして公開されたデータを組み合わせることで、貧困や気候変動といった社会問題の解決や経済の活性化を生み出す新たなイノベーションにつなげようと行われるもので、ことし１０月からデータを活用したアイデアやアプリなどの応募を始め、来年３月には優れた作品を表彰することにし
政府統計データ、API提供開始 実際に取得し可視化してみた:オープンデータ情報ポータル
2013/06/21 データジャーナリズム 総務省では、６月10日から統計データのAPI（Application Programming Interface）提供を開始した。インターネットを通じて機械的にデータを取得し、自社の持つシステムやウェブサイトで活用することができる。 独立行政法人統計センターが運用している「次世代統計利用システム」で試験的に行っているもので、登録すれば誰でも利用できる。現在ＡＰＩで提供されているのは、国勢調査、住宅・土地統計調査、地域メッシュ統計、消費者物価指数など総務省統計局所管の統計で、データ量は表にして約32,000、約47億セルに及ぶ。 政府から最新データが提供されると、利用者側のウェブサイトでも自動的に同期して更新するようにしたり、政府データとその他のデータをシステム上で組み合わせて分析する、といった利用を想定している。 総務省ではこの試験運用でノウハウ
オープンデータで「食の日本地図」 家計調査（2005 - 2012年）より:オープンデータ情報ポータル
2013/04/26 データジャーナリズム オープンデータ可視化の実験として、総務省が毎年行っている家計調査の結果の一部を地図上に表現しました。日経電子版に連載中のコラム、食の地域性を読者とともに探る「列島あちこち 食べるぞ！Ｂ級ご当地グルメ」との共同企画です。 家計調査は全国約9千世帯を対象に、家計の収入・支出、貯蓄・負債などを調べ、集計しているものです。収支の調査票は家計簿形式になっており、具体的にどのような品目を購入したのかまで詳しく記入します。 その支出項目は500ほどで、食料に関するものだけでも200を越えます。今回の実験では、この食料部分に着目し、どの地域で、どの食品が多く購入されているかをマッピングしました。 様々な切り口から分析が可能と思いますが、一例として４月26日（金）更新の日経電子版「列島あちこち 食べるぞ！Ｂ級ご当地グルメ」で、日常食文化の多様性の観点から考察を展開
データジャーナリズム――世界に広がる「データからニュースを発見する」挑戦（THE PAGE） - Yahoo!ニュース
いま、データを活用した新たな報道手法「データジャーナリズム」に注目が集まっています。データジャーナリズムは「データからニュースとなるファクトを発見し、伝える」手段として、テクノロジーの進化や、インターネット上に公開されているデータの増加とともに、ここ1～2年という短期間のうちに世界各国の編集現場で急速に浸透しました。いまでは多くの報道機関にとってデータジャーナリズムは「取り組まざるを得ない報道手法」となりつつあります。 日本ではまだあまり認知されていませんが、世界を見渡すと実践事例は着実に増えてきています。昨年（2012年）のロンドンオリンピック報道やアメリカ大統領選挙報道では、欧米の報道機関を中心にデータジャーナリズムの手法を取りれた取り組みが数多く見られました。データジャーナリズムの歴史はまだ浅いにも関わらず、データジャーナリズムの手法を取り入れた取材がスクープを見つけ出し、世論や行政
国勢調査など政府統計データをCSV化してダウンロードできる「統計くん」 政府API活用
個人開発者の矢野さとるさんは6月12日、10日に公開された「次世代統計利用システム」のAPIを活用し、国勢調査などの政府が持つ統計データをCSV形式でダウンロードできるWebサービス「統計くん」を公開した。 次世代統計利用システムは、統計のオープンデータの高度化に向け、統計センターが総務省統計局と協力して提供しているシステム。政府の統計ポータル「e-Stat」でデータベース化されている統計データを、XMLやJSONなどで出力するREST方式のAPIを提供している。 統計くんは同APIを活用し、国勢調査、事業所・企業統計調査、全国物価統計調査、家計消費状況調査などについて、調査結果をWebブラウザ上に表示したり、条件を絞り込んで分類したり、CSV化してダウンロード可能。今後は、グラフ生成やクロス集計機能などの実装を検討している。 関連記事 「PM2.5まとめ」正式公開 現在地のPM2.5濃度
総務省｜報道資料｜統計におけるオープンデータの高度化
総務省は、政府統計のポータルサイトであるe-Statなどで広く公開している政府統計データについて、より高度な利用を可能とする取組についてまとめました。 総務省統計局は、政府統計の中核的機関として、人口や事業所・企業、消費など国の基幹となる重要な統計を作成しております。データ提供の面においても、e-Statを通じ広く公開してきました。 （政府統計の総合窓口(e-Stat) http://www.e-stat.go.jp） 現在、政府全体でオープンデータへの取組を推進しているところですが、これらの取組をリードする総務省として、政府統計の情報提供のかたちを更に高度化すべく検討を行い、独立行政法人統計センターと協力し、トップランナーとして次のような取組を進めています。具体的には次の3つです。 (1)API機能による統計データの高度利用環境の構築 (2)統計GIS機能の強化 (3)オンデマンドによる
野良データを撃つ銀の弾丸はない - 雑種路線でいこう
日本でもオープンデータの取り組みが大きく動き始めた。昨年7月にIT戦略本部が電子行政オープンデータ戦略を発表し、12月に電子行政オープンデータ実務者会議が立ち上がり、2月に入ってオープンデータIDEABOXで意見を募集し始めている。さっそく経済産業省がOpenData METIを立ち上げてデータを公開し始めた。公開に当たっては利用者が扱いやすいフォーマットで提供できるに超したことはないが、準備に時間をかけるよりはExcelで構わないから提供可能な文書から公開し、フィードバックを受けて段階的に改善した方がいい。 政府の保有している情報のうち統計や地図、道路情報など利用価値の明確なものは既に公開または商用化されている。これから公開するデータとして検討の俎上に上がるとすれば、何らかの行政目的のために収集され、ビジネスや学術分野で副次的な利用価値があり、かつプライバシー等の課題をクリアして公開でき
5つ星オープンデータ
Webの発明者でありLinked Dataの創始者でもあるティム・バーナーズ＝リーは，オープンデータのための5つ星スキームを提案しています．ここでは，各段階の星の例と，それに伴うコストや利益について説明します． 以下に，ティムの5つ星オープンデータ計画における各レベルの例を示します．この文章を通して使われるデータ例は’今後3日間における東京 (日本) の気温予報‘です．: ★ (どんな形式でも良いので) あなたのデータをオープンライセンスでWeb上に公開しましょう1 例 … ★★ データを構造化データとして公開しましょう (例: 表のスキャン画像よりもExcel)2 例 … ★★★ 非独占の形式を使いましょう (例: ExcelよりもCSV)3 例 … ★★★★ 物事を示すのにURIを使いましょう，そうすることで他の人々があなたのデータにリンクすることができます4 例 … ★★★★★ あな
アーロン・シュワルツの死とオープンデータについて | 栗原潔のIT弁理士日記
ちょっと前になりますが、RSSやReddit等にかかわった米国の開発者、ネット活動家であるアーロン・シュワルツ氏が26歳という若さで自殺をしたという衝撃的ニュースがありました（参考記事）。 自殺の理由は、JSTORという学術論文データベースから大量の電子文書を無断ダウンロードした疑いで逮捕・告訴され、重大な罰を受ける可能性が生じたことで心理的に疲弊してということであるとされています。ダウンロードの動機は「本来的にオープンであるべき学術論文情報の提供に対して対価を取り、しかもその収益が著者ではなく出版社に回っているのはおかしい」ということだったそうです。 権利者側（JSTOR）が和解し、告訴を取り下げているにもかかわらず、検察当局が公訴したことについては非難の声が聞かれています。公訴の当事者であるオーティズ検事を罷免せよとの陳情も寄せられているようです（ソース）。米国の著作権侵害が非親告罪で
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
東京メトロ、列車の在線位置など全線オープンデータ化、車両の所属会社も 
gr.jp
オープンデータ:政府サイトが突然の休止 研究者ら批判 - 毎日新聞