Wikipediaを元にした単語辞書に頒布義務はあるのか？ キュレーションサービスを巡る法的論争。 - Qiita
結論 頒布義務があるようです。形態素解析用の単語辞書をご提供いただき、ありがとうございました。 考察 キュレーションサービス（ニュースアプリ。Webコンテンツを集めてユーザーにオススメするサービス）は、Webコンテンツを分類する為に内部で辞書を持っています。その辞書をもとにコンテンツの文章を単語に分け、その単語群からそのコンテンツの特徴を把握します。この辞書はキュレーションサービスにとって、ビジネスの要であると言えます。なぜならば、正確に単語を分ける事ができるのならば、後は定番の機械学習アルゴリズム（ex.Complement Naive Bayes）にかけるだけである程度の精度の分類は行えるからです。先の辞書は秘伝のタレに比喩される事も多いです。 さて、その辞書ですが、世の中で最も多く使われているのはWikipediaのデータセットを元にしたものです。Wikipediaの記事のタイトルは
ローカルのRedis上でWikipediaカテゴリをシュッとdigる
WikipediaはAPIがあったり、データのMySQLダンプを惜しみなく公開していたりする。便利。しかし、いかんせん規模が大きいので、APIアクセスやRDBへの問い合わせに依存したデータ収集は辛いものがある。 今回はWikipediaデータの中でも、特に『カテゴリ』を効率的にdigる方法を fastcat というPythonコードから学ぶ。 ゴール Wikipedia上の、あるカテゴリに対する上位・下位カテゴリの一覧を得る。 たとえば、英語版Wikipediaの Computers というカテゴリには、 上位カテゴリ Office equipment Computing 下位カテゴリ Computer hardware companies Computer architecture Classes of computers Information appliances Computing
言葉と概念を紐付ける〜GoogleによるセマンティックWeb再構築 - 随所作主録
セマンティックWebという言葉の意味に踏み込んだ文書データ処理が話題になって10年くらい経つと思いますが、華々しくサービスとして使われているとは耳にしませんし、ユーザーとしてもその恩恵に預かってる感覚はありません。やはり表記ゆれや同義語、意味階層に関する膨大なルール体系（オントロジー）を完璧に作り上げたり、コンテンツに対するメタデータ付けたりという人手のボトルネックが解消されなかったことが原因なのでしょうか。そんな停滞したエリアに、Googleがいつも通り少々暴力的（？）な方法で一石を投じる成果を公開したようです。 From Words to Concepts and Back: Dictionaries for Linking Text, Entities and Ideas [Google Research Blog] 中身はいたってシンプルで、英語版Wikipedia記事1ページをそ
大容量のDBデータを準備する - zabbiたんAMIたん
そこそこ大きいDBデータが欲しいと言われたら あなたはどうしますか？ 今回はMySQLのWikipediaデータを使ってmysqlに突っ込んでみましょう。 xml2sqlのインストール wikipediaで提供しているXMLフォーマットのデータをmysqlやpostgresqlにインポートできるxml2sqlというツールが用意されているので、これを利用します。 http://meta.wikimedia.org/wiki/Xml2sql yum install expat-devel wget http://ftp.tietew.jp/pub/wikipedia/xml2sql-0.5.tar.gz tar zxvf xml2sql-0.5.tar.gz cd xml2sql-0.5 ./configure make cp xml2sql $HOME/bin/ wikipediaの全てのデ
WikipediaからのSolr用類義語辞書の自動生成
6. 見出し語（＝原型語） 類義語（＝略語、日本語版頭字語） 入国管理局 入管 文房具 文具 社員食堂 社食 国際連盟 国連 リポビタンD リポD ベルサイユのばら ベルばら 木村拓哉 キムタク Universal Serial Bus USB （日本語における頭字語の例） Copyright (c) 2012 RONDHUIT Co.,Ltd. 6 7. 辞書型コーパス （見出し語,説明）× M 項目 設定ファイル ＜類義語知識の獲得＞ すべての見出し語に関し以下を ループ処理 Lucene/Solr インデックス 1. 類義語候補tBの同定 インデックス作成 2. 見出し語tAと類義語候補tBの 類似度S(tA, tB)の計算 3. 類似ならば出力 • • • 説見見 明出出 しし 語語 の 読 CSVファイル み Copyright (c) 2012 RONDHUIT Co.,Ltd
Wikipediaに一度寄付すると凄い催促メールが来る Wikipediaは何故広告を貼らないのか|ガジェット通信 GetNews
ウェブの百科事典『Wikipedia（ウィキペディア）』をご存じだろうか。誰もが使ったことがあるその膨大な情報。ボランティアにより情報は日々更新され運営されている。リアルタイムで更新され芸能情報や訃報なども即時更新されるのが特徴。これこそインターネットならではだ。『Wikipedia』は無料で閲覧することができ、書かれているデーターもクリエイティブ・コモンズライセンスの下で使用可能となっている。 ではこの『Wikipedia』はどのように運営されているのだろうか？ 実はユーザーからの募金により運営されている。日本なら日本円で支払うことができ、クレジットカード決済にも対応しており、即時募金が可能。記者も『Wikipedia』を日々使わせて貰っているので今年2回ほど募金したことがある。それが切っ掛けで『Wikipedia』から募金催促のメールが頻繁に来るようになったのだ。その内容が次のようなも
438 It US | Risks and mistakes that online gamers may have to deal with when they are dealing with online casinos in the United States
Risks and mistakes that online gamers may have to deal with when they are dealing with online casinos in the United States In the United states we all know that a few state may allow online gaming and betting whereas in some area sit is still not legal to play casino online, that is why when you are in need of getting the right games and paly them as per your preferences you must be able to find o
yebo blog: QwikiのiPadアプリが11日間で25万ダウンロード
2011/05/05 QwikiのiPadアプリが11日間で25万ダウンロード Qwikiは主としてWikipediaの記事、写真やビデオと統合し、(英語だが)音声で読み上げるサービスだが、iPadアプリ[itunes]が登場して更に火が点いたようだ。たったの11日間で25万ダウンロードあったとの事[techcrunch]。動きはFlipboardのようだが、何かを検索すると女性の声(音声合成)で音声ガイドが流れ、画面の説明が進行して行く。日本人にとっては英語の勉強にもなるとの事。 投稿者 zubora 投稿時間 06:11 ラベル: iPad, Software, Technology 0 コメント: コメントを投稿
おさかなラボ - ツタヤでも大活躍！iPodTouchにWikipediaを入れると最強な件。
金もないのにムシャクシャしてiPod Touch 32GB買った。今はまだ後悔してない。 それにしてもだ。このiPod Touch（恐らくiPhoneも同じだろう）にWikipediaを入れると便利で便利で仕方がない。いつもポケットに入っているちいさきものがブリタニカに匹敵するとさえ言われる百科事典に変身するのだ。現在のところ、特に威力を発揮しているのがツタヤなどのレンタルCD屋だ。iPod Touchに曲を入れておけば今どのアルバムを持っているか分かるので重複して借りることはないし、持っていないアルバムのどれがどう秀逸なのかまで知ることさえできる。影響されたアーティストや比較されるアーティストを見て、新たなお気に入りアーティストの発見にも繋がる。とにかくこれ一台さえあればレンタルが非常に楽しくなる。なお、飲みの席などでも使えそうだが、多用するとただの変な人なので要注意。 ちなみに、イ
Kazuhiro's blog - wikipedia-fpw
ウィキペディア日本語版のダンプデータをFreePWINGを利用してJIS X 4081形式に変換するツールです。 オフラインでウィキペディアを参照したい場合に使えます。 ただし、画像とか表には全く対応していないので、そういうものも参照したい場合はオンラインになるなりローカルにウィキペディアのコピーを構築した方がよいと思います。 for your download wikipedia-fpw-20091202-src.tar.gz インストール このツール自体は任意のディレクトリに展開するだけです。 ただし、FreePWINGの導入以外に以下の要件を満たす必要があります。 Perlが5.8以降であること。 Perlが64ビットintとlarge fileをサポートしていること。 これは2GBを超えるサイズのHONMONファイルを作成する為の要件ですが、現在ダウンロードできる最新のダンプデータ
30分で理解する自然言語処理 まとめ - プログラマでありたい
今まで何本か日本語処理のエントリーを書いてきました。後で振り返り易いように、ここらで一覧にまとめておきます。 wikipediaのダウンロード&データベースにインポート コーパスとして、wikipediaの存在はありがたいです。まずはここから始めるのが良いですね。併せて紹介しているxml2sqlも秀逸です。 特徴語抽出のあれこれ あれこれと言いつつ形態素解析とYahoo APIを使った特徴語抽出のみを紹介しています。手軽に出来るのが魅力です。 ベイジアンフィルター Perlで作りたい人に教えてあげたいちょっとしたこと Algorithm::NaiveBayesの使い方を簡単なサンプルで紹介いたしました。割と好評です。ベイジアンフィルターの人気の高さを垣間みれますね。 TermExtract Perlで出来る特徴語抽出 TermExtractという専門語抽出モジュールの紹介です。TermEx
wikirage: What's hot now on wikipedia
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
Googleの検索結果にWikipediaを加える「Googlepedia」 - ネタフル
Download of the Day: Googlepedia Firefox extensionというエントリーより。 Firefox extension Googlepedia adds Wikipedia search results to your Google searches. Lifehackerで、Googleの検索結果にWikipediaの検索結果を加えるFirefoxの機能拡張「Googlepedia」が紹介されていました。 最近、何かというとWikipediaで調べものをしているので、これは便利かも。で、日本語には対応していないんだろうなぁ‥‥と思って試してみたら、対応している！ これは便利！ 広い画面だったら、なおのこと使いやすいでしょうね。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Programs