いまさら聞けないHadoopとテキストマイニング入門
ビッグデータ時代の救世主「Hadoop」とは 「Apache Hadoop」は今、最も注目を集めている技術の1つです。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 Hadoopを活用している企業は年々増え続けていて、不可欠な技術になりつつあるといえるでしょう。 本連載では、Hadoopとは何か、Hadoopがどう活用できるのかということを、「テキストマイニング」に焦点を当てて解説していきたいと思います。 重い処理を複数のマシンに分散させる 複数のマシンに処理を分散させるには、プロセス同士の通信、監視、障害時の対応などを考えなければならず、プログラマにとってハードルが高いものです。しかし、Hadoopはそういった面倒くさい処理を一手に引き受けてくれ、プログラマは、やりたい処理だけに集中できます。 例えば、Hadoopを使うと、1
WebGLにおけるクロスドメイン問題
Chromium Blog: Using Cross-domain images in WebGL and Chrome 13 クロスドメインを禁止することは重要である。もしクロスドメインが完全に許されているのならば、任意のドメインのWebサイトから、閲覧者のログイン済みのGMailやTwitterなどの他のサービスにアクセスできてしまう。 これは、画像や動画といったリソースでも同様である。例えば、あるサイトは、ユーザーに応じて画像や動画を生成するかもしれない。その場合、Javascriptから画像の内容を取得できてしまうのは、セキュリティ上危険である。img要素は、クロスドメインの画像を表示できる。しかし、Javascriptから画像の内容を取得する方法はない。 img要素なら問題はないし、2Dのcanvasは、他のドメイン下の画像や動画が描画されたときは、ピクセルが得られないようになっ
「第3回 Jenkins勉強会」活動報告 | gihyo.jp
5月20日（金）にNTTソフトウェア様の会場をお借りして、6名の発表者と80名超の参加者と共に「第3回Jenkins勉強会」を開催いたしました。本稿では、今回の勉強会の模様をレポートします。 今回のテーマは「LL言語プロジェクトにおけるJenkinsの運用について」です。Python, PHP, Rubyなど現在運用中の方々による事例報告やお役立ちプラグイン活用術などを発表していただき、発表中やその後の懇親会で活発な意見交換が行われました。 なお、当日のUstreamをはじめ、各発表者の発表資料や参加者の感想ブログはJenkins Wikiにまとめられています。本レポートの補足としてご参照ください。 第3回Jenkins勉強会 - 日本語 - Jenkins Wiki Jenkinsプロジェクトの現状報告 当初の発表スケジュールには含めていなかったのですが、前回の勉強会以降でJenkins
ソフトバンクモバイルの通信障害で業務委託先の元社員逮捕 回線設定データ改ざん
ソフトバンクモバイルは7月8日、5月に関西で起きた通信障害を発生させた容疑で業務委託先の元社員を警察が逮捕したと発表した。 通信障害は5月25日午前3時58分、大阪府、兵庫県、京都府、滋賀県、奈良県で発生し、26日午前10時15分に復旧。約7万2700人の利用者に影響があった。 同社で調べたところ、内部の人為的事故の可能性があったため、翌日に大阪府警に相談し、6月6日に被害届を提出したという。 逮捕された業務委託先の元社員は、ソフトバンクモバイルの関西ネットワークセンター（大阪市西区）で基地局とネットワークセンターを結ぶ伝送装置のデータ設定業務を担当。元社員は制御用端末に不正プログラムを入力し、ATM伝送装置の回線設定データを改ざん、基地局を停波させた疑いがあるという。 プログラムは3月8～9日に入力され、5月25日に作動するよう設定されていた。元社員は3月15日に体調不良を理由に業務委託
Eclipse 3.7 Indigo公開、e4、Orion、そしてクラウドへ
Eclipse 3.7 Indigo公開、e4、Orion、そしてクラウドへ：ユカイ、ツーカイ、カイハツ環境！（24）（1/3 ページ） 「Indigo」それは、ニュートンが発見した色 2011年6月22日、Eclipseの最新バージョンであるEclipse 3.7がリリースされました。Eclipse 3.5の「Gallileo」からは、Eclipseのリリースのネーミングは「G」「H」「I」とアルファベット順の単語で始まる名前が投票によって名付けられています。Eclipse 3.6「Helios」の次であるEclipse 3.7は「H」の次の「I」で始まる「Indigo」と名付けられました。 天才物理学者であるアイザック・ニュートンがプリズムにより光を7色に分解できることを発見したときに、紫の内側の色をIndigo（藍色）と名付けたことと、藍色がEclipseのカラーにマッチしている、響
LinuxのARMサポートがカオス
江添亮 自由ソフトウェア主義者 C++ Evangelist C++標準化委員会の委員 ドワンゴ社員 C++11本を執筆した。 株式会社ドワンゴで働いている。 Mail:boostcpp@gmail.com Twitter:@EzoeRyou GitHub: https://github.com/EzoeRyou 江添亮のマストドン@EzoeRyou 筆者にブログのネタを提供するために、品物をアマゾンお気に入りリスト経由で送りたい場合： Amazon.co.jp: 江添亮: 江添のほしい物リスト 筆者にブログのネタを提供するために、直接に品物を送りたい場合、住所をメールで質問してください。 View my complete profile ► 2020 (31) ► December (2) ► November (2) ► September (2) ► August (4) ► Jul
IE10が条件コメントを廃止ケテーイ
江添亮 自由ソフトウェア主義者 C++ Evangelist C++標準化委員会の委員 ドワンゴ社員 C++11本を執筆した。 株式会社ドワンゴで働いている。 Mail:boostcpp@gmail.com Twitter:@EzoeRyou GitHub: https://github.com/EzoeRyou 江添亮のマストドン@EzoeRyou 筆者にブログのネタを提供するために、品物をアマゾンお気に入りリスト経由で送りたい場合： Amazon.co.jp: 江添亮: 江添のほしい物リスト 筆者にブログのネタを提供するために、直接に品物を送りたい場合、住所をメールで質問してください。 View my complete profile ► 2020 (31) ► December (2) ► November (2) ► September (2) ► August (4) ► Jul
第2回Asakusaソースコードリーディングのメモ - ひしだまの変更履歴
ひしだまＨＰの更新履歴。 主にＴＲＰＧリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲームや音楽です。 Asakusaソースコードリーディング（第二回）、ThunderGate編のメモです。 資料： ThunderGate Togetter：Asakusaソースコードリーディング（第二回） ThunderGateはHDFSと外部のRDB（今のところはMySQL）とのデータ転送を行う部分。Asakusaフレームワークが「トランザクションをサポート」と言っているのは、ThunderGateにかかっている。 やはりHadoopを使う上ではHDFSと外部とのデータ配信がひとつのポイントになるので、重要。 説明してくださったのは、ThunderGateのアーキテクチャー設計者の埋金さん。 テレメータ（社会インフラ）の開発だとか、RDBでHAクラスターを組んだりとか、UMLaut/J-
第2回Asakusaソースコードリーディングのメモ - ひしだまの変更履歴
ひしだまＨＰの更新履歴。 主にＴＲＰＧリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲームや音楽です。 Asakusaソースコードリーディング（第二回）、ThunderGate編のメモです。 資料： ThunderGate Togetter：Asakusaソースコードリーディング（第二回） ThunderGateはHDFSと外部のRDB（今のところはMySQL）とのデータ転送を行う部分。Asakusaフレームワークが「トランザクションをサポート」と言っているのは、ThunderGateにかかっている。 やはりHadoopを使う上ではHDFSと外部とのデータ配信がひとつのポイントになるので、重要。 説明してくださったのは、ThunderGateのアーキテクチャー設計者の埋金さん。 テレメータ（社会インフラ）の開発だとか、RDBでHAクラスターを組んだりとか、UMLaut/J-
『Scala実践プログラミング』 - ひしだまの変更履歴
ひしだまＨＰの更新履歴。 主にＴＲＰＧリプレイの元ネタ集、プログラミング技術メモと自作ソフト、好きなゲームや音楽です。 『Scala実践プログラミング』を一通り読み終わった。 Scalaの初心者がステップアップするには、そしてJavaからScalaへの移行を考えるにはとても良い本だと思う。 上級者にとっても、デザインパターンとか継続とか、他のScala本ではあまり見られない（と思う）内容は興味深いのではないかな？ まずはさらっと1章でインストールと簡単な使い方、2章で基本的な文法のおさらい。基本なので他のScala本でも触れられている事だけれども、けっこう色々網羅されているし、「あれ、こんなのも出来たんだ！」という発見もある。ただ、みっちり詰まっているので、Scalaを全く知らない人には少々厳しい気もする＾＾； で、3章から徐々に本領発揮。関数型言語の特徴について。 4章、ちょっとだけだけ
Hadoopを中心とした分散環境での開発方法論・モデリング・設計手法等についての座談会(第5回）に参加しました。 | @johtani の日記
一定期間更新がないため広告を表示しています
世界中で行われているマイマップの製作過程がリアルタイムで見えるサービス - TechTalkManiacs
なぜか日本ではあまり話題になっていませんが、Googleがちょっと面白いサービスを出しています。 ※マイマップでなくてMap Makerでした。詳しくはこちら Google Map Maker これは世界中で行われているGoogle Mapsのマイマップの製作過程をリアルタイムで見ることができるサービスです。スクリーンショットではちょっと解りにくいのですが、地図上に線を引いている様子などもリアルタイムでわかってちょっとした世界旅行気分になれます。 また、こういうサービスが出せるということはサーバー側でリアルタイムの処理をフックしてプッシュ通信できるだけの仕組みがあるということです。 色々と妄想が広がりますね
原発停止なら電気代値上げ?!/天下り法人が「お手盛り試算」
「全原発を停止したら、電気代は月１０００円値上がりする」―。東電福島第１原発事故後に、こんな国民を脅すような試算を発表した財団法人が、原発推進の経済産業省ОＢの天下り先で、電力会社役員も関与する団体だったことがわかりました。 この財団法人は、「日本エネルギー経済研究所｣(ＩＥＥＪ)｡｢原子力発電の再稼働の有無に関する２０１２年度までの電力需給分析」と題する論文を発表しています。 このなかで、現在停止中、および定期検査入りする原発の再稼働がない場合、すなわちすべての原発が停止して火力発電で電力需要を代替する場合、燃料コスト増により、標準的な家庭の電力料金が、１２年度は１０年度実績に比べ、１カ月あたり１０４９円（１８・２％）増加すると試算しています。 論文は、産業用電力料金も上昇し、「わが国の製造業をはじめとする産業の国際競争力に対しても深刻な負の影響を及ぼすことが懸念される」として、「安全性
動作中のハードディスクの動きが見える2分の動画
動作中のハードディスクが機械的にどう動いているかが分かる動画です。 先日のJAWSUG-Osaka勉強会で @tamagawa_ryuji さんが紹介されていた動画が面白かったのでご紹介。 ディスクが回転したり、ヘッドを動いている様が一目瞭然です。たった約2分の動画なのでぜひ見てみて下さい。 実行している処理は以下。 電源オン フォルダ削除 コピー&ペースト クイックフォーマット 電源オフ 当たり前ですが、物理的なパーツがガンガン動いていますね。これ見ると動作中に持ち運ぶのが怖くなります:D
現状のPHP環境はそのままで、PHP 5.4 を試す
現状のPHPはそのままで、新しい（別の）バージョンをPHP試す方法です。 PHP 5.4.0 alpha がリリースされました。Traits や Array dereferencing support など試してみたいですけど、さすがにメインのPHP環境を変えるのは早いですね。 そこで新しいPHPをビルドして、インストールはしない方法で試してみました。 PHP 5.4.0 alpha をビルド qa.php.netから、PHPのソースをダウンロードします。 $ wget http://downloads.php.net/stas/php-5.4.0alpha1.tar.bz2 展開して、configureして、makeします。とりあえずコンパイルオプションはナシで。 $ tar jxvf php-5.4.0alpha1.tar.bz2 $ cd php-5.4.0alpha1 $ ./co
コマンドラインからPHPマニュアルを見るpmanコマンド
コマンドラインからPHPマニュアルを見ることができるpmanコマンドが登場しました。 manコマンドのようにコマンドラインからPHP関数やSPLのクラスについて調べることができます。 インストール pearコマンドでインストールします。 $ sudo pear install doc.php.net/pman 手元のMac OS X 環境では、/usr/bin/ に pman コマンドがインストールされました。 $ which pman /usr/bin/pman 使い方 pmanコマンドに調べたい関数名を指定します。例えば、array_map のマニュアルを見たいなら以下のように指定します。 $ pman array_map ARRAY_MAP(3) 1 ARRAY_MAP(3) array_map - Applies the callback to the elements of th
菅直人 vs. 経済産業省の戦いが壮絶になって来た
福島第一原発での事故以来、私も含めてあまり一般の人たちに知られていなかった数々の問題点が見えて来たわけだが、一番注目すべきなのは、今回の事故の、そして事故後の政府と東電の対応のていたらくの諸悪の根源は東電でも管政権でもなく、霞ヶ関の官僚たちだ、という事実である。 そもそも日本の原発を中核においたエネルギー政策は、米ソの冷戦時代に、日本国民の「反核」感情が「反米→共産主義」という方向に傾きかけたとき、米国が「毒をもって毒を制す」と読売新聞の正力松太郎を利用して日本の世論をコントロールして無理矢理押し付けたもの（参照）。「保守＝原発推進、革新＝反原発」という日本特有の図式が作られたのもその時期だ。 最初は政治指導で原発を押し進めて来た霞ヶ関の官僚たちは、少しづつ「天下りの甘い罠」に陥り、電力業界と癒着し、星の数ほどの「天下りのための原発関連法人」を作り、「いまさら原発を辞めたら自分たちの将来が
MozillaZine.jp フォーラム • トピック - [解決済み] Thunderbird 5.0で「保存されているパスワード」ボタンを隠すには
Thunderbirdを3.1から5.0へアップデートした後、非表示になるよう設定していたはずの、 下記の「保存されているパスワード」のボタンが表示されてしまうようになりました。 ツール > オプション > セキュリティ > パスワード > 保存されているパスワード 非表示にしていた方法ですが、userChrome.cssに下記の記述をしています。 /* オプション→セキュリティ→「保存されているパスワード」ボタンを隠す */ #showpasswords{display:none !important;} ThunderbirdのクリーンインストールとuserChrome.cssの再作成を試しましたが、状況は変わりませんでした。 再度ボタンを隠したいのですが、解決方法等ご教示いただけましたら幸いです。 Thunderbird 5.0 OS:Win XP sp3
Mozilla 製品の集中管理 - 基本編 - MDN
Firefox や Thunderbird などの Mozilla アプリケーションには、設定項目を集中管理する機能が備わっています。この機能は Netscape Communicator から引き継がれたものです。今のところ、Netscape Mission Control Desktop (MCD) のような管理者向けツールはありませんが、Mozilla アプリケーションの設定項目に詳しい方であれば、いくつかのテキストファイルを用意するだけで、簡単にこの機能を利用できます。 autoconfig.cfg と autoconfig.js という 2 つのプレーンテキストファイルをアプリケーションディレクトリ以下に追加します。ここでは Windows での標準的なパスを想定しますが、必要に応じて読み替えてください。 C:\Program Files\Mozilla Firefox\auto
Kotaku - The Gamer's Guide
Peter Brackley, who during its heyday was the primary commentator for Konami’s Pro Evolution Soccer series, has died at the age of 67.
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
「MacBook」「MacBook Pro」、ARMベースチップに移行予定か--米報道
ある報道によると、Appleはひそかに、同社の「MacBook」および「MacBook Pro」製品ラインにおいて、Intelプロセッサの代わりにARMベースのチップを搭載することにしたという。 SemiAccurateは、複数の匿名の情報筋の話として、Appleによるこの移行は「すでに確定している」と報じている。しかし、同社の端末にARMチップが搭載されるのは当分先のことである。 SemiAccurateによると、ARMチップに移行するのは、おそらくNVIDIAが「Project Denver」CPUをリリースする時期に合わせて、2～3年先であると情報筋は述べているという。NVIDIAは2011年に入り、PCからサーバやスーパーコンピュータにいたるまでのすべてを対象に、このARMベースプロセッサを開発していると述べた。同プロセッサは、同社のGPUと同じチップに集積される予定である。 当然
iPhone 5 mockups look just about right... - 9to5Mac
. We’re in love with Guilherme Schasiepen’s iPhone 5 mockups (via MacMagazine.br). More below: Related articles Apple prepping major iPhone revamp for 2012 with “new way of charging the phone” (9to5mac.com) Photo leaks of iPhone 5 running on the China Mobile network (9to5mac.com) Analyst predicts Sprint iPhone by Christmas 2011, here’s why you should care (9to5mac.com) WSJ: Thinner, lighter iPhone
Microsoft の最近のドル箱は「Android」 | スラド YRO
最近 Microsoft は Android でなかなかの利益を上げているそうだ (Network World の記事、本家 /. 記事より) 。 Google の開発するモバイル OS は Microsoft の特許弁護士の格好の標的となっているとのこと。Microsoft は Linux ベースの Android OS において Microsoft が所有している特許のライセンス契約をベンダーに求めているとのことで、既に HTC、Velocity Micro、General Dynamics、Onkyo および Wistron など各社とライセンス契約を締結しているとのこと。例えば HTC とのライセンス契約では、HTC が 1 台 Android 端末を売るごとに Microsoft に 5 ドル入る仕組みだという。 Microsoft は Windows Phone のプラットフォ
GREEスマートフォン版「アイドル★スタジオ」の配信が本日スタート
GREEスマートフォン版「アイドル★スタジオ」の配信が本日スタート 配信元 アンビション 配信日 2011/07/07 ＜以下，メーカー発表文の内容をそのまま掲載しています＞ 今度はスマホでアイドルをプロデュース！ GREEスマートフォン版『アイドル★スタジオ』 7月7日配信スタート!! 株式会社アンビション（東京都豊島区、代表取締役社長：福島公則）は、7月7日よりグリー株式会社が運営するモバイルサイト『GREE』にてソーシャルアプリ『アイドル★スタジオ』のスマートフォン版の提供を開始致します。 スマートフォンユーザー様、お待たせしました！アイドルをプロデュースしちゃうソーシャルゲーム『アイドル★スタジオ』がスマートフォンでもプレイできるようになりました！頭のてっぺんから足の先まで全てをコーディネートできちゃうゲームだからこそ、大画面で堪能できるスマートフォンでプレイすれば楽しさが広がりま
エアコンを止めて分かったニッポンの夏の過ごし方：日経ビジネスオンライン
暑い。 エアコンの起動を半ば封印されている今年の夏の暑さは、また格別だ。 東電の「でんき予報」をアタマから信じ込んでいるわけではない。若干疑っている。なにより、棒グラフという形式がうさんくさいと思っている。何も信じられない。日付さえ。 「でんき予報のホームページだと今日は水曜日になってるけど本当だろうか？」 「さあな。陰謀かも知れないぞ」 東電は、今後30年ほど、何を言っても疑われる。そこのところは覚悟してもらわないといけない。 「東京電力です。検針に参りました」 「ほほう、メーターに盗聴器を仕込むつもりだな？」 直接顧客と対面する部門の社員さんは大変だと思う。恨みは経営陣にぶつけてほしい。ぜひ。 東電情報の信頼性はともかく、野放図にエアコンを回すことには、やはり抵抗がある。日中、一人でいる時は、特にそうだ。自分一人のために、全空間を冷やすのだと思うと、どうしても気がひけるのだ。自分がこん
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
SCE、torne大型アップデートでBDレコーダ連携実現 -AV Watch
IKEDA氏製作「巡音ルカ」の3D Blu-rayソフトが発売
TechCrunch | Startup and Technology News
