Hadoopの本質は分散I/Oにあり～クラウド時代の非同期処理 - プログラマの思索
Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の記事がとても素晴らしいのでメモ。 【元ネタ】 第1回 分散処理を隠蔽し、大規模開発を可能に - Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の全貌：ITpro 第3回 業務の境界や並列性を見極め処理を分割 - Hadoop向け基幹バッチ分散処理ソフト「Asakusa」の全貌：ITpro 基幹バッチ再構築のニーズは大きい、Hadoopの課題をAsakusaで解決する - インタビュー：ITpro Twitter / @akipii: Asakusaの本質は分散I/O。ディスクの入出力がバッチ処理のボトルネック。クラウド時代の非同期処理の設計技法は、ジョブフローからバッチ処理をDSLで自動生成することにあり。 CobolやPLSQLで書かれた古臭いバッチ処理は、全てHadoopで代用できないものか？ Cobolの生産性の
イラストやWeb制作に使えるフリー素材を紹介 | 9search
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
震災で後世に残すべき動画
■編集元：ニュース速報板より「震災で後世に残すべき動画」 1 名無しさん＠涙目です。(東日本) :2011/04/02(土) 13:52:24.04 ID:0jpB6Q4j0 ?PLT(12001) ポイント特典 天井落下の様子 動画サイトに http://www3.nhk.or.jp/news/html/20110402/t10015058291000.html 今回の震災では東京でも７人が死亡し、７６人がけがをする被害が出ました。 このうち東京の九段会館では天井が落下して２人が犠牲になりましたが、震災直後の内部の様子がインターネットの動画サイトの映像で明らかになりました。 東日本大震災が起きた先月１１日の午後３時前、東京・千代田区の九段会館では、１階のホールで生徒や保護者など数百人が参加して専門学校の卒業式が行われていました。 大きな揺れで天井が床に落下し、非常勤講師の金
Tehk Seven
Buying hacks for the most common yet important necessities from online shops in Australia Online shops, sellers, and brands that are continuously working as providers of various things including personal accessories and the various tech products, make sure they deal in genuine products. Except the ones who are determined to make money without giving people the things they order from them. Avoiding
はてなキーワードからMecCab辞書を生成する（Ruby版）
文脈IDは-1を指定すれば自動採番してくれるという噂だったのですが、実行したら「自動で探したけど、対応するのが見つからなかったよ」と言われた為（文字コードの問題かな）、自前でシステム辞書ディレクトリ内の「left-id.def」と「right-id.def」を探して、それっぽいIDを拾ってきました（本当にこの方法で良いのか未確認）。 辞書によってIDは変わってきて、IPA辞書の「名詞,一般」は、我が家の環境では1285になっていました。バージョンによっても違う可能性もあるので注意が必要です。 読み・発音については、はてなのファイルの読みは全て平仮名で記述されているので、NAISTの辞書に合わせる為に片仮名に変換して登録します。発音は本来「アマクサシロー」になるべきですが、その辺は変換してると面倒なのでこのままで。 参考URLでは、CSVの末尾に「はてなキーワード」と入れて、はてなの辞書が使
MeCabの辞書にはてなキーワードを追加しよう - 不可視点
MeCabは形態素解析のためのソフトウェアです。日本語を分かち書きするために使われるものとしては最も人気の高いものだと思われますが、チャットや掲示板に書き込まれるような崩した日本語や、正しく書かれた日本語でも新語を期待した通りに分かち書きしてくれないことがあります。これはMeCabの内部で使われている辞書が一般的な言葉を情報源としているわけではないことに関係があります。MeCabというか、より一般的な話ですが以下のような認識が一般的かと思われます。 というのも、一番広く使われているであろう自然言語処理技術は形態素解析(単語分かち書き、と言ったほうがいいのかもしれない)であろうが、これは現在99%くらいの精度になっていて、すでに人間がやるより遙かに高精度で行えるのだが、これだけ高い精度が出せるのは新聞記事を相手にしたときだけであって、それは新聞記事をコーパスとして用いる機械学習により形態素解
MeCabの辞書にはてなキーワードを追加する際に地域名(千葉県など)を省くようにする方法 - uncertain world
以前，id:code46さんのMeCabの辞書にはてなキーワードを追加しようの記事を見て，ウヒョースゲーと思って入れたのですが， 最近になって，全キーワードを名詞に入れてるとよろしくないなと気付き， いまちょっとつまづいてる県名などの地域名だけ省けるようにした． 修正するのは，createDict.pyのみです． # -*- encoding: utf-8 -*- import sys import re import MeCab # MeCabを利用する m = MeCab.Tagger ("-Ochasen") #数字四桁が入ったキーワードは役に立ちませんので検出して飛ばします。 year = re.compile("[0-9]{4}") #驚くべきことにはてなキーワードには%00というキーワードがありますが、 #これがcsvとして提供されているダンプではヌル文字になっているのでシステ
形態素解析エンジン MeCab を Rub／Java／Scala で利用する(on Ubuntu)
Ubuntu 10.04 で形態素解析エンジンである MeCab を使用できるようにする。 Ruby と Java/Scala からも扱えるようにしておく。 Table of Contents Open Table of Contents MeCab のインストール Ruby で MeCab を利用する Java/Scala で MeCab を利用する Java/Scala は GoSen を使う 参考 MeCab のインストール まずは、MeCab 本体のインストール。apt のパッケージでインストールする。 $ sudo apt-get install mecab mecab-ipadic-utf8 libmecab-dev 辞書ファイルは mecab-ipadic-utf8 で入れておいてあげれば、MeCab の辞書として、UTF-8 を使用してくれるようだ。手動で UTF-8 へ変
『AutomateIt』はシンプルすぎるAndroid用自動化ツール。しかも無料。 | ライフハッカー・ジャパン
Androidのみ：Android携帯でいったいどこまでできるのか...という可能性をもっと追求してみたいと思っている方で、スクリプトを多少操れる人には『Tasker』が必見ですが、今回紹介する『AutomateIt』は、よりシンプルなインターフェースで、自動化が行えるツールです。 AutomateItには、新規ルール作成用のベーシックコントロールが4つあります。その4つとは、「Trigger」「Action」「Delayed Execution」「Rule Description」です。 Triggerは、Bluetooth接続や充電用ケーブルの接続、バッテリー残量などのこと。場所もオプションの一つに含まれます。Actionは、通知、バイブ機能、選択したアプリの起動、ボリューム調整などを指します。TriggerとActionを組み合わせて設定することで、バッテリーをセーブしたり、車にいる
Google App Engine SDK 1.4.3リリース文抄訳 « python練習帳
GoogleAppEngine SDKのバージョン1.4.3が3月30日にリリースされました。マイナーバージョンアップですが、バグフィックスだけでなく、新機能も実装されています。GAEで開発をされている方は特別な事情のない限りアップデートをお勧めします。 リリースノート 青文字が原文です。訳に間違いがありましたら、Wordpressのコメント欄もしくは、Facebookのコメントで指摘頂けると助かります。気になる部分は、土日に検証してみようと思います。 http://code.google.com/p/googleappengine/wiki/SdkReleaseNotesを訳しました。 File APIをサポートしました。FileAPIを使うとblobstore内のファイルを読み書きできます。 Added Files API that allows writing to and read
「地上の楽園」という言葉がふさわしいリゾート地や美しい雪山、あきれるほどに巨大な滝など、世界各地の美麗スポット
世界38カ国以上を巡り歩き、300もの都市を旅してきたウクライナの写真家・Alex Chebanさんがカメラに納めた世界中の景色や人々の写真集です。 ネパールで暮らす人々の様子や楽園のようなリゾート地、巨大な滝にアルペンスキー発祥の地と言われる雪山など、見ているうちに旅行がしたくなるような写真ばかりとなっています。 世界各地の写真は以下から。Alex Cheban | Life＆Travel Photography.Александр Чебан | Фотография ◆ネパール、ガンダルク村 ヒマラヤ山脈を望むネパールのガンダルク村で暮らす人々の写真です。 手前に見える万国旗のようなものはタルチョといってチベット文化圏で散見される経文が印刷された5色の旗です。 荷物を運ぶ女性。 球技を楽しんでいます。 凍結防止のために水を出し続けているのでしょうか。 景観とハードロックカフェ香港のT
Webサービスをインクリメンタルに検索する·Search as you Type MOONGIFT
Search as you Typeはテキストボックスに文字を入力するとその候補を表示するソフトウェア。 Search as you TypeはPHP/JavaScript製のオープンソース・ソフトウェア。Googleでは検索ボックスにワードを入力すると、その候補を表示するようになっている。よく使う検索単語はみんな似ている傾向があるので、大抵その候補の中に検索したいワードがある。とても便利な仕組みだ。 デモ それだけに自分のサイトでも実装してみたいと思わないだろうか。自分の友人を検索したり、ブログの検索など使い道はとても多いはずだ。しかしサーバサイド、クライアントサイドともに用意するのに手間取るかもしれない。そこで使えるのがSearch as you Typeだ。 Search as you TypeはJavaScriptとPHPを組み合わせて検索候補を表示するソフトウェアだ。サンプルでは
原発廃止派に知って欲しい新エネルギーの話
原発廃止派に、原発を全部いきなり止めてそれで必要だった電力はどうするの？と聞いても、｢再生可能エネルギーがー｣といった具合に、"新エネルギーがいきなり原子力を置き換える"と思ってる人がいます。 新エネルギーを役立てるには必要な前提がいくつかあります。なぜ必要なのかを理解するためには、知らなければいけないことがいくつかあるので、それをまとめてみました。 曖昧な表現や間違っている部分がある可能性や、将来の展開について個人的な想像が含まれていることをお断りしておきます。 (それは違うだろ、という点があればトラックバックで補足してもらえればと思います) 電気はそのままでは貯められない現在、実用レベルで電気を貯められるのは水力だけ。 水力は電気が余って捨てられている夜間に水をくみ上げて位置エネルギーに変換し、昼間のピークに放出している。水力が他の発電と比べて優れているのがこの"位置エネルギーに変換し
[JS]タブの機能性のみを追求したフレキシブルな超軽量スクリプト -EasyTabs
スムーズなアニメーションでタブを切り替え、各タブコンテンツの#リンクにも対応した、タブの機能性のみを追求したjQueryのプラグインを紹介します。 JQuery EasyTabs Plugin デモページ：同じページに複数のタブを設置 [ad#ad-2] EasyTabsの主な特徴 タブの切り替え時にはスムーズなアニメーションが可能 外観はCSSで簡単にカスタマイズ可能 ブラウザのバックボタンとフォワードボタンに対応 各タブは#リンクが有効でブックマークが可能（SEOにフレンドリー） タブは指定された時間で自動切り替え可能 グローバル変数の使用はしていません ページ内に複数のタブコンテンツを設置可能 valid HTML Markup 超軽量（5KB） オープンソース（MIT and GPL licenses） タブのスタイリングはCSSでもJavaScriptでも可能 AJAXコンテンツ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
(´A｀)＜咳をしてもゆとり - FC2 BLOG パスワード認証
ログイン時に環境変数をセットする - 跡々
