「MapReduce」をサポートし、高速・安価を実現したDWH
「MapReduce」をサポートし、高速・安価を実現したDWH：180万ドルで100テラバイトクラスのDWHを実現 現在ほとんどの企業では、企業内データの急増に頭を悩ませている。同時にデータを集約し、分析する重要性も増している。従って、急増しているデータを有効活用するために、DWH（データウェアハウス）やBI（ビジネスインテリジェンス）などのツールを導入する企業も多い。ただし、分析基となるデータが急増しているために、DWHやBIの処理速度が遅いとクエリに対する処理に時間がかかり、実用面で問題が生じているのも事実だ。このことから、各DWHベンダはさまざまな手法でクエリの処理速度向上を目指している。その中でソフトウェアの並列処理だけで高速DWHを提供しているのが米グリーンプラムだ。今回は、米グリーンプラムでアジアパシフィック地域担当副社長を務めるキース・バッジ（Keith Budge）氏に話を
Lingr and Comet - 技術解説編:Kenn's Clairvoyance
さて、お待たせしました。いよいよCometとLingrについての技術解説です。 ■Comet解説 さて、まずはCometとは何で、どういう背景によって生まれたのか、についての解説から始めます。 まず前提として、Webアプリケーションにおいては、通信開始のトリガーは常にクライアント側が握っています。つまりURLを入力したりボタンをクリックしたときなどに通信が発生することになるわけですが、このようなアーキテクチャは、サーバ側で発生した変化をリアルタイムにクライアント側に通知することが原理的にできないことを意味します。 チャット・アプリケーションでは、複数のユーザから不定期にメッセージが送信され、それが他の参加者に一斉に配信されなければなりません。しかし、メッセージを受け取ったサーバ側では、それをクライアントに即座にプッシュで通知する方法がないのです。 そのため、一定期間ごとにブラウザがサーバに
Wikipedia
チンドン屋 チンドン屋は、チンドン太鼓と呼ばれる楽器を鳴らすなどして人目を集め、その地域の商品や店舗などの宣伝を行う日本の請負広告業である。披露目屋・広目屋・東西屋と呼ぶ地域もある。 締太鼓と鉦（当たり鉦）を組み合わせたチンドン太鼓などの演奏、および諸芸や奇抜な衣装・仮装によって街を廻りながら、依頼者の指定した地域・店舗へ人を呼び込む。また集客した上で宣伝の口上やビラ撒きなどで商品の購入を促す。街を廻りながら行う宣伝を「街廻り」、移動せず店頭で行う宣伝を「居つき」という。3人から5人ほどの編成が一般的で、チンドン太鼓、楽士、ゴロス（大太鼓）を中心に、旗持、ビラまきらが加わる。…… アンドリュー・コーリン・レンフリューはイギリスの考古学者。ニューアーケオロジーのリーダーの一人で、先史時代言語学、考古遺伝学や「離心減少モデル」などの理論や、考古遺跡の略奪・破壊の防止についての業績が注目されてき
Link Analysis and Related Topics - Home
2008年度 先端情報科学特論 II & IV リンク解析と周辺の話題 担当 新保 仁 shimbo@is.naist.jp 日時 2008/11/10, 11/17, 12/1, 12/8 (全 4 回) - 4限 15:10-16:40 場所 情報棟 L3 講義室 リンク解析は, グラフ (ネットワーク) データの構造から有用な情報を抽出するための, データマイニングの一研究分野です. この講義ではまず, リンク解析が取り扱う 2 種類の尺度 (重要度と関連度) について述べ, それぞれの代表的な計算手法を紹介します. 後半では, 近年機械学習分野で盛んに研究されているカーネルのうち, グラフ上の節点に対して定義されたカーネル (グラフカーネル) と, そのリンク解析への応用について紹介します. 第1回 11月10日 スライド 第2回 11月17日 スライド 第3回 12月1日
Matplotlib: Python plotting — Matplotlib 2.0.0 documentation
Matplotlib is a python library for making publication quality plots using a syntax familiar to MATLAB users. Matplotlib uses numpy for numerics. Output formats include PDF, Postscript, SVG, and PNG, as well as screen display. As of matplotlib version 1.5, we are no longer making file releases available on SourceForge. Please visit http://matplotlib.org/users/installing.html for help obtaining matp
Matplotlibのメモ (Pylab) - 旧”Sei’s Insight @ スタンフォード大学大学院 航空宇宙工学科 in シリコンバレー” は、http://www.seihiguchi.com/jp/ へ引越ました！
PYTHONにはゲームから数値計算用まで数々のモジュールが提供されていますが,Matlabグラフィックス環境に似せたことができるPylabなるものが存在します.PYTHON特有の使い方を習得できれば, Numeric, SciPyがあることだしMatlabが必要なくなるかも.これでより簡単に綺麗に図が描けます. 配布元: http://matplotlib.sourceforge.net/ 約1ヶ月前からPYTHONを使いはじめ, GPIB経由の計測制御コードを書き, グラフィックスにはGnuplotを使っていました.Gnuplotのクラシックな感じが大好きで, Tgif + Gnuplot + LaTeXのトリオは生活必需品といえます.ついでにOctaveも.が, 絵的な美的さを求めるとMatlabのグラフィックス環境が勝っています. インストールはソースをダウンロードしてuntar後,
ipython.elも試してみた - 牌語備忘録 -pygo
追加：おまけ ipython.elでプロンプトを『In [1]』とかから『>>>』に変更する方法 『『python-mode.el』と『pymacs』と『pycomplete.el』と - 牌語備忘録 - pygo』の続き。 Emacsでipython使えたら便利そうだなーと思って試してみた。 （環境: MacOSX10.4, python2.5, CarbonEmacs-Tiger-20080418） MacPortsでipythonをインスコした場合 とりあえずMacPortsでipythonをインストール。 sudo port install py25-ipython ipython.elを取り出す /opt/local/var/macports/distfiles/python/ipython-0.9.1.tar.gz を取り出して解凍。 ipython.el を取り出す。ipyt
リンク解析とか: 重要度尺度と von Neumann カーネル - smly’s notepad
NAIST の入学手続を終えた. 残りの期間はサーベイするぞーということで shimbo 先生の講義資料「リンク解析とその周辺の話題」を読んでいます. 一日目, 二日目の資料は PageRank, HITS, SALSA などの重要度尺度の紹介と, von Neumann Kernels と HITS の関係についてのお話が中心. これらを実装してみた. 後半に進むほど力尽きて記述が適当になってます:)PageRankポイントはランダム遷移行列による random walk では定常分布に収束しない (エルゴード性 (ergodic) を満たさない) という点. どうして満たさないかというと. sink (出次数のない節点) が存在するとき, 明らかに既約 (irreducible) でないのでエルゴード性を満たさない. 複数の強連結成分を持つケース => 周期性を持つと考えてよい? 周期
pythonでグラフ表現
networkxで遊んでみた。なんか丁度いいネットワークモデルがあればよかったんだけど、なにも思い当たらないのでランダムに生成。 IPythonで。ちなみに僕のIPythonは-pylabオプションがつけてあるのでfrom pylab import *が不要。 In [1]: from random import choice,shuffle In [2]: from networkx import * In [3]: G=XGraph() In [4]: sample = range(1,100) In [5]: shuffle(sample) In [6]: j=range(1,100) In [7]: for i in sample: ...: G.add_edge(i,choice(j)) ...: ...: In [8]: draw(G)
状況記述言語について - レジデント初期研修用資料
ライトノベルだとか、ニコニコ動画を見ながら考えていること。 登場人物が喋りだす 売れたライトノベル「涼宮ハルヒ」のシリーズは、なんだかんだ言ってもよくできている。3冊ぐらい読むと、頭の中で、 登場人物が、勝手にしゃべり出すような印象を受ける 「ハルヒ」の二次創作を、いろんな人が行っている。無数にあるから、適当につまみ食いするような読みかたしか できないんだけれど、読んでいて、自分が持っていた登場人物の印象と、ほとんど矛盾がない。矛盾しないということは、 二次創作の作者さんと、自分の脳内にいる登場人物とは、恐らくはだいたい同じ「人格」を共有できていて、 あの小説はたぶん、文庫本3冊ぐらいの容量で、仮想人格みたいなものを生み出すのに成功している 「面白い小説」と「喋りだす小説」とは、重なりはほんの一部なのだと思う。「ハルヒ」よりも面白い小説は たくさんあるけれど、登場人物が喋らないものも、やっ
クラスタリングの定番アルゴリズム「K-means法」をビジュアライズしてみた - てっく煮ブログ
集合知プログラミング を読んでいたら、K-means 法（K平均法）の説明が出てきました。K-means 法はクラスタリングを行うための定番のアルゴリズムらしいです。存在は知っていたんだけどいまいちピンときていなかったので、動作を理解するためにサンプルを作ってみました。クリックすると１ステップずつ動かすことができます。クラスタの数や点の数を変更して、RESET を押すと好きなパラメータで試すことができます。こうやって１ステップずつ確認しながら動かしてみると、意外に単純な仕組みなのが実感できました。K-means 法とはK平均法 - Wikipedia に詳しく書いてあるけど、もうすこしザックリと書くとこんなイメージになります。各点にランダムにクラスタを割り当てるクラスタの重心を計算する。点のクラスタを、一番近い重心のクラスタに変更する変化がなければ終了。変化がある限りは 2. に戻る。これ
クラスタリング (クラスター分析) - Toshihiro Kamishima
クラスタリング (clustering) とは，分類対象の集合を，内的結合 (internal cohesion) と外的分離 (external isolation) が達成されるような部分集合に分割すること [Everitt 93, 大橋 85] です．統計解析や多変量解析の分野ではクラスター分析 (cluster analysis) とも呼ばれ，基本的なデータ解析手法としてデータマイニングでも頻繁に利用されています． 分割後の各部分集合はクラスタと呼ばれます．分割の方法にも幾つかの種類があり，全ての分類対象がちょうど一つだけのクラスタの要素となる場合(ハードなもしくは，クリスプなクラスタといいます)や，逆に一つのクラスタが複数のクラスタに同時に部分的に所属する場合(ソフト，または，ファジィなクラスタといいます)があります．ここでは前者のハードな場合のクラスタリングについて述べます．
全自動ブックマーク棚卸しが想像以上に有意義な件 - てっく煮ブログ
みんな、自分が過去にブックマークした記事って気になるよね。はてなブックマークを使ってると、勢いでブックマークしてしまうけど、なかなか振り返る機会はないもの…。少し前に「ブックマーク棚卸しがイイヨ」という記事があったんだけどブックマークの棚卸し(?)をしてます。今年一年かけてブックマークしたものを順番に見て行ってます。見るといっても、全部の記事を開いて見るわけではなく、流し読みで、「ああ、これはもう一回読んでおきたい」と思ったものを開いてはインプットしているという感じです。 はてなブックマーク棚卸し - naoyaのはてなダイアリー１年分の棚卸しとなると楽しくないし…。わたしもみんなと同じ、その一員でした。でも、もう平気。「全自動ブックマーク棚卸し」があれば！全自動ブックマーク棚卸し があればもう大丈夫。全自動で １年前のブックマークを RSS 配信 してくれちゃいます。試しにやってみましょ
Firefox拡張機能開発チュートリアル - outsider reflex
Firefox拡張機能開発チュートリアル XULの基礎からXPCOMの利用方法まで徹底解説！ 2008/4/12 2008/9/25 2009/3/12 Software Design誌2007年4月号第2特集「Firefox拡張機能開発チュートリアル」をFirefox Developers Conference Summer 2007でテキストとして頒布するために再録したものです。また、付録として知って役立つOSSのライセンスも収録させていただいています。 ダウンロード 目次 奥付 ライセンス 関連文書 Home Back to List 目次 1章：Firefox拡張機能ことはじめ（江村 秀之（level）） はじめに 拡張機能普及の背景 拡張機能でできること 拡張機能を作ってみよう！ 2章：拡張機能開発で使う技術（下田 洋志） 拡張機能開発に利用する技術 それぞれの技術の役割 最低限
ロジック プログラミング言語「デカルト言語」の開発者に聞く | OSDN Magazine
SourceForge.JPでは、同サイトを利用するオープンソース・プロジェクトを毎月1つピックアップし、その開発者にインタビューする「今月のプロジェクト」というコーナーを設けています。今回は、ロジック プログラミング言語「デカルト言語」を開発しているhniwaさんにお話をうかがいました。 プロジェクトの概要 プロジェクト名: デカルト言語 – ロジック プログラミング言語 登録日: 2009-01-07 01:32 URL: http://sourceforge.jp/projects/descartes/wiki/FrontPage プロジェクトホーム: http://sourceforge.jp/projects/descartes/ 動作環境: コンソール(テキストベース), Win32 (MS Windows), Linux ライセンス: GPLv2 主要対話語: 日本語 プログ
IIJとhi-ho、バッテリ駆動可能なモバイルルータ「クティオ」
インターネットイニシアティブ（IIJ）とハイホー（hi-ho）は、携帯電話回線経由で通信が可能な無線LANルータ「モバイルブロードバンドアクセスポイント『クティオ』」を3月下旬より先行独占発売する。標準価格は1万9740円で、両社ユーザー以外も購入できる。 「クティオ（RS-LJ01）」は、ネットインデックスが開発したIEEE 802.11b/gに準拠した無線LANルータ。USBポートまたはCFカードスロットに接続したデータ通信端末を使ってインターネット接続できるのが特徴。電源には、1800mAHのリチウムイオンバッテリを採用し、連続通信時間は約100分。 動作確認済み端末は、CFカード型端末が下り最大3.6Mbps対応の「D01NX」と下り最大7.2Mbps対応の「D01NX II」で、USB端末は下り最大7.2Mbps対応の「D02HW」。IIJの高速モバイルデータ通信サービス「IIJ
パソコン作業効率を良くする 6 つの方法 - http://rubikitch.com/に移転しました
日々パソコンで作業をしていると、いろいろと不満が出てくると思う。遅い、見辛い…などなど。これを改善する方法をここで挙げる。 ここでは OS を問わない一般論だ。ライフハックみたいな感じで。 キーボード←→マウスの行き来を減らす パソコンのインターフェースは 15 年以上も前から GUI だ GUI だと言われているが、やはり入力デバイスの基本はキーボードだ。キーボードには習熟していなければならない。ここを読んでいるみんなは、キーボードを見ずに文字入力すること（ブラインドタッチ・タッチタイピング）くらいはできるだろう。ブラインドタッチは常識なので今更言うまでもない。 ブラインドタッチができるようになったら、それなりの速度で打てるようになるため、今度はキーボード←→マウスの移動コストが馬鹿にならなくなる。なぜなら、キーボード→マウス→キーボードを切り換える間にやることは、 マウスに手を伸ばす
それじゃあ、どの「クラウドコンピューティング本」を読むべきか？ | | 毎日がアップデート | あすなろBLOG
学びing おすすめ平均 入門書です Amazonを使ってクラウドビジネスを始めたいと思う人におすすめ 情報収集が面倒な方にはちょうどよいです すぐに試したい人におすすめ 先進ユーザーによる実例本 Amazonで詳しく見る by G-Tools 私も執筆に加わった「Amazon EC2」の入門書。翻訳以外では、本書が最初の「クラウド本」である。ただタイトルが災いしてか、リアル書店のクラウドコーナーにはなかなか無く、探しづらい状況だ。 本書の構成は、基本的には前半がAmazon EC2部分、後半は一般的なクラウドの解説となっている。Amazon EC2について基本的なことを知りたい方や、手っ取り早くクラウドのトレンドをおさえたい方には良い本になっているのでは無いかと思う（自分で言ってるので説得力が無いが…） 《クラウド化する世界》
出でよ、日本発の「クラウドを支える技術」
大規模分散データ処理技術など、クラウド・コンピューティングを支える技術の開発力を競う「クラウドコンピューティングコンペティション」が2009年6月に開催される。同イベントの実行委員を務める東京工業大学大学院准教授の首藤一幸氏は、「クラウド・コンピューティングを支える技術は作れるんだ、という思いを日本の技術者に持ってもらいたい」と語る。（聞き手は中田 敦＝日経コンピュータ編集） 6月の「Interop Tokyo 2009」で開催される「クラウドコンピューティングコンペティション」は、どのようなイベントですか？ クラウド・コンピューティングは、クラスタ技術やP2P（ピア・ツー・ピア）技術、分散ストレージ技術などの集大成であるといえます。このような技術をただ使うだけでなく、特に若い技術者に「自分にも作れるのだ」と思ってもらうイベントとして、技術開発力を競うコンペを企画しました。 コンペと言って
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://arataka.wordpress.com/2007/11/02/emacsipython/