Twitterに入社しました #yusukey_at_twitter – yusuke.blog
Map/Reduce Tutorial
このドキュメントでは、チュートリアルとして役立つことを目的に、ユーザーが触れる Hadoop Map/Reduce のすべての側面についてまとめて説明します。 Hadoop のインストールと設定が済み、すでに実行されていることを確認してください。詳細については、以下を参照してください。 Hadoop を初めて使うユーザーは、Hadoop クイックスタートを参照してください。 大規模な分散クラスタを使うユーザーは、Hadoop クラスタセットアップを参照してください。 Hadoop Map/Reduce は、どこにでもあるごく普通のハードウェアで構成した (数千ノードの) 大規模なクラスタ上で、膨大なデータ (数テラバイトのデータセット) を並列処理するアプリケーションを簡単に記述できるようにするソフトウェアフレームワークです。 通常、Map/Reduce のジョブは、入力データセットを独立
MySQL :: MySQL 5.1 リファレンスマニュアル :: 14.6.5 MySQL Cluster プロセスのコマンド オプション
MySQL Cluster のすべての実行ファイル (mysqld を除く) はこの項で説明したオプションを使用します。MySQL Cluster バージョンのユーザーはこれらのオプションの中にはmysqld 同様お互いの一貫性を保つために変更されている場合がありますのでご承知ください。MySQL Cluster の実行ファイルと一緒に --help オプションを使用しそれがサポートするオプションのリストを表示できます。 以下のオプションはすべての MySQL Cluster 実行ファイルに共通です。 --help --usage, -? 利用できるコマンド オプションのリストをその説明書と一緒に印刷します。 --connect-string=connect_string, -c connect_string connect_string は接続文字列をマネジメント サーバーにコマンドオプ
/tmp/mysql.sockなんて知らんがな - 自分の仕事を憎むには人生は余りにも短い
railsのセットアップしてたらMysqlにつながらない。 % rake db:migrate No such file or directory - /tmp/mysql.sock ふむふむファイルがないのね、てことで「mysql.sock」で検索してもそれらしいファイルが見つからない。あらまとさらに検索したらmysqladminで自分のsocketが分かるらしい。 # mysqladmin version mysqladmin Ver 8.41 Distrib 5.0.22, for pc-linux-gnu on i486 Copyright (C) 2000 MySQL AB & MySQL Finland AB & TCX DataKonsult AB This software comes with ABSOLUTELY NO WARRANTY. This is free so
MySQL :: MySQL 8.0 リファレンスマニュアル :: 4.5.2 mysqladmin — A MySQL Server 管理プログラム
mysqladmin は管理操作を実行するためのクライアントです。 サーバーの構成や現在のステータスの確認、データベースの作成および削除、およびその他の用途に使用できます。 mysqladmin は次のように起動します。 shell> mysqladmin [options] command [command-arg] [command [command-arg]] ... mysqladmin は次のコマンドをサポートします。 コマンドの中にはコマンド名のあとに引数を取るものもあります。 create db_name db_name という名前の新しいデータベースを作成します。 debug MySQL 8.0.20 より前は、デバッグ情報をエラーログに書き込むようにサーバーに指示していました。 接続されたユーザーは SUPER 権限を持っている必要があります。 この情報の形式と内容は変更
MySQL :: MySQL 5.6 リファレンスマニュアル :: 4.4.3 mysql_install_db — MySQL データディレクトリの初期化
mysql_install_db は MySQL データディレクトリを初期化し、システムテーブルを作成します (システムテーブルがない場合)。また、InnoDB テーブルの管理に必要な、システムのテーブルスペースおよび関係するデータ構造体も初期化します。MySQL 5.6.8 では、mysql_install_db は Perl スクリプトで、Perl がインストールされた任意のシステムで使用できます。5.6.8 より前ではシェルスクリプトで、Unix プラットフォームでのみ使用可能です。 MySQL 5.6.8 以降では、mysql_install_db は UNIX プラットフォーム上で、my.cnf という名前のデフォルトオプションファイルを基本インストールディレクトリに作成します。このファイルは my-default.cnf という名前の配布パッケージに含まれるテンプレートから作成
インターン生に、はてなはすごいと思わせたはてなの何か。 - LifeTimeException@hrk623
以前報告したとおり、株式会社はてなの『はてなエンジニアインターン2011』に参加してきました。はてなインターンは8月の中旬から9月の初めまでの約3週間のプログラムでした。その中で僕自身多くの事を経験し、また学ぶ事が出来ました。これは、いわゆる「お決まりの言葉」ではなく、本当に実感している事です。 今回はそのインターンのレポートを書かせて頂くのですが、僕はもともとはてなの主たるサービスであるWebアプリケーションについての深い知識と経験を有していませんでした。そんな僕が技術的な部分の話を詳しくしてもつまらないので、代わりにインターンを通して技術面以外で深く印象に残った、でもあまりに表に出ていない様な事を幾つか綴ってみたいと思います。 はてな社員は弱音を吐かない インターンが始まって僕が特に気になったのが、オフィスのどこからも「めんどくさい」「やりたくない」「そんなの無理」などの後ろ向きな言葉
OCaml 基礎最速マスター — Scratch Leaf — MAYAH.JP
OCaml は Haskell とは違って純粋でない関数型言語です。ML (Meta Language) という言語ファミリーの方言の一つで、フランスの INRIA という研究所で開発されています。速度を稼ぐために命令型のように書こうと思えば書けるし、遅延評価もデフォルトではしません。その分、practical なアプリケーションが書きやすくなっています。 他の言語をある程度知っている人はこれを読めば OCaml のとりあえずの基礎をマスターして OCaml を書くことができるようになります。多分。関数型言語の知識は仮定していません。C/C++ ぐらいの知識があれば読めると思います。元の Perl 基礎文法最速マスターではリファレンスぽい作りですが、チュートリアルぽくなってしまいました。 なお、読んでいると分かりますが、色々とめんどくさいことが多いように感じます。しかし、これをちゃんと書く
はてなインターン2011リーダーがレポートを書きました - ポクポク
こんにちは、はてなインターン2011リーダーのpokutunaです。 意識の高い記事は id:gigi-netが、面白おかしいテキストは id:uasiにやられてしまった。 他のインターン生のレポートも素晴らしいものばかり、もう私が特別述べるべきことはありません。 なので僕は人に欠かすことのできない"食"についての情報を発信しようと思います。 インターンについて詳しく知りたい方は他のインターン生のレポートを読めばいいのではないでしょうか。 はてなインターンが終わって始まった - 夜から朝にかけて はてなエンジニアインターンに女子で初めて参加したよ！その1 - 失敗は成功の元 意識の高い学生（笑）がはてなインターンシップに参加すべき5つの理由 - 5.1さらうどん - 過去ログ はてなインターンに意識の低い学生が参加して社長にTシャツ売りつけた話 - Yarukidenized:ヤルキデナイ
The Linked Open Data Cloud
About the diagram This web page is the home of the LOD cloud diagram. This image shows datasets that have been published in the Linked Data format. The dataset currently contains 1314 datasets with 16308 links You may reuse the diagram under the Creative Commons Attribution License. The diagrams on this website contain the attribution statement within the image, and if they are used without modifi
script/runnerでのバッチファイル実行を短く書く - おもしろwebサービス開発日記
これまでrails上でのバッチ処理はscript/runnerを使って以下のようなコマンドで実行していました。 script/runner "eval(IO.readlines('hoge.rb').join)" でもこれ長いですよね。もっと短くする方法はないかなーと思ってscript/runner --helpしたら「こんな書き方もできるよ」とのこと。 #!/usr/bin/env /path/to/script/runner Product.find(:all).each { |p| p.price *= 2 ; p.save! } shebangにscript/runnerまでのパスを指定すると、それ以下のスクリプトをrunner環境で実行してくれるみたいです。これにより、たとえば上記のファイルをscript/product_findとしたら script/product_find
ソフトウェア開発者が読むべき IT系雑誌の一覧と，おすすめの読み方 - 主に言語とシステム開発に関して
中級クラス〜のデベロッパにとって，フォローする事が望ましいIT系雑誌のリスト。 また，それらの読み方。 つまり，書店における立ち読みのポイントと，購入の判断基準。 （１）Web+DB PRESS （２）Software Design （３）日経Linux （４）日経NETWORK （５）日経SYSTEMS （６）日経ソフトウェア 補足 なぜ雑誌なのか？ 読者層としては， 主にWebアプリの開発をチーム内でリードするエンジニアやアーキテクトを想定。 （１）Web+DB PRESS 雑誌のホームページ http://gihyo.jp/magazine/wdpress この雑誌の読み方： 「特集」は無条件で精読する。 「プログラミング言語の記事」は，下記の点に注目して把握する。 言語の癖や特色，他の言語と差異化するファクター その言語から，あるサービスを利用するためのAPIの存在 バージョンアッ
【読書スレ】 10代で読んでいないと恥ずかしい理系必読書 ver0.2 とか : ライフハックちゃんねる弐式
2011年09月19日 【読書スレ】 10代で読んでいないと恥ずかしい理系必読書 ver0.2 とか Tweet 0コメント ｜2011年09月19日 12:00｜書籍・読書｜Editタグ ：必読書哲学書ハイデガー >http://hatsukari.2ch.net/test/read.cgi/news/1316079562/ 当ブログサイトはアフィリエイト広告、バナー広告を利用しています。 スレタイ「お前らいつも本読めって言ってるけど、具体的にどれ読んだら捗るんだ？哲学書か？」123 ：(山形県)：2011/09/15(木) 19:43:02.17 ID:9VBlTlw60 テイヤール・ド・シャルダン「愛について」 これが難なく読めたら「現象としての人間」にステップアップ ニーチェの「この人を見よ」とツァラトゥストラに相似していると考えてくれ。 ちなみにツァラトゥストラとはゾロアスターの
awk歴一日の初心者が語るawk理解のポイント - シリコンの谷のゾンビ
今までテキスト処理などでワンライナーを使うときはperlを使っていた．Perlを先に覚えた身としてはawkやsedは過去の産物だと思い込んでいた．awkの方が簡潔に書けるケースに出くわしたことをきっかけにawkを勉強してみたら単な食わず嫌いだったことに気が付いたのでポイントをまとめてみる． なおプログラミング言語としてはAWKという表記が正しく (Aho, Weinberger, Kernighanの頭文字! ということだけは以前から知っていた)，オリジナル処理系のことをawkと呼ぶのだろうけれど，今回は処理系の違いは気にしないのでawk, nawk, gawkの違いは気にしないことにした．ていうか詳しく知らない． 「awkってなんぞ?」という方が対象読者．スクリプト言語と正規表現の基礎知識が少しでもあれば，たぶんすぐに使えるようになると思う．awkを一度でも使ったことがある人には新しい情
巨人・原監督の顔芸が酷いと話題に（画像あり）
1：名無しさん＠涙目です。(栃木県)：2011/09/19(月) 22:15:28.93 ID:NtizCMPA0 ベンチで厳しい表情の巨人・原監督＝東京ドーム（撮影・斎藤浩一） http://www.sanspo.com/baseball/images/110918/bsa1109181657002-p2.jpg 中日・落合監督（右）とメンバー交換し笑顔を見せる巨人・原監督＝東京ドーム（撮影・斎藤浩一） http://www.sanspo.com/baseball/images/110919/bsa1109191729003-p2.jpg http://www.sanspo.com/baseball/photos/110919/bsa1109191729003-p2.htm
ゲーム愛好者らが酵素の構造を解析、米研究
ドイツ・ハノーバー（Hannover）で開催された世界最大のIT見本市「CeBIT」で、オンラインゲームに興じる若者たち（2011年3月3日撮影、資料写真）。(c)AFP/JOHANNES EISELE 【9月19日 AFP】仮想空間「セカンドライフ（Second Life）」やオンラインゲーム「ダンジョンズ&ドラゴンズ（Dungeons and Dragons）」の領土を越えてオンラインゲーマーたちが手柄を立てた――科学者たちを10年もの間悩ませてきたヒト免疫不全ウイルス（HIV）様ウイルスの酵素の構造を解析したのだ。 18日の「Nature Structural & Molecular Biology」は、ゲーム愛好者たちの名前を研究者たちとともに論文の共同執筆者として掲載するという科学専門誌としては異例の対応で、その功績をたたえた。ゲーム愛好者らが長いあいだ未解決だった科学的問題を解
「ある体操法と出会って1年で人生が変わった」話を頼むから拡散してくれ
身体の状態を改善したい人は絶対に読んでほしい。1年くらい前までは肩こり、腰痛、目の疲れとかで身体がばっきばきになっても「それでも働かないと生きていけないし」などと言いながら過ごしてまだ20代なんだけど、若いながらも死にそうになっていた。親類が死んだこととかも関係して精神が滅入ってそれが身体に出ていたのもある。元々体が弱い部類には入っていたのかもしれない。よく風邪とかひいてたし。今だったら10代の娘とかでも、「腰いてー」だなんだの言ってない？時間と気力を消耗する体操法なんかやれたもんじゃねぇ！そういう悩みから解放されたい一心で、例えば筋トレとか、まぁ各種様々な体操法を探しまくった。自己啓発とかそんなんに頼ろうが、もう身体が辛くてどうあがいても生産性が上がらなかった。だから直接的に効く体操法を探しまくった。でも効果がそもそもなかったり、一過性であったり、なにぶん、辛い体操法が多かった。「時間と
Twitter、Facebook、Googleの初期デザインにびつくり。
Twitter、Facebook、Googleの初期デザインにびつくり。2011.09.19 12:007,034 びつくりっ！ウェブサイトというものは機能が増えたり仕様が変更したりで、そのデザインがどんどん変わって行くものです。今や有名なあのサイトも初期はさっぱりとざっくりと作られていたのです。 そう、トップ画にあるTwitterだって。 TwitterじゃなくてTwttrだし。なんかtimelineとかwhat up? とかグラフィティぽい中二病風なフォントだしね。 そう、Facebookだって。 映画ソーシャルネットワークでもでてきましたけど。Theがはいってるし、顔があるし。 そう、Googleだって。 Yahoo! みたい！ [Kottke] そうこ（Casey Chan 米版）
4台構成のHadoopを100分で試してみる(CentOS + Cloudera)
(参考) Cloudera社のHadoopパッケージの情報 http://archive.cloudera.com/docs/ 必要なもの ・CentOS5.4のLinux環境4台(CentOSの他バージョンや、Fedora、Redhat等でも大丈夫だと思います) ・インターネット接続 ・Sun社Javaパッケージ(パッケージファイルをインターネットから取得) ・Cloudera社のCDH3のHadoopパッケージ(yumでインターネットからインストール) 構成 4台のHadoopクラスターです。 ・マスター1台: nm01 ・スレーブ3台: ns10, ns11, ns12 作業手順 0. 準備 0-0. サーバー名 ここで利用するサーバー/サーバー名は以下の4つです。 nm01 ns10 ns11 ns12 すべてのサーバー(nm01, ns10, ns11, ns12)と作業クライア
FAQ - Hadoop Wiki
1. General 1.1. What is Hadoop? Hadoop is a distributed computing platform written in Java. It incorporates features similar to those of the Google File System and of MapReduce. For some details, see HadoopMapReduce. 1.2. What platforms and Java versions does Hadoop run on? Java 1.6.x or higher, preferably from Sun -see HadoopJavaVersions Linux and Windows are the supported operating systems, but
HowToSetupYourDevelopmentEnvironment - HADOOP2 - Apache Software Foundation
This page describes how to get your environment setup and is IDE agnostic. Requirements Java 7 or 8 (Branch 2) or Java 8 (trunk) Maven 3.3 or later Your favorite IDE Protobuf 2.5.0 Setup Your Development Environment in Linux The instructions below talk about how to get an environment setup using the command line to build, control source, and test. These instructions are therefore IDE independent.
CDH3 Installation - Cloudera Support
Ways To Install CDH3 You can install CDH3 in any of the following ways: Automated method using SCM Express; instructions here. Service and Configuration Manager Express Edition (SCM Express) automates the installation and configuration of CDH3 on an entire cluster (up to 50 nodes), requiring only that you have root SSH access to your cluster's machines. SCM Express is not supported on 32-bit Red
CentOS 5でMySQL5.0からMySQL5.1にRPMアップデートした - 小野マトペの業務日誌(アニメ制作してない篇)
ふぁぼったーでMySQLプラグインを使いたくなったので、MySQLを5.0から5.1にアップデートしました。以下メモ。 (作業のログをWebに残していかないとダメだなーと最近思ったので練習をかねて。こういうエントリーは別途はてなグループで起こした方がいい気がするな。) 環境 CentOS 5 yumで入れたMySQL 5.0.45 参考資料 http://dev.mysql.com/doc/refman/5.1/ja/linux-rpm.html http://dev.mysql.com/doc/refman/5.1/ja/upgrade.html http://dev.mysql.com/doc/refman/5.1/ja/upgrading-from-5-0.html WEB+DB PRESS Vol.45 作者: 荒木稔,能登信晴,Zev Blut,ミック,nanto_vi,武者晶紀
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Google AJAX Feed API
MySQL :: MySQL 5.1 Reference Manual :: 16.3.2.3 The MySQL Cluster Connectstring
MySQL :: MySQL 8.4 Reference Manual :: 25.5.4 ndb_mgmd — The NDB Cluster Management Server Daemon
MySQL :: MySQL 5.1 リファレンスマニュアル :: 14.6 MySQL Cluster のプロセス管理
Set Up The MySQL Cluster Management Server @ W3BNet.com
Set Up The MySQL Cluster Nodes (Storage Nodes) @ W3BNet.com
Search | Packt Subscription