最近世間でビッグデータと言う単語をちらほら聞くようになった（もう最近ではないかもだど。。。）せっかくなので波にのってちょっとビッグデータとやらに触れてみようと思う。 まずは、ビッグデータ分析によく使われるhadoopをインストールしてみようと思う。 hadoopにはいろいろディストリビューションがあるらしいが、今回はCDH(Cloudera’s Distribution including Apache Hadoop)を使用する。また、簡単に再構築できるようにインストールにはChefを利用する。 インストールにあたって次のページを参考にした。 http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/4.2.0/CDH4-Installation-Guide/cdh4ig_topic_4_4.html [前準備]

MacPorts と比べて Homebrew は依存関係でインストールされるソフトが少ないためか、パッケージ管理システムとしての人気が高まってきています。 MacPorts は、Mac に最初から入っているソフトウェアを無視してパッケージが依存するソフトを新規でインストールするという性質を持っていますが、Homebrew は極力 Mac に入っているものを使うように作られています。ゆえに、パッケージ導入時のシステムへの負担や、インストールにかかる時間が比較的少なくて済むようです。 また、Homebrew はスーパーユーザでコマンドを実行する必要が無く、一般ユーザー権限で使うことが出来ます。 ※【2015/07/07 追記】最近では Homebrew が大きく台頭してきて、MacPorts の名前を見ることは減ってきました Homebrew について Homebrew は「ユーザが自らパッケ

記事投稿者：山下 晴規 記事公開日：2013/04/26 最終更新日：2013/04/26 （この記事は約1年以上経過しています。） sysstatパッケージにはシステム状態をモニタリングできるコマンドが沢山含まれています。良く使いそうなコマンドは、sar や iostat あたりかなと思いますが、それ以外にも、sadf、nfsiostat、cifsiostat、mpstat、pidstatコマンドが含まれています。システム試験や調査の際に有用なコマンドです。 sysstatパッケージをインストールして、これらのコマンドの利用方法を記載します。 sysstatパッケージのインストール yumコマンドでインストールします。パッケージ名は「sysstat」です。 まずは、インストール前にパッケージの確認をしてみます。 # yum info sysstat （中略） Available Pack

ども、大瀧です。 今週金曜日にあるDocker Meetup Tokyo #2という勉強会でLTすることになりまして、大慌てでDocker触ってます。Dockerの開発は非常に活発で、新機能や仕様変更が続々と出ており刺激的なのですが、手元の開発環境として使っているMBAでのセットアップ方法が以前と変わりすぎていたので、備忘録としてまとめておきます。 Dockerの実行方法はVagrantを使う方法などいくつかありますが、今回はDocker公式ドキュメントをベースに、Homebrewで簡単にインストールする方法をチョイスしてみました。すぐに陳腐化する恐れがありますので、そこんとこオナシャス！です。 必要なソフトウェア OS X Mavericks(DockerはSnow Leopard以降をサポート) VirtualBox Homebrew VirtualBoxおよびHomebrewのインス

僕の原点って大学の寮なんです。寮生たちと「ワッショイ、ワッショイ」と言いながら大騒ぎする。その笑顔って忘れられない。だから僕が目指すのは、お客様の笑顔、満足度、感動、涙を生み出し、働く仲間が笑顔で働けるような店です。 夢のためには戦わなきゃいけないこともある。本部から監査が来たことがあります。飛ばされることもあるから、普通の店長はビビリながら対応します。でも僕は違った。その監査の人が、お客様がごった返している時間帯にやって来た。絶妙な加減で焼き上がった焼き鳥を持っている僕に、いくらでも後回しにできるような質問をしてくる。だから僕は「とりあえずこれ、運んでもらっていいですかね。冷めるから」って言った。喧嘩を売ったんじゃない。「1人でも多くのお客様にあらゆる出会いとふれあいの場と安らぎの空間を提供すること」がワタミの理念だから、監査よりもお客様が大事。僕は目の前の焼き鳥が冷めていくのが耐えられ

調べる気になった事の発端は、Cinder＋Cephのボリュームに対してMySQLのtpccベンチマークを取ってみた時に、vCPU=1 でVM内では CPU : 100% なのに、KVMプロセスのCPUが 300% を超えているのを見つけたことでした。 KVMは仮想環境なので当然オーバーヘッドが存在するのは覚悟済みですが、想像以上にホストOS上でCPUを食っていたために、良い子の私は地道に調べ始めるのでした。 検証環境 CPUとメモリ ホストOSのcpuinfoの表示ですが Intel(R) Xeon(R) CPU E5-2630L 0 @ 2.00GHz VMだとこう Intel Xeon E312xx (Sandy Bridge) まぁほどほどに最近の、お値打ち価格になってきた低電力版なナイスCPUです。 VMへは 1～4vCPU 割り当てて検証しています。 VMに割り当てたメモリは全て

Githubにコードをプッシュすると自動的にコードを取り込んでビルドが行われ、テストが走る。いわゆる「CI：Continuous Integration（継続的統合）」を実現するCI as a Servicesを提供する「Circle CI」が、Docker対応による継続的インテグレーション／継続的デリバリの開始を発表しました。 DockerファイルによってCircle CIで行うビルドとテスト環境を定義できるため、開発環境とテスト環境、デプロイ先の稼働環境などの違いを事実上なくせることが大きな利点だと説明されています。 You can now use all Docker functionality within our build environments. All of the usual Docker commands work as expected, so you can bu

「格納容器の底まで溶け落ちた」は嘘。3000度100tの超重金属を受け止められる物質などこの世にない。物理的にもう誰も止められないのは全科学者の常識的見解。何百km溶け落ちたのか解析しろよ。いい加減隠ぺいはヤメロ / “＜福島第１…” http://t.co/jdrlPaCzyA — Xevra Lindich (@xev_ra) 2014, 8月 7 Twitter / xev_ra: 「格納容器の底まで溶け落ちた」は嘘。3000度100tの超重 ... フクシマの事故は終わった事にしたい人が多いようだが、実はフクシマの悲劇はこれからが本番。まず、多くの人がなぜか気づかない振りをしているが、肝心の核燃料がとんでもない事になっているはずなのだ。 各原子炉には100t近い核燃料がある。そしてこれが溶け落ちた事は東電も認める所だ。で、問題はこれがどこまで溶け落ちたかだ。核燃料はウランを始め滅茶

Raspberry PI と Hubot を使って、Slack から観葉植物の水やりを実行できる装置を作りました。 材料 Raspberry Pi Type A 256MB GPIO 拡張ボード ジャンパワイヤ スピーカーケーブル エポキシ接着剤 灯油缶 アルミ線 S8050 トランジスタ (詰合せで購入) 灯油ポンプ チューブジョイント シリコンチューブ (4mm x 6mm) コルク栓 回路 灯油ポンプ に直接はんだ付けして、+- 極をスピーカーケーブルでブレッドボードに引っ張ってきて、Raspberry Pi から 5V 電源を供給します。 S8050 トランジスタにはそれぞれ、 E (エミッター): Raspberry Pi GND B (ベース): Raspberry Pi GPIO 0 C (コレクター): 灯油ポンプの　- 極 が接続されています。 パイプの分配 植物への水の

処理能力の高さなどを理由に、近年、大規模サイトを中心に急速にシェアを拡大しているWebサーバー「Nginx」について紹介します。連載第2回では、インストール方法と基本的な設定内容を解説します。 連載目次 Nginxのインストール手段 Nginxをインストールする方法は主に2通りあります。ソースファイルをビルドする方法とバイナリパッケージを利用する方法です。 ソースファイルを使ってインストールすると、無駄なモジュールを省いてバイナリを最適化できたり、インストールパスや設定ファイルのパスをカスタマイズできたりしますが、開発環境を用意する必要があります。 バイナリパッケージを使えばインストールやアップデートが手軽に実行でき、ディストリビューションのパッケージツールで一元管理できますが、バイナリの最適化やインストールパスのカスタマイズはできません。 用途に応じた適切なインストール方法については表1

処理能力の高さなどを理由に、近年、大規模サイトを中心に急速にシェアを拡大しているWebサーバー「Nginx」について紹介します。連載第2回では、インストール方法と基本的な設定内容を解説します。 連載目次 Nginxのインストール手段 Nginxをインストールする方法は主に2通りあります。ソースファイルをビルドする方法とバイナリパッケージを利用する方法です。 ソースファイルを使ってインストールすると、無駄なモジュールを省いてバイナリを最適化できたり、インストールパスや設定ファイルのパスをカスタマイズできたりしますが、開発環境を用意する必要があります。 バイナリパッケージを使えばインストールやアップデートが手軽に実行でき、ディストリビューションのパッケージツールで一元管理できますが、バイナリの最適化やインストールパスのカスタマイズはできません。 用途に応じた適切なインストール方法については表1

2014年2月14日に、半導体用露光装置を手がけるキヤノンがナノインプリント装置メーカーの米モレキュラーインプリント（MII）を買収すると発表した。買収額は100億円以上と見られ、15年以降に半導体向けに量産機を投入するという。大手一般紙の紙面も賑わせたキヤノンの勝負は吉と出るのか。今回は半導体リソグラフィーを取り巻く環境を整理しながら、キヤノンのMII買収が意味するところを考えてみる。 先端プロセスでは後塵拝す キヤノンは長年、半導体露光装置を手がけており、1980～90年代はニコンと並び、半導体露光装置業界の一角を担っていた。しかし、近年はオランダのASMLの台頭もあり、シェアが急激に低下。先端プロセス向けではASMLやニコンの後塵を拝している。グラフは光源別の各社の市場シェアを示したものだが、ラフレイヤーと呼ばれる比較的プロセスノードが緩いところで用いられるi線露光装置ではトップシェ

WEBコンテンツ配信にLinuxを使うのは一般的になりましたが、CentOSやUbuntuをはじめ、大抵のディストリビューションが低スペックなマシンでも動くような初期設定になっています。 トラフィックの上限でもない CPUリソースの枯渇でもない HDDのIOが遅い問題でもない コンテンツが重くなる(接続できない)というケースで、見落としがちなLinuxのネットワーク周りのチューニングについてです。 iptables関連iptablesを使用している場合、下記のパラメータを注意して下さい。 /proc/sys/net/ipv4/ip_conntrack_maxip_conntrackに記録できる最大値です。65536あたりが初期設定になっているかと思います。これだとパケットの取りこぼしがすぐに起きてしまいます。1コネクションあたり約350バイト消費するので、実装されているメモリに応じて値を変

本日、AppleとIBMが、法人顧客向けのモバイル分野で戦略的提携関係を結んだことを発表しました。 IBMのビッグデータと分析機能をiOS端末で今秋から利用できるようにし、IBMは顧客にiOS端末を販売するとのこと。 この提携により、100以上の業種別アプリを提供する｢IBM MobileFirst for iOS｣、iOS向けに最適化したIBMのクラウドサービスを提供する｢IBM MobileFirst Platform for iOS｣、企業向けのAppleCareとなる｢AppleCare for Enterprise｣、IBMがiOS端末を販売する｢IBM MobileFirst Supply and Management｣といった4つの主要な機能を立ち上げる予定。 ［via ITmedia］