サクサク読めて、アプリ限定の機能も多数!
トップへ戻る
衆院選
www.geek.sc
取引先でHadoopのデータノードがダウン 取引先のHadoopクラスタにおいて、データノードが突然ダウンする障害が発生しました。 以下のコマンドでDead datanodeのサーバーを検知しました。 [root@datanode04 hadoop-hdfs]# sudo -u hdfs hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it. Configured Capacity: 8596032528384 (7.82 TB) Present Capacity: 8596032528384 (7.82 TB) DFS Remaining: 8012100371990 (7.29 TB
Apacheのaccess_logが記録されない障害 LVS配下のWEBサーバーでiptablesを動かしていたのですが、秒間アクセス2000くらいからApacheのアクセスログが記録されないという障害に悩まされていました。LVS・Apacheともに正常に稼働していて、access_logも全部記録されないわけではなく一定の確率で記録されていませんでした。error_logにも原因と思われる兆候なし。いわゆるログロストが断続的に続いている状態で、Apacheのパフォーマンスチューニングやカーネルパラメータのチューニングも行ったのですが、原因の方が掴みきれずにいました。 /var/log/messagesに答えがありました Apacheのログを見ていても原因が分からないならば、syslogの方はどうなんだろう?ということで、/var/log/messagesを見てみました。そうしたら、以下の
livedoor Readerで購読しているブログ 最近、livedoor Readerに登録しているフィード1万件を間違って全件消してしまいました。取り急ぎ復旧させたのが、この3,019件のフィード。職業柄、技術系のブログが多めです。あとは、まとめサイトとか、はてな村の定点観測とか。各種RSSリーダーで読み込めるように、OPMLファイルも公開しますので、良かったらどうぞ〜! 私が読んでいるブログ一覧 哲学ニュースnwk My Codex Leicester 暇人\(^o^)/速報 データサイエンティストのタコ部屋 ITライフハック すがブロ ライフハッカー[日本版] Colorless Green Ideas 職業プログラマの休日出勤 やねうらお−俺のブログがこんなによっちゃんイカなわけがない YAPC::Asia Tokyo 2013 “blank”>ガジェット速報 » ggsokuで
おすすめの.vimperatorrc設定 プラグインはfeedSomeKeys_3.js、hint-tombloo.js、tombloo.jsを入れています。 " ブラウザタイトルの変更 " Firefox デフォルトは 「Mozilla - Firefox」、vimperatorを入れると「vimperator」 set titlestring=Firefox " 詳細表示レベル? 内容確認中、左下のステータス状況か? " →「:javascript! 」で表示される内容レベル set verbose=9ror parsing input URL, n " 不明 内容確認中 set wildmode=list:full "tabopen時履歴などを表示しない" ブラウザタイトルの変更 " Firefox デフォルトは 「Mozilla - Firefox」、vimperatorを入れると
Linuxのファイルシステムの特徴 LinuxのEXT4やBrtfsやEXT3などのファイルシステムは、i-nodeとブロック領域の2つで構成されています。ファイルのデータはブロック領域に格納されます。そのブロックの管理領域には、ファイルの実データが格納されている位置やファイル・サイズ、変更時刻などの管理情報が記録されます。これがi-nodeです。 各ファイルやディレクトリのi-node番号を確認するには、ls -iコマンドを実行します。 $ ls -ali 54980 -rw-r--r-- 1 faust users 1.5G 6月 14 21:20 test.tar.gz 232836 drwxr-xr-x 1 faust users 84 6月 15 01:11 www また、各パーティションごとに使用されているi-node番号の総数は、df -iコマンドで確認できます。 $ df
Zookeeperのトランザクションログの運用 Hadoopと組み合わせて使用されるZooKeeperは、タイミングが非常に重要な高可用性の分散協調システムです。NTPを設定してログの時刻ずれが無いように設定しておく必要があります。また、Zookeeperのトランザクションログとスナップショットは別のディスクドライブに保存することが望ましいとされています。ログが頻繁に書き込まれるため、I/O性能の良いSSDなどのフラッシュストレージに保存しておくことが望ましいです。これらはdataDirおよびDataLogDirプロパティによって設定が可能です。Zoopkeeperのトランザクションログが一定の設定値(デフォルト64MBまたは100,000回)以上に書き込まれると、znodeツリーのメモリダンプであるスナップショットが作成されます。スナップショットは基本、それ以前のトランザクションログに代
ActiveMQとは ActiveMQとは、Java Message Serviceを実装したメッセージ関連のミドルウェアです。ActiveMQをインストールすることで、アプリケーションは非同期型のメッセージキューイングを行うことができます。メッセージを非同期にやり取りするため、一時的にシステムがダウンしても影響を受けずに処理を再開させることが可能です。以下のような感じです。 ActiveMQのインストール ActiveMQはソースコードで提供されていますが、RPMの作成も可能です。ここではいったんRPMを作成してインストールする手順を解説します。 $ sudo yum install -y rpm_build $ mkdir -p ~/rpm/{BUILD,RPMS,SOURCES,SPECS,SRPMS} $ echo "%_topdir ~/rpm" > ~/.rpmmacros $
RとMySQLの連携 まず、Rを起動させてDBIとRMySQLのパッケージをインストールさせます。 $ sudo R R version 2.15.2 (2012-10-26) -- "Trick or Treat" Copyright (C) 2012 The R Foundation for Statistical Computing ISBN 3-900051-07-0 Platform: x86_64-suse-linux-gnu (64-bit) Rは、自由なソフトウェアであり、「完全に無保証」です。 一定の条件に従えば、自由にこれを再配布することができます。 配布条件の詳細に関しては、'license()'あるいは'licence()'と入力してください。 Rは多くの貢献者による共同プロジェクトです。 詳しくは'contributors()'と入力してください。 また、RやRの
ブランドとは何か GoogleやAppleのように、自社製品と競合他社の製品との明確な違いを打ち出すことによって、消費者は複雑で多様な製品の中からその会社のサービスを識別できるようになります。この違いが「ブランド」であり、このブランドを会社の資産として捉える「ブランド・エクイエティ」(ブランドの無形の資産価値)が重要であるとコトラーは考えています。実際、Appleは自社ブランドを維持するために製品や店舗の研究開発に多額の投資を行なっています。ブランドが確立できれば、「ググる」という言葉が一般化したように、消費者の日常生活に大きな影響を与えることができるようになります。 ブランドの選択 ブランド資産の確立のためには、まず自社ブランドの選択が大事です。消費者の記憶に残るか、消費者がそのブランドを好んでくれるのか、どこまで競合に対して防御できるのか、などがブランドを選択する上での基準になります。
エディタはvimを使っています 普段のコーディング作業ではエディタはvimを使っています。EclipseなどのIDEは使っていません。メインの開発がPHPやPerlというのもあるのですが、IDEにこだわるよりは、軽量にターミナル上でいつでもどこでも修正できることを重視しています。その分、.vimrcはちょっとカスタマイズしています。.vimrcはGitHubのdotfailesを利用する方法もあります。私は色々なサイトを参考にカスタマイズしました。私の設定を公開いたします。 vimの設定 まずはNeoBundleプラグインをダウンロードします。 $ git clone https://github.com/Shougo/neobundle.vim ~/.vim/bundle/neobundle.vim 次に.vimrcを以下のように作成しました。 " vi 互換ではなくVim のデフォルト
自分のツイートをAPI1.1経由で取得してファイルに出力する 自分のツイートをAPI経由で取得してファイルに出力するサンプルです。twitteroauth.phpを使っています。 [php]OAuthRequest(“https://api.twitter.com/1.1/statuses/user_timeline.json”,’GET’,array(‘count’=>’10’)); $result = json_decode($req); $tweet = “ “; for($i=0;$i>5;$i++){ $object = $result[$i]; $tweet .= “ $object->text OAuthRequest(“https://api.twitter.com/1.1/statuses/update.json”,”POST”,array(“status”=>/”$me
Feedback ChampuruプラグインのTwitter API Ver 1.1対応 WordPressのFeedBack ChampuruプラグインがTwitter API Ver1.1に対応していなくて、6月14日ごろからTwitterのコメントが取得できなくなっていたので、ちょっと改造してOAuthでつぶやきを取ってくるようにしました。 臨時対処でちょっとハードコーディングになってしまうのですが、Feddback Champuruプラグインの_get_twitter関数を以下のように書き換えました。 [php]private function _get_twitter($type, $post_id, $permalink, $get_new = false){ $cache = $this->_get_cache($type, $post_id); if ( !$get_new
Dellのサーバーの消費電力を計算する Dellの方で用意しているサーバーの消費電力シミュレーションシートがあります。 http://www.dell.com/content/topics/topic.aspx/global/products/pedge/topics/en/config_calculator?c=us&cs=04&l=en&s=linux ↑でStart ESSAをクリックすると、ラック・サーバー選択画面になります。PowerEdgeも選択できます。それでサーバー台数分選択して、各サーバーごとにConfigureでCPUは何か、メモリは何GBか、HDDはいくつか、CPUの使用率(負荷)は何%想定か(デフォルト100%)などを選択していくと、トータルの消費電力を計算してくれます。ワット単位で出してくれるので、あとはラックの電圧さえわかれば、必要なアンペア数がわかります(CP
git pushでデプロイしたい ローカルレポジトリにgit commitした後に、問題なければリモートレポジトリにgit pushすることになりますが、git pushしただけではリモートレポジトリの情報が更新されるだけでデプロイはされません。今までデプロイ作業は自宅サーバーにログインして、git pullを行なっていたのですが、それは面倒なのでgit pushのタイミングでデプロイを自動化することにしました。まず、レポジトリを立てるところから順を追って解説します。 リモート側にGitレポジトリを立てる $ mkdir repo $ cd repo $ git init $ git config --bool core.bare true $ cp -rf /srv/www ./ $ git add * $ git commit -m "www add" $ cd /srv $ rm -
RedHatもMySQLからMariaDBに移行する 既にFedoraやopenSUSEなどのディストリビューションは、MySQLからMariaDBへ移行していたのですが(移行は強制ではなく、MySQLもオプションのパッケージとして標準レポジトリには登録されています)、昨日になって、Red Hat Enterprise Linux 7でもMySQLに代えてMariaDBを採用というニュースも飛び込んできました。RHEL7でMariaDBが採用されるということは、そのクローンであるCentOSでもMariaDBが標準になっていくと思われます。Linux界隈の流れは明らかにMariaDBに向かっています。「世界的ですもんね。乗るしかない!このビッグウェーブに!」ということで、自宅サーバーもMariaDBへ移行させることにしました。 自宅のMySQL使用状況 私の自宅サーバーは、openSUSE
ホットエントリ 偏差値をネタにするYouTuberが龍谷大学にきて学生をいじって帰っていったらしいが歳とっても学歴自慢する人には「いま何してるんですか」と聞いてみたい(16users)パリオリンピックの選手村のレストランでは提供する肉や卵が足りず『イギリスが自国の料理人を呼び寄せるレベル』になっているらしい(101users)トランプ氏「アメリカをビットコイン超大国に」 規制緩和推進を表明 政権に返り咲けばSEC委員長をただちに解任 | TBS NEWS DIG(3users)イエス・キリストを侮辱し、最後の晩餐を変態オカマドラッグクイーンショーに仕立て上げ世界中から猛批判大炎上のパリオリンピック開会式、ついには証拠隠滅のためにIOCがDMCAで削除しまくる(99users)〈特別公開〉警察腐敗 内部告発者はなぜ逮捕されたのか(青木理)(39users)ワットチェッカーというのを買って節電
齊藤 2005/07/04(Mon)03:46:39 ドイツと日本の違いについて。直江さんは「日本が戦争に突入したのはやむをえなかった」という論理は、ナチスに対しても「戦争に突入したのはやむをえなかった」同じ論理でそう言えてしまうことになるとご指摘されています。 すみません、私の中では日本政府は最後まで対米交渉の平和的解決を願っていたという認識でいます。しかし、米国が日本への原油輸出禁止や在米日本資産凍結などの強攻策に打ってでてきて、イギリスやオランダの東南アジア植民地からの資源も輸入できませんでした。石油がなくなれば国内経済も軍事力の維持も不可欠であり、今回の輸入停止のまま追い詰められた日本政府に、中国大陸からの完全撤退を要求するハル・ノートが渡されます。最近の公開文書によると、アメリカは日本が受け入れられない文章を出すようにとのことで、このハル・ノートが出されたそうです。石油もジリジリ
Exif情報とは何か デジカメの写真などの画像ファイルには、画像データだけではなくて、Exif情報というメタデータが埋め込まれています。それは次のような情報です。 撮影日時 撮影機器のメーカー名(製造・販売元) 撮影機器のモデル名(カメラ付き携帯電話・スマートフォンの機種名など) 画像全体の解像度 水平・垂直方向の単位あたり解像度 撮影方向 シャッタースピード 絞り(F値) ISO感度 測光モード フラッシュの有無 露光補正ステップ値 焦点距離 色空間 GPS情報 – GPS付きカメラの場合、緯度・経度・標高など。 サムネイル つまり、デジカメやスマホやガラケーで撮影された写真には、撮影された機種や撮影日やGPS情報などが埋め込まれていることが多く、この情報から写真がどのような状況で撮影されたのかの詳細を知ることができます。 Exif情報は簡単に取得が出来て、例えば先日のPC遠隔操作事件で
upstream sent too big headerエラー Nginx + PHP-FPM構成で、クライアント環境(ブラウザ設定)によっては以下のようなエラーが発生してページが閲覧できない場合があります。 [error] 819#0: *38 upstream sent too big header while reading response header from upstream, client: ***.***.***.***, server: localhost, request: "POST ******** HTTP/1.1", upstream: "fastcgi://unix:/var/run/php-fpm/php-fpm.sock:", host: "********", referrer: "http://**********" エラー対処法 Nginxのcon
ブラウジング快適化 AutoPager 色々なサイトや検索結果で「次のページ」のリンクをクリックしなくても、ページ最下部まで行くと次のページを連結して表示してくれる。私にとって必須アドオン。 context search 右クリックの検索機能を拡張して、様々な検索エンジンや検索サイトで検索できるようにする。 copy link url 選択範囲の複数のリンクを抽出してクリップボードへコピー。 Launch Clipboard クリップボードに保存されている複数URLを開く。 Fasterfox Lite Firefoxのページ読み込み速度の向上。RFC準拠を超えたダウンロード設定も出来る。 Lazarus: Form Recovery 間違って消えてしまったフォームの入力データを復活できる。 Textarea Cache テキストエリアに入力したデータを自動的にキャッシュしてくれる。 Th
Zabbixサーバー障害発生時に自動的に電話を掛けさせる方法 Zabbixからの電話発信方法 http://www.slideshare.net/BlueSkyDetector/zabbixjp-study-20100730-2nd-session 実行にはX Window & Skypeが必要ですが、幸いなことに監視サーバーにはX Windowが入っています。 俺のZabbixがこんなに可愛いわけがない ~おかわり~ http://www.slideshare.net/sechiro/zabbix-6898674 CentOS6.3にSkypeをインストール まずこれが大変でした。SkypeのLinux版はDebian/UbuntuかopenSUSE版しか配布されていません。CentOS用のRPMはなく、Skypeはオープンソースではないので、ソースコードも公開されていません。ダイナミッ
Hadoopクラスタの統計情報の取得方法 Hadoopクラスタでメトリックス情報(統計情報)を外部サーバーから取得する方法は幾つかありますが、以下ではmetricsサーブレットを有効化する方法について解説します。 Hadoopクラスタの各ノードの/etc/hadoop/conf/hadoop-metrics.propertiesに以下の情報を追記します(既にパラメータが定義されている場合は置き換えます)。 dfs.class=org.apache.hadoop.metrics.spi.NoEmitMetricsContext dfs.period=10 mapred.class=org.apache.hadoop.metrics.spi.NoEmitMetricsContext mapred.period=10 jvm.class=org.apache.hadoop.metrics.spi
1 名前:さいとう:2002/07/08 1:38 以下の設問の中から好きなものを選び、字数無制限で論述してください。 設問1.あるところに選挙へ行くのが大嫌いなA君がいました。彼は選挙について「俺が選挙に行ったって所詮は30万分の1票でしかないだろう?そんなのは統計的にも無効と同じさ。選挙なんて、つまるところ政治に民主的な正統性を与えるための大衆用のショーにすぎないのさ」と考えています。もし、このA君に合理的に反論するにはいかなる解答が考えられるでしょうか? 設問2.金(キン)との兌換が行われなくなった現代において、実体としてはただの紙切れにすぎない1万円札の価値は、どのようにして生まれているのでしょうか? ちなみに法律では次のように書かれていますが、これだけでは法貨が定まっただけであって価値は生まれません。 日本銀行法 第46条 1 日本銀行は、銀行券を発行する。 2 前項の規定に
アメリカ大陸では馬は1万年前に絶滅した アメリカ大陸のアンデス文明は、何故ユーラシア大陸の西洋文明に破れて滅亡したのでしょうか。これには諸説あり、『銃・鉄・病原菌』(まさにタイトルそのものがアンデス文明に欠けていたものですが)においては「文明は気候差の影響などで東西に伝播する速度のほうが南北に伝播する速度より速く、南北に長いアメリカ大陸は地勢的に文明の伝播に不利な状況があった」などと指摘されています。 私はそのような地勢的な状況もあった一方で、『銃・鉄・病原菌』でも重視されていてもテーマの本質ではなかった「馬」の存在の有無が両大陸の文明を分かつものであったと思います。意外と知られていない事実ですが、アメリカ大陸には馬が存在しませんでした。 正確には、紀元前200万年前〜100万年前までは北アメリカ大陸は馬の先祖の原産地だったのですが、その後の気候変動や人間による狩猟により、野生の馬はユーラ
毎日新聞のWEBサーバーはApache2.2.3とPHP5.1.6 まずFirefoxにLive HTTP Headersのアドオンを入れた状態で、毎日新聞のサイトを開いて、右クリックで「ページの情報を表示」→「ヘッダ」を選ぶとレスポンスヘッダが見られるのですが、ここに「X-Powerd-By PHP5.1.6」と書かれてあるのが確認できるかと思います。PHPのバージョンが露出している状態です。 ServerヘッダでApacheのバージョンも露出していることがわかります。Apache2.2.3と比較的古めのバージョンを使っていることがわかります。Apache2.2.3やPHP5.1.6のバージョンに関しては既に報告されている脆弱性がいくつもあって、パッチを適用していないならば、Apache Killerなどの攻撃スクリプトが叩きこめてしまう可能性があることがわかってしまいます。 これは不
華族とは 大政奉還と明治維新によって、それまでの士農工商を基礎とした身分秩序は否定されたが、明治政府は天皇を頂点とした近代国家の建設を志向していたため、身分制度は完全に解体されることなく再編成されることになった。このうち、公家や大名家などの旧支配層が世襲制の「華族」という身分として統合されることになった。当初の華族総数は427家。うち公家が136家、大名家が248家、公家と同格が28家、大名と同格が15家であった(同格とは、位の高い一部の公家の分家・徳川諸家・付家老家など)。さらに華族令が公布される1884年までに、特定の分家・社寺住職・神職僧侶など、さらに76家が新たに加えられた。さらに、やがて国家に対して功績のあった士族や平民も勲功華族として華族の1員となることが認められるようになった。当初は少数だった勲功華族も、 1928年頃には倍増している。1947年、日本国憲法第14条によって華
ニコニコ超会議とEPUB 今週末はネットではニコニコ超会議の話題で持ちきりでしたね。私も参加しようと思ったのですが、友達の家でオールナイトで飲んでいたので参加できずでした。個人的には堀江さんの以下の記事に思わず突っ込んでしまいました。 ニュース長すぎ、EPUBはクソ規格–ホリエモンがニコニコ超会議で語った全文2 #chokaig http://matome.naver.jp/odai/2136713291397662901 堀江:けど、俺は正直いって、Epubの方がムカツクよ。Epubはクソ規格だよ、クソ規格。 松浦:どこらへんが? 堀江:もっさりしすぎでしょ。たとえばメルマガをわざわざEpub化してさ、俺も一部Epub化して出してるけども、もうEpubなんてクソだよ、クソ。読みにくい。縦書もいらねえ、ルビもいらねえ。ルビなんて見ねえだろ、このやろうって。俺はたとえばアプリで、それをわざわ
フェルミ推定のお話 「1台のバスにゴルフボールは何個入りますか?」 「シカゴにピアノ調律師は何人いますか?」 「東京に電柱は何本ありますか?」 Google入社試験などでよく出題されるフェルミ推定の解き方。 ビッグデータを短期間で推定するための着想・工程・計算方法。 電話のお話 PSTN(公衆交換電話網)への入り方。電話の切断理由コードの取得方法。 Asteriskを使ってパソコンをPBX(構内電話交換機)にする方法。 ファイルシステムのお話 NTFS、EXT4、XFS、ZFSなどの特徴とジャーナリング構造。 rm -rfコマンドで誤って消したファイルを直ちに復活させる方法とか。 性能評価方法、新しいファイルシステムBtrfsのご紹介。 Androidのお話 Android端末にカスタムROMを流し込む方法。ADBドライバの使い方。 Google Playを経由しないAPKの管理方法。Go
SSD「840 Pro」512GBについて 秋葉原でサムスンのSSD「840 Pro」512GB(MZ-7PD512B/IT)を自宅サーバー用に買って来ました。840 Proシリーズは市販SSDとしてはインテル以外では初の、サーバー向けにも使えるSSDで、高い性能と耐久性がウリ。1秒間に540MBの読み込みができ、520MBの書き込みができます。 SSDの致命的な弱点は書き込み上限回数が決まっているので「寿命」が存在することですが、840 Proは「1日40GBの書き込みを5年間続けても動作を保証します」というサムスンの保証付き。サーバー向けSSDやデータセンター向けSSDはIntelも出していますが高いし、Fusion-ioなんかも手が出せないですね。 日銀砲と円安で高くなる前に40,980円で買いました(既に円安の影響で45,000円で売っているショップもありました)。以前はサムスンの
次のページ
このページを最初にブックマークしてみませんか?
『ミライハック|アウフヘーベン』の新着エントリーを見る
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く