異文化理解力 - The Culture Map
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos インシアードに留学するからということで久しぶりに集まった元同僚との飲み会で話題となり、早速読んでみたのだが大変に面白かった。"一国籍が最大でも10％未満になるように学生の国籍をコントロールして" (http://singapore.keizai.biz/
Apache Sentryで始めるアクセス制御 (Hive編)
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos この投稿はSpark, SQL on Hadoop etc. Advent Calendar 2014の5日目の記事です。 Apache Sentry(以下Sentry)を使えば、HiveやImpala、Cloudera Search(SolrCloud
マルチテナントとセキュリティの話 at #hcj2014
Hadoop Conference Japan 2014で、「マルチテナント化に向けたHadoopの最新セキュリティ事情」というタイトルで講演してきました。 セキュリティと大きく括ってますが、実際にはApache SentryというHiveやImpalaで利用できる認可モジュールの紹介が半分でした。資料は以下で公開してます。 昨今のHadoop界隈は認可や監査、暗号化といったセキュリティ周りの強化(開発)が非常に活発です。にも関わらず、実際のセキュリティ関連プロダクトが話題になることは少ないのも事実です。必要とする人が限られているためだと想像しますが、Treasure Data太田さんの言葉にあるような時代において、Hadoopにおけるセキュリティは決して無視できないでしょう。Sentryは、データを誰に見せるか、誰に使わせるかを制御するためのプロダクトです(認可、Authorizatio
デコミッションが遅いときに見直す設定 - Yet Another HDIF?
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos @kernel023がすごい勢いでひとりアドベントカレンダーを更新中で、こちらのHadoopアドベントカレンダー2013はすっかり裏扱いされつつある今日このごろですが、せっかくなので6日目としてデータノードのデコミッションが遅いときにどうしますかという地
バッドデータハンドブックを読んだ - Yet Another HDIF?
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 様々な現場で日々データを扱う19人のエンジニア（データサイエンティスト？）が、これまでにデータとどのように格闘してきたのか、そこから得られた知見を紹介する一冊。感想はまさに書籍の紹介のとおり。具体的なテクニックが語られており参考になる一方で、データサイエ
Hadoop 第3版の発売と、HDFS HAの付録について - Yet Another HDIF?
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 象本こと、Hadoop 第3版が発売されました。翻訳は安心のクオリティ、玉川竜司さんです。今回、日本語版のみの付録として、「最新の高可用性 HDFS の紹介」と題して記事を書かせて頂きました(あくまでボランティアです)。 背景 原書である Hadoop:
鬱ごはん - Yet Another HDIF?
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 食べ物は不味そうだし猫の妖精の突っ込みは泣けるし画はシュールだし、で結果的にクセになる漫画。ご飯を美味しそうに見せる漫画や映画は多いけど、その逆で攻めてくるとは。 誰かと食べる餃子より 一人でナメる飴の方がうまい オマエのコトなんか誰も 見てへんで 「誰
カラムナストレージ - Yet Another HDIF?
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos Henry Robinsonによる、カラムナストレージの解説記事を翻訳しました。カラムナストレージは、Googleで開発されたデータ処理ツールであるDremelに使用されているファイルフォーマットであり、Clouderaが開発を進めるImpalaでも採用
風通しの良いコミュニケーション
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos アート・オブ・コミュニティの3章からメモ的に。 オープンで客観的なフィードバックはすべてのコミュニティに必要ですし、コミュニティの中で作られた成果は、全員で共有すべきです。 できれば、シンプルでムダがなく、外部の人も歓迎してくれるような、楽しいコミュニケ
QJM構成でデバッグを有効にするとネームノードが起動しない件
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 遅ればせながら、Hadoopアドベントカレンダー2012 #hadoopAC12jpの、17日目のエントリとして書きます。 Introductionタイトルのとおり、デバッグを有効にしてネームノードを起動しようとすると以下の例外が発生し、ネームノード自体
ネームノードHAでWebHDFSの代わりにHttpFsを使う
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos Hadoopアドベントカレンダー2012 #hadoopAC12jpの、12日目のエントリとして書きたいと思います。 IntroductionWebHDFSはネームノード(やデータノード)に直接アクセスするので、ネームノードHA構成時にフェイルオーバーし
ネームノードHAにおける自動フェイルオーバー(フェンシング編)
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos Hadoopアドベントカレンダー2012 #hadoopAC12jpの、6日目のエントリです。前回は、CDH4.1で導入されたネームノードHAの自動フェイルオーバーについて紹介しました。本エントリでは、自動フェイルオーバー時のフェンシング機能について紹介
Kindlizerで、自炊PDFをkobo touch用に最適化する
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 1万円ほど、自由に使っていいお金ができたので、kobo touchを買った。目的は、自炊した文庫本を読むこと。元々、自炊した分は全部iPad(第3世代のやつ)で読んでいたのだけど、文庫本みたいな元々小さい本をiPadで読むのは若干仰々しく、電車内で開くの
土鍋で玄米を炊く
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos 実家に寄ったときに玄米をもらって帰っていたのだけど、今の家には炊飯器がない。以前ルームシェアを解散するときに炊飯器を引き取ってなかったからだ。白米なら土鍋でも簡単に炊けるので、玄米はどうか、と調べてみると、びっくり炊きというものが紹介されてた。秋田地方に
Humility Matters
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos Apache Software FoundationのメンバーであるRich Bowenの、礼儀正しさ重要っていう文章がとてもよかった。主にソフトウェアのドキュメント整備に貢献してきた人らしい。 僕がオープンソースのドキュメンテーションに何年も携わって学
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
異文化理解力 - The Culture Map
ポンディシェリ
柑橘類と文明 - The Land Where Lemons Grow
英語の誤用（英語文章ルールブック）
Yet Another HDIF?