ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、地域サービス事業部の吉田一星です。 今回は、Hadoopについて、Yahoo! JAPANでの実際の使用例を交えながら書きたいと思います。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 複数のマシンへの分散処理は、プロセス間通信や、障害時への対応などを考えなければならず、プログラマにとって敷居が高いものですが、 Hadoopはそういった面倒くさい分散処理を一手に引き受けてくれます。 1台では処理にかなり時間がかかるような大量のデータも、複数マシンに分散させることで、驚くべきスピードで処理を行うことができます。 例えば、今まで1台でやっていた、あるログ集計処理

ドットインストール代表のライフハックブログ

マッキン徒の皆さん、こんxxは。 何か最近重い気がするなぁ…重い、やっぱ重いよ…と、使って行く内にジワジワと茹で蛙の如く重くなって動作が鈍化しある日ハッと我に返らせてくれる（カエルだけに）火狐ことFirefox。 導入時のあの感動をもう一度ｶﾓｰﾝщ(ﾟДﾟщ)！というあなたm9・∀・）。 先ず自分の日々の行いについて心当たりが無いか、胸に手を当ててよく考えてみるべきではないでしょうか。 そう、アドオンです。 使わない物は無効化にするか要らなければ削除しちゃいましょう。 そして意外とバカにならないのがブックマーク達。 単純に減らすのも手ですが、ポイントはブックマークツールバーから外す事。 自分の場合は一つのフォルダに500弱有ったブックマークを、Googleツールバーの機能を使いGoogleブックマークに吐き出して削除したら、新規ウィンドウ表示の立ち上がりが軽くなりました。 ツールバーのブ

2009年03月03日19:00 カテゴリLightweight Languages perl - EncodeでXSSを防ぐ 良記事。 第7回■文字エンコーディングが生み出すぜい弱性を知る：ITpro だけど、問題点のみ具体例があって、対策にないのが片手落ちに感じられたので、その点を補足。 結論だけ言ってしまえば、Perlなら以下の原則を守るだけです。 404 Blog Not Found:perl - Encode 入門 すでにOSCONでもYAPCでも、あちこちそちこちでこの基本方針に関しては話したのですが、ここ 404 Blog Not Found でも改めて。 Perl で utf8 化けしたときにどうしたらいいか - TokuLog 改め だまってコードを書けよハゲ入り口で decode して、内部ではすべて flagged utf8 で扱い、出口で encode する。これが

文：Jack Wallen（Special to TechRepublic） 翻訳校正：村上雅章・野崎裕子 2009-03-03 08:00 iptablesをマスターするには時間がかかるものの、セキュリティに関する基本的なニーズを満たすことのできるいくつかのルールを知っておくだけで、あなたのLinuxシステムのセキュリティを向上させることができる。本記事では、その手始めとなる重要なルールを解説する。 iptablesは、Linuxマシンをセキュアにするための強力なツールだ。とは言うものの、その機能の多さには圧倒されてしまいがちである。そして、コマンドの構造をしっかりと理解し、マシンのどの部分をどのようにセキュアにすべきかを把握した後であっても、ややこしいことに変わりはない。しかし、iptablesの良いところは、極めて広いその適用範囲にある。このため、iptablesのルールのいくつかを

文字コードに関する問題は大別すると文字集合の問題と文字エンコーディングの問題に分類できる。前回は文字集合の取り扱いに起因するぜい弱性について説明したので、今回は文字エンコーディングに起因するぜい弱性について説明しよう。 文字エンコーディングに依存する問題をさらに分類すると2種類ある。（1）文字エンコーディングとして不正なデータを用いると攻撃が成立してしまう点と，（2）文字エンコーディングの処理が不十分なためにぜい弱性が生じることがある点だ。 不正な文字エンコーディング（1）――冗長なUTF-8符号化問題 まず，（1）の不正な文字エンコーディングの代表として，冗長なUTF-8符号化問題から説明しよう。前々回に解説したUTF-8のビット・パターン（表1に再掲）を見ると，コード・ポイントの範囲ごとにビット・パターンが割り当てられているが，ビット・パターン上は，より多くのバイト数を使っても同じコー

前回のロングインタビュー前編ではかなり多くの事柄を語ってもらいましたが、さらにこの後編ではつっこんだところまでをインタビューしています。序盤では少しいつもよりも落ち着いた雰囲気で応じてもらいましたが、途中からはかなりリラックスしていただき、通常のマスメディアがよくやりがちな「最初から結論ありき」のインタビューとはまったく違う内容に仕上がりました。ホリエモンとは一体何だったのか、私たちがテレビや新聞などを通して見ていたモノこそ「虚像」だったのではないのか。その真実をあなたの目で見極めてください。 ～もくじ～ ■マスコミが積極的に指摘できない、日本の裁判員制度や刑事裁判の問題点について ■テレビよりもネットの方が面白いから、テレビは衰退する ■広告主が離れていくテレビの未来、そしてネットビジネスで儲けるには？ ■ホリエモンのニュースチェック方法 ■ブログを再開した理由、ブログサービスに求めるも

ホリエモンと言えばもはや日本全国で知らない者はいないほどの著名人である堀江貴文氏のことですが、その実像に関しては一方的な側面からのみ報じられることが多いというのがこれまでの実情です。報道だけを通していると「ひたすら金儲けに邁進して、みんなわかっているのに知らないことにしてウソをついている」というように扱われているのですが、必ずしもそうではない部分があったということを誰も理解していないように思えます。完全な善人や完全な悪人といったものは存在するわけがなく、人間には良い面も悪い面も同じように存在するはずだからです。 今回の取材はホリエモンの「六本木で働いていた元社長のアメブロ」にて取材直前まで書かれたエントリーすべてを読み込んでからインタビューを行っています。そのため、ブログを読めばわかるような事柄についても、「GIGAZINEの読者にはブログを読んでいない者もいるはずだ」という前提に立ってお

2009年03月05日02:30 カテゴリLightweight Languages javascript - クリックジャック殺しなbookmarklet 意外な盲点。 主要ブラウザすべてに影響する「クリックジャッキング」攻撃とは しかし、 クリックジャック - 素人がプログラミングを勉強するブログ FirefoxユーザはNoScriptを使うか、about:configからpermissions.default.subdocumentを3にしましょう。 というのはあまりに厳しく悲しい。対策しようは果たしてないのでしょうか？ その結果が、こちら。 clickUnJack javascript:(function(d,u){var s=d.createElement('script');s.charset='UTF-8';s.src=u;d.body.appendChild(s)})(do

最近流行のクリックジャックについて、メモ程度にまとめておく。 一言で言うと、外部サイトのボタンをユーザが間違えてクリックしてしまうように仕向けるテクニックが、クリックジャックである。 クリックジャッキングってこうですか？ わかりませんではiframeをCSSのopacityプロパティを利用して透明にして、その下にダミーのボタンを置いている。目に見えているボタンを押そうとすると、その上に被せてある透明なiframeのボタンが押されてしまう。 [Sleipnir]No Click Jacking — Gistはこの攻撃に対する防御手段として考えられたユーザースクリプトで、透明なiframeを検出する。 しかし、opacity以外にもクリックジャックをする方法はあるので不十分である。 例えば 2009-03-04_2146 - javascripter's library にスクリーンキャストを

perl を書く上でのメモ ちょいと仕事で、perl で作成されたツールに対して、ちょっと手を入れてくれ！という依頼があったので、数年降り（学生時代以来だよ！）に perl を触る事になった。 自分で調べたこと package 文字通りパッケージ。クラス名として使う事もある。 おそらく以下のような使い分けのように思う（なんかあんまり詳しい説明が見当たらなかった）。 Package::Method の形式で呼ぶ場合はパッケージ（Ruby で言うところの module相当） Package->Method の形式で呼ぶ場合はクラス（メソッドの第一引数にパッケージ名が代入される） ライブラリパス use とか require は @INC とやらのパスしか読んでくれないので、自前のライブラリ等、格納場所が別の場所の場合はロードパスを明示してあげる必要がある。 こんな感じで、 use lib PA

「都道府県大戦」は全47都道府県の中から1つを選び、兵を雇って他県を攻めていくという国盗りゲーム。制作者によると「Flashで信長の野望的なゲームを！と思ってがんばった」そうで、武将などは出てこずシンプルながらもなかなか雰囲気の出たゲームになっており、ユニットや戦術の使い分けが勝負の決め手になってきます。 レビューは以下から。 すずぬーと：FLASHゲーム：都道府県大戦 まずは好きな都道府県を選びます。それぞれの都道府県に特徴があり、たとえば北海道だと金山があって県から得られる収入が1.5倍になります。 東京には河川があり、防衛戦時に敵の近接攻撃力が半減します。 大阪は鉄砲鍛冶、3日に1体「狙玉」ユニットが生産されます。そのほか「剣玉」ユニットを生産するもの、敵の戦術効果を半減させるものなど様々な特徴があります。 今回は大阪府を選択。 軍資金を使い。侵攻と防衛に使用するユニットを雇用します

保存用のHDDが足りなくなったので、1TBのHDD（HITACHI製）を買いました。昔なら、「ハードディスクに数百GBも何保存するの？」なんて思っていたりもしましたが、デジカメ画像をRAWで保存したり、iTunesを使ってAppleロスレス圧縮で何十枚もCDを音楽取り込みしていたら、あっという間に容量が足りなくなってしまいました。 で、今まで使っていて余った320GBのHDDを活かす方法はないかなぁと思って買ったのがこれ！ ガチャポンパッ！ ガチャポンパッ！は、簡単に言うと「内蔵用HDDをUSB接続の外付けHDDとして利用」できるようにするハードディスク接続キットのことです。最初、ネーミングセンスに惹かれて「裸族のお立ち台」にしようかとも思いましたが、「ガチャポンパッ！」の方にしました。デザイン、冷却ファン、10秒取り付けが決め手で。 「10秒でHDD搭載可能って、本当なの？」 というわけ

バラエティ番組『タモリ倶楽部』で紹介された、タモリ流の豚生姜焼きが美味しいと、インターネットのブログや掲示板で評判となっている。通常の豚生姜焼きは、生肉を醤油と日本酒と生姜をすりおろして作ったタレに漬け込み、肉に味を浸透させるのだが、タモリ流の豚生姜焼きは「肉を漬け込んじゃダメ！」とのこと。 たとえばハンドルネーム少年カカシさんのブログでは、次のような手順でタモリ流の豚生姜焼きを作るという。1.豚ロースに小麦粉をまぶす（旨味を外へ逃がさないため）、2.油を使わずに豚ロースを炒める、3.肉の色が変わったらたまねぎを投入、4.肉に焼き色がついたら生姜と酒としょう油とみりんで作ったタレを加える、5.ちょっと揺すってトロミが出てくれば完成。 この漬け込んではいけない豚生姜焼きの調理法に、多くの人たちが衝撃を受けているようす。インターネットでは「てゆーか、肉を漬けこんじゃだめなの!?　いや、目からウ

とりあえず画像OFFでの閲覧を推奨しますけれども。 http://anchor18.blog77.fc2.com/blog-entry-195.html 鳥山明作品の美しい画像スレ　あんか?びっぷhttp://b.hatena.ne.jp/entry/http://anchor18.blog77.fc2.com/blog-entry-195.html はてブの反応がマジコンの話題と全然違う。鳥山明さんのイラストを1円も払わずに見て喜んでる人たちと、マジコンに怒っている人たちは重なっていないのでしょうが、マジコンに怒った人は、こっちにも怒るのが道理。 結局、何なのかというと、自分も（時々）やってることは、規制されたくないんだな。自分が絶対にやらないことなら、ガンガン規制しろ、っていう。身勝手なんだよ。Googleストリートビューのオプトアウト方式に文句をいっている人は、「事前に著作者の許可を

そこは波の中…あまりにも美しい一瞬をとらえた写真18枚 波の音を聴くとなんとも心地よくなりますが、島国で暮らす日本人にとって海は特別なものかもしれません。 静と動の狭間をとらえた、波の隙間の写真をご覧ください。 一瞬後には波しぶきでもみくちゃに。 氷のように透き通った波。 本当に綺麗な海なんでしょうね。 赤茶の波から覗く青い空。 勇気あるカメラマンがいるからこその写真。 サーファーよりカメラマンの方が偉いと知りました。 彼は波の間に何を見たのでしょうか。 いつも見られるとはかぎりません。 砂まじりの波。 息を呑む大迫力の波。 ひとり水族館。 望遠鏡。 南国の海ならではの透明度。 サーフィンにとりつかれる人の気持ちがわかります。 まるで生き物みたい…。 白い壁。 お約束ということで、葛飾北斎・富嶽三十六景。 その他の波の画像は以下のサイトよりどうぞ。 Inside a wave (27 pi

まあぶっちゃけた話、真っ黒案件で以前から悪質な違法献金との指摘も多くあり小沢逮捕しちゃえいいぞもっとやれというのは確かで、元より利権政治家をトップに据えちゃった民主もどうかしてるし、さっさと小沢切ってやり直せばいいのにというのは間違いないわけだが。 ちょっと新聞でも読めば分かることだけど、2chとはてなのホッテントリしか見てない人のために簡単に経緯をまとめてみるよ。 西松が名前を隠して献金したい→社員に「社員有志による政治団体」を作らせる→社員は会費を団体に払う→団体は政治家の資金管理団体に献金する→西松は社員にボーナスで相当額を補填する 平たく言えばこんだけ。罪状は「実際には西松からの献金だと分かっていたのにダミー団体の名前で政治資金収支報告書に記載したという虚偽記載」だね。 この手口は(特に与党政治家の間では)常套手段になっていて、要するに「ダミー団体だと知らなかった」なら問題ないとさ

エグザイルの今回の増員は第一期でしかなく、今後は劇団エグザイルの常設化を見込んだ大増員も待っている。 そして、さらなる第三期の大型増員として、国の雇用対策を兼ねた増員計画を提案したいところ。 この不況下の雇用不安は、派遣切り程度ではおさまらず、今後も拡大するのは間違いない。まずは雇用対策として、エグザイルの国有化を進め、プレカリアート層をまとめてエグザイルのメンバーに加入させるという、ワークシェアリングの観点からも正しい政策を展開すべきである。 エグザイルの昨年のCDの総売上は約108億円。仮に10パーセントがメンバーの取り分としても10億。さらに、「月刊エグザイル」やDVD、ライブ、有料ファンサイトの収益を入れると、その数倍にはなる。 雇用対策資金としては心許ないが、経営の多角化こそが単なるセイフティネットではないこの政策の肝だ。 媒体も月刊誌だけでなく、「週刊エグザイル」「週刊少年エグ

ドットインストール代表のライフハックブログ

来年も作りたい！ふきのとう料理を満喫した　2024年春の記録 春は自炊が楽しい季節 1年の中で最も自炊が楽しい季節は春だと思う。スーパーの棚にやわらかな色合いの野菜が並ぶと自然とこころが弾む。 中でもときめくのは山菜だ。早いと2月下旬ごろから並び始めるそれは、タラの芽、ふきのとうと続き、桜の頃にはうるい、ウド、こ…

親が読んで、ほっとする本。 フェミニストが何と言おうが、男の子の子育てと、女の子の子育ては、ちがう。男女は、性差ではなく性格が性別に定着していくもの。つまり、「男の子らしさ」や「女の子らしさ」は、お互いもともともっており、成長の過程で（主として環境により）際立たせられていくものでないかと。 しかし、ほとんどの育児本は、性差を意識していないか、あるいは「男の子限定」の内容となっている。なぜなら、育児本を手にするのはたいていママだから。「女の子＝自分が小さかった頃」を考えて、自分を基準にしてしまうだろうから。 そんなニッチにピッタリとあてはまる本を読んだ。なじみの図書館の予約待ち順位は、「100位」。amazonでは見えにくいが、本書がどれだけ望まれているか、よく分かる数字だ。娘を持つ親のためのアドバイスが満載しており、まさにいま読みたかった一冊。 とはいうものの、デジャヴ感やライフハック臭も

ハリイカの焼売と中華炒め ハリイカをよく、見かけるようになりましたよ。生け簀で、泳いでいたものを一杯購入しました 立派な大きな墨袋や肝は冷凍保存して 柔らかな身は季節のお豆、お野菜と合わせて中華の炒めものに。新鮮なにんにくの茎は刻み、香り高く食欲そそられますね 下足はミンチにし…