ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、地域サービス事業部の吉田一星です。 今回は、Hadoopについて、Yahoo! JAPANでの実際の使用例を交えながら書きたいと思います。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 複数のマシンへの分散処理は、プロセス間通信や、障害時への対応などを考えなければならず、プログラマにとって敷居が高いものですが、 Hadoopはそういった面倒くさい分散処理を一手に引き受けてくれます。 1台では処理にかなり時間がかかるような大量のデータも、複数マシンに分散させることで、驚くべきスピードで処理を行うことができます。 例えば、今まで1台でやっていた、あるログ集計処理
最近、十分なセキュリティ対策を施しているにもかかわらず、それが破られて不正アクセスされてしまった事件がいくつか起こっている。と、このセリフは1年後にこの記事を読んでも有効かもしれないと思うぐらい、こういった事件は日常茶飯事になっている感がある。 セキュリティ対策においては、“十分だ”という線を引くのは非常に難しい。リスクの洗い出しや、それらのリスクに対応できるようにすることは大変な仕事になる。 外部から弱点を発見するペネトレーションテスト セキュリティ対策にもさまざまなものがあるが、その中の1つにペネトレーションテスト(penetration test)という方法がある。これは、既知の攻撃方法や侵入方法などをシステムに対して実際に行うことで、セキュリティ上の弱点を発見するテスト方法である。 この手法を用いれば、システムへの侵入や攻撃に利用されてしまいそうなセキュリティホールや設定の不備など
高可用性を学ぶ最適な本 Blueprints for High Availabilityについて Evan Marcus, Hal Stern 著 Publisher: John Wiley & Sons Inc ISBN: 0471430269 Evan MarcusとHal Sternによるこの本は、高可用性とディザスターリカバリーについて書かれた、もっとも包括的で優れた本だ。高可用性やディザスターリカバリーとは何か、そしてシステムを高可用に設計し、高可用に保つためには何を考えなければならないか、この本一冊で学ぶことができる。 さらに、ディザスターリカバリーほどの可用性が必要とされていないシステムであっても、限られた費用と資源の中で可用性を最大にすべきだということも事実だ。つまり、どんなシステムであれ、システムを設計し運用するすべての人は、この本を読むべきだ。 も
今までにない要件をストレージに求める新たなサービス。管理すべきファイルは大容量の動画コンテンツであり、将来的なユーザー数やトラフィックの増加も予想できないが、最初のコストは抑えたい。そういった柔軟な対応が求められるサービスの基盤として、ドワンゴは「ニコニコ動画」のストレージにHP StorageWorksを採用した。容量とスループットのそれぞれを柔軟に拡張できるため、今後も拡大を続けるサービスにも「当面は大丈夫」との見通しだ。
上司として、部下として、相手に一目置かれるようなビジネス会話を考える2009年3月の総務特集。初回では、どんな立場の時にでも使えるオールマイティな会話術を紹介した。今回は、年下の部下の立場から、年上の上司への接し方を、オフィスで実際によくあるシチュエーションに沿って考えてみよう。 上司の「なぜできない?」には「こうすればできます!」で答えよう ケース1:上司から厳しいスケジュールで仕事を任されてしまった場合 手いっぱいの仕事を抱えている状況で、突然上司に「○○くん、明日のA社への提案だけど、君が企画書をまとめておいてくれるかな?」と言われてしまった。今抱えている仕事量から考えて、明日までに企画書を仕上げるのはかなり厳しそう……。 「仕事を任されるのはいいけれど、よりによってこんなタイミングで……」という今回のようなケース。毎回どう受け答えすればいいのか悩んでいるビジネスパーソンも多いのでは
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く