インフラエンジニアの茂木(@tkmoteki)です。CyberZエンジニアブログ初投稿です。 私が最近業務で行った、本番Hadoopクラスタ2つのメジャーアップグレード検証と実施について記載していきます。 Hadoopクラスタのメジャーアップグレードはかなりクリティカルでヘビーな業務でした。 検証から実施までは今年の9月下旬から10月下旬の1ヶ月間で行いました。 クリティカルな作業でもあり、検証や準備する項目が多く、なかなかタイトなスケジュールでした。 今回の記事では以下について記載します。 弊社のHadoop環境と構成 アップグレード検証 アップグレード実施 1. Hadoop環境と構成 運用に際しHadoop専任エンジニアを必要とせず、運用負荷を削減できる事から、 Cloudera社のCDH4とCloudera Manager4(以降CM4)を導入しております。 今回はCDH5とClo
![1ヶ月で本番Hadoopクラスタ2つのメジャーアップグレード ~検証と実施まで~ - CyberZ公式エンジニアブログ](https://cdn-ak-scissors.b.st-hatena.com/image/square/5adba617fa9d1810cc6e96504e8cc6d40a769064/height=288;version=1;width=512/http%3A%2F%2Fcdn-ak.f.st-hatena.com%2Fimages%2Ffotolife%2Fc%2Fcyberz-dev-writer%2F20151217%2F20151217214522.jpg)