デコミッションが遅いときに見直す設定 - Yet Another HDIF?

Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers.Twitter / Photos Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Twitter / Photos @kernel023がすごい勢いでひとりアドベントカレンダーを更新中で、こちらのHadoopアドベントカレンダー2013はすっかり裏扱いされつつある今日このごろですが、せっかくなので6日目としてデータノードのデコミッションが遅いときにどうしますかという地

[yass]

" ネームノードはこのとき、以下の計算にもとづいて一度に転送指示を出すブロック数を決定します / 生存しているデータノードの数 × dfs.namenode.replication.work.multiplier.per.iteration / デフォルトで2 "

[shiumachi]

“なお、設定の反映にはネームノードの再起動が必要ですが、いまどきのネームノードはどこもQJMでHA化しているでしょうから、クラスタダウンの心配はありませんね” ないですね

[wyukawa]

dfs.namenode.replication.work.multiplier.per.iterationなんてあるのか。ただNameNodeの再起動が必要なのか

[daisukebe]

Hadoopアドベントカレンダー (裏) 5日目書きました