ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは。データプラットフォーム本部の鯵坂(@ajis_ka)です。 OSSデベロッパーとしてヤフーでの業務でApache Hadoop(以下、Hadoop)コミュニティで開発を続ける傍ら、昨年から趣味として競技プログラミングを始め、オンラインやオンサイトのコンテストに参加しています。 Hadoop Committerとしての仕事 Hadoopは、オープンソースの並列分散処理基盤で、分散ストレージであるHDFS(Hadoop Distributed FileSystem)と、リソース管理を担当するYARN(Yet Another Resource Negotiator)の2つのコンポーネントで主に構成されています。Oath, M