情報処理学会 第79回全国大会講演要旨

Apache Hadoopは分散処理プラットフォームとして広く普及しており，処理速度の高速化が急務である．Hadoopでは，分散ファイルシステムであるHDFSにより複数のノードでデータの保存，管理を行っている．HDFSでは，ファイルの分散配置先が処理速度に大きく影響することが先行研究で明らかにされている．本研究では，HDFSにおける複製データの配置法の改良により，HDFSの処理性能の改善を図る．データのアクセス頻度が既知であるという仮定の下で，アクセス頻度の高いデータを多くのラックに配置する手法を提案する．モンテカルロシミュレーションにより分散処理性能が改善されることを示す．