ディスクレス環境を用いた演習用Hadoop クラスタの構築と評価

摘要

In this paper,we propose a diskless Hadoop cluster for hands-on training. Then we assume to use PC classroom many universities or colleges have. We show that the performance differs depending on CPU or I/O bound processing and we established a diskless Hadoop cluster capable of learning Hadoop features by allotting a single HDD for about 10 slave servers in this case.%本稿では多くの大学等が持つ既存の演習室環境の利用を想定したディスクレス環境における演習用Hadoop クラスタを構築した．結果として，今回用いた構成ではI／O バウンドやCPU バウンドといった処理によって計算性能は異なるものの，20台程度の台数規模であれば，ファイルサーバの1台のディスクに割り当てるスレーブサーバの台数を約10台とすることで，一般的なディスクあり環境のHadoop クラスタが持つ台数効果といった特長を体感できる演習用Hadoop クラスタを実現できることがわかった．