広域ネットワークにおける計算機資源とネットワーク資源を考慮したHadoopタスク割り当て方式

摘要

本論文では，計算資源とネットワーク資源に応じたHadoopタスク割当方式の性能を，Hadoopのシステムに実装し評価する．タスク割り当て方式は，適切な分割比を用いて各ジョブをタスクへ分割し，サーバ処理性能とネットワーク資源に基づいて，スレーブサーバにタスクを割り当てる．異種混合なHadoopクラスタの場合は，各スレーブサーバの処理能力に基いて，低性能のスレーブサーバよりも高性能なスレーブサーバへより多くのタスクを与えるようなタスク割り当てを行う．つまり，高性能のスレーブサーバが低性能のものよりも多くの処理を実行する環境を作り出す．テストベッドでの実験結果を用いて，タスク割り当て方式が有効であることを示す．