2009年6月27日土曜日

PC教室を利用した94台でHadoopを実行(その2)

先週の土曜日に引き続き、2回目のチャレンジです。この一週間、前回発生した問題の解決と、予備調査に時間を費やし、本日はなんとか95台でのHadoopの起動およびジョブの実行が行えるところまで確認しました。上の図では「LiveNode」が96台になってますが、この後、1台減らして95台にしたところで、各種サンプルプログラムなどで、MapReduce型のアプリケーションが実際に動作することを確かめました。残念ながら、PC1台毎のローカルディスクの容量が少なく、大規模データでのジョブ実行ができないのが残念でしたが、とりあえず使えるようにするための手間については、おおよそ感触を掴むことができました。


0 件のコメント:

コメントを投稿