HadoopにかわるHH2の開発を進めてきましたがOSSとしてリリースすることにしました。
HH2はHadoopのJobTracker、TaskTrackerを置き換えるもので効率よくJobを実行することができます。まず、JobTrackerにかわるHumanTrackerがTaskTrackerにかわるHumanTaskerにタスクの割り当てを行います。
タスクの割り当てに使うのは特に難しいことはありません。メールによる通知となります。
この時、通常のHadoop同様にHumanTaskerがなんらのか障害により通達エラーが発生する場合があります。
この場合もHadoop同様に別Humanにタスクを割り当てます。ただし注意しなければいけないのは別Humanにタスクを割り当てる場合は、ボーナスの支給が必須となります。
最後に、やはりHumanTrackerはHadoopのJobTracker同様にSPOFになりえるということです。HumanTrackerの障害は様々ですがいずれこの問題は解消される予定です。
ここまで見てきたとおり通常のHadoopよりも効率的にJobが実行できることがおわかりいただけたでしょう。なお、HH2のOSSリリース予定は2045年5月を目標に着々と準備を進めているところです。
リリースが完了するまでしばらくお待ちいただけますと幸いです。
HH2開発チーム一同
0 件のコメント:
コメントを投稿