2012年12月27日木曜日

Huahin Manager 0.2.0 released

CDH4 と Apache 2.0.2-alpha対応でございます。
beta版から設定項目も増えてるので注意が必要です。
以下、主な出来事

  • Job関連のAPIは変わってない
  • YARN Application APIが追加
    • Job Kill だけじゃなくて Application Kill でもいけるよ!
  • それぞれのManager等が持っているREST APIにproxy接続
  • HiveQLの実行(HiveServer1 or 2対応)
    • 戻り値を返さない場合は、executeを使用
    • 戻り値を返す場合は、executeQueryを使用
      • 戻り値はストリームで返される
      • 実行時間がアレだとアレなのでタイムアウトには気をつけてね
  • Job の キュー登録にHiveが追加
    • キューでの実行なので出力先はテーブル、HDFSにする必要あり


たぶん、次はPigが入るかなと、0.1系もHiveなコードは入ってるんだけどpushをしてないのでそのうちにあれするかなと。

Huahin Framework

0 件のコメント:

コメントを投稿