beta版から設定項目も増えてるので注意が必要です。
以下、主な出来事
- Job関連のAPIは変わってない
- YARN Application APIが追加
- Job Kill だけじゃなくて Application Kill でもいけるよ！
- それぞれのManager等が持っているREST APIにproxy接続
- HiveQLの実行(HiveServer1 or 2対応)
- 戻り値を返さない場合は、executeを使用
- 戻り値を返す場合は、executeQueryを使用
- 戻り値はストリームで返される
- 実行時間がアレだとアレなのでタイムアウトには気をつけてね
- Job の キュー登録にHiveが追加
- キューでの実行なので出力先はテーブル、HDFSにする必要あり
たぶん、次はPigが入るかなと、0.1系もHiveなコードは入ってるんだけどpushをしてないのでそのうちにあれするかなと。
Huahin Framework
0 件のコメント:
コメントを投稿