2013-01-30から1日間の記事一覧

CDH4でoozie使う:mahout

ちょっと苦戦・・・mahoutが見てるライブラリをクラスパスに通す必要がある。 まず、[workflow]/lib に入れるも、hueから実行すると、わざわざ最初に lib 配下を掃除してから「jar name」で指定した jar だけ入れて実行するという意味不明なクソ仕様らしい・…

CDH4でoozie使う:共有ライブラリ

インストールしただけでは共有ライブラリはインストールされない。 /usr/lib/oozie/oozie-sharelib.tar.gz を解凍し、自分で適当な場所に置き、oozieの設定で oozie.service.WorkflowAppService.system.libpath を入れなければならない・・・

CDH4 oozieのバグ?

CDH4.1.2oozieでいくつかworkflowを作ってから「アプリケーションのセットアップ」をすると、自作workflowの「所有者」がなぜか「sample」になってしまい、workflowを保存する時にエラーがでるようになった・・・workflowをコピーして作りなおしたら出なくな…

CDH4でoozie使う:自作mapred jar

自作mapred jar をHueから実行する方法。 java action を使うわけだが、Hueだと「jar name」という見慣れない項目がある。 ここに動かしたいクラスの入ったjarを指定しておけば、それを [workflow]/lib にコピーしてくれるようなのだが、ここに自作jarを指定…