2013-02-02から1日間の記事一覧

mahout で MAHOUT_HEAPSIZE を設定しても hadoop 上で実行する場合には意味ない

mapreduce にジョブが入るような処理だけでなく、clusterdump とか、hadoop 環境で実行すると runjar で実行されるコマンドも。 hadoop のスクリプトで JAVA_HEAP_MAXが上書かれる。 (MAHOUT_HEAPSIZE はhadoopを使わないローカル実行用のようだ。)mahout …