jobtracker が tasktracker に仕事を配分する際、全体に均等に割り振るのではなく、偏りが出てしまう場合がある。 このため、各 tasktracker にCPUコア数以上のスロットを設定している場合、あるノードはコア数以上の task を処理している一方、他のノードで…

mapred.capacity-scheduler.queue.default.maximum-capacity を-1にしているのに、default queue が全スロットを使いきってくれない。 実は、 mapred.capacity-scheduler.default-user-limit-factor という設定もあり、これがデフォルト1.0なので、1ユーザの…