Reduceタスクとして実行する外部プログラムの指定を省略した場合、Shuffle&sortは起動せず、Map出力ファイルは未ソートのまま出力されます。Reduceタスクとして実行する外部プログラムの指定を省略し、かつShuffle&sortを起動させたい場合、trueを設定します。
設定内容 | 設定名 | 設定値 | 備考 |
|---|---|---|---|
Map出力データファイル自動ソートの指定 | extjoiner.input.sort | true false | 省略可 デフォルトはfalseです |
注意
Shuffle&sortはReduceタスクを用いて実行されます。mapred.reduce.tasksプロパティに0が設定されている場合、Shuffle&sortは起動しません。
