MapReduceアプリケーションにより各タスクで処理した入出力レコード数を、カウンタ情報として出力する場合trueを指定します。指定を省略した場合は、falseを指定したものとみなします。
設定内容 | 設定名 | 設定値 | 備考 |
---|---|---|---|
処理レコード件数ログ取得指定 | extjoiner.map.input.getRecordCount extjoiner.map.output.getRecordCount extjoiner.reduce.input.getRecordCount extjoiner.reduce.output.getRecordCount | true false | 省略可 デフォルトはfalseです |
注意
カウンタ情報は起動タスクの数に応じて複数出力されます。カウンタ情報の出力数には上限が設定されているため、起動タスク数が多い場合カウンタ出力数が上限に達し、エラーが発生することがあります。起動タスク数が多くなる場合、あらかじめカウンタ情報の出力上限(Apache Hadoopのmapreduce.job.counters.limitプロパティで指定)を拡張してください。