[TOC] # 簡介 combiner要做的就是在每個map傳輸的時候,就把數據先聚合下,然后再傳輸 不然數據會一條一條傳輸,會很占用IO性能 **但是要注意,用combiner,不用影響你的業務邏輯** 注意他的調用次數不一定,map階段小文件溢出的時候可能會調用多次,reduce階段收到數據的時候可能也會調用 比如對數據求平均值,這邊就對業務有影響了  # 寫法 combiner組件的父類就是Reducer 然后寫好了,在任務驅動那邊寫 ~~~ //設置combainer job.setCombinerClass(WorldCountCombiner.class); ~~~ 如果combiner寫的和reducer一樣,這邊也可以寫reducer # combiner和reducer的區別 * combiner是在每一個maptask所在的節點運行,意義在于對每一個maptask的輸出進行局部匯總,減少網絡傳輸量 * reducer是接收全局所有Mapper的輸出結果