Wie konfiguriere ich die Anzahl der Kombinierer in MapReduce?
Antworten:
0 für die Antwort № 1Sie können die Anzahl der Kombinierer in Hadoop nicht konfigurieren. Das System bestimmt automatisch, ob sie ausgeführt werden sollen oder nicht. Es gibt keine Garantie, dass sie überhaupt laufen werden.
Sie können die Logik konfigurieren, wenn Sie einen Combiner ausführen indem man es einstellt min.num.spills.for.combine.
Je nach Version von hadoop min.num.spills.for.combine ist veraltet und wurde ersetzt durch mapreduce.map.combine.minspills.