Big Data

Hadoop에서 Maximum Map, Reduce Task 옵션 설정 하기

kogun82 2013. 2. 8. 10:06

mapred.map.task.maximum

하나의 태스크 트레이커에서 동시에 수행 할 수 있는 맵 태스크의 개수다.

이 값은 CPU 개수만큼 설정 하거나 적게 설정 해야 한다. (기본값 : 2)

<property>
	<name>mapred.tasktracker.map.tasks.maximum</name>
	<value>8</value>
</property>


mapred.reduce.tasks.maxiumum
하나의 태스크 트래커에서 동시에 수행 할 수 있는 리듀스 태스크의 개수다. 

이 값은 CPU 개수와 I/O 성능에 따라 조절해야 한다.

<property>
	<name>mapred.tasktracker.reduce.tasks.maximum</name>
	<value>8</value>
</property>