mapreduce 작업의 병렬 실행

질문이 있습니다. JobCntrol과 동시에 두 개 이상의 작업을 수행 할 수 있습니까? 병렬로 실행할 수있는 2 개의 작업이 있고 다른 작업은이 두 작업과의 종속성이 있습니까? JobControl으로 어떻게 할 수 있습니까? 내가 그것을 사용할 때 , 그것은 오류를 제공합니다 java.lang.IllegalStateException : 상태에서 작업이 병렬로 작업을 실행하려는 JobControl에 대한 필요가 없습니다 RUNNING 대신mapreduce 작업의 병렬 실행

출처

2013-10-10 Anse danesh

을 정의합니다. JobClient.runJob() API를 사용하여 작업을 제출하십시오. JobControl은 작업의 간단한 DAG가있을 때 사용됩니다.

출처

2013-10-10 10:53:00

답장을 보내 주셔서 감사합니다. 또 다른 질문은 .. 무엇이 연쇄 작업인지 알고 싶습니까? 나는 chainMapper와 chainReducer를 의미합니다. –

@ Anse danesh : Inorder 연쇄 작업에 대해 알고 싶으면, 나는 그것에 블로그를 썼다 : http://www.unmeshasreeveni.blogspot.in/2014/04/chaining-jobs-in-hadoop-mapreduce.html –

답변

관련 문제