2
Hadoop 프레임 워크가 mapper 출력 (매퍼 노드에 로컬로 저장 됨)을 감속기 작업 (동일한 노드에서 실행되지 않음)에 복사하는 데 사용되는 전송 프로토콜과 관련하여 의심의 여지가 있습니다. - Shuffle 단계 에 HTTP를 사용하는 블로그를 읽습니다. 또한 mapreduce 작업에서 사용되는 HDFS 데이터 전송은 TCP/IP 소켓을 사용하여 직접 수행됩니다. - Hadoop의 RPC에 대한 완벽한 안내서를 읽어보십시오.Mappers에서 Reducers로 데이터를 복사하기 위해 Hadoop에서 사용되는 프로토콜은 무엇입니까?
모든 포인터/참조는 도움이 될 것입니다.
