2014-02-20 2 views
0

나는 이것에 관해서 Stackoverflow에 많은 페이지를 훑어 보았다. 그러나 아직도 나는 혼란 스럽다. 중복 질문이나 유사한 질문이라도 답변 해주세요.분산 캐시를 통해 돼지에 파일 접근하기

돼지마다 한 파일을 비교하고 파일 중 하나가 분산 캐시에 있으면 모든 매퍼에 로컬로 저장되기를 원합니다. 돼지에 그것을 구현하는 방법.

+0

"비교"란 무엇을 의미 할 수 있습니까? –

+0

LOAD UDF를 사용하십시오. (아마도 이것을 작성해야 할 것입니다.) –

+0

[분산 캐시를 통한 Mapper의 파일 접근] (http://stackoverflow.com/questions/21882583/accesing-file-in-mapper -through-distributed-cache) – vefthym

답변

1

위치 어디에 각 매퍼 실행에 다음

set mapred.cache.files /new_file_location/new_file.txt#new_file.txt 

배를 사용합니다.