0
나는 이것에 관해서 Stackoverflow에 많은 페이지를 훑어 보았다. 그러나 아직도 나는 혼란 스럽다. 중복 질문이나 유사한 질문이라도 답변 해주세요.분산 캐시를 통해 돼지에 파일 접근하기
돼지마다 한 파일을 비교하고 파일 중 하나가 분산 캐시에 있으면 모든 매퍼에 로컬로 저장되기를 원합니다. 돼지에 그것을 구현하는 방법.
나는 이것에 관해서 Stackoverflow에 많은 페이지를 훑어 보았다. 그러나 아직도 나는 혼란 스럽다. 중복 질문이나 유사한 질문이라도 답변 해주세요.분산 캐시를 통해 돼지에 파일 접근하기
돼지마다 한 파일을 비교하고 파일 중 하나가 분산 캐시에 있으면 모든 매퍼에 로컬로 저장되기를 원합니다. 돼지에 그것을 구현하는 방법.
위치 어디에 각 매퍼 실행에 다음
set mapred.cache.files /new_file_location/new_file.txt#new_file.txt
배를 사용합니다.
"비교"란 무엇을 의미 할 수 있습니까? –
LOAD UDF를 사용하십시오. (아마도 이것을 작성해야 할 것입니다.) –
[분산 캐시를 통한 Mapper의 파일 접근] (http://stackoverflow.com/questions/21882583/accesing-file-in-mapper -through-distributed-cache) – vefthym