아마존 탄성 맵어du 서비스를 사용할 때 hadoop에 제 3 자 라이브러리를 포함하는 방법

Question

weka라는 타사 라이브러리를 사용하여 데이터 마이닝 작업을 수행해야합니다. 그러나 아마존 탄성지도 서비스에 필요한 jar 파일을 포함시키는 방법을 모르겠습니다.

누구나이 사건을 다룬 경험이 있습니까?

Answer 1

Hadoop 작업의 타사 라이브러리를 포함하는 기사 (1, 2)를 확인하십시오.

Answer 2

한 가지 간단한 해결책은 매퍼와 축소 기와 함께 jar 파일에 의존성을 넣는 것입니다.

Maven을 사용하는 건물의 경우 모든 종속성이있는 단일 jar를 패키지화하기 위해 Maven Assembly Plugin 플러그인을 사용하는 것이 좋습니다.