s3distcp를 사용하여 기간 선택 방법?

Question

아래에 s3의 로그와 이름에 타임 스탬프가있는 로그가 있습니다. 하이브를 사용할 수 있도록 s3distcp를 사용하여 EMR로 데이터를 가져오고 싶습니다.

https://s3.amazonaws.com/mybucket/test/201305031003_0_ubuntu.gz 
https://s3.amazonaws.com/mybucket/test/201305031004_0_ubuntu.gz 
https://s3.amazonaws.com/mybucket/test/201305031005_0_ubuntu.gz 
https://s3.amazonaws.com/mybucket/test/201305031006_0_ubuntu.gz 

날짜 범위를 선택하는 데 s3distcp를 어떻게 사용합니까? 예 : 201303031003에서 201305031003까지? 2 개월 차이입니다

Answer 1

--srcPattern s3distcp option을 사용하면 복사 할 달만 선택하는 정규식을 지정할 수 있습니다.