0
언제든지 새 파일을 s3 폴더에 표시 할 수있는 사용 사례가 있습니다. RedshiftCopyActivity를 통해 Redshift에서 가져오고 싶습니다. 데이터를 s3에서 Redshift로 이동할 수있는 파이프 라인 설정이 있지만 특별히 명명 된 파일이 있습니다. 그러나이 경우 파일 이름은 임의적 일 수 있습니다. 나는 우리가 S3 폴더 S3가AWS Datapipeline - s3 버킷의 무작위로 명명 된 파일을 Redshift로 가져 오기
- 말 같은 것을 생각하고 : // toProcess
- 매 시간마다 데이터 파이프 라인 작업 검사 S3에 새 파일이있는 경우 :
- //가 toProcess 경우 다음 처리 및 삭제됩니다 (따라서 다음 한 시간에 처리하지 않음)
어떻게 처리해야할까요?