대용량 csv 파일에서 중복 레코드를 제거하고 Anypoint Studio를 사용하여 Mulesoft의 데이터베이스에 저장하는 방법

Question

거대한 CSV 파일에 10000 개의 레코드가 들어 있다고 가정하고 ID, 이름 및 나이를 말하는 3 개의 필드가 있으며 일부는 중복 기록. 여기에 ID 필드를 기반으로 중복 레코드를 제거하고 모든 고유 레코드를 데이터베이스에 저장하려고합니다. Anypoint Studio를 사용하여 Mulesoft에서 어떻게 구현해야합니까?

Answer 1

데이터 파일을 사용하여 고유 레코드를 식별 할 수 있습니다. 그런 다음 intoDB에 삽입하십시오.

흐름은 File Connector(Reading File) >> Dataweave(identify unique records) >> DB connector(DB insert)입니다.

자세한 내용은이 부분을 참조하십시오. 이 도움이

https://docs.mulesoft.com/mule-user-guide/v/3.8/dataweave-operators#distinct-by

희망.