spark writing to postgresql

Question

MongoDB에서 Apache Spark를 사용하여 Postgres로 200 만 레코드를 전송하려고합니다 (두 데이터베이스의 공식 드라이버 사용). 몇 분이 지나면 프로그램이 멈추고 postgres 로그에 다음 오류가 표시됩니다. 2017-12-03T22:18:16+00:00 app[postgres.15348]: [AQUA] [7-1] sql_error_code = 26000 ERROR: prepared statement "S_4" does not exist . 이 경험이있는 사람은 누구입니까?

Answer 1

완전히 자동화 된 MongoDB to PostgreSQL 마이그레이션 솔루션을 제공하는 https://www.torodb.com을 살펴보십시오. 제품은 오픈 소스입니다.