sqoop

0열

1답변

sqouop 목록 데이터베이스 명령을 실행하는 동안 cloudera 링크 오류가 발생했습니다.

cloudera에서 아래 명령을 실행하고 링크 오류 오류가 발생했습니다. 나는 mysqld 서비스도 재시작하려고 시도했다. 친절하게도 도움이되는 친구도 있습니다. 코드 및 오류 : $ Sqoop을리스트 데이터베이스 [~ 클라우 데라의 @ 빠른 시작] --connect "JDBC : mysql을 : //quickstart.cloudera : 3306"--us

1열

1답변

추가를 사용하여 sqoop 가져 오기 문에서 마지막으로 수정 함

sqoop을 사용하여 Oracle 데이터베이스에서 데이터를 HDFS으로 추출합니다. 사람들은 정기적으로 SQL 테이블에 새 행을 업데이트하고 추가했습니다. 나는 --append 및 --last modified 옵션으로 점진적인 수입 sqoop을 알고 있습니다. 제 질문은 동일한 import 문에서 두 옵션을 모두 사용할 수 있는지 여부입니다. 예를 들어 ,

0열

1답변

Squoop with wallet

우리는 Cloudera CDH 5.8.5에서 Sqoop v1.4.6을 사용하여 지갑 사용과 관련된 몇 가지 문제에 직면 해 있습니다. 우리의 시나리오 : 사용자 폴더 : /홈/참고 MyUser 지갑 폴더 : /홈/참고 MyUser/지갑 (cwallet.sso, cwallet.sso.lck, ewallet.p12, e 월렛. 지갑이 잘 나는 sqlplus /

0열

1답변

Sqoop의 직접 커넥터는 무엇입니까?

알다시피 Sqoop 작업은 특정 데이터베이스에 대한 JDBC 드라이버와 함께 커넥터를 사용하여 데이터베이스에 연결됩니다. 그러나 Sqoop 문서에서 언급 한대로 --direct 옵션 성능이 향상되었습니다. '직접 'mode import.How는 JDBC 드라이버를 사용하는 일반 커넥터와 다릅니다. 설명서를 읽었지만 명확한 이해를 얻지 못했습니다. 또한 Te

0열

1답변

crontab을

내가 만든에게 완벽하게 작동하고 Sqoop을 작업을 사용하여 Sqoop을 작업을 예약하지만 난 노력하고 때 다음과 같이이 working.I이를 예약 한되지 crontab을 50 12 * * * sqoop job --exec myjob_direct_append >> /home/training/my_Local/direct_append1.log 를 사용하여 예약

0열

1답변

2TB 테이블을 RDS 인스턴스에서 S3 또는 하이브로 내보내는 방법?

RDS 인스턴스 (MySQL 5.7)에서 S3 (csv 파일) 또는 하이브로 전체 테이블을 마이그레이션하려고합니다. 표에는 총 2TB의 데이터가 있습니다. 그리고 zip 파일을 저장하는 BLOB 컬럼 (보통 100KB이지만 5MB까지 도달 할 수 있습니다)이 있습니다. Spark, Sqoop 및 AWS DMS로 몇 가지 테스트를했지만 모두 문제가있었습니다.

0열

2답변

sqoop import sql 서버가 dbo 테이블 만 찾았습니다.

SQOOP를 사용하여 SQL Server에서 데이터를 가져 오려고했습니다. 하지만 난 Sqoop을 목록-이야기는 DBO와 테이블을 발견 이상한 상황을 발견했다. ****, 그 이외의, Sqoop을가 를 나열 할 수는 없지만 SQL 서버에, 나는 다른 테이블 List of Tables from the SQOOP command를 나열 할 수 있습니다 List

0열

1답변

sqoop 가져 오기가 올바른 SQL 쿼리에 대해 잘못된 결과를 나타냅니다.

MySQL에서 아래와 같은 쿼리를 사용합니다. 나는 원하는 결과를 얻고있다. select TABLE_NAME,count(column_name) as no_of_columns from information_schema.columns where TABLE_SCHEMA = 'testing' and TABLE_NAME NOT REGEXP 'temp|bkup|Rem

0열

2답변

감속기 수 (sqoop)

sqoop의 기본 매퍼와 감속기는 몇 개입니까? (4-mappers, 0-reducers). --where 또는 --query 조건을 sqoop import으로 사용하면 얼마나 많은 감속기가 있습니까? 로컬 클러스터 그것이 Sqoop을 사용 설명서에 따라 같이 --where or --query condition

1열

1답변

oozie와 함께 실패 db 드라이버 클래스를로드 할 수 없습니다 : oracle.jdbc.OracleDriver

oozie로 sqoop export 명령 (쉘 스크립트에서)을 실행하는 중에 오류가 발생합니다. CLI (에지 노드)에서 Sqoop을 수출 잘 작동 "java.lang.RuntimeException가이 : oracle.jdbc.OracleDriver : DB 드라이버 클래스를로드 할 수 없습니다." 아래 위치에 ojdbc6.jar를 추가했습니다. /opt/