apache-sqoop

0열

3답변

Sqoop을 평가 명령을 MySQL의 속성을 전달하기 : sqoop eval --connect 'jdbc:mysql://<connection url>' --driver com.mysql.jdbc.Driver --query "select max(rdate) from test.sqoop_test" 나에게 출력을 제공 : 경고 : /usr/hdp/2.3.2.

1열

1답변

SQOOP가 RDBMS에서 Hadoop으로 얼마나 빨리 전송할 수 있습니까?

SQOOP이 얼마나 빨리 한 번에 20 억 레코드를 전송할 수 있는지 말해 줄 수 있습니까? 그리고 sqoop이 병렬로 실행되기 때문에 빠릅니다. 일부 입력은 Hadoop의 일부 파일 출력으로도 생성됩니다. 그러나 나는 한 번에 20 억 레코드의 속도 MapReduce 전송량의 세부 사항을 알고 싶다.

3열

2답변

hdfs 디렉터리 덮어 쓰기 Sqoop 가져 오기

Sqoop을 가져올 때마다 수동으로 덮어 쓰지 않고 HDFS 디렉터리를 자동으로 덮어 쓸 수 있습니까? 는이 데이터를 쓰기 전에 명령에 제공 <HDFS-target-dir> 삭제됩니다

2열

1답변

테이블을 하나씩 가져 오지 않고 어떻게이 작업을 수행 할 수 있습니까?

데이터베이스에 약 400 개의 테이블이 있습니다. Table398, Table 223 및 Table399라는 테이블을 제외한 모든 테이블을 데이터베이스에서 가져 오려고합니다.

0열

2답변

실행 Sqoop을 파이썬 3 사용하여 하위 프로세스

내가 파이썬 subprocess.call(["sqoop","import","--connect", "jdbc:oracle:thin:@hostname:1521/ARSMTREP","--username", "username" ,"--password", "password","--table","ARADMIN."+line,"--as-textfile","--target-

0열

2답변

Sqoop을 MySQL의 가져 오기

하이브에 속하지 않습니다 Loading data to table db_socmed_gp.tb_gp_account chgrp: changing ownership of 'hdfs://lobah:8021/user/hive/warehouse/db_socmed_gp.db/tb_gp_account/part-m-00000': User does not belong to

0열

1답변

Apache Sqoop을 사용하여 MySQL에서 MySQL로 데이터 가져 오기

Apache Sqoop이 MySQL에서 MySQL로 데이터를 가져 오는 옵션을 제공하는지 알고 싶습니다.

1열

1답변

sqoop에서 다음 명령을 사용하는 이유는 무엇입니까?

나는 다음 Sqoop을 가져 오기 명령을 우리가 위의 명령에 M를 사용하는 이유 sqoop import \ --connect jdbc:mysql://localhost/userdb \ --username user_name \ --table user_table \ --m 1 \ --target-dir /sample 에 의심의 여지가? 명확히하십시오

1열

1답변

Sqoop import failing

hadoop 클러스터에서 병렬 sqoop 작업을 실행하려고하지만 병렬 실행 중에 sqoop 작업이 다음 오류로 인해 실패하는 것을 볼 수 있습니다. 16/11/11 09:24:59 ERROR manager.SqlManager: Error executing statement: java.sql.SQLRecoverableException: IO Error: Co

0열

1답변

Sqoop 함수 '--map-column-hive'가 무시됩니다.

하이브로 파일을 마루로 가져 오려고하는데 --map-column-hive column_name = timestamp가 무시됩니다. 'column_name'열은 원래 sql의 datetime 유형이고 parquet에서 bigint로 변환됩니다. sqoop을 통해 타임 스탬프 형식으로 변환하려고하지만 작동하지 않습니다. 하이브에서 테이블을 볼 때 여전히 원래