0
Hadoop 분산 파일 시스템에서 입력 파일을 읽는 DSE Graph Loader를 사용합니다.그래프 로더를 배포 할 수 있습니까? 프로덕션 모드에서 클러스터 컴퓨터가 있습니다
분산 된 방법으로 여러 대의 컴퓨터에서 dse 그래프 클러스터에 데이터를 삽입하고 싶습니다. 어떻게 할 수 있습니까?
A
답변
0
DSE 그래프 로더는 CSV, 텍스트, JSON, Gryo, HDFS 및 AWS S3 소스를 비롯한 여러 소스에서 데이터를로드 할 수있는 명령 줄 유틸리티입니다. Hadoop/Spark 작업으로 실행할 수 없습니다.
injest를 여러 스레드로 병렬 처리하려면 load_threads (기본값 1) 매개 변수를 구성합니다. 문서는 여기에서 찾을 수 있습니다 : Configuring DSE Graph Loader
10 대의 컴퓨터에서 실행되는 작업 관리 그래프 로더를 시작할 수 있습니까? (병렬로) – user4808924
아니요, Graph Loader는 명령 줄 유틸리티입니다. 스레드가있는 단일 프로세스가 현재 상태입니다. 실행할 수있는 하둡/불꽃 작업이 아닙니다. – Bradski