2017-11-02 6 views
-1

스파크 버전 2.0.2.6 스칼라 버전 2.11.11 왜 제출하려고 작업으로이 프로그램을 실행할 수 없습니다입니다 발화시키기. IntelliJ를 사용하여이 프로그램을 실행하면 작동합니다. 하지만 JAR을 생성하고 실행하면 오류가 발생합니다.스파크 스칼라 datastax의 CSV로드 파일 및 인쇄 스키마

명령 :

> dse spark-submit --class "csvtospark" /Users/del/target/scala-2.11/csvtospark_2.11-1.0.jar 

나는 다음과 같은 오류가 점점 오전 : //127.0.0.1 난 그냥 경로/사용자/데스크톱을 제공하고 비록 일부 : 왜 dsefs를 추가한다

ERROR 2017-11-02 11:46:10,245 org.apache.spark.deploy.DseSparkSubmitBootstrapper: Failed to start or submit Spark application 
org.apache.spark.sql.AnalysisException: Path does not exist: dsefs://127.0.0.1/Users/Desktop/csv/example.csv; 

/csv/example.csv 질문.

나는 --mater 옵션도 제공하려고했습니다. 어떻게 내가 같은 오류가 발생합니다. 로컬 머신에서 DataStax Spark를 실행 중입니다. 클러스터 없음.
내가 잘못한 부분을 수정하십시오.

답변

0

알 수 있습니다. 신경 쓰지 마. 미안합니다.

입력은 file : /// 파일 이름이어야합니다.