0
spark에서 쿼리를 실행하고 싶습니다. 내 .SQL 파일spark-submit을 사용하여 쿼리 나 .sql 파일을 제출하는 방법
에 모두가 현재 내가 실행하고있는 방법은 다음과 같습니다
spark-sql --master yarn /home/myuser/query.sql
그러나 즉시 쿼리가 스파크-SQL> 내에서 제공되는 실행을 완료로 ... . 쉘 프롬프트 그리고 나서 작업 상태가 성공적으로 완료로 바뀌지 않습니다. 실행 중입니다. spark-sql> 쉘이 활성화되어 있으므로 명시 적으로 CTRL + C을 쉘에서 빠져 나오게해야합니다.
그래서 기본적으로 나는 실제로는 쉘 스크립트 파일을 사용하고 스파크 특정 쉘에 들어 가지 않고도 실제로 쿼리 인 스파크 작업을 제출하려고합니다.
클래스 파일에 쿼리를 작성한 다음 jar 파일을 작성한 다음 제출하고 싶지 않습니다.