2016-06-13 4 views
0

Apache Spark에서 구현하는 SQL의 설명서가 어디에 있는지 알고 있습니까? 모든 운영자, 라이브러리 함수, 키워드 등의 광범위한 목록을 의미합니다. Microsoft 및 T-SQL과 유사합니다. 나는 지금 시행 착오를하고있다.Apache Spark SQL Documentation

+0

에 표시되어야합니다 https://spark.apache.org/docs/latest/api/python/pyspark.sql.html 이 함수들은 Java와 Scala에서 구현 된 함수와 매우 비슷합니다. –

+0

저는 scala 나 java 또는 python을 원하지 않습니다. 나는 SQL을 원했다. SQL식이있을 때. –

+0

가장 좋은 방법은 하이브 문서를 살펴 보는 것입니다. Spark의 SQL은 Hive에서 왔습니다. –

답변

1

@David Griffin에 의하면, Spark SQL은 하이브에서 유래했다.

그리고 Spark's website

, 그것은 말한다 :

스파크 SQL 기존 하이브 데이터, 쿼리 및 UDF를 당신에게 전체 호환성을 제공 하이브 프론트 엔드 및 메타 스토어를 다시 사용합니다. 단순히 하이브 옆에 설치하십시오. 당신이 여기에 pyspark 작업 링크의 경우

그래서 당신은 Hive Documentation

+0

그것은 tbh이지만 완벽하지는 않습니다. 스파크는 각 버전의 스파크에 대해 하이브의 어떤 버전을 정렬시킵니다. –