2

AWS Glue Data Catalog를 Spark SQL의 Metastore로 사용하고 싶습니다. AWS 콘솔 as instructed here을 통해 EMR 클러스터를 시작했습니다.EMR 클러스터의 Zeppelin이 AWS 글루의 카탈로그 테이블을 나열하지 않음

스파크 셸에서 모든 접착제 카탈로그 테이블을 볼 수 있지만 Zeppelin에서는 볼 수 없습니다.

Zeppelin 속성 설정에서 속성을 설정해야합니까 ??

미리 감사드립니다.

+0

- 우리는 제플린을 통해 스파크 쉘을 통해 AWS 접착제 테이블에 액세스하지만 수 없었다. Zeppelin의 문제 일 수 있습니다. 곧 해결 될 수 있기를 바랍니다. –

답변

1

EMR 5.9.0이 방금 출시되었습니다 (단 9 시간 만에 출시되었습니다!).

관련 문서 : 우리는 단지뿐만 아니라이 문제를 공격

http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-release-components.html

http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-glue.html

+1

감사합니다. 그것의 일 벌금. – Jagadeesh

+0

@ Jagadeesh sparrk SQL의 메타 스토어로 데이터 카탈로그를 사용하는 몇 가지 예제 코드가 있습니까? pyspark에서 데이터 프레임을로드하기 위해이 작업을 수행하려고합니다. – Drew