스칼라 스파크/샤크 : Hortonworks의 기존 하이브 테이블에 액세스하는 방법?

Question

주제에 대한 접근 방식에 대한 설명을 찾으려고합니다. 도움을 받으십시오. Hortonworks에서 Hadoop 2.2.0을 설치하여 쿼리해야하는 기존 하이브 테이블을 설치했습니다. Hive SQL은 단일 노드와 클러스터에서도 극도로 부당하게 느립니다. 상어가 더 빨리 일하기를 바랍니다.

스파크/샤크 문서에서 나는 기존의 하이브 테이블로 상어를 만드는 법을 알 수 없습니다. 어떤 아이디어가 이것을 달성하는 방법? 감사!

Answer 1

상어 고유의 하이브 디렉토리 내에 메타 스토어를 구성해야합니다. 자세한 내용은 here과 비슷한 질문으로 제공됩니다.

요약하면 hive-default.xml을 hive-site.xml에 복사해야합니다. 그런 다음 메타 스토어 속성이 설정되어 있는지 확인하십시오. configuring hive metastore

: 여기

는

<property> 
    <name>javax.jdo.option.ConnectionURL</name> 
    <value>jdbc:mysql://myhost/metastore</value> 
    <description>the URL of the MySQL database</description> 
</property> 

<property> 
    <name>javax.jdo.option.ConnectionDriverName</name> 
    <value>com.mysql.jdbc.Driver</value> 
</property> 

<property> 
    <name>javax.jdo.option.ConnectionUserName</name> 
    <value>hive</value> 
</property> 

<property> 
    <name>javax.jdo.option.ConnectionPassword</name> 
    <value>mypassword</value> 
</property> 

당신이 얻을 수있는 자세한 내용은 여기 하이브-site.xml 파일의 기본 정보입니다