hcatalog

0열

1답변

POM 의존성 사용하여 행과 필드 구분 기호를 얻는 방법 : I는 열, 파티션 열, 입력 파일 포맷을 얻을 수 있어요 <dependency> <groupId>org.apache.hive.hcatalog</groupId> <artifactId>hive-webhcat-java-client</artifactId> <version>

0열

1답변

하이브 테이블에 Hadoop 작업 결과 추가

대형 텍스트 파일을 처리하는 맵 전용 작업이 있습니다. 각 라인은 분석되고 범주화됩니다. MultipleOutputs는 각 카테고리를 개별 파일로 출력하는 데 사용됩니다. 결국 모든 데이터가 각 카테고리 전용 하이브 테이블에 추가됩니다. 현재의 워크 플로우는 일을 처리하지만 조금 번거 롭습니다. 몇 가지 카테고리를 추가 할 예정이며 프로세스를 합리화 할 수

0열

1답변

Java MapReduce 작업에서 하이브에 쓰기

현재 Java MapReduce 작업을 수행하고 있습니다.이 작업은 양동이가 된 하이브 테이블에 데이터를 출력해야합니다. 나는 두 가지 방법을 생각 : 먼저 직접 HCatalog를 통해 하이브 물품. 문제는이 접근 방식이 양동이로 된 하이브 테이블에 쓰는 것을 지원하지 않는다는 것입니다. 따라서 버킷 하이브 테이블을 사용할 때 먼저 버킷이없는 테이블에 작성

0열

1답변

HCATALOG 트리거

HCATALOG에 트리거를 추가하여 HIVE 테이블의 변경 사항을 추적 할 수 있습니까? HIVE 테이블 변경 사항에 대해 청중에게 알리고 싶습니다. 트리거를 추가 할 수없는 경우 다른 방법은 무엇입니까?

0열

1답변

HCatStorer를 사용할 때 돼지와 오류가 발생했습니다

나는 돼지 라틴어로 코드를 작성하고 출력을 하이브 테이블에 저장하려고합니다. 나는 스키마 create table pedestrian_count(sensor_id INT, sensor_name STRING, total_hourly_counts BIGINT, highest_count INT) ROW FORMAT DELIMITED FIELDS TERMINAT

0열

1답변

Vertica HCatalog Connector는 비표준 하이브의 StorageHandler를 지원합니까?

Vertica에서 HBASE 데이터를 사용/조회 할 수있는 방법을 찾고 있습니다. 나는 Vertica가 Hive의 Metastore와 잘 통합되어 있음을 보았습니다 - HCatalog Connector. 커넥터는 Hive Metastore에서 테이블 정의를 읽고이 설명을 사용하여 직접 데이터를 읽을 수 있습니다. 문제는 커넥터가 비표준 StorageHand

0열

1답변

돼지가있는 HCatLoader : UDF/LoadFunc에서 출력 할 때 표준 돼지 유형 만 지원됩니다.

HCatLoader가있는 돼지를 사용하여 파티션 된 하이브 테이블에서 일부 변환을 수행하려고합니다. 하이브 1.2와 돼지 0.15를 사용하고 있습니다. 하이브 테이블의 분할 된 열의 데이터 형식은 smallint입니다. 그것은 파티션되지 않은 하이브 테이블에 대해 잘 작동합니다. 다음은 내가 수행하는 단계입니다. 몇 가지 조사를 한 결과 Exception

0열

1답변

HCat의 처리 중에 Oozie Java Action이 실패합니까?

데이터 수집을 수행 할 항아리가 있습니다. 명령 줄에서 hadoop jar <jar_name> <args>을 사용할 때 작동하지만 Oozie Java Action을 사용하여 동일한 기능을 구현하려고하면 아래 오류가 발생합니다. 오류 메시지 : While running Java Action during Sqoop Import 2017/02/23 13:02:3

0열

1답변

HAWQ와 PXF로 하이브 스키마 쿼리하기

HAWQ와 HCatalog로 관리되는 데이터를 쿼리하는 것이 가능하다는 것을 알고 있습니다. 필자는 필요한 모든 툴을 설치하는 Hortonworks ambari를 설치했습니다. 하이브리드 i 스키마를 쿼리하려면 PostgreSQL을 입력하고 SET pxf_service_address TO "localhost : 51200"명령을 실행하는 중 요한 지시에 따

1열

1답변

org.datanucleus.exceptions.NucleusUserException : 오류 : 이름 "JDO"에 대한 API 정의를 찾을 수 없습니다.

hcatalog를 통해 mapreduce의 하이브 테이블에 액세스하려고했는데 다음 예외가 발생했습니다 : 나는이를 검색하여 루트 원인 그러나 성공을 얻을 수 없어서 여기에 내 질문을 게시하고 있습니다. 2016-12-01 15:48:35,855 INFO [main] metastore.HiveMetaStore (HiveMetaStore.java:newRawS