tez

0열

2답변

는 기본적으로 내가 이렇게되면 코드를 실행하고 있습니다 : 표 2의 레코드 표에 기록 Create table abc as select A.* from table1 A Left outer join table2 B on A.col1=B.col1 and A.col2=B.col2; 수 = 7,009,102 수 = 1,787,493 내 스크립트하지만

-1열

1답변

스파크 SQL 하이브의 목적은 무엇입니까?

나는 몇 년 전에 질문을 받았지만 아직도 SparkSQL/HiveContext를 사용하는 진정한 목적을 궁금해합니다. 스파크 접근 방식은 내장 된 MapReduce보다 일반적인 분산 방식을 제공합니다. 나는 MR 방법이 이미 죽었고 Spark이 최고라고 주장하는 기사를 많이 읽었습니다 (Spark를 통해 MR 접근법을 구현할 수 있음을 이해합니다). Hiv

1열

1답변

가 실패하여 초기화 - 하이브

을 내가 2 개 노드와 우리의 서버에 HDP 2.5을 사용하고 있습니다. 하이브에서 쿼리를 성공적으로 실행하고 있습니다. 갑자기 나는 새 테이블에 열을 추가하기 위해 소스 테이블과의 매핑에 직면하게되었다. 하이브 뷰에서이 쿼리를 실행하는 중입니다. 이 문제를 어떻게 해결합니까? create table New_table As select distinct

0열

1답변

Tez 실행 엔진을 사용하는 동안 Hive에서 VERTEX_FAILURE 오류가 무엇인지 설명 할 수있는 하이브에서 쿼리를 실행하는 동안 Tez 정점 오류가 표시됩니다.

또한 그것의 근본 원인은 무엇입니까?

0열

1답변

Tez에 다른 HDFS 백엔드를 지원하는 라이브러리를 어떻게 추가 할 수 있습니까?

하이브의 실행 엔진으로 MapReduce를 사용할 때 대체 백엔드를 defaultFS.impl에 사용할 수 있습니다. 와 유사한 구문을 사용하여 : LOCATION 'protocol://address:port/dir'; 내가 대신 맵리 듀스의 TEZ 실행 엔진을 사용하고 싶지만, TEZ가 인식하기 위해 내 심 라이브러리 (jar 파일)을 추가 할 위치를 알

0열

1답변

TEZ 실행 엔진과 하이브 파일 시스템을 추가 외부 ORC의 테이블에 대해 TEZ 실행 엔진으로 쿼리를 실행했을 때 다음과 같은 오류가 발생

그러나 Vertex failed, vertexName=Map 6, vertexId=vertex_1504790331090_0008_1_01, diagnostics=[Vertex vertex_1504790331090_0008_1_01 [Map 6] killed/failed due to:ROOT_INPUT_INIT_FAILURE, Vertex Input: ite

1열

2답변

하이브, TEZ에 쿼리를 실행하고 오프셋

내가 특정 레코드를 제외하려고 하이브 오프셋 쿼리를 실행하려고 노력하지만, 항상 아래의 오류를 얻고있다 : 검색어 : select * from sample order by id limit 1 OFFSET 1; 오류 : FAILED: ParseException line 1:41 missing EOF at 'OFFSET' near '1' 나는 테이블을

0열

2답변

VERTEX_FAILURE로 인해 Tez DAG가 실패했습니다.

Ambari 2.5.3 및 HDP 2.6.3의 기본 설정이 있으며 아래의 간단한 쿼리를 실행하려고했습니다. 나는 그것이 왜 실패했는지 이해하지 못한다. 도울 수 있니? [[email protected] demo]# beeline Beeline version 1.2.1000.2.6.3.0-235 by Apache Hive beeline> !connect

0열

1답변

각 매퍼가 수행하는 작업

여러 개의 조인이있는 sql이 있습니다. 2017-12-28 05:15:53,140 Map 1: 15/15 Map 6: 9/9 Map 7: 29/29 Map 8: 198(+2)/200 Map 9: 1/1 Reducer 2: 1/1 Reducer 3: 0(+1)/1 Reducer 4: 0(+3)/3 Reducer 5: 0(+11)/11 위의 내용은 지난

0열

1답변

임팔라 2.7 하이브에서 Tez 함께 만든 쪽 마루 탁자에서 데이터를 읽지 못했습니다

많은 유니온 모든 연산자를 사용하여 쿼리를 사용하여 마루 저장 형식으로 된 파티션 된 하이브 테이블을 채우는 중입니다. 쿼리는 Tez을 사용하여 실행됩니다. 기본 설정을 사용하면 여러 개의 동시 Tez 작성자가 HDFS 구조를 생성합니다. 여기서 마루 파일은 파티션 폴더 아래의 하위 폴더 (폴더 이름의 Tez 작성자 ID)에 있습니다. 예. /apps/hi