hive

0열

1답변

사용자가 "입력"페이지 및/또는 "결과"페이지에서 데이터를 입력 할 수있는 두 가지 도구에 대한 사용자 입력을위한 사용자 추적 데이터가 있습니다. 페이지별로 평균 연령을 user_id (으)로하고 싶습니다. avg(age) over (partition by user_id, page_name),하지만 현재의 양식에는 종종 Inputs과 Results 사이에

0열

1답변

하이브 쿼리는 파이썬을 사용하여 공백을 반환하지만 직접 쿼리 할 때 아무런 문제가 없습니다.

직접 쿼리하면 (색조, MobaXterm (SSH), Aqua Data Studio (JDBC)) 질의가 완벽하게 작동하지만 PyHive, 정규식 문 부분 나던 일 : 나에게 결과의 예상 age=56 유형을 제공 않습니다 from pyhive import hive import pandas as pd conn = hive.Connection(host="

0열

1답변

하이브의 특정 정크 문자를 바꿉니다

하이브 테이블에로드 된 열 중 하나에 실제 값 (ABC) 접미사가 붙은 정크 문자 ("~)가있는 문제가 있습니다. 따라서이 열에 표시되는 실제 값은 (ABC"~)입니다. 이 열은 ABC (또는 이와 유사한 문자열) 또는 NULL을 가질 수 있습니다. 테이블이 크고 업데이트가 옵션이 아닙니다. 문자열 (ABC) 또는 NULL이 포함 된 임시 테이블을 만드는

3열

1답변

AWS에서 MSCK REPAIR TABLE을 자동으로 실행하는 방법 Athena

매 시간마다 실행되는 스파크 배치 작업이 있습니다. 각 실행은 S3에 새 데이터를 생성하고 저장하며 디렉토리 이름 지정 패턴은 DATA/YEAR=?/MONTH=?/DATE=?/datafile입니다. 데이터를 S3에 업로드 한 후 Athena을 사용하여 조사하고 싶습니다. 더, 나는 데이터 소스로 아테나에 연결하여 QuickSight에 그들을 시각화하고 싶습

0열

2답변

하이브에 너무 오래 걸리는 이유는 무엇입니까?

는 기본적으로 내가 이렇게되면 코드를 실행하고 있습니다 : 표 2의 레코드 표에 기록 Create table abc as select A.* from table1 A Left outer join table2 B on A.col1=B.col1 and A.col2=B.col2; 수 = 7,009,102 수 = 1,787,493 내 스크립트하지만

0열

2답변

Apache Kafka 주제 및 스트림 데이터를 하이브 테이블에 등록하는 방법

Apache Kafka 주제를 구독하고 하이브 테이블에 주제 데이터를 스트리밍하는 방법은 무엇입니까? 카프카 주제가 실시간으로 업데이트됩니다.

0열

1답변

beeline 명령을 사용하여 csv 형식으로 하이브 쿼리를 다운로드하십시오.

하이브 쿼리 결과를 CSV 형식의 로컬 파일 경로에 다운로드해야합니다. 또한 열 값은 따옴표로 묶어야하고 필드는 쉼표로 끝나야하며 파일의 첫 번째 행에는 열 머리글이 있어야합니다. 누구나이를 달성하기위한 최선의 방법을 도울 수 있습니까? 주 - 쿼리는 대개 5 백만 개가 넘는 행을 반환합니다.

0열

1답변

Azure/VS 코드/하이브/HDInsight - 대화 형 쿼리를 중지하는 방법

VS 코드를 사용하여 Azure에서 HDInsight 시스템에 대한 하이브 쿼리를 실행하고 있습니다. 내 검색어 중 하나가 정지 된 것 같습니다. SQL Server SSMS의 중지 단추와 같은 쿼리를 중지하는 방법이 있습니까?

0열

1답변

PySpark/HIVE : 기존 테이블에 추가

정말 기본적인 질문 pyspark/hive 질문 : 기존 테이블에 어떻게 추가합니까? 내 시도는 다음과 같습니다 from pyspark import SparkContext, SparkConf from pyspark.sql import HiveContext conf_init = SparkConf().setAppName('pyspark2') sc = Sp

0열

1답변

가로 하중 분산이란 무엇입니까?

"하이브에서 파티셔닝은 실행로드를 가로로 분산시킵니다."라고 말한 하이브에서 파티셔닝에 대해 article을 읽었습니다. 부하 분산의 의미가 수평 적 (수직 방향과 반대) 인 경우 궁금합니다. 그리고 "세로로"분산 될 수 있습니까?