hue

0열

1답변

현재 Apache Oozie를 사용하여 CDH 5.8에서 Spark Jobs를 실행하는 방법을 배우고 있지만 문제를 발견 한 것 같습니다. IntelliJ> 빌드 아티팩트 (Uber JAR/Fat JAR)를 사용하여 스파크 작업을 컴파일 한 다음 나중에 매니페스트 파일을 제거합니다. 그런 다음 JAR을 실행하기 위해 spark-submit을 실행합니다. 그

5열

1답변

파티션 조건부가 쿼리에있는 경우에도 별칭에 대한 파티션 조건부가 없습니다.

yyyymm으로 파티션 된 hdfs에 pos.pos_inv 테이블이 있습니다. 다음은 쿼리입니다 : 내가 201501 같이 쿼리에 대한 파티션 값을 제공 한 select DATE_ADD(to_date(from_unixtime(unix_timestamp(Inv.actvydt, 'MM/dd/yyyy'))),5), to_date(from_unixtim

1열

1답변

색조 연결 하이브에 오류가 있습니다.

Failed to open new session: java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.authorize.AuthorizationException): User: hadoop is not allowed to impersonate

1열

1답변

kerberos keytab 파일에서 암호 검색

kerberos keytab 파일 이름을 가진 hadoop을 userid.keytab으로 오랫동안 사용하고 있습니다. 하지만 지금은 암호를 알지 못합니다. 어쨌든 keytab 파일에서 암호를 가져 오는 것입니까?

0열

1답변

하이브 : 표 데이터가 외부 일 때도 소스 데이터가 하이브 데이터웨어 하우스로 이동합니다.

색조 -> 하이브 쿼리 브라우저에서 하이브에 외부 테이블을 만들고 내 CSV 파일 중 하나의 데이터를 다음 문을 사용하여로드했습니다. CREATE EXTERNAL TABLE movies(movieId BIGINT, title VARCHAR(100), genres VARCHAR(100)) ROW FORMAT DELIMITED FIELDS TERMINATED

0열

1답변

임의로 행동하는 색조 대시 보드 검색

색조/solr에 대해 매우 익숙합니다. 그냥 조금 주위 재생, 나는 FileName,DataYear(YYYYMMDD),VENDOR,DEST1,DEST2 파일 이름이 공급 업체를 포함하는 CSV 파일에 다음과 같은 정보를 추출, DataYear는 DataYear & 공급 업체는 쉽게 에 대한 파일 이름에서 필드를 파생 (_로 구분) dest1에 & Des

1열

1답변

scala2.10.6이있는 spark1.6.2 No TypeTag를 사용할 수 없음

here에서 KMeans 케이스를 실행하려고합니다. 이 내 코드입니다 : def main(args: Array[String]): Unit = { val conf = new SparkConf().setAppName(this.getClass.getName).setMaster("local[10]")//.set("spark.sql.warehouse.dir", "

0열

2답변

HIVE의 다른 열에 대한 평균 함수

하이브 쿼리를 사용하여 평균 3 열을 찾고 싶습니다. 아래의 데이터를 고려 NULL은 무시해야합니다 나는 각 학생에 의해 득점 평균 표시 한 후 각 학교에서 총 부호의 평균을 찾아야합니다. 내 출력은, 다음과 같이 너희들은 각 학생의

3열

1답변

EMR 5.0에서 SparkSession을 인스턴스화 할 수 없습니다. HUE

EMR 5.0 클러스터를 실행 중이며 HUE를 사용하여 SPARK 2.0 작업을 제출하는 OOZIE 워크 플로를 만듭니다. 나는 YARN에서 직접 스파크 제출 (spark-submit)하고 같은 클러스터에서 한 발걸음을 내딛었다. 문제 없어. 내 스파크 작업에 spark.sql 또는 SparkSession을 (대신 내가 SparkContext를 사용)를 사

1열

1답변

HUE에서 $ {wf : id()}의 의미는 무엇입니까?

최근에 나는 HUE에서 회사 코드를 이해하려고 노력하고 있는데, 나는 HDFS에 "${wf:id()}"과 매우 혼동스러워합니다. 누군가 그것이 무슨 뜻인지 설명 할 수 있습니까?