hadoop

1열

2답변

내가 특정 레코드를 제외하려고 하이브 오프셋 쿼리를 실행하려고 노력하지만, 항상 아래의 오류를 얻고있다 : 검색어 : select * from sample order by id limit 1 OFFSET 1; 오류 : FAILED: ParseException line 1:41 missing EOF at 'OFFSET' near '1' 나는 테이블을

0열

1답변

건강에 관한 cloudera hadoop (네트워크 인터페이스 속도)

나는 그 지역에서 새롭고 나의 hadoop 클러스터에 몇 가지 문제가있다. 많은 건강 문제는 해결되었지만 호스트의 상태는 여전히 "관련"합니다 (불행히도 "녹색"이 아닌 노란색). 이것은 내 호스트가 100Mbps의 속도로 이전 스위치를 통해 연결되어 있다는 사실에 달려 있습니까? 거의 모든 서버의 네트워크 카드는 1000Mbps를 지원합니다. 이 오류를

0열

1답변

색조 서버 오류 "checkJobBrowserStatus"cloudera hadoop

색조 WebUI에 액세스하는 데 문제가 있습니다. 방금 얻은 것 "500 server error" 색조의 모든 웹 페이지에 액세스 할 때마다. 오류의 샘플 : 로그 파일에서 내가 내가 다른 웹 페이지를 열 때 [12/Dec/2017 01:00:53 -0800] views ERROR JS ERROR: {"msg":"ReferenceError: check

0열

2답변

HDFS는 datanodes 서버를 새 서버로 마이그레이션합니다.

모든 데이터와 구성 요소가 포함 된 hadoop 서버를 새 서버 (새 버전의 redhat)로 마이그레이션하려고합니다. 나는 namenode를 이동하는 방법에 대해 cloudera 사이트의 게시물을 보았습니다. 하지만 데이터 손실없이 모든 datanodes를 이동하는 방법을 모릅니다. 우리는 복제 계수 2를 가지고 있습니다. hdsfs가 새로운 복제본을 생성

0열

1답변

Apache Zeppelin을 다른 사용자로 실행하십시오.

프로세스를 시작한 사용자가 아닌 다른 사용자로 Zeppelin 인터프리터를 실행할 수 있습니까? 나는 "관리자"사용자로 스파크 응용 프로그램을 "루트"로 제플린을 실행 한 다음 실행하려면 당신은 당신이 현재하고있는로 제플린을 계속 실행하지만 관리자로 별도로 스파크 프로세스를 시작할 수 있습니다

0열

1답변

Hadoop의 HDFS API가 상위 디렉토리를 생성하지 못하게하려면 어떻게해야합니까?

하위 디렉토리를 만들 때 상위 디렉토리가 존재하지 않으면 HDFS 명령을 실패하게하고 싶습니다. 내가 HDFS는 던져 강제 할 수있는 방법, 존재를 확인하는 번거로운 부담없이 import java.util.UUID import org.apache.hadoop.conf.Configuration import org.apache.hadoop.fs.{FileS

0열

1답변

슬레이브 서버 옵션이 스푼에 보이지 않음

우리 회사는 Hadoop 기반 ETL 솔루션을 보유하고 있습니다. 이러한 단계 중 일부는 우리의 데이터 흐름에서 호출되는 : SQL 서버 에서 데이터 내보내기는 하이브로 가져 오기 적용 변환 등 SOLR로 처리 된 데이터를 저장 우리의 목표는 스푼에서 전체 ETL 프로세스를 관리 할 수 있도록하는 것입니다. 이를 위해 필자는 숟가락 작업을 원격으로 실행

1열

1답변

하이브에서 현재 시간 소인 NUM 초 단위로 새 열을 만듭니다.

하이브 테이블에 나노 초 단위로 현재 타임 스탬프로 열을 만들고 싶습니다. 어떻게 데이터를 삽입하는 동안 그것을 할 수 있습니다.?

0열

1답변

hdfs 데이터 노드가 잠시 동안 다운 된 후 다시 시작하는 경우 로컬 디스크 공간을 회수하지 않음

hadoop 2.9.0으로 POC를 분산 파일 저장 시스템으로 사용하므로 하나의 namenode 및 복제 계수가 2 인 4 개의 데이터 노드 (마스터 포함). 이제 일련의 복사 작업 후 datanode (slave2) 중 하나를 중지하기로 결정했습니다. 그리고 나서 slave2가 여전히 다운되었을 때 hdfs dfs -rm -skipTrash 명령을 사용하

0열

1답변

Hadoop Beginner - 데이터 처리 및 분석

HDFS는 모두 구조화 된 & 구조화되지 않은 데이터를 저장합니다 .HIVE & IMPALA를 사용하면 SQL 쿼리를 작성하여 MapReduce로 변환 할 수 있습니다. 사용자가 데이터가 저장된 스키마 또는 HDFS에 저장된 데이터로 테이블을 구성하는 방법을 알게되는 방법은 무엇입니까?