hortonworks-data-platform

0열

1답변

Hortonworks sandbox 2.4 설치 후 hbaseHdfs에서 Ambari과 같은 서비스를 다시 시작하는 방법을 찾을 수 없습니다. 그래서 Ambari에서 hadoop 서비스를 다시 시작하는 방법을 알아야합니까? SandBox 2.4에서

0열

1답변

올바른 YARN 컨테이너 수는 어떻게 결정합니까?

제 질문은 YARN 구성에 대한 것입니다. 클러스터에 필요한 컨테이너 수를 어떻게 결정합니까? 즉, 컨테이너 당 올바른 메모리 양/CPU를 설정하려면 어떻게해야합니까? 크기 조정을위한 몇 가지 모범 사례가 있습니까? 감사합니다. HDFS에 1 VCORE는 위해 1 VCORE를 데이터 노드

1열

1답변

특정 노드에서 응용 프로그램 마스터를 시작하도록 제한 할 수 있습니까?

신뢰할 수없고 다운 될 수있는 노드가있는 클러스터 설정이 있습니다 (이 노드는 스팟 인스턴스입니다). 내 응용 프로그램 마스터가 클러스터의 신뢰할 수있는 노드 (aws on demand 인스턴스)에서만 실행되는지 확인하려고합니다. 같은 해결 방법이 있습니까? 내 클러스터는 hortonworks ambari에 의해 관리되고 있습니다.

0열

1답변

Cloudera에서 Hortonworks로 마이그레이션

우리 고객은 어떤 이유로 Cloudera에서 HortonWorks로 hadoop 환경을 마이그레이션 할 계획입니다. 이러한 종류의 마이그레이션을 수행하는 데 필요한 단계를 지정하는 표준 문서가 있다면 알려주십시오. 다른 작업에서는 Cloudera 환경에서 Hortonworks로 hdfs 데이터를 복사하기 위해 hadoop distcp 명령을 사용할 수 있습

0열

2답변

스파크 스 리프트 서버 - 시작할 수 없습니다 (하이브 오류)

하이브 0.14 (최신 HortonWorks 배포판)와 함께 HDP 2.2.0에서 스파크 스 리프트 서버 (스파크 1.2)를 시작하려고하는데, 불행히도이 오류가 발생합니다. 나를 위해 매우 알기 쉽습니다. Exception in thread "main" java.lang.RuntimeException: java.lang.NumberFormatExceptio

1열

1답변

Hadoop, gcloud 유틸리티, Cygwin 내의 bdutils. 연결이 없습니다. 명령이 인식되지 않습니다.

Hadoop 포럼의 위치가 확실하지 않습니다. 가장 가까운 내기입니다. 클러스터를 설정하여 Hortonworks 플랫폼을 실행하려고합니다. 즉, bdutil 작업이 필요합니다. 그러나 부트 스트랩 폴더 안에 install.py 스크립트를 실행할 수는 있지만 gcloud 또는 bdutil 기능을 사용할 수는 없습니다. 처음에 64 비트 Python 설치와 3

2열

2답변

WebHDFS 용 하둡 이름 노드

클러스터 된 명명 된 노드 설정이 있습니다. 명명 된 노드는 활성 및 수동으로 구성됩니다. , URL이 제공 될 나는 WEBHDFS 통화를는 을 http : // :/webhdfs/V1/ 내가이 개 명명 된 노드를 사용할 가지고 있기 때문에, 내가 가진이 URL의 사용 가능한 에 http : // :/webhdfs/V1/- 그것의 활성 지금 에 http :

0열

2답변

oozieLauncherInputFormat과 함께 4.1.0 louncher가 실패했습니다. $ EmptySplit을 찾을 수 없습니다.

우리는 hdp 2.0에서 hdp 2.2로 인프라를 업그레이드 했으므로 hadoop 2.2.0에서 2.6.0으로, oozie에서 4.0.0에서 4.1.0으로 업그레이드해야합니다. 우리는 다음과 같이 작업이 oozie의 실행이 실패 제출됩니다 간단한 인증 등을 사용하는이 클래스 /user/${user.name하는 HDFS에 업로드 oozie 공유/lib 디렉토

1열

1답변

스파크 1.2는 HDP 2.2의 HDFS에 연결할 수 없습니다.

이 투어 012538463을 따라 HDP 2.2에 스파크를 설치합니다. 그러나 dfs가 내 연결을 재개했다고 알려줍니다. 내가 명령하는 것 : 여기 ./bin/spark-submit --class org.apache.spark.examples.SparkPi --master yarn-cluster --num-executors 3 --driver-memory

2열

1답변

Oozie HDP 2.1에서 job.splitmetainfo를 생성하지 않음

내 Hadoop 프로그램이 jar 파일로 -jarFiles 매개 변수로 전달 된 sqoop 작업을 실행하려고하면 아래 오류와 함께 실행이 끊어집니다. 모든 해결 방법을 사용할 수없는 것 같습니다. 동일한 Hadoop 사용자가있는 다른 작업이 성공적으로 실행되고 있습니다. org.apache.hadoop.yarn.exceptions.YarnRuntimeExc