cloudera

0열

2답변

저는 우분투와 Cloudera를 처음 사용합니다. Cloudera 사이트에 제공된 documentation에서 우분투 14.04에 Cloudera 관리자 (5.7.1)를 설치했습니다. http://localhost:7180에 연결할 수 없습니다. sudo service cloudera-scm-server status 명령을 사용하여 cloudera-scm-

0열

1답변

인간이 읽을 수있는 형식으로 cloudera hadoop 클러스터의 남은 공간

hadoop 클러스터에 남아있는 공간을 사람이 읽을 수있는 형식으로 표시하는 명령을 찾고 있습니다. 이 포럼에서 명령을 찾았습니다. 출력은 이미지에 있습니다. [dfsadmin 명령의 출력이 [1] I 좀더 판독 가능한 출력을 제공 호튼 웍스 다른 명령이 있음을 들었다 -report dfsadmin HDFS. 그 명령은 hdfs dfsadmin -repor

0열

1답변

하둡 환경이 내려졌습니다

저는 학생이며 컴퓨터 과학을하고 있습니다. 내 연구의 일환으로 나는 hadoop 환경에서 일하고있다. 이 연구에 참여하기 전에 나명 노드와 대기 노드가있는 9 개의 데이터 노드를 구성했습니다. 우리는 하이브에 저장된 우리의 네트워크 트래픽 데이터를 가지고 있으며 네트워크 공격을 식별하기 위해 하이브 쿼리를 개발 중입니다. 이 일을하고있는 사람은 이미 우리

0열

1답변

Cloudera에서 Hortonworks로 마이그레이션

우리 고객은 어떤 이유로 Cloudera에서 HortonWorks로 hadoop 환경을 마이그레이션 할 계획입니다. 이러한 종류의 마이그레이션을 수행하는 데 필요한 단계를 지정하는 표준 문서가 있다면 알려주십시오. 다른 작업에서는 Cloudera 환경에서 Hortonworks로 hdfs 데이터를 복사하기 위해 hadoop distcp 명령을 사용할 수 있습

0열

1답변

Cloudera 클러스터를 생성하기 위해 Ambari 청사진을 사용할 수 있습니까? 아니면 CDH 클러스터에 더 적합한 꼭두각시/요리사/불가능한 유형 도구입니까?

Cloudera 클러스터에 대한 구성 관리 옵션을보고 있습니다. Ambari 청사진은 HDP 클러스터에 적합하지만 Cloudera와 비슷한 것은 없습니다. Puppet, Chef 등과 같은 인프라 구성 관리 도구를 사용하는 것이 더 낫습니다. UI 마법사 대신 스크립트 기반 솔루션을 사용하고 있습니다. 감사!

2열

1답변

생산시 스파크 스트리밍을 계속 실행 중입니다.

기본적으로 kafka에서 데이터를 읽고 HDFS에 주기적으로 저장하는 스파크 스트리밍 응용 프로그램을 개발 중입니다. 나는 YARN에서 pyspark를 실행 중입니다. 제 질문은 제작을위한 것입니다. 지금,이 같은 내 응용 프로그램을 실행 spark-submit stream.py 당신이 클라이언트에 (파이썬) 응용 프로그램을 스트리밍이 불꽃을 제공 할 예정

2열

1답변

Spark Livy Server : Python 스크립트가 json 객체를 어떻게 반환합니까?

우리는 ML 및 데이터 처리에 Spark를 사용하고 있으며 요청은 웹 기반 UI 프론트 엔드에서 제공됩니다. 그래서 우리는 이것을 위해 Livy REST 서버를 사용하고 있습니다. 코드는 여기의 자습서를 기반으로 올바르게 완료됩니다. http://gethue.com/how-to-use-the-livy-spark-rest-job-server-api-for-s

2열

1답변

가장 좋은 방법은 내가 클라우 데라 메이븐 저장소에서 의존성을 사용할

종속성에 스냅 버전에서 없애 : 추출을 내 pom.xml 파일에서 : 그것은 "스파크 부모"부모에 의존 <repositories> <repository> <id>cloudera</id> <url>https://repository.cloudera.com/cloudera/cloudera-repos/</url> <snap

0열

1답변

우분투 호스트에서 실행되는 Cloudera VM에서 RStudio 서버에 액세스

내가 무엇을하고 싶은지 : OSX 브라우저에서 Ubuntu 호스트의 Cloudera Quickstart VM에서 실행되는 RStudio WebGUI에 액세스합니다. 작동 방식 : 1. Ubuntu 호스트가 Cloudera 빠른 시작 VM 을 실행 중입니다. 2. Cloudera VM에 R 및 RStudio Server가 설치되어 실행 중입니다. WebGUI

0열

1답변

Hadoop의 Cloudera 배포본에서 소스 hbase 작업을 열 수 있습니다

Cloudera Distribution을 5 노드 클러스터로 설치했습니다. 이제는 cloudera와 함께 제공되는 Hbase 소포를 사용하고 싶지 않습니다. 대신 Cloudera 설치 및 Hbase의 opensource 버전에서만 HDFS를 사용하고 싶습니다. 제 질문은이 작업이 아니면 정상적인 오픈 소스 버전의 Apache Hadoop을 HDFS 용으로