hadoop2

0열

1답변

저는 Presto 0.76, Cassandra 2.1.2를 설치하고 mykeyspace 및 테이블을 만들었습니다. 나는 카산드라 데몬과 프레스토 데몬을 시작했다. 나는 카산드라는 그래서 presto:mykeyspace> select * from userinfo; Query 20141216_181006_00021_me4u4 failed: replicate_o

2열

1답변

S3FileSystem FileSystem 구현에 의해 구현되지 않음 Hadoop Jar

Apache Solr 종속성을 Jar와 번들로 묶어두기 위해이 빌드 구성을 내 maven pom에 추가했습니다. 지금은 그 예외지만 (POM 조각 후) 다음과 같이 새 <build> <plugins> <plugin> <artifactId>maven-assembly-plugin</artifactId> <co

2열

2답변

sqlserver에서 hdfs/hive/hbase로 데이터를 가져 오는 방법

MYSQL의 데이터를 hiber & hbase로 가져 왔습니다. 이제 SQL Server에서 데이터를 가져 오려고합니다. 이 경우이 명령을 사용했습니다. sqoop import --connect "jdbc:sqlserver://<server_name>\<instance_name>;databaseName=<db_name>;user=<user_name>;pas

0열

1답변

는 돼지 라틴어

에 정렬 아파치 돼지 문서에서 다음 예제를 테스트하고있다. 어떤 생각? $ pig -version Apache Pig version 0.14.0 (r1640057) compiled Nov 16 2014, 18:02:05 grunt> a= load 'data' as (c1:int, c2:int, c3:int); grunt> describe a;

2열

1답변

오류

내가 miniDFSCluster를 사용하여 단위 테스트를 작성하는 것을 시도하고 그것이 에서 java.lang.UnsatisfiedLinkError 아래의 오류를 던지고 : org.apache.hadoop.io.nativeio.NativeIO $ Windows.access0을 (Ljava/lang/String; I) Z 이 문제점을 해결하기위한 지침은 무엇

3열

3답변

Hadoop 2에서 사용자 로그의 로그 수준을 변경하는 방법은 무엇입니까?

사용자 로그의 로그 수준, 즉 CDH 5.2.1의 /var/log/hadoop-yarn/userlogs/application_<id>/container_<id> 아래에 나타나는 파일을 변경하려고했습니다. 그러나 무엇을 시도해도 INFO 수준의 로그 만 표시됩니다. 디버깅을 위해 TRACE 레벨 로그를 사용 가능하게하고 싶습니다. 것들 지금까지 시도 : /e

0열

2답변

MapReduce를 사용하여 텍스트를 시퀀스로 변환하면 정크 문자가 생성됩니다.

저는 MapReduce를 사용하여 텍스트 파일을 시퀀스 파일로 변환합니다. 각 줄의 시작 부분에 숫자가 표시됩니다. 어떻게 그들을 제거하거나 내 산출물에서 오는 것을 막을 수 있습니까? 텍스트 : d001 Marketing d002 Finance d003 Human Resources 변환 된 시퀀스 파일 : 시퀀스 파일 0 d001 Marketi

0열

1답변

Hadoop은 데이터가 데이터 노드에 배치되기 전에 로컬 임시 파일 위치가 여러 개 있습니까?

저는 하둡 건축과 구조의 기본을 이해한다고 생각합니다. Hadoop 클러스터로 들어가는 모든 데이터는 동일한 로컬 임시 파일 위치를 통과해야합니까? 데이터가 데이터 노드에 기록되기 전에 로컬 임시 파일 위치에 캐싱됩니다. 이 파일은 namenode가 저장 될 데이터 노드를 할당하기 전에 클러스터로 들어오는 모든 데이터가 저장되는 namenode 당 하나의

0열

2답변

Hadoop이 많은 S3 경로로 시작하는 데 너무 오래 걸리는 이유는 무엇입니까?

~ 60k S3 입력 경로가있는 Hadoop 작업이 있습니다. 이 작업은 시작하는 데 약 45 분이 걸립니다. ~ 3k S3 입력 경로 만있는 동일한 작업이 거의 즉시 시작됩니다. 많은 수의 입력 경로가있어서 작업 시작에 시간이 오래 걸리는 이유는 무엇입니까?

0열

1답변

hadoop을 시작한 후 NameNode가 종료됩니다.

단일 노드 클러스터 구성의 Linux에 hadoop 1.2.1을 설치했습니다. 그것은 잘 실행하고 jps 명령은 DataNode.` 모든 5 일 JobTracker에 네임 노드 TaskTracker SecondaryNameNode 표준 새 번역 의 정보를 표시했다 이제, 쉼표를 사용하여 hadoop을 시작할 때 nd bin/start-all.sh, hado