mapreduce

2열

1답변

Amazon Elastic MapReduce : FileSystem의 예외

ruby 클라이언트를 사용하여 응용 프로그램을 실행합니다. ruby elastic-mapreduce -j j-20PEKMT9BRSUC --jar s3n : //sakae55/lib/edu.cit.som.jar --main- edu.cit.som.hadoop.SOMDriver --arg s3n : // sakae55/repository/input/ec

6열

3답변

한 줄로 된 여러 줄의 텍스트

나는 하나의 매핑에 N 개의 줄을 보내기 위해 Hadoop을 사용하려고 노력 해왔다. 나는 이미 줄이 쪼개 질 필요가 없다. NLineInputFormat을 사용하려고했지만 데이터에서 각 매퍼에 한 줄에 한 줄씩 텍스트를 전송합니다. [N 번째 줄 이후에 단절]. 나는 옵션을 설정하려고 노력하며 각 맵에 한 번에 한 줄에 보내기 입력의 N 라인을 취 내가

2열

1답변

couchdb의 키 정렬 및 mapreduce

나는 날짜 범위에 대한 사용자 메모를 계산하기 위해 축소보기를 만들고 있으며, 나는 꽤 해결되지 않은 문제 앞에 있습니다. 날짜 범위 선택이 괜찮습니다. 배열 키 [YYYY, MM, DD, user_id]를 만듭니다. 문서 예 : { "_id": "1", "_rev": "1-84d3fa5f259c7b30c74028ca60a45f91",

3열

3답변

200MIPS/일, 월간 요약 쿼리를위한 데이터베이스 솔루션

사용할 데이터베이스 시스템을 결정할 때 도움이 필요합니다. (저는 지난 몇 시간 동안 인터넷 검색과 독서를 해왔으며 직접 지식을 가진 사람에게 도움을 요청하는 것이 좋습니다.) 근무일 기준으로 8 시간당 2 억 회 이상을 기록해야합니다. 데이터베이스를 검색 한 다음 해당 데이터에 대한 주간/월간/연간 요약 쿼리를 수행합니다. 요약 쿼리는 청구 명세서와

1열

1답변

루트 액세스없이 hadoop cloudera를 사용할 수 있습니까?

약간의 이진 질문 (okay, excatly) -하지만 cloudera/hadoop을 노드 컴퓨터에 대한 루트 셸 액세스없이 노드에서 실행하도록 구성 할 수 있는지 궁금합니다 (ssh 암호없는 로그인을 설정할 수 있음). 은 루트 액세스가 필요하다는 지시에 따라 표시되지만 아직 루트 액세스가 필요하지는 않은 hadoop 위키가 있습니까? http://wik

0열

1답변

MapReduce의 Taskid

MapReduce 및 Java 프로그래밍에 초보자입니다. 각 map() 함수의 taskid를 얻으려고합니다. 기본적으로 공통 파일에서 일부 데이터를 가져 오는 데 오프셋으로 각 매퍼의 taskid를 사용해야합니다. 개인지도() 작업의 taskid를 받도록 도와주세요. 감사합니다, Vanamala

1열

4답변

MapReduce는 CPS (Continuation-Passing Style)의 한 형태입니까?

제목이 말하는대로. Yet Another Language Geek: Continuation-Passing Style을 읽고 있었는데 MapReduce가 Continuation-Passing Style 일명 CPS의 한 형식으로 분류 될 수 있는지 궁금해합니다. 또한 CPS가 복잡한 계산을 수행하기 위해 둘 이상의 컴퓨터를 활용할 수 있는지 궁금합니다. CP

20열

1답변

MongoDB의 map/reduce를 사용하여 두 개의 필드를 그룹으로 묶습니다.

MongoDB 문서의 예제보다 약간 더 복잡한 것이 필요하며 머리를 감쌀 수없는 것처럼 보입니다. 내가 날짜와 유형 모두에 걸쳐 그룹화, {date: "2010-10-10", type: "EVENT_TYPE_1", user_id: 123, ...} 지금 내가 쿼리하여 SQL 그룹에 비슷한 싶어 형태의 개체의 컬렉션을 말해봐. 즉, 매일 각 유형의 이벤트 수

13열

7답변

분산 컴퓨팅은 어디에서 시작해야합니까?

분산 컴퓨팅 기술을 배우는 데 관심이 있습니다. Java 개발자로서, 나는 아마도 Hadoop으로 기꺼이 시작할 것입니다. 먼저 책/자습서/기사를 추천 해주십시오.

0열

2답변

맵리 듀스 프로그래밍 시스템

그냥 맵리 듀스와 분산 프로그래밍에 뛰어난 '아름다운 코드'http://oreilly.com/catalog/9780596510046 에 ch23를 읽고 마쳤다. 필자는 MapReduce가 대규모 데이터 처리 문제를 해결하기 위해 설계된 프로그래밍 시스템이라는 것을 알고 있지만 주어진 기본 예제와 실제 상황에서 어떻게 적용 할 수 있을지 생각해보기 힘듭니다.