flume

6열

3답변

작은 HDFS 블록을 결합하는 가장 쉬운 방법은 무엇입니까?

Flume과 함께 로그를 HDFS에 수집 중입니다. 테스트 케이스의 경우 로그 수집 프로세스가 실제 사용에 맞게 조정 되었기 때문에 작은 파일 (~ 300kB)이 있습니다. 작은 파일을 HDFS 블록 크기 (64MB)에 가까운 큰 파일로 결합하는 쉬운 방법이 있습니까?

hadoop hdfs flume 2010-12-13

---