Hadoop을 사용하고 있지만 로깅을 위해 뭔가가 필요합니다. 그러나 어느 쪽이 더 좋은 시스템인지는 모르겠다. 필 기사 및 추크. 얘들 아 말해 주시겠습니까? 그리고 Hadoop과 쉽게 어울리는 대안이 있다면 알려주세요.Chukwa & Scribe 사이에 더 좋은 점은 무엇입니까?
아파치 수로는 클라우 데라가 내장되어 주로에/HDFS의 출력 데이터를 얻을 수 있도록 설계되었습니다 :
난 당신을위한 대안이있다.
https://cwiki.apache.org/confluence/display/FLUME/Index
각 시스템의 장점과 단점이 있으며, 그들 모두는 높은 규모의 특정 신뢰성 문제를 가지고,하지만 난 수로는 기본 HDFS 라이브러리를 사용할 수 있도록 자바에 내장되어 있다고 말할 수있다.
우리는 다수의 노드에서 flume을 사용하여 컴퓨터에서 HDFS 및 S3 데이터를 가져옵니다.
확인이 싱크/소스의 많은 함께 제공 https://groups.google.com/a/cloudera.org/forum/#!topic/flume-user/BMtsyGedcPo
그것의 가장 좋은에서 수집 로그에 대한 도구의 비교. 그리고 기스 웁에는 더 많은 것이 있습니다. 나는 진짜로 수로를 좋아한다. –
저는 rpcSource를 사용하고 있습니다. 그것은 솔직하게 약간의 성격을 띠고 있습니다. –
그래, 나는 내 자신도 다시 써야했다. 하지만 나머지는 꽤 유용합니다;) –