Storm-zookeeper 트랜잭션 로그 extremlly large

Question

내 Storm 클러스터 (4 기계)에 ZooKeeper 클러스터 (3mchines)를 사용하고 있습니다. 문제는 폭풍우에 배치 된 토폴로지 때문에 사육사 트랜잭션 로그가 극단적으로 커져서 사육사 책상이 가득 차게되고 그 로그가 여러 파일로 분할되지 않는 것이 이상하다는 것입니다. 모든 사육사 기계에서 하나의 큰 거래 파일! 내 사육사 구성에서 자동 완성 기능을 사용하면 파일에 아무런 영향을 미치지 않습니다.

사육사 측에서이 문제를 해결할 수있는 방법이 있습니까? 아니면 스톰이 사육사를 사용하여 로그 크기를 최소화 할 수 있습니까?
참고 : 동물원 3.6.4 및 폭풍 0.9.6을 사용하고 있습니다.

Answer 1

나는 Pacemarker를 사용하여 zookeeper 대신 worker의 하트 비트를 처리하여이 문제를 해결할 수있었습니다. 이를 통해 일관성을 유지하고 인 메모리 저장소를 사용하기 위해 사육사 디스크에 쓰기 작업을하지 않아도됩니다. Pacemaker를 사용하려면 Storm-1.0.2로 업그레이드했습니다.