2013-10-01 1 views
0

Flume 클러스터의 크기 조정이 필요한 Big Data 프로젝트를 진행 중입니다. Flume 클러스터는 15 mBps (초당 메가 바이트)로 생성 될 로그를 수집합니다. 이 상황을 시뮬레이트하려면이 속도 (또는 축소 속도)로 로그를 생성 할 수있는 유틸리티/도구가 필요합니다. 사용할 수있는 기존 도구가 있다면 알려주십시오.고속 로그 생성을위한 도구 또는 유틸리티

답변

0

Twitter Iago에서 좋은 결과를 얻었습니다.

  • 실제 생산 데이터를 보낼 수 있도록 로그를 읽어 샘플 데이터를 얻습니다.
  • Poisson/Exponential 분포를 사용하므로 요청 간의 시간 간격이 무작위입니다.
  • 설정 속도로 보낼 수 있으며 더 많은로드 생성 서버를 사용하여 해당 속도로 이동할 수 있습니다.