모든 도구는 로그에 대한 그래픽 표현을 얻는 데 도움이됩니다

Question

우리는 s3 버킷에 많은 로그를 저장할 도구가 있습니다. 로그에는 수정 된 항목에 대한 정보가 있습니다. 1000에서 320까지 (1000 개 중 320 개는 삭제됨). 우리는 도구의 중요성을 나타내고 싶습니다 .. 원치 않는 물건을 개선하는 것이 얼마나 좋은지.

s3 버킷의 로그로 입력을 제공하여 그래픽 표현을 얻는 데 사용할 수있는 오픈 소스 도구가 있습니까?

모든 조언을 주시면 감사하겠습니다. 고마워요

Answer 1

비록 여기가 광범위하기 때문에 여기에서 시작할 수 있습니다.

ELK (Elasticsearch+Logstash+Kibana) "스택"을 살펴보십시오.

Logstash는 다음과 같이 할 수는 다음 Elasticsearch에 로그를 전송하는 데 사용할 수있는 당신이 (필터링이나 로그를 조정하지 않고) Kinaba

logstash 예를 구성에서 당신의 그래프를 얻을거야 S3 input있다 :

input { 
    s3 { 
     access_key_id => "ACCESS_KEY_ID" 
     bucket => "BUCKET" 
     region => "REGION" 
     secret_access_key => "SECRET_ACESS_KEY" 
     prefix => "/" 
     type => "s3" 
    } 
} 

output { 
    elasticsearch { 
     host => "ELASTICSEARCH_URL" 
    } 
}