Hadoop 클러스터 - 정상 및 보안 형태의 클러스터 간의 성능 차이

Question

Kerberos 및 SSL로 구성된 일반 Hadoop 클러스터와 보안 Hadoop 클러스터 간의 성능 차이가 있습니까?

두 유형의 클러스터에 대한 기계 구성이 동일하다고 간주하면 작업 완료에 소요되는 시간이 다릅니 까? 그렇다면 시차에 관한 알려진 시간 메트릭스가 있습니까? 마찬가지로,

• 일반 클러스터 - 1.5 시간
• 안전한 클러스터 - 2.5 시간

Answer 1

예. Kerberos 및 SSL로 인해 모든 API 호출에 오버 헤드가 있습니다.

작업 완료 시간은 다를 수 있지만 작업 내에서 API가 호출 된 횟수를 모른 채 이것이 얼마인지 알 수있는 방법이 없습니다. 일반적으로 미치는 영향은 미미하지만 워크 플로 (KDC)에 다른 네트워크 구성 요소를 도입하면 클러스터 크기에 따라 크게 저하되는 , KDC와 클러스터 간의 네트워크 문제 및 KDC 구성되었습니다. 자세한 내용은 다음을 참조하십시오.

https://community.hortonworks.com/questions/31205/performance-impact-of-security-ssl-tde-ranger-kerb.html

https://www.cloudera.com/documentation/enterprise/5-8-x/topics/impala_scalability.html#kerberos_overhead_cluster_size

HTTP vs HTTPS performance