2017-11-28 4 views
1

RDD를 다시 계산해야하거나 캐시에서 가져온 것이 아닌지 어떻게 알 수 있습니까? 내 RDD가 다시 계산되었거나 캐시에서 가져 왔습니까?

는 (I 불필요한 캐시 문을 제거하기 위해 노력하고 그리고 난 성능 테스트입니다)이 당신이 그들이 캐시 된 경우 알고 싶은 RDDs의 이름을 설정하는 것입니다 접근 할 수

답변

0

방법 중 하나를, 그리고 확인 Spark UI의 Storage 탭을 클릭합니다.

거기에서 캐시되거나 부분적으로 캐시되었는지 알 수 있으며 다시 계산해야 할 수도 있습니다.