대화식 메모리 캐시 구현 방법

Question

프로그램이 끝나면 프로그램에 사용 된 메모리가 GC에 의해 해제되는지 궁금합니다.

대화 형 스칼라 인터프리터에있을 때 Spark에서 데이터를 캐시하는 방법은 무엇입니까?

인터프리터가 한 번에 한 번 처리된다는 의미입니까?

하지만 더 자주, 나는 인터프리터 자체가 아닌 코드를 실행하기 위해 터미널을 사용합니다.이 경우 어떻게하면 메모리를 얻을 수 있습니까?

Answer 1

인터프리터 나 명령 프롬프트에서 작업 중이면 rdd.cache()을 사용하여 메모리에 keep rdd를 사용하십시오.