파이썬 : 현재 네임 스페이스에있는 모든 객체의 크기를 얻는 방법은 무엇입니까?

Question

내 패키지에서 실행중인 일부 코드가 있으며 프로그램이 있어야하는 것보다 많은 메모리 (60GB)를 사용하고 있습니다. 이 메모리가 사용되는 위치를 찾기 위해 현재 네임 스페이스에서 모든 개체의 크기 (바이트)를 어떻게 인쇄 할 수 있습니까?

나는

from pympler import asizeof 

for objname in dir(): 
    print(asizeof.asizeof(thing)/1024) # print size in kb 

뭔가를 시도하지만 그냥 네임 스페이스에있는 개체의 이름이 포함 된 문자열의 크기를 출력으로 작동하지 않습니다. 이 방법을 사용하기 위해 네임 스페이스의 모든 것에 대한 객체 참조를 얻는 방법이 있습니까? 아니면 메모리를 사용하고있는 것의 해결을위한 더 나은 방법이 있습니까?

Answer 1

dir()은 로컬 범위에있는 이름 만 반환합니다. 사전으로 로컬 범위를 얻기 위해 locals() function를 사용

for obj in locals().values(): 
     print(asizeof.asizeof(obj)/1024) 

주 기능의 외부 locals()이 globals()와 같은 매핑입니다. asizeof()이 사전에있는 경우

, 당신은 그것을 필터링 할 : 인수없이

for name, obj in locals().items(): 
    if name != 'asizeof': 
     print(asizeof.asizeof(obj)/1024) 

dir()이 sorted(locals()) (로컬 네임 스페이스 키의 정렬 된 목록)과 기능적으로 동일합니다.

Answer 2

gc.get_objects()을 사용하면 특정 네임 스페이스에있는 개체뿐만 아니라 수집기에서 추적 한 모든 개체를 가져올 수 있습니다. 나는 그것이 당신에게 그 자체로 단서를 줄지 모르기 때문에 그것을 사용하여 각 유형의 인스턴스의 수를 세는 것으로 시작할 것입니다.

from collections import Counter 
c = Counter(type(o) for o in gc.get_objects()) 
print(c.most_common(20)) 

그렇다면 가능성이있는 용의자의 크기를 찾아보십시오.