찾을 수없는 모듈 'graphframes'

Question

때 나는 명령 줄에서 입력 : graphframes : 0.2.0-spark2.0-s_2.11

을

pyspark이 graphframes을 --packages 잘 작동 할거야. 그러나 ipython을 사용하여 내 pyspark를 시작하고 그래프 프레임 패키지를 사용하려면 작동하지 않습니다.

때 I 명령 라인 입력 :

PYSPARK_DRIVER_PYTHON = ipython pyspark --packages graphframes : graphframes : 0.2.0-spark2.0-s_2.11

오류가있다 : 'graphframes'모듈을 찾을 수 없습니다

Answer 1

0.2.0의 Spark 패키지 is a known bug의 Python 3 호환성이 부족하여 0.3.0에서 해결되었습니다.

--packages graphframes:graphframes:0.3.0-spark2.0-s_2.11