Dask : Bokeh 및 progressbar 매우 느리게 업데이트합니다.

Question

내 작업의 진행 상황을 시각화하는 데 몇 가지 문제가있었습니다.

나는 8787 포트에서 상태 페이지를 사용 했었지만 시각화가 blogposts에서 볼 수있는 것과 같이 항상 매끄러운 (새로 고침 빈도) 것처럼 보이지는 않습니다.

부드럽게 달리고 타이머가 있었기 때문에 dask.diagnostics.progress을 사용할 때 매우 기뻤습니다.

그러나 이번에는 데이터 프레임을 유지하려고 할 때 진행 상황이 차단되었습니다 (2.4 초 동안 유지되고 고급 상태가 유지되지 않음). 업데이트해도 문제는 해결되지 않으며 8787에도 많은 정보가 없습니다. 이것이 일어나는 이유는 무엇입니까? 계산이 실패한 경우

Answer 1

진행 표시 줄이 중지됩니다. users1이 좋은 결과를 산출하는지 확인하고 싶을 수도 있습니다. 이 경우이 작업을 수행하는 간단한 방법은 (인터넷 연결 상태가 좋지, 또는 매우 포화 스케줄러를 포함 응답하지 진행률 표시 줄에 대한 len

>>> len(users1) 
Exception ... 

다른 이유처럼, 전체 dataframe에 싼 계산을 유발하는 것입니다 수백만 건의 작업)하지만 이들 중 어느 것도 귀하의 상황에 해당하지 않습니다.