py4j

3열

1답변

Python의 pySpark에서 SparkListener를 추가하는 방법은 무엇입니까?

Jupyter/IPython 확장을 생성하여 Apache Spark Jobs를 모니터링하고 싶습니다. 스파크는 REST API를 제공합니다. 그러나 서버를 폴링하는 대신 콜백을 통해 이벤트 업데이트를 보내고 싶습니다. SparkContext.addSparkListener()으로 SparkListener을 등록하려고합니다. 이 기능은 Python의 PySpa

apache-spark pyspark py4j 2017-05-20

---

2열

1답변

Py4j를 사용하여 Python에서 Java로 varargs 전달

python에서 Java 코드에 varargs를 전달하려고합니다. 자바 코드 : LogDebugCmd.java public class LogDebugCmd implements Command { private Class clazz; private String format; private Object[] args; publ

java python variadic-functions py4j 2016-11-03

---

5열

3답변

findspark.init() IndexError : 목록 색인 범위 외 오류

Python 3.5 Jupyter 환경에서 다음을 실행할 때 아래 오류가 발생합니다. 무슨 일이 일어나고 있는지에 대한 아이디어가 있습니까? import findspark findspark.init() 오류 :이 때문에 SPARK_HOME 환경 변수에 가능성이 높습니다 IndexError Traceback (most recent call

python pyspark py4j 2017-02-14

---

0열

1답변

corenlp 감정 Python에서 Py4j를 통해 Java 프로그램을 실행하면 오류가 발생합니다.

Py4j를 통해 Python에서 Java 감정 분석 프로그램을 사용했습니다. 파이썬에서 자바 객체를 만들 수는 있지만 메소드에 접근하려고하면 java.lang.NullPointerException이 발생한다. 제발 도와 주실 래요? 감사. Java 코드 : 올바르게 컴파일되고 오류없이 실행됩니다. import java.util.List; import ja

java python stanford-nlp py4j 2016-09-22

---

0열

1답변

Linux 쉘에서 py4j GatewayServer를 시작하는 방법은 무엇입니까?

내 Linux 호스트에서 py4j를 실행하고 싶습니다. 자바 근육이 약하지만 파이썬을 알고 있습니다. 내가 나에게 3.6.3 파이썬을 제공 아나콘다 5.0.1을 설치하여 시작한 다음으로 쉘 명령을 py4j 패키지 설치 : conda install py4j 가 그럼 난 자바 SDK를 설치하고 여기에 넣어 : $HOME/jdk/ 그리고 ENV 변수 설정

java python python-3.x py4j 2017-12-22

---

0열

1답변

py4j.Py4JException : 방법 분할 ([]) 내 스파크 작업을 실행할 때 나는 다음과 같은 오류가

존재하지 않습니다이 points = df.rdd.map(lambda x: ((x['col1'], x['col2'], x['col3']), x[i + '_func'])) points.cache() dim = points.first()[1].size print points._jrdd.splits().size() 마지막 행 예외 : py4j.protoc

python apache-spark pyspark rdd py4j 2017-12-27

---

0열

1답변

pyspark가있는 보일러 파이프 사용

보일러 파이프를 사용하여 html로 텍스트를 가져옵니다. 그러나 내가 해결할 수 없었던 몇 가지 문제가 있습니다. 50k 요소 목록이 있습니다. 나는 1000 개의 요소로 구성된 rdd를 생성하고 그 결과를 처리하고 hdd에 결과 rdd를 저장합니다. 내가 발견 한 오류는이 경우 : HDFS 파일에서 ERROR:root:Exception while send

pyspark py4j jpype boilerpipe 2017-09-19

---

0열

1답변

Python에서 JDBC 드라이버 연결 및 테스트

저는 Python을 사용하여 JDBC 드라이버에 대한 테스트를 시도하고 있습니다. 이 처음 JPype을 파악, 나는 결국 드라이버를 연결하고 (일반화 된 조각 재현)과 같이 선택 쿼리를 실행하는 관리 : 그러나 from __future__ import print_function from jpype import * #Start JVM, attach th

python jdbc py4j jpype 2017-09-21

---

0열

1답변

Py4j를 Anaconda에 설치하는 중 오류가 발생했습니다.

Py4j를 Anaconda - Spyder에 설치할 수 없습니다. 저는 Windows 32 비트, 파이썬 3.5 및 아나콘다 4.1에서 작업하고 있습니다. C:\Users\360529>anaconda search -t conda py4j Using Anaconda API: https://api.anaconda.org Run 'anaconda show <

anaconda py4j 2017-03-16

---

0열

2답변

Eclipse (PyDev)에 py4j.protocol이라는 모듈이 없습니다.

Eclipse를 구성하여 Spark 및 Python으로 개발했습니다. 구성 : 1. 파이썬 인터프리터가있는 PyDev 2. 스파크 파이썬 소스가있는 PyDev 3. 스파크 환경 변수가있는 PyDev. 이 내 라이브러리 구성입니다 : 그리고 이것은 내 환경 구성입니다 : 내가 CompensationStudy라는 이름의 프로젝트를 생성하고 내가 작은 예제를 실

python eclipse pyspark pydev py4j 2017-03-28

---