sbt-assembly

1열

1답변

스칼라로 작성된 스파크 응용 프로그램에 대해 로컬 .jar를 사용하십시오.

aerospike-spark 클라이언트를 사용하여 Aerospike 키 값 저장소에서 데이터를 수집하는 스파크 응용 프로그램을 작성합니다. 나는 여기 https://github.com/aerospike/aerospark 지침을 따라 .jar 파일을 만들었다. 내가 무엇을 포함해야 빈/--jars 지금 을 my_jar.jar 스파크가 제출 : 지금, 나는 그

1열

1답변

종속성이 제공 될 때 HiveContext에 대한 테스트를 시도하면 java.lang.SecurityException이 throw됩니다.

스파크 컨텍스트를 만드는 단위 테스트를 실행할 때 java.lang.SecurityException이 표시됩니다. 나는 그 원인이 무엇인지 이해하지만 어떻게 해결할지를 어떻게 추적 할 지 확신하지 못한다. 이것은 서로 다른 서명자 정보를 갖는 동일한 패키지 javax.servlet을 공유하는 여러 종속성 때문입니다. // Dependencies libra

0열

1답변

sbt- 어셈블리 작업이 sbt 대화 형 모드로 표시되지 않습니다.

sbt 1.0.1을 사용하고 있으며 its GitHub README에 sbt- 어셈블리 플러그인 (0.14.5)을 구성했습니다. $ sbt (대화 형 모드)을 실행하고 > tasks을 실행하면 어셈블리 작업이 전혀 표시되지 않습니다. 그러나 > help assembly을 실행하면 설명 (Builds a deployable fat jar.)이 표시됩니다. 내

2열

1답변

sbt 어셈블리가있는 uber-jar로 "ClassNotFoundException : 데이터 소스를 찾을 수 없습니다 : jdbc"로 인해 Spark 어플리케이션이 실패하는 이유는 무엇입니까?

sbt 1.0.4를 sbt-assembly 0.14.6과 함께 사용하여 Spark 응용 프로그램을 어셈블하려고합니다. 하게 IntelliJ IDEA 또는 spark-submit 출시 때 스파크 응용 프로그램이 잘 작동하지만 내가 (윈도우 10에 cmd) 명령 줄을 사용하여 조립 동네 짱 항아리를 실행하는 경우 : java -Xmx1024m -jar my-a

2열

1답변

sbt에서 다른 작업에서 라이브러리를 제외하는 방법은 무엇입니까?

나는 다음과 같은 프로젝트 구조가 있습니다 / ├── project | └── ... ├── src | └── ... ├── lib │ ├── prod-lib.jar | └── test-lib.jar └── build.sbt 을 내가 프로덕션 환경에 배포하기위한 테스트 환경 및 prod-lib.jar로 배포 test-lib.jar 컴파

0열

2답변

Apache Tika 1.16 TXTParser sbt 빌드에서 문자 인코딩을 감지하지 못했습니다.

Eclipse에서 sbt 어셈블리를 사용하여 프로젝트를 빌드하고 있습니다. 많은 충돌이 있었기 때문에 매우 크고 복잡한 build.sbt 파일이 있습니다. tika 1.16의 PDF, OOXML 및 OpenDocument 파서를 사용하는 모든 것이 pdf, pptx, odt 및 docx 파일에 대해 올바르게 작동합니다. 내 스칼라 코드에서 org.apach

2열

1답변

sbt 어셈블리에서 uber jar를 실행하면 오류가 발생합니다. 주 클래스를 찾을 수 없거나로드 할 수 없습니다.

sbt 어셈블리 플러그인을 사용하여 스파크 작업을 uber-jar로 패키지했습니다. Error: Could not find or load main class com.foo.Bar 에 java -jar assembly.jar 결과 build.sbt는 의도 된 명령을 실행하고, 올바르게 작성되어 조립 후 얻어진 우버 항아리 mainClass in assem

1열

1답변

kafka 소스를 사용하여 fat jar를 만드는 방법 (원격 저장소에 제출 시간 의존성을 피하기 위해)?

Kafka에서 읽고 쓰는 Spark structured streaming 앱을 작성 중입니다. 나는 spark-submit 스크립트를 사용하여 스파크 클러스터에 제출할 수있는 내 스파크 애플리케이션에 팻 항아리 (sbt assembly 사용)를 만들려고 시도했다. 그러나 응용 프로그램이 다음 오류와 함께 실패 유지하십시오 documentation에서 을 E

1열

1답변

sbt 어셈블리 IntelliJ에서 음영 확인

Apache Spark v2.2.0, Scala 2.11.8에서 GeoIP2 v2.10.0 Java API (https://github.com/maxmind/GeoIP2-java)를 사용하려고합니다. 문제는 아파치 스파크가 jackson-databind 아티팩트 v2.6.5를 가지고 있는데, GeoIP2가 jackson-databind 2.9.2 미니멈 버

2열

1답변

sbt : 여러 개의 병을 병합하는 방법

하나의 병에 여러 개의 병을 병합 (조립)하기 위해 sbt를 사용하는 방법이 있습니까? 하자 내가 가진 말 : lib2.jar lib 디렉토리 lib1.jar/ LIB (빈) SRC를/내가 원하는 : 대상/all.jar 어쩌면 아카이브를 집계하기 위해 zip을 사용하는 몇 가지 다른 도구가 있지만 어셈블리 중에 sbt가 유용한 검사를한다고 생각합니다. ht