sparkr

0열

1답변

SparkR을 사용하여 R에 작성한 임의의 포리스트 모델을 가져온 다음 getTree를 사용하여 트리 중 하나를 추출 할 수 있습니까?

의사 결정 트리 에서처럼 노드 분할을 보거나 시각화 할 수 있으므로 비슷한 작업을 수행하려고합니다. 하지만 SparkR을 사용하고 있으며 의사 결정 트리가 없습니다. 그래서 1 트리가있는 임의의 포레스트를 매개 변수로 사용하고 SparkR에서 실행하고, 모델을 저장하고 getTree를 사용하여 노드 분할을보고 ggplot을 사용하여 시각화 할 계획입니다.

0열

1답변

백엔드에서 pyspark를 사용하여 모델을 만든 다음 프론트 엔드에 Rshiny를 사용하여 대화 형 대시 보드를 구축 할 수 있습니까?

지금 SparkR을 사용하여 임의의 포리스트 모델을 실행중인 백엔드를 빌드하려고합니다. 하지만 결정 트리가 필요하고 sparkR에는 그게 없어요. 또한 sparkR에는 적절한 문서가 없습니다. 또한 Python에서 Rshiny만큼 쉬운 것이 있는지는 잘 모릅니다. 따라서 Pyspark 및 ShinyR을 사용하여 응용 프로그램을 빌드 할 수 있는지 알고 싶습

0열

2답변

"01MAR1978 : 00 : 00 : 00"문자열 형식을 SparkR에서 날짜 형식으로 변환하는 방법?

나는 다음과 같은 형식으로 날짜가 : 08MAR1978 : 00 : 00 : 00 10FEB1973 : 00 : 00 : 00 15AUG1982 : 00 : 00 : 00 I 1978년 3월 8일 1973년 2월 10일 :로 변환하고 싶습니다 1982년 9월 15일 은 내가 SparkR에 다음과 같은 시도 : period_uts <- unix_timesta

1열

1답변

EMR 클러스터에서 spark-submit 또는 sparkR을 사용하여 SparkR 스크립트를 실행하는 방법은 무엇입니까?

나는 sparkR 코드를 작성했으며 EMR 클러스터에서 spark-submit 또는 sparkR을 사용하여 제출할 수 있는지 궁금합니다. 내가 예를 들어 여러 가지 방법을 시도 : Error in sparkR.sparkContext(master, appName, sparkHome, sparkConfigMap, : JVM is not ready after

1열

1답변

sparkdataframes에서 sparkR에 data.table을 사용할 수 있습니까?

상황 나는 정말 빨리하기 때문에 대신 plyr 또는 sqldf의 data.table에 Rstudio에서 작동하는 데 사용됩니다. 자, 나는 푸른 클러스터에서 sparkR에 대해 연구하고 있는데, 스파크 데이터 프레임에 data.table을 사용할 수 있다면 지금하고 싶습니다. SQL보다 빠르다 면요?

0열

1답변

SparkR csv 및 마루로 데이터 프레임을 쓰는 동안 오류가 발생했습니다.

스파크 데이터 프레임을 csv 및 마루에 쓰는 동안 오류가 발생합니다. 나는 이미 winutil을 설치하려고하지만 여전히 오류를 해결하지는 않습니다. 내 코드 INVALID_IMEI <- c("","000000000000000") setwd("D:/Revas/Jatim Old") fileList <- list.files() cdr

0열

1답변

YARN 클러스터의 sparkR

나는 http://ec2-54-186-47-36.us-west-2.compute.amazonaws.com:8080/에 두 개의 작업자 노드와 하나의 마스터 노드가 있다는 것을 알 수 있습니다. 스파크 클러스터를 보여줍니다. 제 2 작업자 노드와 1 명의 마스터에서 jps 명령을 실행하면 모든 서비스가 작동하는 것을 볼 수 있습니다. 다음 스크립트 SPARK

1열

1답변

SparkR에서 "sql (sqlContext ...) '이 (가) 권장되지 않습니다"라는 경고를 해결하는 방법

SparkR을 사용하여 이전 버전의 새 버전을 빌드하고 있습니다. 이 hiveContext <- sparkRHive.init(sc) hive_db = 'our_database' db <- sql(hiveContext, paste0("use ", hive_db)) 같은 블록에 나는 'sparkRHive.init' is deprecated. Use 's

0열

2답변

sparkR - 목록의 서브 세트 값

스파크 데이터 프레임에 대해 다음 작업을 어떻게 수행합니까? dplyr에서, 나는 이런 짓을 했을까 : library(dplyr) df1 <- data.frame(x = 1:10, y = 101:110) df2 <- data.frame(r = 5:10, s = 205:210) df3 <- df1 %>% filter(x %in% df2$r) 은 어떻

0열

1답변

sparkR - 캐스팅하여 날짜 형식

Spark 데이터 프레임에 대해 특정 형식의 문자열을 현재까지 캐스팅하는 방법은 무엇입니까? dplyr, 나는 이런 짓을 했을까 : df = data.frame(dt1 = c("22DEC16", "12JUN16"), x = c(10,20)) df = df %>% mutate(dt2 = as.Date(dt1, "%d%b%y")) > df dt1