bigdata

-1열

1답변

Tableau 또는 PowerBI를 사용하여 1b 행의 데이터로 데이터베이스를 직접 쿼리하십시오.

가끔은 5 초 미만의 응답, 때로는 1 미만의 응답으로 Tableau 또는 PowerBI에서 db/cube/etc를 쿼리하는 사람들이나 회사를 종종 보게됩니다. 그들은 어떻게합니까? 아가미에 최적화 된 데이터입니까? 그들은 거대한 Db를 사용하고 있습니까? 관련 질문에 나는 SQL DW에 비해 Tableau가있는 훨씬 작은 데이터 세트 100m 행을 분석하

sql azure bigdata tableau 2017-10-26

---

0열

1답변

많은 양의 맞춤 마커를로드 할 때 정적 인 Google지도 표시

여기 마커가있는 Google 정적지도를 인쇄하려고합니다. 내가 시간이지도가 공백으로 표시됩니다 구글 정적지도에 사용자 정의 마커의 대량 (약 200 개 이상의 마커)를로드하려고 할 때, 여기 마커 아이콘 URL 및 위도, 긴 길이 감소하지만 데이터가 증가하면 문제가 다시 사임 . 이 문제를 해결하기 위해 나를 인도 해 주시고, 아래에 제 코드를 제공하고 있

angularjs google-maps bigdata google-maps-markers google-static-maps 2017-10-26

---

0열

1답변

스파크 스트리밍이 정보를 유지하지 않습니다.

나는 wordcount와 비슷한 Spark Streaming 스크립트를 만들었습니다. 플러스는 모든 정보를 컬렉션 (addsRDD)에 저장하려고하지만 잠시 후 블록이 없어지기 때문에 예외가 시작된다는 것입니다. 이 누적 RDD를 메모리에 보관할 수 있습니까? import org.apache.spark._ import org.apache.spark.stre

hadoop apache-spark bigdata real-time spark-streaming 2017-10-26

---

4열

4답변

Apache Spark를 사용하여 테이블에 다중 삽입

프로젝트에서 작업 중이고 다음과 같은 경우에 멈추었습니다. 나는 테이블이 있습니다 superMerge (ID, 이름, 급여) 을 나는이 개 다른 테이블이 : 표 1 및 표 2 모든 테이블 (표 1, 표 2 및 superMerge)와 동일한 구조를 가지고 있습니다. 이제는 table1과 table2의 superMerge 테이블을 삽입/업데이트하는 것이 좋습니

hadoop apache-spark bigdata phoenix 2017-10-26

---

1열

3답변

고유 ID를 사용하여 문자열을 생성하는 인스턴스를 카운트하십시오.

특정 문자열이 발생하는 횟수를 계산해야하지만 한 ID에 두 번 이상 같은 문자열이있는 경우 한 번만 계산하면됩니다. 기본적으로 ID에 고유하게 나타나는 문자열의 발생 횟수를 계산해야합니다. 나는 이것이 간단한 일이되어야한다고 믿지만 나는 내가하는 일을 모른다. 다음은 현재 코드입니다. SELECT RXNAME as Name, DUPERSID as ID,

sql google-bigquery bigdata 2017-10-26

---

-1열

1답변

pyspark를 사용하여 Spark 데이터 프레임에 참여하는 동안 이러한 Py4JJavaError showString 오류가 발생하는 이유는 무엇입니까?

나는 pyspark를 사용하여 Spark에서 데이터 프레임에 참여하려고합니다. 이 두 dataframes은 (그들 중 하나가 5기가바이트보다 더) 매우 큰, 나는 아래의 오류가 점점 계속 : 무슨 일이야 train_holiday_oil_store_transaction_item_test_004 = train_holiday_oil_store_transactio

python apache-spark pyspark bigdata left-join 2017-10-31

---

0열

1답변

여러 제품 간 다중 상관 계산하기

나는 과거 주문 및 판매와 관련하여 모든 새로운 주문에 대한 권장 모델을 작성하기 위해 원하는 여러 항목 간의 상관 관계를 원합니다 (제품의 상관 관계에 따라 권장) 선택한 제품 및 다른 사람), 그래서 내가이 상관 관계를 얻을 수있는 아이디어가 그 항목의 수량의 총을 가진 모든 주문을하고 항목 사이의 상관 관계를 계산하는 내 데이터 pivoting 쿼리를

r statistics bigdata correlation data-science 2017-11-01

---

0열

1답변

데이터가 카프카 서버에 푸시 된 후 데이터를 삭제합니다.

Oracle 데이터베이스에서 데이터를 가져 오기 위해 합류 플랫폼 3.3을 사용하고 있습니다. 일단 데이터가 카프카 서버로 보내지면 검색된 데이터는 데이터베이스에서 삭제되어야합니다. 어떤 방법이 있습니까? 제발 제안 해주세요.

java apache-kafka bigdata apache-kafka-connect confluent-kafka 2017-11-02

---

2열

1답변

Pandas를 사용하여 Python에서 대형 SQL 쿼리를 처리합니까?

저는 파이썬, psycopg2 및 팬더를 사용하여 Postgres 데이터베이스에서 가져올 일부 데이터를 다시 테스트하고 싶습니다. Postgres에서 가져올 데이터가 매우 큽니다 (10Gbs 이상). 팬더 데이터 프레임이이 많은 데이터를 저장할 수있는 경우에도 내 시스템이 RAM 측면에서이를 보유 할 수 없습니다. 1 : 원격 (LAN 기반) 포스트 그레스

python postgresql pandas dataframe bigdata 2017-11-02

---

0열

2답변

급여가 그의 부서의 평균보다 큰 종업원의 이름과 부서를 얻는 방법은 무엇입니까?

나는 하둡과 돼지에 초보자이다. 질문에 따라 아래의 스크립트까지 드릴 다운 할 수 있었지만, 나는 어떻게 사람의 급여를 자신의 평균 급여와 비교할 수 있을까? 다음은 각 부서의 평균 급여를 얻기 위해 작성된 스크립트입니다 A = LOAD 'Assignment_1_Input.log' USING PigStorage('\t') as (id:int,name:cha

bigdata apache-pig hadoop2 2017-11-04

---