hdinsight

1열

1답변

Web Platform Installer 5.0을 사용하여 Windows Azure 용 Microsoft HDInsight 에뮬레이터를 설치하려고합니다. Hortonworks 데이터 플랫폼을 설치하는 동안 설치가 실패합니다. 내가 명령 프롬프트에서 명령 'C:\Azul\zulu1.7.0_65-7.6.0.1-win64\bin\java -version 2>&1

1열

2답변

spark-shell 오류 : 스키마에 대한 FileSystem이 없습니다. wasb

Azure에서 HDInsight 클러스터가 실행 중이지만 클러스터 생성시 에지/게이트웨이 노드를 회전시킬 수 없습니다. 그래서 echo 'deb http://private-repo-1.hortonworks.com/HDP/ubuntu14/2.x/updates/2.4.2.0 HDP main' >> /etc/apt/sources.list.d/HDP.list e

0열

2답변

HDInsight 클러스터에 연결된 스토리지 계정을 사용하면 어떤 이점이 있습니까?

HDInsight 클러스터의 경우 기본 저장소 계정 인 적어도 하나의 청색 저장소 계정이 있어야합니다. fs (파일 시스템)로 처리해야합니다. 이것은 내가 얻는다. 그러나 옵션으로 연결되어있는 하늘빛 저장고는 어떨까요? 최소한 ADF (Azure Data Factory)의 관점에서, 스토리지 계정을 연결된 스토리지 계정으로 HDInsight 클러스터에 추가

0열

2답변

HDInsight Hadoop 클러스터와 HDInsight Spark 클러스터의 차이점은 무엇입니까?

HDInsight Hadoop 클러스터의 다른 점 & HDInsight Spark 클러스터의 다른 점은 무엇입니까? 나는 Hadoop 클러스터에서도 pyspark를 사용할 수 있음을 보았다. 클러스터 유형과의 차이점은 무엇입니까? Hadoop 클러스터는 YARN을 클러스터 관리 레이어로, Spark는 Spark Standalone (또는 Mesos?)을 클

4열

1답변

Spark SQL jdbc 드라이버가 있습니까?

Spark SQL을 지원하는 클라이언트 jdbc 드라이버를 찾고 있습니다. Spark (SQLInsight에서 실행 중)에서 SQL 문을 실행하기 위해 Jupyter를 사용하고 있으며 제 3 자 SQL 클라이언트 (예 : SQuirreL, SQL Explorer 등)를 사용할 수 있도록 JDBC를 사용하여 연결할 수 있기를 바랍니다. 등). Microsof

0열

2답변

응용 프로그램 통찰력 로그 분석

blob 저장소에 저장된 텍스트 파일에 이벤트가 기록되고 json으로 저장되는 Application Insights의 이벤트 로그가 있습니다. customProperty가 조건을 충족하는 jsons를 찾아야합니다. 적중 횟수는 매우 적습니다 (약 10 또는 20). 그러나 기록 된 데이터는 매우 큽니다. 이것이 어떻게 효율적으로 성취 될 수 있는지에 대한

0열

1답변

Microsoft Azure에서 Pyspark 스크립트를 자동화하는 방법

잘하고 있습니다. 저는 Microsoft Azure뿐 아니라 Spark를 처음 사용합니다. 프로젝트 요구 사항에 따라 우리는 HDInsight 클러스터에 설치된 jupyter 노트북을 통해 pyspark 스크립트를 개발했습니다. 날짜가되기 전까지는 우리가 코드를 실행했지만 지금은 스크립트를 자동화해야합니다. Azure Datafactory를 사용하려고했지만

1열

1답변

HDInsight의 기본 저장소 계정은 무엇입니까

주어진 HDInsight 클러스터의 경우 '기본 저장소 계정'및 '연결된 저장소 계정'이있는 것으로 나타났습니다. 무슨 뜻이에요? 특정 계정이 특정 HDInsight 클러스터의 기본 저장소 계정으로 특별한 것은 무엇입니까? 이 클러스터와 관련하여 임의의 스토리지 계정과 다른 점은 무엇입니까? 아마도 클러스터에서 스토리지 계정에 액세스하려고 할 때마다 키를

0열

1답변

HDInsight 클라이언트가 누락되었습니다.

Azure에서 실행되는 HDinsight 클러스터가 있습니다. HDInsight에 연결할 클라이언트 컴퓨터를 만들려고했습니다. Hortonworks 설치 안내서의 지시에 따라 모든 클라이언트 구성 요소를 설치 한 다음/etc/hadoop/conf 파일을 HDInsight 노드 중 하나에서이 새 노드로 복사했습니다. 내가 하둡 때 fs -ls하여 클러스터에

0열

1답변

하이브 테이블 데이터를 Odata로 노출

내 스파크 작업의 일부로 출력을 HDInsight의 하이브 테이블에 저장합니다. 나는 이제 Tableau 또는 다른 도구와 같은 Odata 피드를 사용할 수있는 COTS 도구에 데이터를 노출하려고합니다. 어떤 사람이이 일을 어떻게 수행 할 수 있는지에 대한 조언이 있는지 궁금합니다.