azure-data-lake

0열

1답변

파이프 라인이 작업을 완료하는 총 시간을 계산 하시겠습니까? 아니 개별 조각

환경 & 세부 푸른 데이터 공장 전제에 에 대한 - IaaS의 서버 푸른 데이터 호수 시나리오 저는 ADF 파이프 라인을 개발했으며 하늘색 데이터 팩토리에 배포했습니다. 파이프 라인의 일환으로 - 나는 온 프레미스 서버에서 데이터를 복사하고 CSV 형식의 푸른 하늘 호수에 데이터를 복사하는 거의 50 개의 복사 작업을합니다. 나는 50 복사 활동이 모든 활

azure-data-factory azure-data-lake 2017-05-11

---

1열

2답변

ADL 테이블에서 읽는 동안 데이터 추출 최적화

라운드 로빈 분배 스키마를 사용하여 ADL 테이블에 데이터를 삽입합니다. 다른 작업에서는 세 가지 다른 파티션에 대한 테이블에서 데이터를 추출하고 파티션에 대해 고르지 않은 수의 정점을 관찰했습니다. 예를 들어 한 파티션에서 264GB 데이터에 56 개의 정점을 만들고 다른 파티션에 209GB 데이터에 대해 2 개의 정점을 만듭니다. 정점이 거의없는 파티션

azure-data-lake u-sql 2017-05-12

---

1열

2답변

ADLA 작업이 예상 결과를 생성하지 않습니다.

U-SQL에서 데이터를 처리 중이지만 예상 결과가 나타나지 않습니다. @의 데이터 2와 @의 데이터 3의 1- Select data from ADL table partitions and assign it to @data1 2- Aggregate data using Group BY and assign it to @data2 3- Truncate par

azure-data-lake u-sql 2017-05-12

---

0열

1답변

USQL을 사용하여 CSV로 JSON을 병합하는 방법

Microsoft.Analytics.Samples.Formats.Json.JsonFunctions.JsonTuple을 사용하여 일부 데이터를 가져올 수 있지만 전체 파일을 병합하는 데 문제가 있습니다. { "SourceUrl":"http://www.unittest.org/test.html", "Title":"Unit Test File", "Guest"

json csv azure azure-data-lake u-sql 2017-05-16

---

0열

3답변

Azure 데이터 팩토리 : 주파수 구성

Azure Data Factory를 프로젝트의 데이터 호수 분석 작업을위한 트리거로 사용할 계획입니다. 데이터 레이크 작업은 StreamAnalytics에서 처리하고 데이터 레이크에 저장된 센서 입력 데이터를 기반으로 키 수치를 계산합니다. 이 작업은 ~ 5 분마다 값을 계산해야합니다. Microsoft 설명서에 따르면 15 분 미만의 간격/빈도를 구성 할

azure azure-data-factory azure-data-lake azure-stream-analytics 2017-05-16

---

0열

1답변

U-SQL 테이블의 클러스터 된 인덱스가 병렬 처리에 영향을 줍니까?

우리는 U-SQL 테이블로 작업하고 있으며 클러스터 된 인덱스와 관련된 질문이 있습니다. U-SQL 테이블에서 병렬 처리는 데이터가 분할되고 분산되는 방식으로 관리됩니다. Clustered Index는 U-SQL 테이블에서도 병렬 처리에 영향을 줍니까? 둘째, 분산 물통에서 데이터 비뚤어 짐을 어떻게 관리합니까?

azure-data-lake u-sql 2017-05-16

---

0열

1답변

U-SQL 테이블에서 라운드 로빈 분배 스키마를 사용할 때 생성되는 분배 버킷의 수는 얼마나됩니까?

파티션 당 배포 물의 수를 지정하지 않으면 라운드 로빈 배포 체계로 몇 개의 배포판을 만들 수 있습니까? Clustered Index 키는 배포 횟수에 영향을 미칩니다. 파티션마다 다른 개수의 배포 버킷을 만들 수 있습니까?

azure-data-lake u-sql 2017-05-16

---

0열

1답변

데이터 호수 저장소에 대한 권한 부여/인증 버튼 JSON의 인증 및 세션 ID

데이터 호수 저장소의 권한 부여/인증 버튼 데이터 호수 저장소 대체 권한 없음 JSON의 인증 및 세션 ID. 내가 모질라 파이어 폭스 나 크롬 브라우저

azure azure-data-factory azure-data-lake 2017-05-16

---

1열

1답변

U-SQL Azure 데이터 팩토리에서 .csv 파일에서 몇 개의 열만 선택하려고합니다.

U-SQL Azure 데이터 팩토리에서 .csv 파일에서 몇 개의 열만 선택하려고합니다. 내가 5 열을 선택하고 모든 열을 지정해야합니다 내장 추출기를 사용하는 경우 새 파일

azure-data-lake 2017-05-17

---

0열

1답변

Microsoft Azure의 Data Lake 저장소 계정의 출력 폴더에 파일을 다시 쓰는 동안 파일 이름을 변경하십시오.

내 문제에서 도움이된다면 도움이 될 것입니다. 내 프로젝트 요구 사항에서 Microsoft Azure (클라우드 기반 플랫폼)의 Data Lake Store에 특정 이름으로 파일을 저장해야합니다. HDInsight 클러스터에서로드 된 파일에 의해 생성 된 데이터 프레임에서 변환 또는 작업을 수행 한 후 특정 폴더에 데이터 프레임을 쓰면 hadoop 형식의

azure hadoop azure-data-lake 2017-05-17

---