u-sql

0열

1답변

Azure Blob 저장소로 Azure 데이터 레이크 분석에 연결할 수 있습니까?

안녕 Azure Data Lake Analysis를 사용하여 시스템 로그를 분석합니다. 는, 나는 데이터 호수 분석 (U-SQL)이 U-SQL을 실행하기 전에 BLOB 저장소 에서 파일을 읽을 이 U-SQL 프로그램, I에서의 Blob 스토리지를 연결 문제를 충족 TEST2 BLOB 저장소 및 testcon 용기 를 생성 (및 액세스 정책 설정) @sear

1열

1답변

OutOfMemory on custom extractor

나는 하나의 파일에 많은 수의 작은 XML 파일을 꿰맬 수 있으며 각 파일에 해당하는 1 바이트 배열로 행을 반환하는 사용자 지정 추출기를 만들었습니다. (gzip으로 압축, 11MB) 하나 개의 파일에 대한 원격에 실행/마스터 실행은, 그것을 잘 작동합니다. 하나 이상의 파일을 실행하면 System.OutOfMemoryException이 발생합니다. 지역

2열

1답변

Azure/U-SQL - 화면에 쿼리 출력

저는 Azure에서 U-SQL을 처음 사용했습니다 (저는 SQL Server에 대해 잘 알고 있습니다). 쿼리의 출력을 보는 방법을 알 수 없습니다. 모든 예에서 결과를 출력기를 통해 파일에 쓰는 것을 볼 수 있습니다. Data Explorer에서보기 위해 모든 것을 테이블로 밀어 넣어야합니까, 아니면 SSMS과 같은 결과 창으로 출력 할 수 있습니까? 주

0열

1답변

USQL/VS 2017 - SSMS CREATE 스크립트에서 구문 분석 스크립트를 만들 수 있습니까?

SQL Server로 가져온 모든 플랫 파일을 가지고 모든 변수 유형을 설정했습니다. 저는 Azure 환경에서 동일한 플랫 파일을 조작하고 가능한 경우 CREATE 스크립트를 재사용하고 싶습니다 (변수 유형 설정). 참고 : 저는 VS 2017을 사용하고 있습니다. 이것이 가능합니까?

1열

3답변

사례 연구의 U-SQL - SUM

고객 및 부서별로 집계하려고하는 고객 트랜잭션이있는 테이블이 있습니다. C# 동등 SELECT Cust_id , SUM(CASE WHEN dept = 1 THEN (price * qty) ELSE 0 END) dept_1_spend , SUM(CASE WHEN dept = 2 THEN (price * qty) ELSE 0 END) de

0열

1답변

Azure/U-SQL/R 서버 - 열 이름

U-SQL (VS 2017에서)을 사용하여 데이터 묶음을 조작 한 다음 R 서버에서이 집계 된 출력을 사용합니다 (이 모든 것은 Azure에서 발생합니다). 데이터를 집계하고 R 서버에 연결할 수 있습니다. 그러나 열에는 이름이 없습니다. U-SQL 작업 또는 그와 비슷한 이름을 출력하여 V1, V2 등을 사용하지 않는 방법이 있습니까?

1열

1답변

.net 커스텀 프로세서 나 리듀서를 사용하려면?

세션별로 논리적으로 분할 된 입력 데이터 세트가 있습니다. 처리하는 동안 나는 세션 당 행을 기반으로 계산 된 해시 값을 포함 할 하나 이상의 열을 생성해야합니다. 세션의 모든 행은 해시 값으로 스탬프 처리됩니다 (세션 내 동일). 입력/출력 카디널리티는 동일합니다. 그림은 내가 갖고 싶은 것을 보여줍니다. .net 사용자 지정 감속기 또는 프로세서를 사용

1열

1답변

Azure/U-SQL - ORDER BY in ROW_NUMBER()

중간 테이블이 여러 개인 U-SQL 스크립트를 작성하고 있습니다. 열 중 하나의 순서에 따라 ROW_NUMBER()를 할당하고 싶지만 이렇게하는 방법을 알아낼 수는 없습니다. @t = SELECT * FROM( VALUES (1, "2010-01-01","TagName1", 30), (2, "2010-01-01","T

1열

1답변

USQL에 대한 maxJsonLength 속성 설정 Newtonsoft JSON 추출기

Azure 데이터 호수 프로젝트에 USQL을 사용하고 있으며 입력 한 내용이 JSON 형식이며 각 줄을 추출하여 JSON 튜플로 변환하고 있습니다. 그러나 문제는 일부 문자열 길이가 102400보다 크고 Newtonsoft JSON 추출기가 102400 최대 길이로 기본 설정되어 있으며 이로 인해 이러한 레코드가 실패하게됩니다. 이러한 큰 입력을 처리하기

1열

1답변

Append 및 ConcurrentAppend로 만든 ADLS 파일에 연결

.NET API의 Append 메서드를 사용하여 만든 Azure Data Lake Store에 여러 개의 큰 CSV 파일이 있습니다. 최근 성능상의 이유로 ConcurrentAppend으로 전환했습니다. ConcurrentAppend와 Append는 서로 바꿔서 사용할 수 없으므로, 스위치는 ConcurrentAppend가 Append를 사용하여 생성 된