etl

2열

1답변

필자는 Azure에 비교적 익숙하지 않으며 기존 SQL 데이터베이스에 연결하여 데이터를 입력하기 위해 어떤 옵션이 있는지 찾는 데 어려움을 겪고 있습니다. 우리는 Azure SQL 데이터베이스에 연결하여 데이터를 지속적으로 밀어 넣어야하는 외부 클라이언트가 있습니다. 우리는 데이터베이스에 들어갈 수있는 권한을 부여 할 수 없기 때문에 데이터를 허용 할 수있

-1열

1답변

복합 기본 키 기반 SQL 테이블 업데이트

매일 실행되는 ETL 프로세스 (CSV-SQL 데이터베이스)가 있지만 소스의 데이터가 변경되는 경우가 있으므로 업데이트 된 파일로 다음 날 다시 실행해야합니다. . 모든 차이점을 찾기 위해 SQL 문을 작성하려면 어떻게해야합니까? 예를 들어, Table_1이 FK_1, FK_2 및 FK_3로 구성된 복합 PRIMARY KEY을 가지고 가정 해 봅시다. SQ

0열

1답변

Java 클라이언트에서 DataStage 작업 ETL을 시작하는 방법은 무엇입니까?

나는 DataStage에 대해 많이 모른다는 전제를 전제로합니다. 다른 사람이 "ETL 작업"을 작성했으며 Java 프로그램에서 클라이언트로 실행해야한다는 것을 알고 있습니다. 어떻게해야합니까? 편집 : 데이터 스테이지 서버는 자바 프로그램을 실행하는 클라이언트에서 phisically 다르다. DataStage 서버에서 실행중인 명령을 사용할 수 없습니다.

0열

2답변

SSIS 파일 시스템 작업 오류

foreach loop 컨테이너를 사용하여 File System Task을 사용하여 패키지를 만들었습니다. 여러 파일을 이동하고 이름을 바꿔야합니다. 원본 및 대상의 여러 변수를 사용하고 있습니다. 및 파일 이름. 그것은 변수가 잘 정의 된 것으로 보인다. 모두 V- 드라이브를 가리 킵니다. 패키지를 실행하려고, 에러 제공 : 실제로 C 드라이브 \ 프로그

-2열

2답변

파일 통합 서비스 픽업 및 어떤 파일을 매개 변수 파일로 사용합니까?

나는 파일 'A'와 파일 'B'를 변수로 사용하여 두 파일의 값이 다릅니다. 세션 수준에서 파일 A를 지정하고 파일 B는 경로의 워크 플로우 수준에서 지정됩니다. 파일 통합 서비스 픽업 및 어떤 파일이 매개 변수 파일로 사용됩니까?

2열

1답변

여러 원시 파일을 하나의 마루 파일로 결합하십시오.

S3에서 yyyy/mm/dd/hh로 파티션 된 많은 수의 이벤트가 있습니다. 모든 파티션에는 약 80,000 개의 원시 텍스트 파일이 있습니다. 모든 원시 파일에는 JSON 형식의 약 1.000 이벤트가 있습니다. datasource0 = glueContext.create_dynamic_frame.from_catalog(database=from_databa

1열

1답변

Canal (Open Studio) Talend를 사용하여 폴더에서 Vertica 로의 데이터로드를 자동화 할 수 있습니까?

매번 플랫 파일을 수동으로 내보내는 대신 내 데이터를 자동으로 Vertica에로드하는 방법을 찾고 있었고 ETL Talend를 발견했습니다. 여러 개의 CSV 파일이 포함 된 테스트 폴더로 작업 중이며 파일을 vertica에 넣을 수 있도록 작업을 빌드하는 방법을 찾으려고합니다. 오픈 스튜디오 버전 (무료)에서 볼 수 있듯이 파일에 동일한 스키마가 없으면

1열

1답변

눈송이 변환의 데이터 유형 (산술 연산자)

안녕하세요 제 기능이 아닌 코드에 대한 질문이 있습니다. 보시다시피, 나는 일부 테이블을 유니온과 연결하려고합니다. 마케팅 애플리케이션의 레코드를 원하지만 일부 산술 연산자를 사용해야합니다. 문제는 비록 데이터 유형을 Number로 설정하더라도 코드가 작동하지 않지만 다른 변환에서는 문제가 없음을 알 수 있으며 "숫자 값"은 인식 할 수 없다 "라는 오류를

1열

2답변

테이블을 업데이트 한 SSIS 패키지 이름

테이블 이름을 기반으로 SSIS 패키지 세부 정보를 얻도록 도와주십시오. 예 : ssis 패키지를 기반으로 한 업데이트 A 테이블이 있습니다. 그래서 나는 그 패키지의 이름을 말하고 싶다. 백엔드에서 얻을 수있는 쿼리가 있습니까?

1열

1답변

ForEach 루프 컨테이너에 대한 SSIS 변수 구문

SSIS 및 변수를 여전히 배우고 있으며 구문에 관한 질문이 있습니다. 처음으로 패키지에 ForEach 루프 컨테이너를 사용하고 있습니다. ForEach는 서버 폴더를 검색하고 변수는 고객 주문 번호라는 제목의 새 하위 폴더를 만들고 마지막으로 고객 주문 번호 폴더에 6 개의 새 하위 폴더를 만듭니다. 제 질문은 고객 주문 번호 폴더에 생성 된 6 개의 하