etl

0열

2답변

현재 S3 내에 데이터 레이크를 만들고 있으며 DMS를 사용하여 mysql DB에서 S3로 데이터를 성공적으로 이동했습니다. DMS에서 '기존 데이터 마이그레이션 및 진행중인 변경 사항 복제'옵션을 선택했습니다. 나는 CSV로 데이터를 변형 시켰지 만, 장래에 마루를 선택할 것입니다. 이 메서드는 데이터베이스 테이블의 모든 원시 데이터가있는 초기 csv 파

0열

1답변

자식 패키지의 스크립트 태스크를 호출하는 SSIS 오류

격리되어 실행될 때 완벽하게 실행되는 하위 패키지가 있습니다. 내가 패키지 실행 작업을 통해 부모 패키지에서 동일한 패키지를 호출 할 때 나는 오류를 얻을 :는 0xC000F427 To run a SSIS package outside of SQL Server Data Tools you must install Standard Edition of Integra

1열

1답변

SSIS를 사용하여 Excel에서 Excel로 데이터를로드 할 수 없습니다.

SSIS 패키지를 사용하여 SQL Server로 Excel 파일을 가져 오려고하는데이 파일을 업로드하려고 할 때마다 마지막으로 업로드 된 행이 업로드되지 않습니다. 정확한 55107은 업로드해야하지만 54990 만 업로드됩니다. 117 행에 몇 가지 문제가 생겨서 그 이유를 파악할 수 없습니다. 이 오류 메시지를 이해하고 문제를 해결할 수 있도록 도와주세요

2열

1답변

사용자 지정 SSIS 구성 요소의 경우 GAC에 넣어야하는 이유는 무엇입니까?

나는이 문서에 따라 사용자 정의 SSIS 작업을 만듭니다 Developing a Custom SSIS Source Component는 이제, DLL을 컴파일 한 후 나는 관련 SQL Server 버전의를 PipelineComponents 폴더에 넣어해야합니다. 이 기사에는 또한 GAC에 등록해야한다고 나와 있습니다. ("맞춤 구성 요소 배포"섹션에서) 왜

2열

1답변

오류

그래서 난 내 DB 를 파일이 정말 간단하고있는 테이블로 (구분 기호로 쉼표를 사용하여) 플랫 텍스트 파일을 가져 오기로 재미있는 상황이 발생했습니다 특정 디자인을 따르지 않을 경우 패키지 중 이 이상한 상황을 발견 한 유일한 이유는 패키지가 실패 할 경우 약간의 오류 로깅 오류를 테스트하려고했기 때문입니다. 의도적으로 내 패키지를 손상 시키려고 할 때 텍

1열

1답변

MySQL 데이터 추출 및 저장

데이터가 약 30-40GB이고 XML로 표시되며 MySQL 서버에 BLOB로 저장됩니다. XML을 구문 분석하고 다른 열 (10-20 열)으로 저장할 특정 특성을 추출해야하는 새 테이블을 만들고 싶습니다. 좋은 ETL 도구를 사용할 수 있습니까? 참고 : 현재 저는이 변환에 JDBC와 Java를 사용하고 있습니다.

2열

1답변

데이터베이스를 반복해서 쿼리하거나 모든 데이터를 한 번에 파일에 저장하고 파일을 쿼리합니까?

나는 작업의 필요성에 따라 다르게 같은 세트의 테이블을 질의 할 Talend 작업 세트를 만들고있다. 이 테이블은 거대합니다. 작업을 실행하기 전에 모든 테이블을 쿼리하고 DB에서 모든 데이터를 가져 와서 파일에 저장 한 다음 Talend 작업의 다양한 쿼리에 대해 파일을 사용하면 작업이 원활할까요? 이러한 파일은 DB 서버가 다른 곳에있는 동안 작업이 실

2열

2답변

은 ssis에서 csv로 내보내기하는 동안 앞에 오는 0을 포함합니다.

테이블에서 .csv 파일로 데이터를 내보내는 패키지가 있고, 600 000 레코드를 내 보냅니다. 선행 0과 후행 0이있는 소수의 데이터 만 내보내고 선행 0과 후행 0을 모두 내 보내면 데이터가 누락됩니다. EX : I가 데이터 변환 배치와 같은 많은 방법을 시도 column1 column2 1 67.5 CSV 파일의 실제 데이터 소스로부터 오는

0열

2답변

SSDT에서 쿼리 실행

Visual Studio 2015, SSIS를 사용하여 SQL 작업 실행에서 SQL 작업 집합을 실행 한 다음 SSIS에서 패키지를 실행하여 SSMS에있는 테이블간에 데이터 전송을 수행합니다. SSMS에서 일련의 SQL 문을 실행할 때 모든 SQL 성공 활동에 영향을주는 행과 같은 결과가 표시됩니다. 그러나 이제는 SSIS를 사용하여 턴 어라운드 시간을 줄

3열

1답변

데이터에 큰 따옴표가있는 SSIS를 사용하여 SQL Server로 csv 파일 가져 오기

SSIS 패키지를 사용하여 SQL Server 테이블로 CSV 파일을 가져올 때 매우 특정한 상황으로 인해 문제가 발생합니다. CSV 파일의 데이터에는 큰 따옴표와 쉼표가 포함될 수 있습니다. 따라서 쉼표가있는 데이터는 큰 따옴표로 묶이고 큰 따옴표는 큰 따옴표로 이스케이프 처리됩니다. 나는 초기 둘러싼 따옴표를 성공적으로 처리하기 위해 텍스트 한정자를 사