나는 SQL Server 2016을 사용하며 매우 바빠서 DataFlow task입니다. 내 DataFlow task에서 어떤 이유로 Multicast component을 사용합니다. DataFlow에 새 Flow를 작성한 후에는 새로운 플로우의 일부 컬럼을 삭제해야합니다.SSIS에서 DataFlow Task의 열을 삭제하려면 어떻게해야합니까?
그냥 자세한 내용은, 내가 할 필요가 내 흐름에서 200 개 이상의 열이 나는 그 컬럼의 10을 필요로하기 때문이다.
DataFlow Task의 열을 SSIS에서 어떻게 삭제할 수 있습니까?
당신 이 추가 할 수 있습니다 추가 구성 요소를 선택하는 것이 좋다. 그러나 이는 결코 복잡성을 줄이거 나 성능을 향상시키지 않습니다. 논리적으로 생각해 보면 인터페이스를 추가해야합니다. 성능면에서는 열을 제거하는 모든 것이 하나의 버퍼에서 다른 모든 버퍼로 한 행 집합을 복사하는 것을 의미합니다. 이를 비동기 변환이라고하며, here 및 here으로 설명하는 것이 좋습니다.행을 복사하는 것이 제자리에서 업데이트하는 것보다 효율적이지 않다고 생각할 수 있습니다.
이 가이드 라인을 사용하면 일반적인 방향으로 나아갈 수 있지만 구체적인 성능 문제를 해결하기위한 추가 질문이 게시됩니다.
당신은 "당신은 데이터를 테이블로 옮겨서 멀티 캐스트를 사용하지 않고 두 번 읽을 수 있습니다"라고 말했습니다. 정말로 모든 행을 무대 테이블에 삽입하고 다른 데이터 흐름에서 다시 읽는 것이 훨씬 효율적입니다. 많은 열이있는 하나의 긴 데이터 흐름보다 효율적입니까? 또는 전체 버퍼를 하드 디스크에 삽입하지 않고 한 번에 하나의 데이터 흐름으로 다른 버퍼 전체에 하나의 행 집합을 복사하고 두 번째 시간에 일부 필드를 읽는 것이 더 좋지 않습니까? –
모든 것은 대소 문자가 다르지만, 블라인드 베팅을 부탁하면 데이터베이스에 데이터를 쓰게됩니다. 작은 작업 단위로 생각하십시오. 테스트 및 유지 관리가 쉬우 며 일반적으로 더 잘 수행됩니다. 이는 데이터베이스를 잘 활용하고 더 나은 성능의 병렬 작업 흐름을 생성 할 수 있기 때문에 데이터베이스를 활용할 수있는 경우가 많습니다 –
단일 데이터 흐름에서 열을 제거하기 위해 UNION ALL 작업에 하나의 데이터 흐름 경로 만 전달할 수 있다고 생각합니다.
열을 제거하려는 단일 데이터 흐름 경로를 사용하여 Union All 작업으로 전달하십시오. 그런 다음 Union All 작업을 열어 해당 경로에서 제거 할 열을 마우스 오른쪽 단추로 클릭하고 삭제를 선택하십시오.
일반적으로 데이터 소스가 원하지 않는 열을 보내지 않도록 변경해야한다고 생각하지만 특별한 경우입니다. 하나의 경로는 소스에서 모든 열을 필요로하는 멀티 캐스트에서 하나의 경로로. 데이터 소스에서로드되어 있기 때문에 그런 The component that will reduce the column numberMulticast를 사용하는 경우 모든
첫째, 내가
당신이 여러 방법으로 작업을 수행 할 수 있습니다 ... 다음 곱한 당신이 요구하는 것은 더 나은 성능을 제공합니다 생각하지 않습니다 :
당신이 감소 열 소스와 다른 DataFlow Task을 만들 수 있다면는 (예는 : 특정 열 OLEDB 명령)이
당신은 (아래 그림처럼) 비동기 출력 으로을 Script component를 추가하는 Vb.net 또는 C# 스크립트를 사용하여 매핑 출력이 같은 뭔가 점은 지정된 열을 추가 할 수 있습니다
Output0Buffer.AddRow()
Output0Budder.OutColumn = Row.inColumn
UNION ALL 구성 요소를 추가
사이드 참고 : 그것은 각 시나리오의 성능을 테스트하고 어떤 종류의 더 나은
코드를 정리하거나 성능을 향상시키는 것이 목표입니까? –
@ MarkWojciechowicz : 둘 다 내 목표입니다. –