Netezza 열에서 특수 문자 제거 방법

Question

ETL 도구 인 Talend를 사용하여 한 Netezza 데이터베이스에서 다른 Netezza 데이터베이스로 데이터를 전송합니다. varchar (30) 필드에서 데이터를 가져 와서 새 데이터베이스의 varchar (30) 필드에 넣으려고하면 너무 길다는 오류가 발생합니다. 로그는 필드 끝에 공백이 있고 그 뒤에 사각형이 표시되어 알아낼 수없는 문자를 나타냅니다. 아래 로그의 스크린 샷을 첨부했습니다. 나는이 필드를 끌어 와서 CRLF라고 생각했던 것을 대체하기 위해 SQL을 쓰려고했지만 운이 없다. 필드를 선택하고 길이를 얻을 때 볼 수있는 것보다 몇 가지 여분의 문자가 있으므로 뭔가가 있으며 제거하려고합니다. 트리밍은 아무 것도하지 않습니다.

이 SQL은 단순히 열 자체에서 length()를 수행하는 것보다 짧은 길이를 반환하지 않습니다. 다른 사람이 무엇인지 알 수 있습니까?

SELECT LENGTH(trim(translate(TRANSLATE(<column>, chr(13), ''), chr(10), ''))) as len_modified 

당신은 괄호 안에 사각형을 볼 수있는 로그의 마지막 열이, 조사 마지막 문자를 표시하도록되어 있다는

참고.

Answer 1

작동하는 더 큰 목표 테이블 크기로 데이터를 저장하십시오. 30 자 데이터가 500 자의 테이블에있는 경우 작동하도록하십시오. 그런 다음 추가되는 문자를 결정하는 데 가장 긴 필드에서 문자별로 문자를 살펴보십시오. ascii()와 같은 명령을 사용하여 개별 문자의 ASCII 값과 시작과 끝을 결정합니다. 대부분 처음부터 끝까지 추가 캐릭터를 얻고있을 가능성이 큽니다. 여분의 문자 데이터가 무엇인지 판별 한 다음 30 문자 열에 맞도록 코드를 제거하거나 코드를로드하지 마십시오. 또는 대상 열을 길게 남겨두고 추가 문자를 포함하십시오. 예를 들어 Varchar (30)은 Varchar (32)가됩니다 (공간을 낭비하지만 데이터가 변경되지는 않습니다).