하이브의 특정 정크 문자를 바꿉니다

Question

하이브 테이블에로드 된 열 중 하나에 실제 값 (ABC) 접미사가 붙은 정크 문자 ("~)가있는 문제가 있습니다. 따라서이 열에 표시되는 실제 값은 (ABC"~)입니다.

이 열은 ABC (또는 이와 유사한 문자열) 또는 NULL을 가질 수 있습니다. 테이블이 크고 업데이트가 옵션이 아닙니다.

문자열 (ABC) 또는 NULL이 포함 된 임시 테이블을 만드는 방법을 생각해 본 결과 원본 테이블에서이 임시 테이블로 데이터를 복사하는 동안이 정크 문자 ("~)를 완전히 제거하려고합니다. 표.

이 쓰레기를 어떻게 제거 할 수 있습니까? 나는 regexp 함수를 사용해 보았지만 성공하지 못했다. 어떤 제안?

Answer 1

제대로 정규 표현식을 사용하지 않았습니다. 내 잘못.

테이블에 처음로드 된 데이터에는 추가 값이 열 값에 첨부되어 있습니다. 예 : 열의 실제 값이 Adf452 인 경우 셀에 포함 된 데이터는 Adf452"~입니다.

그래서 나는이 같은 임시 테이블에 데이터를로드 :

insert overwrite table tempTable select colA, colB, colC, regexp_replace(colC,"\"~",""), partitionedCol from origTable; 

이 단순히 그 정크 문자없이 TEMPTABLE의 데이터를로드.