My Hadoop Cluster는 11:00에 모든 데이터에 대해 배치 작업을 수행합니다. 작업이 하이브 테이블 파티션을 생성합니다 (예. p_date = 201702, P_DOMAIN = 0)과 ETL 같은 하이브 테이블 파티션에 수입 RDBMS 데이터 .... (하이브 테이블이 외부 테이블 없음) 하지만, 작업이 실패했으며, 재 처리를 위해 일부 hdf
하이브에서 날짜 형식을 변경할 수 없습니다. 아래 참조를 찾으십시오. AnalysisException : optigo_data.date_format() 알 수없는 --- 데이터 형식 변환 예에 대한 오류 : 2015년 9월 28일 21시 7분 51초 9 월 2016 (28) DATE_FORMAT ('2015년 9월 28일'로, '% D- % B- % Y')
사용자 지정 레코드 수가있는 하이브 테이블을 만들 수 있습니까? 예를 들어 x 행 (x는 사용자가 정의)의 테이블을 만들고 싶습니다. 테이블에는 두 개의 열이 있습니다. 1. 고유 행 ID [자동 증가 가능] 2. 임의로 생성 된 문자열. 하이브를 사용하면 가능합니까? 테이블을 만들 때에 행의 수에 제한을 지정
두 테이블 중 하나의 고유 한 값에 대한 두 테이블의 INNER JOIN으로 인해 발생한 열 간의 일치를 계산하려고합니다. 예는 일을 더 명확하게 할 수 있습니다 나는 다음과 같은 두 개의 테이블이 있다면 : [1,2,3] 그들과 관련된 info_A : ['a','b','c','d'] Table A
-------
id_A: info_A
1 'a'
하이브에 Customer 테이블이 있습니다 (custid bigint, custname 문자열, DOB 문자열). DOB는 다양한 형식 (6/17/1969, 08/22/54, 2003 년 1 월 11 일)으로 값을가집니다. 다른 형식의 날짜를 표준화 된 날짜 형식 (MM/dd/yy)으로 변환하고 하이브의 다른 테이블에 저장해야한다는 요구 사항이 있습니다.
내가 그것을 코드의 문제가 무엇인지 누군가가 말해 줄 수 있으므로 오랜 시간이 코드를 실행하려고 : - CREATE EXTERNAL TABLE samp_log
(
ip String ,col1 String ,col2 String , date String , time_hour int ,time_min int
,time_sec int ,zone int , r
여기에 비슷한 질문에 대한 답변을 몇 개 읽었지만 모두 다릅니다. 하이브 테이블에 몇 가지 데이터가 있습니다. 내가 할 수 있기를 원하는 것은 2 개의 열을 가져 와서 데이터 세트의 맨 아래에 추가/이동하는 것입니다. 이전에 그 행과 관련된 정보를 유지하면서 2 개의 별도의 날짜 필드를 결합하여이 작업을 수행하고 싶습니다. 내가 가지고있는 데이터가이 ID
내 표는 CREATE EXTERNAL TABLE twitter.tweets (id BIGINT,created_at STRING,source STRING,favorited BOOLEAN, retweeted_status STRUCT<text:STRING,user:STRUCT<screen_name:STRING,name:STRING>,retweet_count:IN
다음 명령을 사용하고 CSV로 가져온 파일은 탭으로 구분됩니다. hive -e "select * from my_table_name" > my_csv_file_received_daily.csv
그리고 매번 파일을 다시 포맷해야합니다. 이 commance를 변경하여 탭 대신 쉼표로 구분 된 파일을 얻는 간단한 방법이 있습니까?