0
HDFS는 모두 구조화 된 & 구조화되지 않은 데이터를 저장합니다 .HIVE & IMPALA를 사용하면 SQL 쿼리를 작성하여 MapReduce로 변환 할 수 있습니다. 사용자가 데이터가 저장된 스키마 또는 HDFS에 저장된 데이터로 테이블을 구성하는 방법을 알게되는 방법은 무엇입니까?Hadoop Beginner - 데이터 처리 및 분석
A
답변
0
파케 파일 형식을 사용하는 경우 파일 블록을 직접 검사 할 수있는 도구가 있습니다. 예를 들어 this을 참조하십시오. 그리고 hadoop 파일 형식의 대부분은 orc 파일 용 https://orc.apache.org/docs/tools.html과 같은 편리한 도구를 가지고 있습니다.
이전에 하이브에 메타 데이터를 정의한 경우에만 sql을 통해 데이터를 읽을 수 있습니다. 이 메타 데이터는 데이터 스키마를 설명합니다. 하이브에 create table에 대한 참조를 참조하십시오. –
desc formatted table_name; -> 테이블 세부 사항 및 표시 방법에 대한 세부 정보를 제공합니다. create table table_name; 테이블 생성 방법을 알려줍니다. – sk7979