hive SerDe

케이스HDFS 경로의 파일을 대상으로 만든 Hive external table을 조회했을 때, 컬럼 값이 다음과 같이 비정상적으로 보였다.�����A����..처음에는 데이터 손상이나 스키마 문제인지 파악하기 위해 아래 항목들을 순서대로 확인했다.Hive 테이블 스키마가 실제 데이터 구조와 일치하는지테이블 컬럼 순서와 데이터프레임 컬럼 순서가 서로 다른지원본 Parquet 파일 자체에 이미 값이 깨져 있는지하지만 위 항목들에서는 특별한 이상이 없었다.즉, 원본 파일과 스키마 자체의 문제라기보다, Hive가 파일을 해석하는 방식에 문제가 있을 가능성이 더 커 보였다.원인SHOW CREATE TABLE, DESCRIBE FORMATTED로 테이블의 상세 설정을 확인해보니, 실제 데이터는 Parquet 파일이..