Hive 기본 세팅에 대하여
현 회사에서 Hive를 이용한 데이터 마트 제작, 데이터 파이프라인 제작 등을 할 때 가장 기본으로 세팅해두는 Hive 설정들이 있는데 이 설정들이 각기 무엇을 위한 설정인지 알아보고 사용하는 것이 좋을 것 같아 한 번 정리해본다 😉 아래 설정은 팀에서 Hive를 이용한 데이터 마트 제작 코드에서 가져온 기본 설정 값으로 데이터 양이나, 집계 여부 등.. 에 따라 설정 값은 달라질 수 있다. SET hive.execution.engine=tez; SET hive.vectorized.execution.reduce.enabled=false; SET hive.vectorized.execution.enabled=false; SET hive.exec.compress.output=true; SET hive.exec..
2022.07.20Career/etc