회사에서 HDFS+Impala 대신에 Starrocks라는 최신 MPP 기술로 마이그레이션을 진행하고 있습니다. (내가 안함)데이터 엔지니어링 쪽에서 꽤 신기술이긴 한데, 기존 데이터 레이크하우스 기술과 뭐가 다른지 개인적으로 정리해보려 합니다. 일단 핵심적으로 Starrocks와 같은 다른 OLAP 엔진과 차이점은 아래의 주요기능을 보면 알 수 있습니다. StarRocks의 주요 기능고성능 JOIN: 빅데이터 분석에서 불가피하게 사용되던 플랫 테이블 구조에서 벗어날 수 있습니다.고성능 단일 테이블 쿼리: 실제 분석 워크로드를 기반으로 한 자체 테스트에서도 Clickhouse보다 뛰어난 성능을 보였습니다.클라우드 데이터베이스로서의 기능: 오토 스케일링, 분산 스토리지를 통한 연산과 스토리지 분리가 가능합..