데이터 레이크하우스와 자체 스토리지에서 초 단위 미만 분석을 지원하고 MySQL 프로토콜을 사용하는 오픈소스 MPP 쿼리 엔진입니다.
#data-lake
2026 추천 오픈소스 데이터 레이크 쿼리 엔진과 도구
이런 소프트웨어는 오브젝트 스토리지나 파일에 저장된 대량의 데이터를 쿼리하고, 읽고 쓰고, 정리하는 데 사용됩니다. 고를 때는 지원하는 테이블 형식, 이미 쓰고 있는 쿼리 도구나 언어와의 호환성, 프로젝트의 유지보수 상태를 확인하는 것이 좋습니다. Trino는 여러 빅데이터 소스에 걸쳐 빠른 분석 쿼리를 실행하는 분산 SQL 쿼리 엔진이며, Amazon Athena의 대안으로 검토할 수 있습니다. delta-rs는 Delta Lake 테이블을 읽고 쓰는 네이티브 Rust 라이브러리이며, pandas 등과 함께 쓸 수 있는 Python 바인딩을 제공합니다. Homer는 HEP 패킷을 DuckDB와 Parquet 데이터 레이크에 수집하는 패킷 캡처 서버로, SIP/VoIP 통화 흐름 분석에 적합합니다.
Spark, Trino, Flink, Hive 같은 엔진이 같은 테이블을 안전하게 공유할 수 있도록 하는 대규모 분석 데이터셋용 고성능 오픈 테이블 포맷입니다.
검색 및 통화 흐름 분석을 위해 HEP 패킷을 수집하고 DuckDB/Parquet 데이터 레이크에 저장하는 오픈 소스 SIP/VoIP 및 RTC 패킷 캡처 서버입니다.
AWS Glue에서 ETL 작업과 데이터 통합 파이프라인을 구축하기 위한 코드 샘플, 튜토리얼 및 유틸리티입니다.
pandas와 기타 데이터 도구에서 사용할 수 있는 Python 바인딩을 제공하는, Delta Lake 테이블 읽기·쓰기를 위한 네이티브 Rust 라이브러리입니다.
데이터베이스와 API를 대상으로 로컬 가속 및 CDC 복제본을 활용해 페더레이션 SQL, 검색, LLM 추론을 제공하는 Rust 데이터·AI 엔진입니다.
Trino는 빅데이터 소스 전반에서 빠른 분석 쿼리를 실행하는 분산 SQL 쿼리 엔진입니다.