[Apache Iceberg - The Definitive Guide] Lifecycle of Write and Read Queries2026년 1월 27일 8:28 오전10분Apache Iceberg 쿼리 생명주기 완벽 가이드1. 아이스버그의 3계층과 쿼리 엔진의 상호작용쿼리 엔진은 읽기/쓰기 작업 시 아이스버그의 세 계층과 다음과 같이 상호작용합니다1.1. 카탈로그 계층 (Catalog Layer)모든 쿼리의 시작점입니다.읽기: 엔진은 카탈로그를 통해 테이블의 현재 상태, 즉 최신 메타데이터 파일의 위치를 파악합니다.쓰기: 엔진은 카탈로그를 조회하여 테이블의 스키마와 파티셔닝 전략을 확인하고, 작업 완료 후 …
[Apache Iceberg - The Definitive Guide] The Architecture of Apache Iceberg2026년 1월 25일 4:08 오후5분2장: 아파치 아이스버그 아키텍처이 장에서는 아파치 아이스버그 테이블의 아키텍처와 사양에 대해 심층적으로 다루며, 하이브(Hive) 테이블 형식의 내재된 문제들을 어떻게 해결하는지 설명합니다. 아이스버그 테이블은 세 가지 계층으로 구성됩니다: 카탈로그 계층, 메타데이터 계층, 그리고 데이터 계층입니다.데이터 계층 (The Data Layer)아파치 아이스버그 테이블의 데이터 계층은 실제 데이터를 저장하는 곳이며, 주로 데이터 파일(datafiles)과 삭제 …
[Apache Iceberg - The Definitive Guide] Introduction to Apache Iceberg2026년 1월 25일 3:16 오후7분1장: 아파치 아이스버그 소개이 장은 데이터 레이크하우스의 역사적 맥락과 아파치 아이스버그의 핵심 개념을 탐구합니다.데이터 아키텍처의 발전 과정전통적인 관계형 데이터베이스 관리 시스템(RDBMS)관계형 데이터베이스 관리 시스템(RDBMS)은 오랫동안 트랜잭션 데이터 기록을 위한 표준 옵션이었습니다. 예를 들어, PostgreSQL, MySQL, Microsoft SQL Server는 온라인 트랜잭션 처리(OLTP) 워크로드에 최적화되어 있습니다. 이러한 시스템은 한 번에 하나 또는 …
