개방형 표준 기반의 소버린 데이터 레이크하우스. 특정 클라우드나 독점 데이터 형식에 대한 의존 없이 운영하세요.
직접 관리하는 오브젝트 스토리지에서 Apache Iceberg를 활용해, 기업이 통제하는 인프라에서 규제 요건에 대응할 수 있는 데이터 분석 환경을 구축하세요.
온프레미스, 에어갭(Air-gapped) 환경 또는 모든 클라우드에서 개방형 포맷을 일관되게 유지합니다.
Iceberg 스냅샷을 활용한 특정 시점(Point-in-time) 쿼리 감사 기능을 기본 제공하며, 추가 도구가 필요하지 않습니다.
Analytics Engine이 Lakekeeper를 통해 Iceberg를 직접 조회하므로, 데이터를 별도의 데이터 웨어하우스로 복사할 필요가 없습니다.
구성 방식
작동 방식
아키텍처 흐름
| 01 | 통합 | 소스 데이터는 운영 중인 EDB Postgres® AI(EDB PG AI) 시스템과 외부 데이터 소스에서 Fivetran을 통해 수집되며, Airflow/Astronomer가 거버넌스가 적용된 파이프라인 일정에 따라 이를 오케스트레이션합니다. |
| 02 | 변환 | dbt는 Postgres에서 SQL 우선(SQL-first) 변환 로직을 네이티브로 실행하여 소스 데이터를 BCBS 239, EBA ITS, OMOP CDM과 같은 규제 및 컴플라이언스 스키마에 맞게 정렬하며, 실행마다 전체 데이터 계보(Lineage)와 테스트 가능성을 제공합니다. |
| 03 | 카탈로그 | Lakekeeper(Vakamo)는 전체 레이크하우스 계층에서 Iceberg 테이블 메타데이터를 관리하며, 모든 다운스트림 소비자를 위한 통합 액세스 제어, 데이터 계보 추적 및 검색 기능을 제공합니다. |
| 04 | 저장 | 데이터는 MinIO 오브젝트 스토리지에 개방형 Apache Iceberg 포맷으로 저장되며, 온프레미스 환경에서 저장 시 암호화를 지원합니다. Iceberg의 버전 관리 스냅샷 모델은 추가 도구 없이도 특정 시점(Point-in-time) 감사를 지원합니다. 클라우드 종속성, 독점 포맷, 벤더 종속성이 없습니다. |
| 05 | 분석 | Analytics Engine(PGAA)은 Lakekeeper 카탈로그를 통해 Iceberg 테이블을 대상으로 복잡한 규제 및 분석 쿼리를 실행하며, Parquet 기반 컬럼형 가속을 제공합니다. |
| 06 | 보고 | Metabase와 Tableau는 거버넌스가 적용된 Postgres 인터페이스를 통해 규제 보고, 인구 건강 분석 및 공급망 인텔리전스를 분석가, 경영진 및 컴플라이언스 팀에 제공합니다. PGAA와 ClickHouse는 보고를 위한 고성능 쿼리 처리를 지원합니다. |
실제 운영 환경에 적용된 Blueprint 3
Airflow (Astronomer)
Apache Iceberg
dbt
Fivetran
Grafana
Jupyter
Lakekeeper (Vakamo)
Metabase
MinIO
Tableau
실제 운영 환경에서 사용되는 Blueprint 3
-
은행·금융 서비스·보험(BFSI)은행·금융 서비스·보험(BFSI)
규제 보고 및 Basel III/IV 준수
30개 규제 관할 지역에서 200개 이상의 규제 보고서를 작성하는 글로벌 시스템적 중요 은행(G-SIB)은 서로 다른 데이터 정의를 사용하는 12개의 레거시 데이터 웨어하우스를 운영하며, 규제 대응 기술에 연간 5,000만 달러 이상을 지출하고 있습니다.
규제 데이터를 소버린 Iceberg 레이크하우스로 통합하고, dbt를 통해 BCBS 239 기준에 부합하는 데이터 변환을 관리하며, Lakekeeper로 데이터 계보(Lineage)를 추적할 수 있습니다. 이를 통해 보고서 재작성이나 감사 실패로 이어질 수 있는 데이터 분산 및 불일치 문제를 해소할 수 있습니다. 모든 데이터는 각 규제 관할 지역에 구축된 환경 내에서 유지됩니다.
-
의료의료
임상 데이터 웨어하우스 및 인구 건강 분석
서로 다른 8개의 전자의무기록(EHR) 시스템을 사용하는 50개 병원으로 구성된 대규모 의료기관은 기업 전체 차원에서 환자의 장기적인 의료 데이터를 통합 분석하기 어렵습니다.
WarehousePG를 임상 데이터 웨어하우스로 구축하고 dbt를 통해 OMOP 공통 데이터 모델(CDM) 스키마를 관리하는 동시에, 개인건강정보(PHI)를 온프레미스 MinIO에 저장하면 서로 다른 시스템에 분산된 환자 데이터를 연계하여 분석할 수 있습니다. 이를 통해 기존에는 규제 제약으로 수행하기 어려웠던 인구집단 건강(Population Health) 분석과 데이터 조회가 가능해집니다.
-
통신통신
통화 상세 기록(CDR) 분석 및 합법적 감청 규제 준수
한 국가 통신사는 규제 준수를 위해 7년간의 통화 상세 기록(CDR)을 보관하고 있지만, 기존 Hadoop 기반 아카이브는 높은 비용과 느린 처리 속도로 인해 운영 부담이 큽니다.
CDR 아카이브를 MinIO 기반 Iceberg 테이블로 이전하고 Analytics Engine(PGAA)을 쿼리 엔진으로 활용하면, 데이터에 대한 통제권을 유지하면서 필요한 데이터를 직접 조회·분석할 수 있는 아카이브 환경을 구축할 수 있습니다. 이를 통해 기존 아카이브의 운영 및 관리 부담을 크게 줄일 수 있습니다.
-
제조제조
공급망 추적 및 ESG 보고
자동차 제조사는 배터리 소재의 전체 공급망을 추적할 수 있는 체계를 갖추고, 보증 관련 데이터를 15년간 보관해야 합니다.
공급업체 데이터, 생산관리시스템(MES), 품질 관리 시스템, 현장 서비스 데이터를 하나의 레이크하우스로 통합하면 제품 생산부터 출하 및 서비스까지 제품 수명주기 전반의 이력과 데이터 흐름을 추적·조회할 수 있습니다. 또한 Iceberg의 타임 트래블(Time Travel) 기능을 활용하면 규제 기관의 요청에 대응해 특정 시점의 데이터 상태를 확인하고 감사할 수 있습니다.
검증된 배포 환경
데이터 소버린티를 고려해 설계되어 온프레미스, 모든 클라우드 또는 하이브리드 환경에서 실행할 수 있으며, 전반에 걸쳐 개방형 포맷을 유지합니다.
개방형 표준 기반의 Sovereign 데이터 레이크하우스를 구축하세요
직접 제어하는 인프라와 직접 소유한 포맷을 기반으로 규제 및 분석 워크로드를 실행할 수 있습니다.