ITPE * JackerLab

개요금융감독기관은 방대한 데이터를 수집·분석하여 시장 안정성과 투명성을 확보해야 하는 역할을 수행합니다. 이러한 요구에 대응하여 등장한 개념이 **SupTech(Supervisory Technology)**이며, 그 핵심 인프라 중 하나가 바로 **SupTech Data Lake(SDLake)**입니다. SDLake는 다양한 소스에서 수집되는 구조적/비구조적 데이터를 통합 저장하고, 규제·감독 목적에 따라 유연하게 분석할 수 있도록 설계된 차세대 데이터 레이크 기반 아키텍처입니다.1. 개념 및 정의**SupTech Data Lake(SDLake)**는 금융감독기관이나 규제기관이 수집하는 대규모 데이터를 통합하여 저장하고, 머신러닝, 시각화, 규제 분석 등 다양한 용도로 활용할 수 있도록 지원하는 통합 데..

개요빅데이터 환경에서 데이터 레이크와 데이터 웨어하우스 간의 통합은 여전히 해결되지 않은 기술적 과제였습니다. 이 두 환경의 포맷, 성능, 일관성 차이로 인해 조직은 데이터 복제, 이중 저장, ETL 반복 등 많은 비효율을 감수해야 했습니다. 이를 해결하기 위해 Delta Lake는 2023년, UniForm이라는 혁신 기능을 공개했습니다. Delta Lake UniForm은 Iceberg, Hudi, Parquet 등 다양한 오픈 테이블 포맷과의 메타데이터 호환성을 지원하여, 진정한 One Table, Multi Engine을 실현하는 핵심 기술입니다.1. 개념 및 정의Delta Lake UniForm은 Delta Lake에 저장된 데이터를 **다른 오픈 테이블 포맷(Iceberg, Hudi 등)**과..