datazip-inc/olake-go
Apache Iceberg·Parquet 데이터 복제 엔진
- 차트
- 지금은 차트에 없어요
- 스타
- 2,055
무엇인가요
PostgreSQL, MySQL, MongoDB, Oracle, MSSQL, DB2 등의 데이터베이스와 Kafka, S3의 데이터를 Apache Iceberg나 Parquet 형식으로 복제하는 Go 기반 오픈소스 데이터 수집 엔진이에요. Spark, Flink, Debezium 같은 별도 인프라 없이 웹 UI와 CLI로 파이프라인을 구성하고 실행할 수 있어요.
누구에게 좋나요
OLTP 데이터베이스나 스트리밍 데이터를 벤더 종속 없는 오픈 데이터 레이크하우스 환경으로 이관하려는 데이터 엔지니어가 사용하기 좋아요.
왜 지금 주목받나요
2026년 11월 15일에 v1.2.0 릴리즈가 공개되었고, 오늘 하루에만 스타 115개를 추가로 얻어 총 2,008개를 기록했어요. 무거운 분산 처리 프레임워크 없이도 전체 적재와 CDC 동기화를 지원하는 점이 돋보여요.
주요 기능
- PostgreSQL, MySQL, MongoDB, MSSQL 등 주요 DB의 전체 적재 및 CDC 동기화 지원
- 자동 스키마 탐색 및 스키마 변경(Schema Evolution) 대응
- Glue, Hive, JDBC, REST 등 다양한 Apache Iceberg 카탈로그 연동
- Docker Compose 기반 웹 UI 및 자동화용 CLI 제공
2026년 11월 19일에 README와 저장소 정보를 바탕으로 정리한 요약이에요. 틀린 내용이 있을 수 있으니 중요한 판단은 원문을 확인해 주세요. 요약이 틀렸다면 알려 주세요