Notice
Recent Posts
Recent Comments
Link
250x250
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 | 31 |
Tags
- Java
- freshness
- CDC
- 윈도우
- numpartitions
- 도커
- docker
- spark
- spring boot
- k9s
- 쿠버네티스
- query history
- 카프카
- 파이썬
- ksql
- dbt_project
- kafka
- airflow
- 모바일
- UI for kafka
- polars
- Python
- KubernetesPodOperator
- DBT
- 크롤링
- Materializations
- 동적 차트
- mysql
- bar cahrt
- proerty
Archives
- Today
- Total
데이터 엔지니어 이것저것
Delta Lake란? 본문
728x90
Detla Lake는 데이터 레이크에 안정성을 제공하는 오픈 소스 스토리지 계층.
Delta Lake는 ACID 트랜잭션, 확장 가능한 메타데이터 처리를 구현하고 스트리밍 및 일괄 데이터 처리를 통합.
Delta Lake는 Spark와 잘 통합되어있다.
728x90
'기타' 카테고리의 다른 글
Dynamo: Amazon’s Highly Available Key-value Store (0) | 2022.11.21 |
---|---|
데이터 파이프라인 (0) | 2022.03.27 |
[미완성]토이프로젝트 : ? (음식 관련 주제) (0) | 2022.02.17 |
homelab (0) | 2022.01.25 |
NiFi란 (0) | 2022.01.02 |