43 Posts Tagged: “DataEngineering”
![cover-dataengineering]()
데이터 파이프라인의 Write-Audit-Publish 패턴
March 31, 2024
3 min read
Write-Audit-Publish (WAP) 패턴이란, 데이터 엔지니어링 영역에서 데이터 품질과 안정성을 보장하기 위해 ETL…
![cover-dataengineering]()
AI를 통해 변화하는 데이터플랫폼 근황
January 21, 2024
4 min read
생성형 AI의 공개 이후 다양한 영역에서 활용하는 사례가 늘어나고 있습니다. 오늘은 데이터플랫폼 영역에서 AI…
![cover-dataengineering]()
Pandas 2.0의 Copy-on-Write에 대하여
December 24, 2023
7 min read
Pandas 2.0 버전부터 가 추가되었으며 3.0 버전부터 기본 값이 활성화로 변경됩니다. 이번 글에서는 Pandas Copy-on-Write…
![cover-dataengineering]()
Spark on Kubernetes: 커스텀 스케줄러 (2)
December 10, 2023
5 min read
Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…
![cover-dataengineering]()
Spark on Kubernetes: 커스텀 스케줄러 (1)
June 08, 2023
3 min read
Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…
![cover-dataengineering]()
Spark on Kubernetes: 스팟 인스턴스 사용을 위한 기능들
July 23, 2022
3 min read
스팟 인스턴스 유형을 사용하면 온디맨드에 비해 70~9…
1 / 8