![cover-dataengineering]()
Spark on Kubernetes: 커스텀 스케줄러
June 08, 2023
3 min read
Spark 3.4 버전부터 Customized K8S Scheduler 기능이 GA…
![cover-personal]()
베를린에서 2개월 살아남기
May 10, 2023
3 min read
우연히 회사에서 좋은 기회를 얻게 되어 독일에서…
![cover-personal]()
MLOps 관련 책, 강의 리뷰 (DMLS, FSDL)
September 13, 2022
1 min read
MLOps…
![cover-dataengineering]()
Spark on Kubernetes: 스팟 인스턴스 사용을 위한 기능들
July 23, 2022
3 min read
스팟 인스턴스 유형을 사용하면 온디맨드에 비해 70~9…
![cover-devops]()
쿠버네티스에서 GPU 리소스를 효율적으로 활용하는 방법
July 08, 2022
3 min read
GPU는 강력한 연산 기능을 제공하지만 비용이 많이 들기 때문에 제한된 리소스를 효율적으로 활용하는 것이 중요합니다. 이번 글에서는 NVIDIA…
![cover-dataengineering]()
Airflow worker에 KEDA AutoScaler 적용한 후기
June 24, 2022
4 min read
Airflow…
![cover-dataengineering]()
컨테이너 환경을 위한 초기화 시스템 (tini, dumb-init)
May 27, 2022
5 min read
쿠버네티스 기반의 데이터플랫폼을 운영하다보면 이미지의 에 , 과 같은 명령어를 사용하는 경우가 많습니다. 예를 들어 Airflow에서는 dumb…
1 / 16