45 Posts Tagged: “DataEngineering”
Airflow on Kubernetes (1)
June 05, 2020
5 min read
최근 Airflow에는 Kubernetes 지원을 위해 다양한 컴포넌트들이 추가되고 있습니다. 이러한 변화의 흐름에 따라 Airflow…
Serverless ETL 서비스들에 대한 리뷰
August 23, 2019
5 min read
15년 AWS Lambda가 출시된 이후, 뜨거운 반응을 보이며 다양한 서버리스 서비스들이 출시되었다. 그 중 ETL…
Amazon EKS에 Kubeflow 구축하기
March 10, 2019
3 min read
AWS EKS는 Fully managed K8S 서비스 입니다. 이번 글에서는 EKS 환경에 Kubeflow…
Why Kubeflow in your Infrastructure?
March 09, 2019
2 min read
실제 ML을 서비스에 적용시키는 일은 위 그림에 나타난 바와 같이 ML…
Apache Airflow에 기여하면서 배운 점들
December 08, 2018
4 min read
Apache Airflow는 코드를 통해 워크플로우를 관리하고 모니터링 할 수 있도록 도와주는 플랫폼이다. Airflow…
Kafka Connect로 S3에 데이터를 저장해보자
November 16, 2018
4 min read
Kafka에는 정말 유용한 컴포넌트들이 존재합니다. 오늘은 그 중 하나인 Kafka-Connect에 대해 알아보고, Confluent…