Amazon EKS에 Kubeflow 구축하기

​ AWS EKS는 Fully managed K8S 서비스 입니다. 이번 글에서는 EKS 환경에 Kubeflow를 구축하는 방법에 대해 정리해보겠습니다. Why kubeflow in your Infrastructure Amazon EKS에 Kubeflow 구축하기... »

Why Kubeflow in your Infrastructure?

​ 실제 ML을 서비스에 적용시키는 일은 위 그림에 나타난 바와 같이 ML 모델링 보다 이외의 작업들이 많이 필요합니다. 특히 서비스의 여러 기능에 ML을 적용시키려 하는 경우,... »

KOPS로 AWS에 Kubernetes 클러스터 구축하기

​ ​ Kubernetes 클러스터를 구성하는 방법은 여러 가지가 있습니다. 그 중에서 kubeadam은 온프레미스 환경에서 많이 사용하고 kops는 클라우드 환경에서 많이 사용하고 있습니다. 이번 글에서는 kops로 AWS... »

분산 컨테이너 환경에서의 디자인 패턴 (1)

​ 구글 클라우드 팀이 Kubernetes와 같은 Container Orchestration 기술을 개발하면서 겪은 분산 컨테이너 환경에서의 디자인 패턴에 대해 정리한 내용입니다. 분산 어플리케이션을 컨테이너 환경으로 옮기려는 분들에게 많은... »

Apache Airflow에 기여하면서 배운 점들

​ Apache Airflow는 코드를 통해 워크플로우를 관리하고 모니터링 할 수 있도록 도와주는 플랫폼이다. Airflow 프로젝트에 대한 설명은 다른 글에서도 많이 다루기 때문에 생략하고 이 글에서는 처음으로... »

Kafka Connect로 S3에 데이터를 저장해보자

​ Kafka에는 정말 유용한 컴포넌트들이 존재합니다. 오늘은 그 중 하나인 Kafka-Connect에 대해 알아보고, Confluent에서 제공하는 Kafka-Connect-S3를 활용하여 S3로 데이터를 저장하는 방법에 대해 정리해보려고 합니다. ​ Kafka... »

17-18년 블로그 회고 및 다짐

​ 지킬 블로그로 이사한지도 벌써 2년이 다 되어 간다. 항상 이 맘때쯤이면 글쓰는 횟수가 줄어들고 블로그를 또 이사하고 싶은 욕구가 생긴다. 하지만 지금 운영하고 있는 블로그도... »