본문 바로가기

전체 글

(26)
[DEVIEW 2020] Kubernetes를 이용한 효율적인 데이터 엔지니어링 (Airflow on Kubernetes VS Airflow Kubernetes Executor) Review 출처 : https://deview.kr/2020/sessions/341 Kubernetes를 이용한 효율적인 데이터 엔지니어링 (Airflow on Kubernetes VS Airflow Kubernetes Executor) 발표자 : 이웅규 deview.kr 이 자리를 통해 Airflow Executor의 여러 가지 종류와 동작 방식에 대해 공유하고 일반적인 Kubernetes Airflow 환경과 새로운 방식의 특징 및 장/단점을 비교하고자 합니다. 마지막으로 새로운 방식인 "Kubernetes Executor" 및 "KubernetesPodOperator"를 적용하여 어떻게 데이터 플랫폼을 운영하고 개발하고 있는지 공유하려 합니다. 이를 통해 다양한 원천 데이터 소스, 다양한 타켓 데이터 소스 환..
[if(kakao)2021] 스마트 메시지 서비스 개발기 Review 출처 : https://if.kakao.com/session/22 if(kakao)2021 함께 나아가는 더 나은 세상 if.kakao.com 리뷰 포인트 스마트 메시지 서비스 소개 스마트 메시지 서비스 설계 스마트 메시지 서비스를 설계, 개발하면서 고민한 문제들과 해결 사례 kafka streams 기술 소개 kafka streams 적용 과정 스마트 메시지 서비스 소개 "스마트 메시지 서비스는 카카오톡 채널 광고 메시지의 일종입니다." 라는 말을 듣고 생각에 빠졌다. '카카오톡 채널 광고 메시지? 그게 뭐지?' 카카오톡 채널은 광고를 위해 만들어진 계정이라고 보면된다. 우리가 어떤 채널을 추가(구독)하면 그 채널로 부터 광고 메시지를 받을 수 있다. 필자는 광고를 선호하지 않아서 채널 서비스는 사용하..