eTL

· Kafka
오늘은 Docker compose를 활용하여 카프카 기본 환경을 구축해보려고 합니다! 해당 환경은 dokcer compose 를 활용하여 3대의 브로커 서버와 1대의 kafka web ui 로 구성된 환경입니다. 시작에 앞서 카프카 설명을 간단하게 해보도록 하겠습니다! 1. Kafka란? 카프카란? Apache Kafka는 실시간 스트리밍 데이터 처리를 위해 Linkedin에서 개발하였으며 현재는 Apache 소프트웨어 재단에서 관리하고 있는 오픈 소스 분산 데이터 스트리밍 플랫폼 입니다. 여러 데이터 스트림을 처리하고 여러 사용자에게 전달하도록 설계 되었습니다. - 카프카는 Pub/Sub 모델(구조)를 따릅니다. pub/sub 모델(구조, 패턴)이란 발행 - 구독 모델로 발행자(Publisher)가 ..
vipDeveloper
'eTL' 태그의 글 목록