[기능 구현] Kafka 환경 구축

[dpwns523]

어떤 기능인가요?

주요 로그 데이터에 대한 안정적인 Pub/Sub을 위한 Kafka 환경 구축
Vector와 연동하여 로그 메시지 큐로 활용해보려고 함

작업 상세 내용

• 카프카 컨플루언트와 아파치 카프카 비교
• 카프카 환경 구축
• Vector를 카프카 Publisher로 구현 방법 알아보기

참고할만한 자료(선택)

[dpwns523]

1. 카프카 컨플루언트와 아파치 카프카 비교

카프카 완벽 가이드 권철민 강사님

컨플루언트 공식, confluent cloud Saas형 플랫폼과 Apache Kafka의 차이

=> 아파치 카프카를 개발하던 사람들이 나와서 컨플루언트 회사를 설립했고, 카프카 컨플루언트가 발전하면서 자바만 지원하던 아파치 카프카와 다르게

다양한 언어와 호환되고, 여러 오픈소스와 연결되는 커넥터, 플러그인들이 제공됨

기능적으로 다르다기보다 커뮤니티 버전도 있고 여러 플러그인이나 기능들을 패키징해서 제공하는 컨플루언트 카프카를 사용해서 빠르게 개발해볼 수 있을 것으로 생각됨.