데이터분산처리1 Apache Kafka Apache Kafka 개요 및 특징Apache Kafka는 대규모 분산 메시징 시스템으로, LinkedIn이 개발하고 2011년 오픈 소스로 공개되었습니다. Kafka는 실시간 데이터 스트리밍 플랫폼으로서, 대용량 로그 데이터를 빠르게 수집, 전송, 저장 및 처리할 수 있는 기능을 제공합니다. 기존 메시징 시스템에 비해 높은 TPS(초당 전송량)를 지원하고 있으며, 실시간 로그 처리에 최적화된 아키텍처 덕분에 빠르게 성장하고 있습니다.Kafka의 주요 구성 요소브로커(Broker): 데이터를 수신하고 전달하는 서버로, 여러 브로커가 클러스터 형태로 결합하여 대규모 데이터를 안정적으로 처리합니다.프로듀서(Producer): 데이터를 생성하여 브로커에 전송하는 역할을 합니다. 다양한 애플리케이션에서 프로듀.. 2024. 10. 29. 이전 1 다음