Danggeni Garage

카프카(Kafka)에서 자주 사용되는 기본 명령어들을 공유 해봅니다. - Topic 생성 - 생성된 Topic 목록 조회 - Topic 상세 정보 조회 - 메세지 전송 , 소비(Producer, Consumer) - Topic 삭제 bin/kafka-console-producer --bootstrap-server localhost:9092 --topic hello-world Topic 목록 확인 Mac bin/kafka-topics --bootstrap-server localhost:9092 --list Windows bin/kafka-topics.sh --bootstrap-server localhost:9092 --list Topic 생성 topic 생성의 경우 기본적으로 Partitions을 지정하지..

현대 비즈니스 환경에서는 대용량 데이터를 처리하고 분석하는 필요성이 증가함에 따라 데이터 스트리밍 플랫폼의 중요성이 커지고 있습니다. 이러한 상황에서 Apache Kafka는 탁월한 성능과 확장성을 제공하는 대표적인 오픈소스 데이터 스트리밍 플랫폼입니다. 이 글에서는 Apache Kafka의 핵심 개념과 기능에 대해 소개하겠습니다. Apache Kafka란 무엇인가요? Apache Kafka는 Jay Kreps, Neha Narkhede, 그리고 Jun Rao가 LinkedIn에서 개발한 오픈소스 메시지 브로커 프로젝트입니다. 처음으로 2011년에 공개되었으며, 분산 스트리밍 플랫폼으로서 대용량 실시간 데이터 스트림을 처리하고 저장하는 데 중점을 둡니다. Kafka는 높은 처리량과 낮은 지연 시간을 갖춘..

다운로드 및 설치 Wget 으로 다운로드 및 설치 하는 방법과 Homebrew를 통한 설치 방법이 존재합니다. wget wget https://downloads.apache.org/kafka/3.5.0/kafka_2.12-3.5.0.tgz tar -xzf kafka_2.12-3.5.0.tgz homebrew brew install zookeeper # brew install kafka 를 진행하면 kafka와 관련된 zookeeper , jdk 등 모두 다운로드를 진행된다. brew install kafka 설치 방법은 위와 같이 진행하면되고, 기존에는 wget 파일을 설치하였지만, 이번에는 brew install 을 통해서 설치를 진행해 보겠습니다. brew install kafka 만 설치하여도 zo..