본문 바로가기
728x90
반응형

BIG DATA/KAFKA4

c++ comsumper 개발환경 구축 참고 : 1. https://docs.confluent.io/clients-librdkafka/current/overview.html 개발환경 설정 1. 라이브러리 인스톨 sudo apt-get install librdkafka-dev 2. Makefile 설정 관련 헤더파일 위치 : /usr/include/librdkafka rdkafka.h rdkafkacpp.h 라이브러리파일 위치 : /usr/lib/x86_64-linux-gnu librdkafka++.a librdkafka++.so librdkafka++.so.1 librdkafka.a librdkafka.so librdkafka.so.1 MYSQLINCDIR = /usr/include/mysql KAFKAINCDIR = /usr/include/.. 2021. 6. 14.
goLang consumer 예제 참조원문 : go 언어를 사용한 예제이다. 잘 봐둬야겠다. https://www.joinc.co.kr/w/man/12/Kafka/chatting 2021. 6. 14.
kafka 연동을 위한 python producer 소스/테스트 방법 참조원문들 : 두번째 링크는 confuluent 라이브러리를 쓰는 예제같다. 또한 c++ 프로듀서 예제도 있는듯.읽어보자. 1. https://needjarvis.tistory.com/607 2. https://www.tigiminsight.com/kafka_setup_examples python consumer 예제는 다음을 참조해보자. 아직 테스트는 안해봄. https://seulcode.tistory.com/559 파이썬으로 카프카를 호출하는 방법 1. 제이 크렙스(Jay Kreps)가 만든 회사인 confluent가 제공하는 라이브러리. C로 만들어짐. 2. 다른 하나는 kafka-python이라는 라이브러리를 사용하는 방법이다. 후자인 kafka-python을 범용적으로 많이 사용하는데 성능은 .. 2021. 6. 14.
kafka 실행및 테스트, 점검법 참고원문 : 둘다 괜찮다. 두번째 링크의 맨 하단의 운영담당자의 글모음도 나중에 읽어보자. https://judo0179.tistory.com/95 https://www.tigiminsight.com/kafka_setup_examples 설치는 다른 문서를 보고... 기동 여부 $ sudo systemctl status zookeeper $ sudo systemctl status kafka Active: inactive (dead) 상태가 active/inactive 인지 확인 실행은 $ sudo systemctl start zookeeper $ sudo systemctl start kafka 수동으로 토픽 생성하기(토픽명 testTopic) $ cd /opt/kafka $ sudo bin/kafka-t.. 2021. 6. 14.
728x90
반응형