KAFKA
-
[뉴스파이프라인 #2] Spring Boot + Spring Batch + Jsoup에 Kafka Streams 로 파이프라이닝 해보기!프로젝트 노트 2023. 11. 8. 10:16
📌 들어가기에 앞서.. 어제는 이런걸 해보았습니다. [뉴스파이프라인 #1] Spring Boot + Spring Batch + JSOUP을 활용한 뉴스 크롤링 📌 만드는 이유 우선 저는 경제관련 뉴스 보는 것을 굉장히 즐깁니다. 그간 뉴스를 보려면 사이트에 접속을 하고 제가 직접 찾아봐야 함이 너무 귀찮더군요.. 누군가 제게 재깍재깍 알맞은 시간 deguruv.tistory.com Spring Batch를 통해 뉴스를 긁어와서 텔레그램으로 전송해주는 프로젝트를 가볍게(?) 만들어 보았습니다. 사실 이걸로도 충분히 경제와 부동산 뉴스를 텔레그램으로 볼 수 있게 되었습니다. 근데 막연하게 뇌리에 'Kafka Streams'를 공부했던 기억이 났습니다. 활용해보고 싶다는 생각이 강하게 들었습니다. '한 번 써..
-
도커 + 카프카 명령어스터디 노트 2023. 11. 8. 09:20
📌 자꾸 까먹어서.. 자꾸 Docker에 Zookeeper와 Kafka를 띄워놓고 테스트를 하고 있는데, 명령어를 자꾸 까먹어서 기록을 해놓으려 합니다. 도커 컨테이너 확인(docker ps -a) 현재 운용되고 있는 컨테이너를 확인합니다. > docker ps -a CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES 15dbeOOO5164 wurstmeister/kafka "start-kafka.sh" 16 hours ago Up About an hour 0.0.0.0:9092->9092/tcp kafka b338aOOO4259 wurstmeister/zookeeper "/bin/sh -c '/usr/sb…" 16 hours ago Up About an ho..