반응형 BigData/Kafka2 Kafka Connect 설치 (on K8s) Kafka가 K8s환경에 설치되어있다는 가정하에 진행한다. Kafka Connect Kafka Connect Cluster가 있고 Kafka Connector를 등록해야 sink나 source작업이 시작된다. 1. Kafka connector 플러그인 준비하기 우선, Connector 이미지에는 connector 플러그인(JDBC connector 등)이 설치되어있지않아 수동으로 설치해야한다. 플러그인 다운은 confulent hub에서 할수있음. https://www.confluent.io/hub/ Home Confluent, founded by the original creators of Apache Kafka®, delivers a complete execution of Kafka for the E.. 2023. 3. 18. Kafka Kubernetes Helm chart설치 및 테스트 Kafka Helm chart 설치 helm repo add bitnami https://charts.bitnami.com/bitnami helm repo update helm install kafka bitnami/kafka -n kafka 배포 확인 kubectl get pod -n kafka # NAME READY STATUS RESTARTS AGE # kafka-0 1/1 Running 3 10d # kafka-zookeeper-0 1/1 Running 0 10d 정상 설치 후 Kafka사용 위한 정보는 아래와 같다. NIFI Client Connection 정보 : kafka:9092 / kafka-zookeeper:2181 테스트 설치 후 아래와 같이 친절한 설명과 간단한 테스트를 해볼수있는 .. 2021. 10. 28. 이전 1 다음 반응형
