Skip to content

Kafka 目标(Sink)

该插件将分析结果发送到 Kafka 中。

属性

属性名称是否可选说明
Broker URL 列表broker地址列表 ,多个broker地址用 "," 分割
主题kafka 主题
Sasl 认证类型sasl 认证类型 , 支持 none,plain,scram
Sasl 用户名sasl 用户名
Sasl 密码sasl 密码

其他通用的 sink 属性也支持,请参阅公共属性

示例用法

demo_stream数据源中选择温度大于 50 度的数据,转发存储到 Kafka。

  • 规则配置
sink
  • kafka sink 配置
sink

注意事项

如果通过 docker compose 将 NeuronEX 与 kafka 部署在同一容器网络中,可在 NeuronEX 中通过 kafka 主机名配置 brokers 地址。 但是 kafka 需要特别注意 KAFKA_CFG_ADVERTISED_LISTENERS 需要配置为主机 IP 地址, 如下所示

yaml
    zookeeper:
     image: docker.io/bitnami/zookeeper:3.8
     hostname: zookeeper
     container_name: zookeeper
     ports:
      - "2181:2181"
     volumes:
      - "zookeeper_data:/bitnami"
     environment:
       - ALLOW_ANONYMOUS_LOGIN=yes
    kafka:
     image: docker.io/bitnami/kafka:3.4
     hostname: kafka
     container_name: kafka
     ports:
      - "9092:9092"
     volumes:
      - "kafka_data:/bitnami"
     environment:
      - KAFKA_CFG_ZOOKEEPER_CONNECT=zookeeper:2181
      - ALLOW_PLAINTEXT_LISTENER=yes
      - KAFKA_CFG_LISTENERS=PLAINTEXT://:9092
      - KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://122.9.166.75:9092
     depends_on:
      - zookeeper