Condivisione della tecnologia

Configura l'esperimento ELK Filebead zookeeper kafka

2024-07-12

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Sommario

1. Distribuire Filebeat

2. Configurazione logstash

3. Verifica dell'accesso al browser Kibana


Nome della CPUindirizzo IPSoftware principale
es01192.168.9.114Ricerca elastica
es02192.168.9.115Ricerca elastica
es03192.168.9.116Ricerca elastica, Kibana
nginx01192.168.9.113nginx, Logstash
N / A192.168.9.111nginx, Filebeat
N / A192.168.9.210Il guardiano dello zoo, Kafka
N / A192.168.9.120Il guardiano dello zoo, Kafka
N / A192.168.9.140Il guardiano dello zoo, Kafka

ELK, Filebead, zookeeper, kafka possono essere creati per interrogare i blog precedenti

1. Distribuire Filebeat

  1. cd /usr/local/filebeat
  2. vim filebeat.yml
  3. 注释162164行内容
  4. 163行起添加
  5. output.kafka:
  6. enabled: true
  7. hosts: ["192.168.9.210:9092","192.168.9.120","192.168.9.140"] #指定 Kafka 集群配置
  8. topic: "nginx" #指定 Kafka 的 topic
  9. ————————————

Il browser accede a filebeat e genera nuovi dati di registro

http://192.168.9.111/test.html,http://192.168.9.111/test1.html、Indirizzo IP: Indirizzo IP: http://192.168.9.111/

  1. 启动 filebeat
  2. ./filebeat -e -c filebeat.yml

2. Configurazione logstash

  1. cd /etc/logstash/conf.d/
  2. vim kafka.conf
  3. input {
  4. kafka {
  5. bootstrap_server => "192.168.9.210:9092,192.168.9.120:9092,192.168.9.140:9092"
  6. topics => "nginx"
  7. type => "nginx_kafka"
  8. auto_offset_reset => "latest"
  9. }
  10. }
  11. #filter {}
  12. output {
  13. elasticsearch {
  14. hosts => ["192.168.9.114:9200", "192.168.9.115:9200", "192.168.9.116:9200"]
  15. index => "nginx_kafka-%{+yyyy.MM.dd}"
  16. }
  17. }
  18. logstash -t -f kafka.conf
  19. logstash -f kafka.conf

3. Verifica dell'accesso al browser Kibana

Visita http://192.168.9.116:5601 con il browser, accedi a Kibana, fai clic sul pulsante [Gestisci] [Modalità Crea indice], cerca [nginx_kafka-*], fai clic sul pulsante [Avanti] per creare, seleziona [ pulsante @timestamp], [Modalità Crea indice]; è possibile visualizzare le informazioni sulla carta e le informazioni sul registro.