kibana 7.5.1 + metricbeat 7.5.1实现主机和kafka应用指标监控

基本过程是通过安装和部署metricbeat，该组件收集信息上传到elasticsearch，然后再通过kibana查看和展示指标信息。下面以windows为例进行说明：

1. 下载metricbeat地址

https://www.elastic.co/cn/downloads/past-releases/metricbeat-7-5-1

下载到本地后，进行解压，然后进行配置。

2. 配置文件metricbeat.yml

该配置文件中，可以配置elasticsearch参数，如果都是按默认配置部署，可以不做修改。

output.elasticsearch:# Array of hosts to connect to.hosts: ["localhost:9200"]

由于这里只是在本地环境中对基本功能的演示，所有就尽量使用默认配置了。

3. 开启kafka指标

执行命令：

metricbeat.exe modules enable kafka

在modules.d/kafka.yml中进行kafka相关配置

- module: kafka#metricsets:#  - partition#  - consumergroupperiod: 10shosts: ["kafkahost:9092"]

根据需要监控的kafka进行配置，这里的主机名需要与kafka中配置的保持一致。

listeners=PLAINTEXT://kafkahost:9092

如果配置为ip地址，则可能会出现连接不到kafka，并在日志文件中出现错误提示信息：

No advertised broker with address xx.xx.xx.xx:9092 found

4. 执行初始化并启动

# 初始化模板
metricbeat setup --dashboards# 查看启用的模块
metricbeat modules list# 执行并输出控制台日志
metricbeat.exe -e

5. kibana查看主机metrics

从kibana的metrics菜单可以看到监控信息。

查看具体的指标信息：

5. kibana查看kafka指标

kafka指标在dashboard中进行查看，选择kafka后，可以看到kafka的监控信息：

可以看到对kafka的监控信息。

kibana 7.5.1 + metricbeat 7.5.1实现主机和kafka应用指标监控相关推荐

ELK下kibana安装Metricbeat工具
metricbeat简介将 Metricbeat 部署到您所有的 Linux.Windows 和 Mac 主机,Metricbeat可以定期收集操作系统和服务器的运行指标(CPU,内存,硬盘,IO, ...
metricbeat收集elasticsearch、kibana监控数据
一.kibana 1.下载metricbeat并部署到kibana所在的服务器 2.禁用 Kibana 监控指标的默认集合,在kibana.yml文件中增加如下配置: monitoring.kiban ...
MetricBeat + Elasticsearch + Kibana 实现监控指标可视化
1.Elasticsearch 监控指标可视化概述之前的推文 Elasticsearch 磁盘使用率超过警戒水位线,怎么办?有读者留言:"配合监控系统". 是的,监控系统就像我们 ...
如何实现对ELK各组件的监控？试试Metricbeat
点击上方蓝色"方志朋",选择"设为星标" 回复"666"获取独家整理的学习资料! 一.前言开发排查系统问题用得最多的手段就是查看系统日志, ...
Metricbeat源码分析
0X00 版本信息 Golang:1.16.8 Metricbeat:7.14 0X01 Metricbeat介绍 Metricbeat quick start: installation and c ...
安装部署启动Metricbeat，Windows
安装部署启动Metricbeat,Windows (1)下载Metricbeat: Download Metricbeat • Ship Metrics to Elasticsearch | Elas ...
Metricbeat部署指南
官网下载metricbeat,https://www.elastic.co/downloads/beats/metricbeat. 解压tar包,tar -zxvf metricbeat-7.0.0- ...
ELK官方文档:在Kibana加密通讯
介绍安全套接字层(SSL)和传输层安全性(TLS)为传输中的数据提供加密.虽然这些术语通常可以互换使用,但Kibana仅支持TLS,它取代了旧的SSL协议. 浏览器将流量发送到Kibana,而Kib ...
Linux安装Kibana详细教程
文章目录 Kibana是什么 ? 准备工作开始安装修改配置启动Kikana Kibana是什么 ? Kibana是一个开源的分析与可视化平台,设计出来用于和Elasticsearch一起使用的. ...