metricbeat实现容器监控

article/2025/10/7 22:23:00

Metricbeat是elastic下的项目，在5.1及之后的版本中支持对Docker的监控，需与EK配合使用能在界面上显示，也可直接将数据导入kafka中。
-1.安装

使用版本:
elasticsearch-5.2.0-1.noarch（用于输出显示）
kibana-5.2.0-1.x86_64（用于输出显示）
metricbeat-5.2.0-x86_64
操作系统是centos7

Java：yum -y installjava-1.8.0-openjdk （elasticsearch 使用Java，centos自带yum源即可安装）
配置yum源

[elasticsearch-5.x]
name=Elasticsearch repository for 5.xpackages
baseurl=https://artifacts.elastic.co/packages/5.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md

安装elasticsearch和kibana：

yum -y install elasticsearch kibana

下载metric rpm包：

curl -L -Ohttps://artifacts.elastic.co/downloads/beats/metricbeat/metricbeat-5.2.0-x86_64.rpm

下载后直接用rpm安装。
-2.配置文件
配置elasticsearch：

vi /etc/elasticsearch/elasticsearch.yml
network.host: 192.168.1.100
http.port: 9200

配置kibana：

vi /etc/kibana/kibana.yml
server.port: 5601
server.host: "192.168.1.100"

配置metricbeat：

vi /etc/metricbeat/metricbeat.yml
- module: dockermetricsets: ["cpu", "info", "memory","network", "diskio", "Container"]hosts:["unix:///var/run/docker.sock"]enabled: trueperiod: 1s

model：要监控的模块
metricset：监控指标，要保证是模块能够提供的
enabled：是否使能对该模块的监控，默认true
period：每次执行取数据的时间间隔，如果系统无效，则每个周期会返回一个错误信息
hosts：从哪些主机列表中取数据（不是所有模块都需要配置，如system）
field：数据的附加信息，会在输出文档中进行分组，字典格式配置
fields: {project: “myproject”, instance-id: “574734885120952459”}
tag：为数据做标记，便于搜索
tags: [“my-service”, “hardware”, “test”]
metricbeat支持的model有:
Apache,couchbase,Docker,HAProxy,kafka,MongoDB,MySQL,Nginx,PostgreSQL,Prometheus,Redis,System,ZooKeeper
默认model是system,在后面追加docker部分即可,metricsets设置要监控的项。
System可监控的项为:
Core,cpu,diskio,filesystem,fsstat,load,memory,network,process,socket
Core:提供每个cpu的load statistics
Fsstat:所有文件系统的信息统计.

Docker可监控的项为:
Container,cpu,diskio,info,memory,network
Container:运行状态的容器信息。
Output：
Elasticsearch；Logstash；kafka；redis；file；console，输出到文件配置如下：

File：output.file:path: "/tmp/metricbeat"filename: metricbeat#rotate_every_kb: 10000#number_of_files: 7

-3.启动服务

systemctl enable elasticsearch
systemctl start elasticsearch
systemctl enable kibana
systemctl start kibana
systemctl enable metricbeat
systemctl start metricbeat

检查Elasticsearch是否正常运行：

curl -XGET '192.168.1.100:9200/?pretty'
{"name" : "ZAWwiQz","cluster_name" : "elasticsearch","cluster_uuid" : "PoBTufBIRSuql1ZidCiWUA","version" : {"number" : "5.2.0","build_hash" : "24e05b9","build_date" : "2017-01-24T19:52:35.800Z","build_snapshot" : false,"lucene_version" : "6.4.0"},"tagline" : "You Know, for Search"
}

检查metricbeat是否正常运行：

curl -XGET'http://192.168.1.100:9200/metricbeat-*/_search?pretty'
{"took" : 9,"timed_out" : false,"_shards" : {"total" : 5,"successful" : 5,"failed" : 0}

-4.加载kibana

cd /usr/share/metricbeat&& ./scripts/import_dashboards -es http://192.168.1.100:9200

-5.显示输出
浏览器中访问http://192.168.1.100:5601/
在discover项选择metricbeat-*查看metric的数据；
在dashboard项点击open选择要查看的数据，如:
查看Metricbeat-memory：
这里写图片描述
查看metricdocker：