Jmeter+InfluxDB+Grafana 性能测试实时监控

本文我们将介绍如何使用JMeter+InfluxDB+Grafana打造压测可视化实时监控。 


InfluxDB是一个年轻的时序数据库,是用同样很年轻的语言“GO”开发出来的。小数据量的时候还性能还不错,但是数据量大一点,性能问题就体现出来了。不过只是收集一下我几个小时测试的数据,还是足够了。要是几个月的测试数据那还是挑别的数据库吧。

        Grafana是纯粹用js编写出来的,专门用来展示数据用的。

        基本上,就是Jmeter通过“Backend Listener”,将测试的数据上传到我的虚拟机上,通过InfluxDB来存储,Grafana来展示出来。我们访问web,稍微配置一下,就可以看到展示的数据了。

我的InfluxDB和Grafana都是部署在一台Linux虚拟机下面的。

一、JMeter&InfluxDB集成

1、InfluxDB安装

1.1、安装要求

网络端口

InfluxDB默认使用以下网络端口:

TCP端口8086用于通过InfluxDB的HTTP API进行客户端-服务器通信

TCP端口8088用于RPC服务以进行备份和还原

除了上面的端口,InfluxDB还提供了多个可能需要自定义端口的插件。可以通过配置文件修改所有端口映射,配置文件位于/etc/influxdb/influxdb.conf默认位置。

网络时间协议(NTP)

InfluxDB使用主机的UTC本地时间为数据分配时间戳并用于协调目的。使用网络时间协议(NTP)同步主机之间的时间; 如果主机的时钟与NTP不同步,写入InfluxDB的数据的时间戳可能不准确。

2、下载安装

wget https://dl.influxdata.com/influxdb/releases/influxdb-1.6.2.x86_64.rpm

sudo yum localinstall influxdb-1.6.2.x86_64.rpm

1

2

3、InfluxDB配置

找到InfluxDB配置文件(/etc/influxdb/influxdb.conf)

vi /etc/influxdb/influxdb.conf

1

influxdb.conf中的大多数设置都被注释掉了;所有注释掉的设置将确定为内部默认值。如果配置文件中的任何未注释的设置都会覆盖内部默认值。

请注意,本地配置文件不需要包含每个配置设置。

如果你无法找到配置文件,可以使用InfluxDB显示配置命令

Influxd config

1

Jmeter使用graphite协议去写入数据到InfluxDB,因此,需要在InfluxDB配置文件启用它,如下图所示:

[[graphite]]

enabled = true

bind-address = ":2003"

database = "jmeter"

retention-policy = ""

protocol = "tcp"

batch-size = 5000

batch-pending = 10

batch-timeout = "1s"

consistency-level = "one"

separator = "."

udp-read-buffer = 0

1

2

3

4

5

6

7

8

9

10

11

12

修改后,使用以下命令加载InfluxDB启动

有两种方法可以使用配置文件启动InfluxDB:

1.使用以下-config选项将进程指向正确的配置文件

influxd -config /etc/influxdb/influxdb.conf

1

2.将环境变量设置为INFLUXDBCONFIGPATH配置文件的路径并启动

echo $INFLUXDB_CONFIG_PATH

/etc/influxdb/influxdb.conf

influxd

1

2

3

InfluxDB操作

[root@zuozewei ~]# influx  #登录数据库

Connected to http://localhost:8086 version 1.6.2

InfluxDB shell version: 1.6.2

> show databases  #查看所有数据库

name: databases

name

----

_internal

> CREATE DATABASE "jmeter" #创建数据库

> use jmeter              #切换数据库

Using database jmeter

> CREATE USER "admin" WITH PASSWORD 'admin' WITH ALL PRIVILEGES # 创建管理员权限的用户

1

2

3

4

5

6

7

8

9

10

11

12

4、JMeter配置

创建一个测试计划,并添加Backend Listener

设置InfluxDB IP及端口设置InfluxDB IP及端口

运行测试,等待几秒运行测试,等待几秒

查看JMeter是否生成错误日志查看JMeter是否生成错误日志

端口说明:

8086端口,Grafana用来从数据库取数据的端口

2003端口,JMeter往数据库发数据的端口

查看JMeter数据库下所有的表

> show measurements

name: measurements

name

----

delta

jmeter.all.a.avg

jmeter.all.a.count

jmeter.all.a.max

jmeter.all.a.min

jmeter.all.a.pct90

jmeter.all.a.pct95

jmeter.all.a.pct99

jmeter.all.h.count

jmeter.all.ko.count

jmeter.all.ok.avg

jmeter.all.ok.count

jmeter.all.ok.max

jmeter.all.ok.min

jmeter.all.ok.pct90

jmeter.all.ok.pct95

jmeter.all.ok.pct99

jmeter.test.endedT

jmeter.test.maxAT

jmeter.test.meanAT

jmeter.test.minAT

jmeter.test.startedT

total

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

OK,我们已经可以将统计指标数据成功发送到InfluxDB

四、Grafana&InfluxDB集成

什么是Grafana?

Grafana是一个开源软件,拥有丰富的指标仪表盘和图形编辑器,适用Graphite, Elasticsearch, OpenTSDB, Prometheus,InfluxDB。简单点说就是一套开源WEB可视化平台。

官网地址:https://grafana.com/

1、安装启动

下载安装

wget https://s3-us-west-2.amazonaws.com/grafana-releases/release/grafana-4.2.0-1.x86_64.rpm

sudo yum localinstall grafana-4.2.0-1.x86_64.rpm

1

2

启动

service grafana-server start

Starting grafana-server (via systemctl):                  [  OK  ]

1

2

使用浏览器打开 http://IP:3000/login,访问Grafana主页

创建InfluxDB数据源

单击save&test,确保可以连接上InfluxDB

创建dashboard

添加Graph面板

数据绑定

线程数/用户相关指标

test.minAT-Min active threads:最小活跃线程数

test.maxAT-Max active threads:最大活跃线程数

test.meanAT-Mean active threads:活跃线程数

test.startedT-Started threads:启动线程数

test.endedT-Finished threads:结束线程数

响应时间指标

.ok.count:采样器的成功响应数

.h.count:每秒点击数

.ok.min:采样器成功最短响应时间

.ok.max:采样器成功最长响应时间

.ok.avg:采样器成功平均响应时间

.ok.pct:采样器成功响应百分比

.ko.count:采样器失败响应数

.ko.min:采样器失败的响应最短时间

.ko.max:采样称失败最长响应时间

.ko.avg:采样器失败平均响应时间

.ko.pct:采样器失败响应百分比

.a.count:采样器响应数(ok.count和ko.count的总和)

.a.min:采样器最小响应时间(ok.count和ko.count的最小值)

.a.max:采样器最大响应时间(ok.count和ko.count的最大值)

.a.avg:采样器平均响应时间(ok.count和ko.count的平均值)

.a.pct:采样器响应百分比(根据和失败样本的总数计算)

Backend Listener的默认百分位设置为“90;95;99”,即百分位数为90%,95%和99%。

Graphite使用点(“.”)去拆分的元素,这可能与十进制百分位值混淆。JMeter转换任何此类值,用下划线(“ - ”)替换点(“.”)。例如,“99.9 ”变为“99_9 ”

默认情况下,JMeter发送在samplerName“all”下累计的所有采样器的指标。 如果配置了 BackendListenerSamplersList,那么JMeter还会发送匹配样本名称的指标,前提是配置 summaryOnly=true

压测中的效果

五、导入Dashboard模版

如果让大家去设计一个好看的Dashboard,估计大家都不太想从零开始自己设计,其实Grafana官网提供丰富的模版的库,大家可以自己上去找,然后进行二次扩展。

官网模版库:https://grafana.com/dashboards

搜索看板模版

此处,我选择下载这个下载量3000+的模版

下模版JSON文件

导入模版

选择数据源

JMeter Backend Listener设置

压测期间的动画效果

至此,我初步打造的压测可视化实时监控大功告成~?

原文链接:https://blog.csdn.net/zuozewei/article/details/82911173

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,968评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,601评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,220评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,416评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,425评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,144评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,432评论 3 401
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,088评论 0 261
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,586评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,028评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,137评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,783评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,343评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,333评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,559评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,595评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,901评论 2 345

推荐阅读更多精彩内容