【es】es 5.x kibana、x-pack插件的安装和简单使用

一、背景

es集群已经安装完成,版本为5.2.2。

192.168.100.176:9200

192.168.100.177:9200

192.168.100.178:9200

es、kiban和x-pack版本一定要对应,保持一样。


二、安装kibana


# yum -y install  https://artifacts.elastic.co/downloads/kibana/kibana-5.2.2-x86_64.rpm

# grep -Ev "#|^$" /etc/kibana/kibana.yml

########################################

server.port: 5601

server.host: "192.168.100.153"

elasticsearch.url: "http://192.168.100.177:9200"

#########################################


三、es集群、kibana节点安装x-pack插件


x-pack是一个集安全,警报,监视,报告和图形功能为一体的软件包。

在es5.0.0之前,必须安装各种插件才有x-pack所具有的功能,有了x-pack后,减少了很多不必要的麻烦。

如果是第一次安装x-pack,整个集群内的服务都需要重新启动(建议第一次装es等插件就把x-pack装上),并且每个节点上的es都要安装x-pack插件,不然不会成功组成一个集群。


在kibanna节点

# /usr/share/kibana/bin/kibana-plugin install x-pack

#################################################################################

Attempting to transfer from x-pack

Attempting to transfer from https://artifacts.elastic.co/downloads/kibana-plugins/x-pack/x-pack-5.2.2.zip

Transferring 108045644 bytes....................

Transfer complete

Retrieving metadata from plugin archive

Extracting plugin archive

Extraction complete

Optimizing and caching browser bundles...

Plugin installation complete

#################################################################################


# chown -R kibana:kibana /usr/share/kibana/plugins/

# ll /usr/share/kibana/plugins/x-pack/



在es集群各节点

$  bin/elasticsearch-plugin  install  x-pack


es01 

$  cat  elasticsearch/config/elasticsearch.yml

################################################################

cluster.name: es

node.name: 192.168.100.176

bootstrap.memory_lock: true

bootstrap.system_call_filter: false

thread_pool.bulk.queue_size: 2000

network.host: 0.0.0.0

network.publish_host: 192.168.100.176

http.port: 9200

transport.tcp.port: 9300

http.cors.enabled: true

http.cors.allow-origin: '*'

discovery.zen.ping.unicast.hosts: ['192.168.100.178:9300', '192.168.100.177:9300', '192.168.100.176:9300']

# x-pack

xpack.security.enabled: false

xpack.monitoring.enabled: true

xpack.graph.enabled: false

xpack.watcher.enabled: false

################################################################


es02

$  cat  elasticsearch/config/elasticsearch.yml

######################################################################

cluster.name: es

node.name: 192.168.100.177

bootstrap.memory_lock: true

bootstrap.system_call_filter: false

thread_pool.bulk.queue_size: 2000

network.host: 0.0.0.0

network.publish_host: 192.168.100.177

http.port: 9200

transport.tcp.port: 9300

http.cors.enabled: true

http.cors.allow-origin: '*'

discovery.zen.ping.unicast.hosts: ['192.168.100.178:9300', '192.168.100.177:9300', '192.168.100.176:9300']

# x-pack

xpack.security.enabled: false

xpack.monitoring.enabled: true

xpack.graph.enabled: false

xpack.watcher.enabled: false

#######################################################################

es03

$  cat  elasticsearch/config/elasticsearch.yml

#######################################################################

cluster.name: es

node.name: 192.168.100.178

bootstrap.memory_lock: true

bootstrap.system_call_filter: false

thread_pool.bulk.queue_size: 2000

network.host: 0.0.0.0

network.publish_host: 192.168.100.178

http.port: 9200

transport.tcp.port: 9300

http.cors.enabled: true

http.cors.allow-origin: '*'

discovery.zen.ping.unicast.hosts: ['192.168.100.178:9300', '192.168.100.177:9300', '192.168.100.176:9300']

# x-pack

xpack.security.enabled: false

xpack.monitoring.enabled: true

xpack.graph.enabled: false

xpack.watcher.enabled: false

#######################################################################


重启es集群个节点上es进程


重启kibaba

# systemctl restart kibana

# systemctl status kibana 


访问http://xx.xx.xx.xx:5601


四、监控数据es索引


我们具体看一下monitor索引内容以及kibana自带的监控功能



kibana监控功能

kibana监控模块通过调用es索引存储的监控数据,制作了许多开箱即用报表供用户使用。主要分为集群层面、节点层面和索引层面。

kibana通过es索引中存储的数据计算出了许多指标报表,如图所示包含了查询(加载)速率查询(加载)延时,除此之外还有cpu、内存、存储以及负载占用等等许多指标。


# curl http://127.0.0.1:9200/_cat/indices | grep kibana

# curl http://127.0.0.1:9200/_cat/shards | grep kibana


monitor索引


es的监控数据是以统一的索引模板构造的按天分区索引存储的,如下如所示


# curl http://127.0.0.1:9200/_cat/indices | grep monitoring-es

# curl http://127.0.0.1:9200/_cat/shards | grep monitoring-es


默认索引只保留最近七天的数据,每隔10s会生成一个新的文档。

.monitoring-es模板mapping包含一些元数据信息如集群id、时间戳和hosts信息等,当前文档类型由type字段标记。

每类的数据都有自己独立的一些mapping,如索引信息汇总类数据indices_stats具有主分片和总的数据量、存储占用以及加载查询数据量统计信息。



kibana怎么关闭monitoring?

使用这个功能,自己的index还没监控的index大,所以不想让它一直监控。

########################################################

PUT _cluster/settings

{

  "transient": {

    "xpack.monitoring.collection.enabled": false  

  }

}

##########################################################


###########################################################

PUT _cluster/settings

{

  "persistent": {

    "xpack.monitoring.collection.enabled": false 

  }

}

###########################################################


五、参考 


Kibana怎么关闭monitoring?

https://elasticsearch.cn/question/7442


monitoring原理讲解及kibana可视化实战

https://www.jianshu.com/p/3cf1e1fefe2b


安装x-pack的注意项

https://blog.csdn.net/wang454592297/article/details/78804906


kibana monitoring页面

https://www.cnblogs.com/1zhangwenjing/p/12316461.html


ELK 集群 Kibana 使用 X-Pack 权限控制,监控集群状态,警报,监视,cpu,内存,磁盘空间,报告和的可视化图形

https://segmentfault.com/a/1190000010981283


ElasticSearch 5.2.2 之 kibana

https://www.cnblogs.com/sunmmi/articles/7090530.html


Kibana安装及简单使用

https://www.cnblogs.com/yangxiaoyi/p/7234222.html


Kibana User Guide [5.6] » Set Up Kibana » Configuring Kibana

https://www.elastic.co/guide/en/kibana/5.6/settings.html


安装kibana,X-pack和elasticsearch插件的全过程

https://www.pianshen.com/article/12551577571

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,636评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,890评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,680评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,766评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,665评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,045评论 1 276
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,515评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,182评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,334评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,274评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,319评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,002评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,599评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,675评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,917评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,309评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,885评论 2 341

推荐阅读更多精彩内容