1. 程式人生 > >Elasticsearch常用工具清單

Elasticsearch常用工具清單

系列 openss 安全性 pack 格式 清單 後端 .com 功能

一、基礎類工具

1、Head插件

ES集群狀態查看、索引數據查看、ES DSL實現(增、刪、改、查),比較適用json串的格式化

參考地址:http://mobz.github.io/elasticsearch-head/

2、kibana工具

除了支持各種數據的可視化之外,最重要的是:支持Dev Tool進行RESTFUL API增刪改查操作。
——比Postman工具和curl都方便很多。

參考地址:https://www.elastic.co/products/kibana

3、ElasticHD工具

支持sql轉DSL

參考地址:https://github.com/360EntSecGroup-Skylar/ElasticHD

4、cerebro工具

參考地址:https://github.com/lmenezes/cerebro

5、Elaticsearch-HQ工具

管理elasticsearch集群以及通過web界面來進行查詢操作

參考地址:https://github.com/royrusso/elasticsearch-HQ

6、Elaticsearch-migration工具

支持多版本間數據遷移,使用sroll + bulk

參考地址:https://github.com/medcl/elasticsearch-migration

7、Elaticsearch-Exporter

將ES中的數據向其它導出的腳本實現

參考地址:https://github.com/mallocator/Elasticsearch-Exporter

8、Elaticsearch-dump

移動和保存索引的工具

參考地址:https://github.com/taskrabbit/elasticsearch-dump

二、集群數據處理工具

1、Elaticsearch-curator

es官方工具,可以管理索引數據保留時間

參考地址:https://pypi.python.org/pypi/elasticsearch-curator

ES6.3有Index LifeCycle Management ,可以管理索引的保存期限

三、安全類工具

1、x-pack工具

參考地址:https://www.elastic.co/downloads/x-pack

2、search-guard第三方工具

Search Guard 是 Elasticsearch 的安全插件。它為後端系統(如LDAP或Kerberos)提供身份驗證和授權,並向Elasticsearch添加審核日誌記錄和文檔/字段級安全性。

Search Guard所有基本安全功能(非全部)都是免費的,並且內置在Search Guard中。 Search Guard支持OpenSSL並與Kibana和logstash配合使用。

參考地址:https://github.com/floragunncom/search-guard

四、可視化類工具

1、grafana工具

參考地址:https://grafana.com/grafana

grafana工具與kibana可視化區別:

  1. 如果你的業務線數據較少且單一,可以用kibana做出很棒很直觀的數據分析。

  2. 而如果你的數據源很多並且業務線也多,建議使用grafana,可以減少你的工作量

對比:https://www.zhihu.com/question/54388690

五、自動化運維工具

1、ansible

參考地址:https://github.com/elastic/ansible-elasticsearch

2、puppet

參考地址:https://github.com/elastic/puppet-elasticsearch

3、cookbook

參考地址:https://github.com/elastic/cookbook-elasticsearch

六、類SQL查詢工具

1、Elaticsearch-SQL工具

參考地址:https://github.com/NLPchina/elasticsearch-sql

ES8.3+會集成SQL

七、增強類工具

1、conveyor工具

kibna插件——圖形化數據導入工具

參考地址:http://t.cn/REOhwGT

2、kibana_markdown_doc_view工具

Kibana文檔查看強化插件,以markdown格式展示文檔

參考地址:http://t.cn/REOhKgB

3、indices_view工具

indices_view 是新蛋網開源的一個 kibana APP 插件項目,可以安裝在 kibana 中,快速、高效、便捷的查看elasticsearch 中 indices 相關信息

參考地址:https://gitee.com/newegg/indices_view

4、dremio工具

支持sql轉DSL,

支持elasticsearch、mysql、oracle、mongo、csv等多種格式可視化處理;

支持ES多表的Join操作

參考地址:https://www.dremio.com/

八、報警類工具

1、elastalert

ElastAlert 是 Yelp 公司開源的一套用 Python2.6 寫的報警框架。屬於後來 Elastic.co 公司出品的 Watcher 同類產品。

參考地址:http://elastalert.readthedocs.org/

2、sentinl

SENTINL 6擴展了Siren Investigate和Kibana的警報和報告功能,使用標準查詢,可編程驗證器和各種可配置操作來監控,通知和報告數據系列更改 - 將其視為一個獨立的“Watcher” “報告”功能(支持PNG / PDF快照)。

SENTINL還旨在簡化在Siren Investigate / Kibana 6.x中通過其本地應用程序界面創建和管理警報和報告的過程,或通過在Kibana 6.x +中使用本地監視工具來創建和管理警報和報告的過程。

參考地址:https://github.com/sirensolutions/sentinl

Elasticsearch常用工具清單