一. 監控的重要性

應用運維的三大任務之一：故障處理。如何找到故障就成了一個問題。

通過客戶反饋可以得知故障的發生，但是從客戶感知到故障到提交故障可能周期很長。因為有些客戶即使發現了無法訪問服務也不會提交故障。
即使客戶提交故障了，還需要從客戶的描述中找出故障發生的位置，這中間可能還需要很長的時間。

這時，我們就需要一個能隨時監控系統並提供報警功能的軟件了。

二. 監控的項目有哪些

我們的整個應用系統包括硬件和軟件兩大部分。
硬件：包括主機、交換機、路由器、網線等各種肉眼能看得到的設備。
軟件：提供服務的各種軟件、各項軟件的相關指標、系統使用率等
以上無論哪個部分發生故障都可能導致業務的中斷。

並且因業務系統訪問壓力的增大，對系統資源的使用率持續上升，直至上升到系統資源完全被占用導致業務不可用，這種情況也是非常有必要註意的。這種情況下，就需要我們通過向外擴展增加提供服務的主機，來減輕系統的壓力。

---

三. 監控系統的實現：

1. 數據采集

在對一個應用系統進行監控時，各項數據可以通過系統內建的接口獲取信息，也可以自己收集，有時數據采集後還需要計算。如ifconfig中RX packets是一個累加數據，單純采集數據無實際意義，我們需要的單位時間內的數量，這種情況下就需要進行計算。

• 需要監控的指標項：

  • 通用指標項：許多服務都需要監控的項目，可定義為模板使用
  • 自定義監控指標：通用監控指標不夠用，可自定義一些需要關註的指標，並且還可以再定義為模板使用。

• 數據采集的方式：

  • 可通過侵入式：如在需監控的主機上安裝agent。
  • 通過非侵入式：不需要安裝agent。基於ssh，telnet實現。
• 若監控系統布署好之後，系統內又新增了主機，為了方便新增監控主機，監控系統有自動發現能力。自動發現的方式通常有以下兩種：
  • 可以自動發現網絡中新加入的主機，並基於某種認證機制進行監控。
  • 可以自動發現主機中的服務，對於後期新增的服務也可自動發現

2. 數據存儲

• 監控系統獲取的各項指標數據需要保存在本地磁盤上，若是零散的數據，對統計和查看都各種不方便，故可保存在自開發的數據系統中，也可以使用現有的數據系統。

• zabbix使用mysql和pgsql，因這些數據系統自身的局限性，在某些大型場景下，數據庫很容易成為系統瓶頸。

  3. 定義合理的閾值區間並向有能力處理的人發出警告
• 前提：基於某個監控項的某個采集數據高於合理閾值範圍。這就需要長期對系統監控，並調整各項指標項的閾值。之後再根據閾值，設定一個布爾表達式，滿足條件時（true）就發出警告。

• 另外還可以借助一些配置系統，在警告前做出一些自愈操作。如重啟服務等。

  4. 數據可視化處理
• 人類在幾千年的進化中，並沒有進化為擅長處理數據的物種。所以就需要把數據以流式化方式處理為圖表，以便於人處理數據。

四. 現有監控系統簡單比較：

• cacti：基於snmp，結合crontab采集數據，把采集的數據存入rrd(round robin databases)數據庫。且cacti的報警功能弱暴了。通常配合nagios使用。但這兩種數據庫結合使用經常會出現各種問題。

  • rrd數據庫保存下來的數據只有一定時長的。如保存一年的數據，無論什麽時候看，只能看到一整年的數據，之前的數據全部被刪除。

• nagios：周期性采集數據，采集後立即判定數據是否達到指定的閾值，達到或超過就告警，達不到就把數據丟掉。

• zabbix：傳統意義上的監控系統
  • 內建有數據采集功能，存儲數據借助於mysql（pgsql）實現。
  • 告警：告警前可做閾操作。有報警升級操作。先給處理人員告警，過一小時未處理好，向上一級領導告警，再過一小時未處理好，再向更上一級領導告警。
  • 可通過流式化處理把數據以圖形化方式顯示出來。

五.zabbix的特性：

1. 數據采集：
   • zabbix可通過snmp, ssh/telnet, agent, ipmi, jmx(java Management eXtensions)等方式采集數據，也可自定義采樣機制（基於agent實現）。
2. 告警：
   • 告警前可做閾操作。
   • 告警升級機制：
   • 先給處理人員告警，過一小時未處理好，向上一級領導告警，再過一小時未處理好，再向更上一級領導告警。
3. 數據存儲：
   • 支持mysql及pgsql
4. 數據展示：
   • 通過流式化處理把數據以圖形化方式顯示出來。
   • 實時繪圖：graph, screen, slide show, map
   • 另外還支持模板、網絡自動發現、分布式監控

六. zabbix的架構體系：

• zabbix_server：服務端守護進程：負責數據采集
• zabbix_agentd：agent守護進程；
• zabbix_proxy：代理服務器，可選組件；
• zabbix_get：命令行工具，手動測試向agent發起數據采集請求；
• zabbix_sender：命令行工具，運行於agent端，手動向server端發送數據；
• zabbix_java_gateway: java網關；
• zabbix_database：統一存儲，監控數據及配置。MySQL或PostgreSQL；
• zabbix_web：圖形化界面，可查看數據，可管理zabbix
• zabbix proxy：采集數據，發送給zabbix server。分布式監控的實現，小型網絡沒必要用。
  

七. 各種安裝包：

zabbix-agent：被監控端需要安裝的組件

get和sender：手動測試的命令行工具

zabbix-java-gateway：zabbix監控java程序所需要安裝的包

zabbix-proxy-mysql、zabbix-proxy-sqlite3：zabbix代理端通過什麽數據庫存儲，就安裝哪個組件

zabbix-server-mysql、zabbix-server-pgsql: zabbix服務端基於mysql和pgsql做存儲所需要的包

zabbix-web：提供zabbix-gui接口

八. zabbix邏輯組件：

• 主機組（hostgroups）:根據功能定義
• 主機 （host）
• 監控項(item)
  • key：實現獲取監控的目標上的數據的命令或腳本的名稱；
• 應用(application)：同一類監控項的集合；
• 觸發器(trigger)：表達式；PROBLEM， OK；
• 事件(event)：
• 動作(action)：由條件(condition)和操作(operation)組件；
• 媒介(media)：發送通知的通道；
• 通知(notification)：
• 遠程命令(remote command)：
• 報警升級()：
• 模板(template)：快速定義被監控主機的各監控項的預設項目集合；
• 圖形(graph)：用於展示歷史數據或趨勢數據的圖像；
• 屏幕(screen)：由多個graph組成；
• 維護周期(maintenance)
• 周期性數據采集的(zobbix poller)
• 添加主機的方式:
  • 手動添加主機:分成組，向組上的主機套模板.zabbix定義被監控項，監控項定義觸發器，根據觸發器觸發事件（一個觸發器上可以觸發多個事件）。actions上定義事件。滿足觸發器條件觸發事件。
  • 自動發現：通過ansible或cobbler安裝agent，zabbix-server自動掃描主機，通過ping，若回應pong，添加到主機列表並套用模板。

九. zabbix的安裝：

1. 安裝 Repository

   # rpm -i http://repo.zabbix.com/zabbix/3.4/rhel/7/x86_64/zabbix-release-3.4-2.el7.noarch.rpm

   也可直接創建repo文件，使用如下repo內容：

以下為repo文件內容：

[zabbix]        #提供了zabbx各種功能包。
name=Zabbix Official Repository - $basearch
baseurl=https://mirrors.aliyun.com/zabbix/zabbix/4.0/rhel/7/x86_64/
enabled=1
gpgcheck=0
gpgkey=http://repo.zabbix.com/RPM-GPG-KEY-ZABBIX
[Zabbix Official Repository]            #提供了iksemel及fping。
name=Zabbix Official Repository
baseurl=http://repo.zabbix.com/non-supported/rhel/7/x86_64/
enabled=1
gpgcheck=0
gpgkey=http://repo.zabbix.com/RPM-GPG-KEY-ZABBIX

若不添加Zabbix Official Repository，安裝zabbix時會出現如下提示：

Error: Execution of ‘/bin/yum -d 0 -e 0 -y install zabbix-server-mysql‘ returned 1: Error: Package: zabbix-server-2.4.8-1.el7.x86_64 (zabbix-2.4)
                 Requires: iksemel
      Error: Package: zabbix-server-mysql-2.4.8-1.el7.x86_64 (zabbix-2.4)
                 Requires: libiksemel.so.3()(64bit)
       You could try using --skip-broken to work around the problem
       You could try running: rpm -Va --nofiles --nodigest

2. 安裝 Zabbix server, frontend, agent（若所有主機都在一個局域網內，可不安裝zabbix-proxy-mysql）

# yum -y install zabbix-server-mysql zabbix-proxy-mysql zabbix-web-mysql zabbix-agent mariadb-server

3. 初始化數據庫

提示：如果 Zabbix server 和 Zabbix proxy 安裝在相同的主機，它們必須創建不同名字的數據庫！
默認情況下，zabbix server配置文件中的DBName是zabbix，zabbix proxy配置文件中DBName是zabbix_proxy。

• 創建用戶

# mysql -uroot -p
password
mysql> create database zabbix character set utf8 collate utf8_bin;
mysql> create database zabbix_proxy character set utf8 collate utf8_bin;    #可選
mysql> grant all privileges on zabbix.* to zabbix@localhost identified by ‘password‘;
mysql> grant all privileges on zabbix_proxy.* to zabbix@localhost identified by ‘password‘;     #可選
mysql> flush privileges;
mysql> quit;

• 初始化數據庫

[root@lxk ~]# cd /usr/share/doc/zabbix-proxy-mysql-4.0.2/
[root@lxk zabbix-proxy-mysql-4.0.2]# zcat schema.sql.gz > schema.sql    #可選
[root@lxk zabbix-proxy-mysql-4.0.2]# cd ../zabbix-server-mysql-4.0.2/    #可選
[root@lxk zabbix-server-mysql-4.0.2]# zcat create.sql.gz > create.sql
[root@lxk zabbix-server-mysql-4.0.2]# mysql -uroot -hlocalhost -p
MariaDB [(none)]> use zabbix_proxy;    #可選
MariaDB [zabbix_proxy]> source /usr/share/doc/zabbix-proxy-mysql-4.0.2/schema.sql;    #可選
MariaDB [zabbix_proxy]> use zabbix;
MariaDB [zabbix]> source /usr/share/doc/zabbix-server-mysql-4.0.2/create.sql;

4. 為服務端指定數據庫密碼

編輯 /etc/zabbix/zabbix_server.conf以及/etc/zabbix/zabbix_proxy.conf,把其中的DBPassword值改為對應密碼

DBPassword=password

5. 設置時區

編輯 /etc/httpd/conf.d/zabbix.conf, 設置時區

# php_value date.timezone Asia/Shanghai

6. 啟動zabbix服務端和agent線程

# systemctl restart zabbix-server zabbix-agent httpd
# systemctl enable zabbix-server zabbix-agent httpd

7. 修改/usr/share/zabbix

[root@nfs zabbix]# chown -R apache.apache ../zabbix/

8. 圖形化安裝：

訪問zabbix-server
http://zabbix-server IP/zabbix/setup.php
配置完成後配置文件會保存在以下文件
/etc/zabbix/web/zabbix.conf.php
安裝完成後，默認用戶為Admin，默認密碼為zabbix

十.服務端基本配置：

[root@nfs ~]# grep "^[^[:space:]]#\+" /etc/zabbix/zabbix_server.conf
############ GENERAL PARAMETERS #################
### Option: ListenPort      #服務監聽的端口
### Option: SourceIP        #服務器端若有多個地址，使用哪個地址與agent端連接。
### Option: LogType         #指明日誌保存位置，syslog、文件、標準輸出
### Option: LogFile         #日誌保存的文件名
### Option: LogFileSize     #日誌文件大小，超出大小自動滾動，0為不限制大小。
### Option: DebugLevel      #debug級別，詳見配置文件解釋。一般為3
### Option: PidFile         #PID文件位置
### Option: SocketDir       #基於UNIX SOCKET通訊時的SOCKET文件位置
### Option: DBHost          #數據庫IP
### Option: DBName          #數據庫名稱
### Option: DBSchema        #數據庫方案，即Mysql還是pgsql
### Option: DBUser          #連接數據庫的用戶
### Option: DBPassword      #連接數據庫用戶的密碼
### Option: DBSocket        #DBSocket位置
### Option: DBPort          #數據庫端口
### Option: HistoryStorageURL       #
### Option: HistoryStorageTypes     #

十一.zabbix-agent端配置：

[root@nfs ~]# grep "^[^[:space:]]####\+" /etc/zabbix/zabbix_agentd.conf 
一般參數
############ GENERAL PARAMETERS #################
被動檢查相關
##### Passive checks related
主動檢查相關
##### Active checks related
高級配置
############ ADVANCED PARAMETERS #################
自定義監控參數

####### USER-DEFINED MONITORED PARAMETERS #######
加載的模塊
####### LOADABLE MODULES #######
安全認證相關：局域網內無需配置
####### TLS-RELATED PARAMETERS #######

1. GENERAL PARAMETERS

### Option: PidFile         #PID文件路徑
### Option: LogType         #日誌類型
### Option: LogFile         #日誌文件位置
### Option: LogFileSize     #日誌文件大小
### Option: DebugLevel      #debug級別
### Option: SourceIP        #與server端連接的IP地址
### Option: EnableRemoteCommands    #是否允許遠程命令
### Option: LogRemoteCommands       #遠程命令是否記錄在日誌中。

2. Passive checks related

### Option: Server              #server端IP
### Option: ListenPort          #server端端口
### Option: ListenIP            #agent監聽的地址
### Option: StartAgents         #啟動幾個agent

3. Active checks related

### Option: ServerActive
### Option: Hostname
### Option: HostnameItem
### Option: HostMetadata
### Option: HostMetadataItem
### Option: RefreshActiveChecks
### Option: BufferSend
### Option: BufferSize
### Option: MaxLinesPerSecond

十二.啟動zabbix-agent：

server端的agent無需設置選項，安裝好之後納入server端監控的方法：

直接啟動agent--> 在zabbix-server的web-gui頁上點擊configuration --> hosts.找到Zabbix server並點擊disabled --> 在彈出的消息中點擊enable。

zabbix server的Availability列會顯示當前采集數據的方式。ZBX為通過zabbix-agent方式。

zabbix 4.0安裝