大型網站架構之百萬PV
阿新 • • 發佈：2018-07-30
rop 就是 priority ipaddress -s 模式 lse 故障 shutdown PV（page view）即頁面瀏覽量，通常是衡量一個網絡新聞頻道或網站甚至一條網絡新聞的主要指標。網頁瀏覽數是評價網站流量最常用的指標之一，簡稱為PV。
-
案例概述
本案例設計采用四層模式來實現，主要分為前端反向代理、web層、數據庫緩存層、數據庫層。
前端反向代理層采用主備模式，Web層采用群集模式，數據庫緩存層采用主備模式，數據庫層采用主備模式 -
架構拓撲圖：實現是正常情況數據流向，虛線是異常情況下的數據流向。
? - 電腦配置有限 這裏就將代理層、redis緩存數據層、mysql數據庫層 合並在一起了
| 主機名 | IP | 用途 |
|---|---|---|
| master | 192.168.200.128 | 前端nginx反向代理主機、redis緩存主機、mysql數據主庫 |
| backup | 192.168.200.129 | 前端nginx反向代理備機、redis緩存備機、mysql數據備庫 |
| web1 | 192.168.200.130 | tomcat服務器、顯示網站 |
| web2 | 192.168.200.131 | tomcat服務器、顯示網站 |
| VIP | 192.168.200.200 |
?
- master、backup 服務器上配置
- keepalived+nginx安裝配置
- 安裝帶有nginx rpm軟件包的源
-
註意主從配置 3處不同，已經標註
# rpm -ivh http://nginx.org/packages/centos/7/noarch/RPMS/# nginx-release-centos-7-0.el7.ngx.noarch.rpm -
使用centos 默認倉庫完成下面的安裝
# yum install -y keepalived nginx # vi /etc/keepalived/keepalived.conf //從上修改三個參數 ! Configuration File for keepalived global_defs { route_id NGINX_HA //備份為 NGINX_HB } //下面刪除4行 //觸發腳本↓↓ vrrp_script nginx { script "/opt/shell/nginx.sh" interval 2 } vrrp_instance VI_1 { state MASTER //備份為BACKUP interface ens33 virtual_router_id 51 priority 100 //備份優先級小於主 advert_int 1 authentication { auth_type PASS auth_pass 1111 } track_script { nginx } virtual_ipaddress { 192.168.200.200 } } # mkdir /opt/shell # vi /opt/shell/nginx.sh //編寫觸發nginx啟動的腳本 #!/bin/bash k=`ps -ef | grep keepalived | grep -v grep | wc -l` if [ $k -gt 0 ];then /bin/systemctl start nginx.service else /bin/systemctl stop nginx.service fi # chmod +x /opt/shell/nginx.sh - 配置nginx前端調度功能
-
主備配置一樣
# vi /etc/nginx/nginx.conf //在include 上面一行新增 upstream tomcat_pool { server 192.168.200.130:8080; //web節點服務器 server 192.168.200.131:8080; ip_hash; #會話穩固功能，否則無法通過vip地址登陸 } server { listen 80; server_name 192.168.200.200; #虛擬出的IP location / { proxy_pass http://tomcat_pool; proxy_set_header X-Real-IP $remote_addr; } }
# nginx -t -c /etc/nginx/nginx.conf //測試配置文件語法 # systemctl stop firewalld.service # setenforce 0 # systemctl start keepalived.service //nginx啟動會等待一會 - master、backup 服務器上配置
-
數據庫的安裝配置
# yum install -y mariadb-server mariadb # systemctl start mariadb.service # systemctl enable mariadb.service # netstat -anpt | grep 3306 # mysql_secure_installation //常規安全設置輸入（ 回車 n n n n y） -
導入數據庫
# mysql -u root -p < slsaledb-2014-4-10.sql # mysql -uroot -p # show databases; > GRANT all ON slsaledb.* TO ‘root‘@‘%‘ IDENTIFIED BY ‘abc123‘; > flush privileges; - web服務器上配置
-
安裝配置tomcat （節點服務器 兩臺都要做）
# tar xf apache-tomcat-8.5.23.tar.gz -C /opt # tar xf jdk-8u144-linux-x64.tar.gz -C /opt # cp -rv jdk1.8.0_144/ /usr/local/java # vi /etc/profile //末尾添加下面4行 export JAVA_HOME=/usr/local/java export JRE_HOME=/usr/local/java/jre export PATH=$PATH:/usr/local/java/bin export CLASSPATH=./:/usr/local/java/lib:/usr/local/java/jre/lib # source /etc/profile # java -version //查看版本 # cp -r apache-tomcat-8.5.23 /usr/local/tomcat8 # ln -s /usr/local/tomcat8/bin/startup.sh /usr/bin/tomcatup # ln -s /usr/local/tomcat8/bin/shutdown.sh /usr/bin/tomcatdown # tomcatup //啟動tomcat # netstat -anpt | grep 8080 //查看端口是否啟動
?
?
# vi /usr/local/tomcat8/webapps/ROOT/index.jsp //修改默認網頁內容
<h1>Server 130</h1> //節點1的網頁內容
<h1>Server 131</h1> //節點2的網頁內容- 在瀏覽器測試頁面
- http://192.168.200.200/ 輸入調度器地址，也就是虛擬地址，測試兩臺節點的調度情況。
?
?
# cd /usr/local/tomcat8/conf/
# vi server.xml //跳到行尾，在Host name下新增 在149行<Context path="" docBase="SLSaleSystem" reloadable="true" debug="0"></Context>
日誌調試信息debug為0表示信息越少，docBase指定訪問目錄 # tomcatup //啟動tomcat
# tomcatdown //停止tomcat
# tomcatup //啟動tomcat
?
?
-
搭建商城網站
# tar xf SLSaleSystem.tar.gz -C /usr/local/tomcat8/webapps/ # cd /usr/local/tomcat8/webapps/SLSaleSystem/WEB-INF/classes # vi jdbc.properties //修改數據庫IP地址是VRRP的虛擬IP，以及授權的用戶名root和密碼abc123。 # tomcatdown //停止tomcat # tomcatup //啟動tomcat
- 網站測試
- http://192.168.200.130:8080/ //默認的用戶名admin 密碼：123456
- http://192.168.200.131:8080/
- http://192.168.200.200 //輸入虛擬地址測試登錄，並且關閉主再測試登錄
?
?
- master、backup 服務器上配置
-
部署redis主從和群集
# yum install -y epel-release # yum install redis -y # cat /etc/redis.conf | grep -v "^#" | grep -v "^$" # vi /etc/redis.conf bind 0.0.0.0 從服務器上266行多如下一行配置 slaveof 192.168.200.128 6379 //主服務器的IP不是虛擬IP # systemctl start redis.service # netstat -anpt | grep 6379 # redis-cli -h 192.168.200.128 -p 6379 //測試連接 192.168.200.128:6379> set name test //設置name 值是test 192.168.175.128:6379> get name //獲取name值 # redis-cli -h 192.168.200.129 -p 6379 //登錄從，獲取值，成功說明主從同步成功 192.168.200.129:6379> get name "test"
?
?
- web服務器上配置
-
配置商城項目中連接redis的參數
# vi /usr/local/tomcat8/webapps/SLSaleSystem/WEB-INF/classes/applicationContext-mybatis.xml 47 <constructor-arg value="192.168.200.200"/> 48 <constructor-arg value="6379"/> # tomcatdown //停止tomcat # tomcatup //啟動tomcat
?
?
- master、backup 服務器上配置
- 測試redis緩存效果
- 登錄商城，然後反復點擊需要數據庫參與的操作頁面，再回來檢查keyspace_hits或者keyspace_misses: 值變化
-
keyspace_hits: 或者 keyspace_misses://關註這個值，命中數和未命中數
# redis-cli -h 192.168.200.200 -p 6379 192.168.200.200:6379> info
?
?
- 配置redis集群主從切換
-
只在主服務器是操作
# redis-cli -h 192.168.200.128 info Replication //獲取當前服務器的角色
?
vi /etc/redis-sentinel.conf (17行 68行 98行）
17 protected-mode no
68 sentinel monitor mymaster 192.168.200.128 6379 1 //1表示1臺從 註意：修改
98 sentinel down-after-milliseconds mymaster 3000 //故障切換時間單位是毫秒
# service redis-sentinel start //啟動集群
# netstat -anpt | grep 26379
# redis-cli -h 192.168.200.128 -p 26379 info Sentinel //查看集群信息
- 驗證主從切換
-
在主上
# systemctl stop redis.service # redis-cli -h 192.168.200.128 -p 26379 info Sentinel //發現主變成了129
?
?
- master、backup 服務器上配置
- 配置mysql主從復制
-
mysql主服務器配置
# vi /etc/my.cnf // [mysqld]下 binlog-ignore-db=mysql,information_schema character_set_server=utf8 log_bin=mysql_bin server_id=1 log_slave_updates=true sync_binlog=1
# systemctl restart mariadb # netstat -anpt | grep 3306 # mysql -u root > show master status; //記錄日誌文件名稱和 位置值 > grant replication slave on *.* to ‘rep‘@‘192.168.200.%‘ identified by ‘123456‘; > flush privileges; -
mysql從服務器配置
# vi /etc/my.cnf / /[mysqld]下 server_id=2 # systemctl restart mariadb # netstat -anpt | grep 3306 # mysql -u root > change master to master_host=‘192.168.200.128‘,master_user=‘rep‘,master_password=‘123456‘,master_log_file=‘mysql_bin.000001‘,master_log_pos=245; > start slave; > show slave status\G;
大型網站架構之百萬PV