記一次高併發優化(java)
環境:
1,資料庫:oracle
2,容器:tomcat(apache-tomcat-7.0.85)
期望結果:
1,單臺伺服器結果期望併發800左右;
步驟一:(優化tomcat容器)
1,調整tomcat jvm記憶體大小,以及GC的回收方式,在tomcat資料夾lib下的catalina.bat檔案中找到set JAVA_OPTS=%JAVA_OPTS% -server根據伺服器所在配置進行配置資訊,例如伺服器配置16G,4核CPU配置如下:
-Xmx10880M
-Xms10880M
-XX:+UseParallelGC
-XX:ParallelGCThreads=8
-XX:MaxPermSize=4096M
-XX:PermSize=4096M
-XX:+UseG1GC
-XX:MaxGCPauseMillis=100
-XX:+ParallelRefProcEnabled
-XX:ErrorFile=D:\apache-tomcat-7.0.59\logs\hs_err_pid%p.log
-XX:HeapDumpPath=D:\apache-tomcat-7.0.59\logs
-XX:+HeapDumpOnOutOfMemoryError
-XX:+PrintClassHistogramBeforeFullGC
-XX:+PrintClassHistogramAfterFullGC
-XX:+PrintGCApplicationConcurrentTime
-XX:+PrintGCApplicationStoppedTime
-XX:+PrintTenuringDistribution
-XX:+PrintHeapAtGC
注意:上述配置檔案需要配置在set JAVA_OPTS 後,若按照網上資料放在catalia.bat的最上面,可能會導致上述配置不生效,jvm還是載入預設配置,配置後可以啟動jdk中的jvisualvm.exe進行檢測配置是否生效;
步驟二(修改tomcat 中的server.xml 配置檔案)
當涉及到高併發處理的時候,將tomcat的執行模式從bio 模式修改成nio 模式,在併發環境下,nio效能優於bio,只需要將Connector標籤內的protocol修改成org.apache.coyote.http11.Http11NioProtocol即可;其他配置根據需求可以調整;
例:
<Connector port="80" protocol="org.apache.coyote.http11.Http11NioProtocol"
connectionTimeout ="20000"
redirectPort="8443"
maxThreads="500"
minSpareThreads="100"
maxSpareThreads="200"
acceptCount="1000"
maxIdleTime="30000"
enableLookups="false"
URIEncoding="UTF-8"
/>
配置解讀:
maxThreads:最大能接受的請求數,預設為200
minSpareThreads:最少備用執行緒數,預設初始化,預設為25
maxSpareThreads:最多備用執行緒數,一旦建立的執行緒超過這個值,Tomcat就會關閉不再需要的socket執行緒
acceptCount:等待處理的請求佇列,預設為100,超過佇列長度,伺服器則拒絕客戶端請求,直接返回403
maxIdleTime:如果一個執行緒在30秒以內沒有活躍,則終止執行並從執行緒池中移除。除非執行緒池數量小於或等於minSpareThreads數量。預設值是1分鐘
enableLookups:如果為true,呼叫request.getRemoteHost會執行DNS反查,反向解析IP對應的域名或主機,效率較低,建議設為false。
步驟三:優化spring-mybatis配置檔案
1,主要優化配置檔案中資料庫的最大連線數maxtive,根據需求設定具體值;
2,設定資料庫的響應時間,maxWait= 10000,這裡的時間是毫秒級別
例:
<bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">
<property name="driverClassName" value="${jdbc.driver.name}"/>
<property name="url" value="${jdbc.url}"/>
<property name="username" value="${jdbc.username}"/>
<property name="password" value="${jdbc.password}"/>
<!-- 配置初始化大小、最小、最大 -->
<property name="initialSize" value="${druid.initialSize}"/>
<property name="minIdle" value="${druid.minIdle}"/>
<property name="maxActive" value="500"/>
<!-- 配置獲取連線等待超時的時間 -->
<property name="maxWait" value="10000"/>
<!-- 配置間隔多久才進行一次檢測,檢測需要關閉的空閒連線,單位是毫秒 -->
<property name="timeBetweenEvictionRunsMillis" value="${druid.timeBetweenEvictionRunsMillis}"/>
<!-- 配置一個連線在池中最小生存的時間,單位是毫秒 -->
<property name="minEvictableIdleTimeMillis" value="${druid.minEvictableIdleTimeMillis}"/>
<property name="validationQuery" value="select 1 from dual"/>
<!--保持資料庫連線不中斷-->
<property name="keepAlive" value="true"/>
<property name="testWhileIdle" value="true"/>
<property name="testOnBorrow" value="false"/>
<property name="testOnReturn" value="false"/>
<!-- 開啟PSCache,並且指定每個連線上PSCache的大小 -->
<property name="poolPreparedStatements" value="true"/>
<property name="maxPoolPreparedStatementPerConnectionSize"
value="${druid.maxPoolPreparedStatementPerConnectionSize}"/>
<!-- 配置監控統計攔截的filters 防止 sql 注入牆-->
<!--<property name="filters" value="stat"/>-->
</bean>
步驟四(優化資料庫)
1,oracle資料庫預設的連線數為200,併發環境下可以提高資料庫的連線數,查詢及配置如下:
--查詢oracle資料庫設定的最大連線數
select value from v$parameter where name = 'processes';
--修改資料庫連結數
alter system set processes=500 scope=spfile;
--查詢資料庫當前程序的連線數:
select count(*) from v$process;
--檢視資料庫當前會話的連線數:
select count(*) from v$session;
--檢視資料庫的併發連線數:
select count(*) from v$session where status='ACTIVE';
--檢視當前資料庫建立的會話情況:
select sid,serial#,username,program,machine,status from v$session;
--windows命令重啟oracle,在系統命令列輸入
sqlplus /nolog
conn sys / as sysdba
shutdow immediate;
startup;
步驟五(優化程式中的sql)
1,對程式中的複雜sql進行優化,對於where ,group by 後的欄位根據需求新增索引
2,對程式中的複雜關聯遵循大表關聯小表的規則;
3,sql中批量新增不易太多,根據需求控制批量新增的個數;