1. 程式人生 > >記一次高併發優化(java)

記一次高併發優化(java)

環境:

1,資料庫:oracle
2,容器:tomcat(apache-tomcat-7.0.85)

期望結果:

1,單臺伺服器結果期望併發800左右;

步驟一:(優化tomcat容器)

1,調整tomcat jvm記憶體大小,以及GC的回收方式,在tomcat資料夾lib下的catalina.bat檔案中找到set JAVA_OPTS=%JAVA_OPTS% -server根據伺服器所在配置進行配置資訊,例如伺服器配置16G,4核CPU配置如下:
-Xmx10880M
-Xms10880M
-XX:+UseParallelGC
-XX:ParallelGCThreads=8
-XX:MaxPermSize=4096M
-XX:PermSize=4096M
-XX:+UseG1GC
-XX:MaxGCPauseMillis=100
-XX:+ParallelRefProcEnabled
-XX:ErrorFile=D:\apache-tomcat-7.0.59\logs\hs_err_pid%p.log
-XX:HeapDumpPath=D:\apache-tomcat-7.0.59\logs
-XX:+HeapDumpOnOutOfMemoryError
-XX:+PrintClassHistogramBeforeFullGC
-XX:+PrintClassHistogramAfterFullGC
-XX:+PrintGCApplicationConcurrentTime
-XX:+PrintGCApplicationStoppedTime
-XX:+PrintTenuringDistribution
-XX:+PrintHeapAtGC
注意:上述配置檔案需要配置在set JAVA_OPTS 後,若按照網上資料放在catalia.bat的最上面,可能會導致上述配置不生效,jvm還是載入預設配置,配置後可以啟動jdk中的jvisualvm.exe進行檢測配置是否生效;

步驟二(修改tomcat 中的server.xml 配置檔案)

當涉及到高併發處理的時候,將tomcat的執行模式從bio 模式修改成nio 模式,在併發環境下,nio效能優於bio,只需要將Connector標籤內的protocol修改成org.apache.coyote.http11.Http11NioProtocol即可;其他配置根據需求可以調整;
例:

 <Connector port="80" protocol="org.apache.coyote.http11.Http11NioProtocol"
               connectionTimeout
="20000" redirectPort="8443" maxThreads="500" minSpareThreads="100" maxSpareThreads="200" acceptCount="1000" maxIdleTime="30000" enableLookups="false" URIEncoding="UTF-8" />

配置解讀:
maxThreads:最大能接受的請求數,預設為200
minSpareThreads:最少備用執行緒數,預設初始化,預設為25
maxSpareThreads:最多備用執行緒數,一旦建立的執行緒超過這個值,Tomcat就會關閉不再需要的socket執行緒
acceptCount:等待處理的請求佇列,預設為100,超過佇列長度,伺服器則拒絕客戶端請求,直接返回403
maxIdleTime:如果一個執行緒在30秒以內沒有活躍,則終止執行並從執行緒池中移除。除非執行緒池數量小於或等於minSpareThreads數量。預設值是1分鐘
enableLookups:如果為true,呼叫request.getRemoteHost會執行DNS反查,反向解析IP對應的域名或主機,效率較低,建議設為false。

步驟三:優化spring-mybatis配置檔案

1,主要優化配置檔案中資料庫的最大連線數maxtive,根據需求設定具體值;
2,設定資料庫的響應時間,maxWait= 10000,這裡的時間是毫秒級別
例:

<bean id="dataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">
        <property name="driverClassName" value="${jdbc.driver.name}"/>
        <property name="url" value="${jdbc.url}"/>
        <property name="username" value="${jdbc.username}"/>
        <property name="password" value="${jdbc.password}"/>

        <!-- 配置初始化大小、最小、最大 -->
        <property name="initialSize" value="${druid.initialSize}"/>
        <property name="minIdle" value="${druid.minIdle}"/>
        <property name="maxActive" value="500"/>

        <!-- 配置獲取連線等待超時的時間 -->
        <property name="maxWait" value="10000"/>

        <!-- 配置間隔多久才進行一次檢測,檢測需要關閉的空閒連線,單位是毫秒 -->
        <property name="timeBetweenEvictionRunsMillis" value="${druid.timeBetweenEvictionRunsMillis}"/>

        <!-- 配置一個連線在池中最小生存的時間,單位是毫秒 -->
        <property name="minEvictableIdleTimeMillis" value="${druid.minEvictableIdleTimeMillis}"/>

        <property name="validationQuery" value="select 1 from dual"/>
        <!--保持資料庫連線不中斷-->
        <property name="keepAlive" value="true"/>
        <property name="testWhileIdle" value="true"/>
        <property name="testOnBorrow" value="false"/>
        <property name="testOnReturn" value="false"/>

        <!-- 開啟PSCache,並且指定每個連線上PSCache的大小 -->
        <property name="poolPreparedStatements" value="true"/>
        <property name="maxPoolPreparedStatementPerConnectionSize"
                  value="${druid.maxPoolPreparedStatementPerConnectionSize}"/>

        <!-- 配置監控統計攔截的filters  防止 sql 注入牆-->
        <!--<property name="filters" value="stat"/>-->
    </bean>

步驟四(優化資料庫)

1,oracle資料庫預設的連線數為200,併發環境下可以提高資料庫的連線數,查詢及配置如下:

--查詢oracle資料庫設定的最大連線數
select value from v$parameter where name = 'processes'; 
--修改資料庫連結數
alter system set processes=500 scope=spfile;
--查詢資料庫當前程序的連線數:
select count(*) from v$process;
--檢視資料庫當前會話的連線數:
select count(*) from v$session;
--檢視資料庫的併發連線數:
select count(*) from v$session where status='ACTIVE';
--檢視當前資料庫建立的會話情況:
select sid,serial#,username,program,machine,status from v$session;

--windows命令重啟oracle,在系統命令列輸入
sqlplus /nolog
conn sys / as sysdba
shutdow immediate;
startup;

步驟五(優化程式中的sql)

1,對程式中的複雜sql進行優化,對於where ,group by 後的欄位根據需求新增索引
2,對程式中的複雜關聯遵循大表關聯小表的規則;
3,sql中批量新增不易太多,根據需求控制批量新增的個數;