【高併發】高併發環境下如何防止Tomcat記憶體溢位?看完我懂了!!
寫在前面
隨著系統併發量越來越高,Tomcat所佔用的記憶體就會越來越大,如果對Tomcat的記憶體管理不當,則可能會引發Tomcat記憶體溢位的問題,那麼,如何防止Tomcat記憶體溢位呢?我們今天就來一起探討下這個問題。
防止Tomcat記憶體溢位可以總結為兩個方案:一個是設定Tomcat啟動的初始記憶體,一個是防止Tomcat所用的JVM記憶體溢位。接下來,我們就分別對這兩種方案作出簡單的介紹。
設定啟動初始記憶體
其初始空間(即-Xms)是實體記憶體的1/64,最大空間(-Xmx)是實體記憶體的1/4。可以利用JVM提供的-Xmn -Xms -Xmx等選項可進行設定。
例項
以下給出1G記憶體環境下java jvm 的引數設定參考:
JAVA_OPTS="-server -Xms800m -Xmx800m -XX:PermSize=64M -XX:MaxNewSize=256m -XX:MaxPermSize=128m -Djava.awt.headless=true " JAVA_OPTS="-server -Xms768m -Xmx768m -XX:PermSize=128m -XX:MaxPermSize=256m -XX:NewSize=192m -XX:MaxNewSize=384m" CATALINA_OPTS="-server -Xms768m -Xmx768m -XX:PermSize=128m -XX:MaxPermSize=256m -XX:NewSize=192m -XX:MaxNewSize=384m"
Linux
在/usr/local/apache-tomcat-7.0/bin 目錄下的catalina.sh檔案中,新增:JAVA_OPTS='-Xms512m -Xmx1024m',要加“m”說明是MB,否則就是KB了,在啟動tomcat時會報記憶體不足。
- -Xms:初始值
- -Xmx:最大值
- -Xmn:最小值
Windows
在catalina.bat最前面加入set JAVA_OPTS=-Xms128m -Xmx350m,如果用startup.bat啟動tomcat,OK設定生效。夠成功的分配200M記憶體。但是如果不是執行startup.bat啟動tomcat而是利用windows的系統服務啟動tomcat服務,上面的設定就不生效了,就是說set JAVA_OPTS=-Xms128m -Xmx350m 沒起作用。上面分配200M記憶體就OOM了。。
windows服務執行的是bin\tomcat.exe。它讀取登錄檔中的值,而不是catalina.bat的設定。
解決辦法
修改登錄檔
HKEY_LOCAL_MACHINE\SOFTWARE\Apache Software Foundation\Tomcat Service Manager\Tomcat5\Parameters\JavaOptions
原值為
-Dcatalina.home="C:\ApacheGroup\Tomcat 7.0"
-Djava.endorsed.dirs="C:\ApacheGroup\Tomcat 7.0\common\endorsed"
-Xrs
加入 -Xms300m -Xmx350m
重起tomcat服務,設定生效。
防止所用的JVM記憶體溢位
1.java.lang.OutOfMemoryError: Java heap space
解釋
Heap size 設定
JVM堆的設定是指java程式執行過程中JVM可以調配使用的記憶體空間的設定.JVM在啟動的時候會自動設定Heap size的值,其初始空間(即-Xms)是實體記憶體的1/64,最大空間(-Xmx)是實體記憶體的1/4。可以利用JVM提供的-Xmn -Xms -Xmx等選項可進行設定。Heap size 的大小是Young Generation 和Tenured Generaion 之和。
提示:在JVM中如果98%的時間是用於GC且可用的Heap size 不足2%的時候將丟擲此異常資訊。
提示:Heap Size 最大不要超過可用實體記憶體的80%,一般的要將-Xms和-Xmx選項設定為相同,而-Xmn為1/4的-Xmx值。
解決方法
手動設定Heap size
修改TOMCAT_HOME/bin/catalina.bat,在“echo "Using CATALINA_BASE: $CATALINA_BASE"”上面加入以下程式碼。
set JAVA_OPTS=%JAVA_OPTS% -server -Xms800m -Xmx800m -XX:MaxNewSize=256m
set JAVA_OPTS=%JAVA_OPTS% -server -Xms800m -Xmx800m -XX:MaxNewSize=256m
或修改catalina.sh
在“echo "Using CATALINA_BASE: $CATALINA_BASE"”上面加入以下行:
JAVA_OPTS="$JAVA_OPTS -server -Xms800m -Xmx800m -XX:MaxNewSize=256m"
2.java.lang.OutOfMemoryError: PermGen space
原因
PermGen space的全稱是Permanent Generation space,是指記憶體的永久儲存區域,這塊記憶體主要是被JVM存放Class和Meta資訊的,Class在被Loader時就會被放到PermGen space中,它和存放類例項(Instance)的Heap區域不同,GC(Garbage Collection)不會在主程式執行期對PermGen space進行清理,所以如果你的應用中有很CLASS的話,就很可能出現PermGen space錯誤,這種錯誤常見在web伺服器對JSP進行pre compile的時候。如果你的WEB APP下都用了大量的第三方jar, 其大小超過了jvm預設的大小(4M)那麼就會產生此錯誤資訊了。
解決方法
手動設定MaxPermSize大小
修改TOMCAT_HOME/bin/catalina.bat(Linux下為catalina.sh),在程式碼
“echo "Using CATALINA_BASE: $CATALINA_BASE"”上面加入以下行:
set JAVA_OPTS=%JAVA_OPTS% -server -XX:PermSize=128M -XX:MaxPermSize=512m
“echo "Using CATALINA_BASE: $CATALINA_BASE"”上面加入以下行:
set JAVA_OPTS=%JAVA_OPTS% -server -XX:PermSize=128M -XX:MaxPermSize=512m
catalina.sh檔案的修改如下。
Java程式碼
JAVA_OPTS="$JAVA_OPTS -server -XX:PermSize=128M -XX:MaxPermSize=512m"
3.分析java.lang.OutOfMemoryError: PermGen space
發現很多人把問題歸因於: spring,hibernate,tomcat,因為他們動態產生類,導致JVM中的permanent heap溢位 。然後解決方法眾說紛紜,有人說升級 tomcat版本到最新甚至乾脆不用tomcat。還有人懷疑spring的問題,在spring論壇上討論很激烈,因為spring在AOP時使用CBLIB會動態產生很多類。
但問題是為什麼這些王牌的開源會出現同一個問題呢,那麼是不是更基礎的原因呢?tomcat在Q&A很隱晦的回答了這一點,我們知道這個問題,但這個問題是由一個更基礎的問題產生。
於是有人對更基礎的JVM做了檢查,發現了問題的關鍵。原來SUN 的JVM把記憶體分了不同的區,其中一個就是permenter區用來存放用得非常多的類和類描述。本來SUN設計的時候認為這個區域在JVM啟動的時候就固定了,但他沒有想到現在動態會用得這麼廣泛。而且這個區域有特殊的垃圾收回機制,現在的問題是動態載入類到這個區域後,gc根本沒辦法回收!
對於以上兩個問題,我的處理是:
在catalina.bat的第一行增加:
set JAVA_OPTS=-Xms64m -Xmx256m -XX:PermSize=128M -XX:MaxNewSize=256m -XX:MaxPermSize=256m
在catalina.sh的第一行增加:
JAVA_OPTS= -Xms64m -Xmx256m -XX:PermSize=128M -XX:MaxNewSize=256m -XX:MaxPermSize=256m
寫在最後
如果覺得文章對你有點幫助,請微信搜尋並關注「 冰河技術 」微信公眾號,跟冰河學習高併發程式設計技術。
最後,附上併發程式設計需要掌握的核心技能知識圖,祝大家在學習併發程式設計時,少走彎路。
相關推薦
【高併發】高併發環境下如何防止Tomcat記憶體溢位?看完我懂了!!
寫在前面 隨著系統併發量越來越高,Tomcat所佔用的記憶體就會越來越大,如果對Tomcat的記憶體管理不當,則可能會引發Tomcat記憶體溢位的問題,那麼,如何防止Tomcat記憶體溢位呢?我們今天就來一起探討下這個問題。 防止Tomcat記憶體溢位可以總結為兩個方案:一個是設定Tomcat啟動的初始記
【高併發】億級流量場景下如何為HTTP介面限流?看完我懂了!!
## 寫在前面 > 在網際網路應用中,高併發系統會面臨一個重大的挑戰,那就是大量流高併發訪問,比如:天貓的雙十一、京東618、秒殺、搶購促銷等,這些都是典型的大流量高併發場景。關於秒殺,小夥伴們可以參見我的另一篇文章《[【高併發】高併發秒殺系統架構解密,不是所有的秒殺都是秒殺!](https://mp
【Nginx】如何使用Nginx實現MySQL資料庫的負載均衡?看完我懂了!!
## 寫在前面 > Nginx能夠實現HTTP、HTTPS協議的負載均衡,也能夠實現TCP協議的負載均衡。那麼,問題來了,可不可以通過Nginx實現MySQL資料庫的負載均衡呢?答案是:可以。接下來,就讓我們一起探討下如何使用Nginx實現MySQL的負載均衡。 ## 前提條件 **注意:使用Ng
【電信學】【2016.01】實際傳播環境下的大規模MIMO
本文為瑞典隆德大學(作者:XiangGao)的電子資訊博士論文,共271頁。 行動通訊正向著第五代(5G)演進。在不久的將來,預計生活中實現網路互連的裝置(如電話、平板電腦、感測器、車輛等)數量會爆炸性地增加。因此需要比現在4G系統更高的資料速率。在5G的願景中,還包括在偏遠地區進行更
【順序表】純C環境下,函式傳遞的指標指向報錯及解決
之前開始學順序表的時候,就沒有很好地弄懂,函式裡指標的傳遞這一塊,今天把錯誤範例和一些解決方式拿出來分析一下。 網上有很多掛羊頭賣狗肉的c語言教程,函式是引用呼叫的,就很誤導人。 Wrong: typedef struct { int *elem; in
【TCP/IP】虛擬機器環境下,TCP協議的簡單實現以及[Errno 61] Connection refused的排障
環境: Mac:VIM8+YouCompleteMe+Python3 Parallels下CentOS7:VIM8+YouCompleteMe+Python3 目的: Mac為Client,CentOS7為Server.Server監聽埠,並對Client的TCP請
【Data Cluster】真機環境下MySQL資料庫叢集搭建
摘要:本年伊始階段,由於實驗室對不同資料庫效能測試需求,才出現MySQL叢集搭建。購置主機,交換機,雙絞線等一系列準備工作就緒,也就開始叢集搭建。起初筆者對此不甚瞭解,查閱很多資料,最終都不太完善。故筆者真機環境測試成功後,整理出此搭建文件,一則防止遺忘知識總結,另則與人共享。前天完成文件由於文字偏
【Redis學習】:Linux環境下的Redis安裝與配置
安裝環境 redis是C語言開發的,安裝redis需要先將官網上下載的原始碼進行編譯,編譯依賴gcc環境,如果沒有gcc環境,需要安裝gcc。這個最好使用yum安裝,因為依賴關係比較多,自己不好找
【知識圖譜】大資料環境下知識工程的機遇和挑戰
導讀:知識圖譜已經成為推動人工智慧發展的核心驅動力之一。本文選自清華大學電腦科學與技術系教授、清
【Canal】網際網路背景下有哪些資料同步需求和解決方案?看完我知道了!!
## 寫在前面 > 在當今網際網路行業,尤其是現在分散式、微服務開發環境下,為了提高搜尋效率,以及搜尋的精準度,會大量使用Redis、Memcached等NoSQL資料庫,也會使用大量的Solr、Elasticsearch等全文檢索服務。那麼,這個時候,就會有一個問題需要我們來思考和解決:那就是資料同
【模型解讀】network in network中的1*1卷積,你懂了嗎
文章首發於微信公眾號《與有三學AI》 02 這是深度學習模型解讀第二篇,本篇我們將介紹Network InNetwork。 Network In Network 是發表於2014年ICLR的一篇paper。這篇文章採用較少引數就取得了Alexnet的效果,Alexne
【高併發】高併發環境下詭異的加鎖問題(你加的鎖未必安全)
宣告 特此宣告:文中有關支付寶賬戶的說明,只是用來舉例,實際支付寶賬戶要比文中描述的複雜的多。也與文中描述的完全不同。 前言 很多網友留言說:在編寫多執行緒併發程式時,我明明對共享資源加鎖了啊?為什麼還是出問題呢?問題到底出在哪裡呢?其實,我想說的是:你的加鎖姿勢正確嗎?你真的會使用鎖嗎?錯誤的加鎖方式不但
【高併發】高併發環境下構建快取服務需要注意哪些問題?我和阿里P9聊了很久!
## 寫在前面 > 週末,跟阿里的一個朋友(去年晉升為P9了)聊了很久,聊的內容幾乎全是技術,當然了,兩個技術男聊得最多的話題當然就是技術了。從基礎到架構,從演算法到AI,無所不談。中間又穿插著不少天馬行空的想象,雖然現在看起來不太實際,但是隨著技術的進步,相信五年、十年之後都會實現的。 > &
【高併發】億級流量場景下如何實現分散式限流?看完我徹底懂了!!(文末有福利)
## 寫在前面 > 在網際網路應用中,高併發系統會面臨一個重大的挑戰,那就是大量流高併發訪問,比如:天貓的雙十一、京東618、秒殺、搶購促銷等,這些都是典型的大流量高併發場景。關於秒殺,小夥伴們可以參見我的另一篇文章《[【高併發】高併發秒殺系統架構解密,不是所有的秒殺都是秒殺!](https://mp
【高併發】高併發秒殺系統架構解密,不是所有的秒殺都是秒殺!
前言 很多小夥伴反饋說,高併發專題學了那麼久,但是,在真正做專案時,仍然不知道如何下手處理高併發業務場景!甚至很多小夥伴仍然停留在只是簡單的提供介面(CRUD)階段,不知道學習的併發知識如何運用到實際專案中,就更別提如何構建高併發系統了! 究竟什麼樣的系統算是高併發系統?今天,我們就一起解密高併發業務場景
【高併發】學好併發程式設計,關鍵是要理解這三個核心問題
寫在前面 寫【高併發專題】有一段時間了,一些讀者朋友留言說,併發程式設計很難,學習了很多的知識,但是在實際工作中卻無從下手。對於一個線上產生的併發問題,又不知產生這個問題的原因究竟是什麼。對於併發程式設計,感覺上似乎是掌握了,但是真正用起來卻不是那麼回事! 其實,造成這種現象的本質原因就是沒有透徹的理解併發程
【高併發】你知道嗎?大家都在使用Redisson實現分散式鎖了!!
寫在前面 忘記之前在哪個群裡有朋友在問:有出分散式鎖的文章嗎~@冰河?我的回答是:這週會有,也是【高併發】專題的。想了想,還是先發一個如何使用Redisson實現分散式鎖的文章吧?為啥?因為使用Redisson實現分散式鎖簡單啊!Redisson框架是基於Redis實現的分散式鎖,非常強大,只需要拿來使用就
【高併發】高併發分散式鎖架構解密,不是所有的鎖都是分散式鎖!!
## 寫在前面 > 最近,很多小夥伴留言說,在學習高併發程式設計時,不太明白分散式鎖是用來解決什麼問題的,還有不少小夥伴甚至連分散式鎖是什麼都不太明白。明明在生產環境上使用了自己開發的分散式鎖,為什麼還會出現問題呢?同樣的程式,加上分散式鎖後,效能差了幾個數量級!這又是為什麼呢?今天,我們就來說說如何
【網絡】高性能網絡編程--下一個10年,是時候考慮C10M並發問題了
分享 千萬 改善 iii 接下來 field 連接數 開發 總結 轉載:http://www.52im.net/thread-568-1-1.html 1、前言 在本系列文章的上篇中我們回顧了過雲的10年裏,高性能網絡編程領域著名的C10K問題及其成功的解決方案(上
是男人就下100層【第一層】——高仿微信介面(7)
在上一篇《是男人就下100層【第一層】——高仿微信介面(6)》中我們已經對主介面的的各個選單進行了簡單實現,接下來我們完成兩個比較有趣的功能,一個是上部的下彈式選單,另一個是搖一搖功能。效果如下圖:我們先做 一個位於右上方的對話方塊樣子,佈局程式碼很簡單,外面是一個相對佈局,