1. 程式人生 > >近期業務需要所引發的效能優化問題,淺談執行緒池效能優化

近期業務需要所引發的效能優化問題,淺談執行緒池效能優化

 

執行緒池對於效能優化無處不在

1.樓主在平時產品開發過程中所遇到的效能問題,特別是最近特別流行的微服務架構、

web - java - 底層資料來源(python亦或者opensatck),對於這種前後臺分離的場景

無時無刻會存在對於業務場景需要對同一資料來源進行百次,千次的重複呼叫過程、

效能方面就會出現介面延遲,過慢,超時等情況

下面就樓主最近遇到的一個業務場景加以舉例說明:做雲端計算相關的想必都是知道,我們在為客戶提供單板的過程中(也就是物理機);會對眾多的單板進行管理,這裡我們就引進主機組;

主機組就是用來管理單板的存在,往往在使用過程中,會存在資源不足的情況,我們此時就需要將資源不足的單板遷移到別的主機組上,從而做到虛擬機器資源的合理利用,對此在遷移過程

中可能能會出現成敗上前的主機批量操作,對此序列顯然已經不能滿足我們的訴求了,此時就要引進執行緒池

2.執行緒池在該高併發場景下的使用來提高效能

首先說下執行緒池中幾個重要的類

   1、newFixedThreadPool建立一個指定工作執行緒數量的執行緒池。每當提交一個任務就建立一個工作執行緒,如果工作執行緒數量達到執行緒池初始的最大數,則將提交的任務存入到池佇列中。

      2、newCachedThreadPool建立一個可快取的執行緒池。這種型別的執行緒池特點是:
        1).工作執行緒的建立數量幾乎沒有限制(其實也有限制的,數目為Interger. MAX_VALUE), 這樣可靈活的往執行緒池中新增執行緒。
        2).如果長時間沒有往執行緒池中提交任務,即如果工作執行緒空閒了指定的時間(預設為1分鐘),則該工作執行緒將自動終止。終止後,如果你又提交了新的任務,則執行緒池重新建立一個工作執行緒。

      3、newSingleThreadExecutor建立一個單執行緒化的Executor,即只建立唯一的工作者執行緒來執行任務,如果這個執行緒異常結束,會有另一個取代它,保證順序執行(我覺得這點是它的特色)。單工作執行緒最大的特點是可保證順序地執行各個任務,並且在任意給定的時間不會有多個執行緒是活動的 。

      4、newScheduleThreadPool建立一個定長的執行緒池,而且支援定時的以及週期性的任務執行,類似於Timer

樓主以newFixedThreadPool的方式為主簡單測試下效果:

首先是傳統for迴圈序列時,

 

處理10000條資料,每次業務處理假設消耗10ms,總用時107857ms

 

 

下面使用執行緒池為size為100的,處理10000條資料總用時1100ms,有沒有很神奇,效率接近10倍

 

 

 至此,樓主要說的執行緒池處理海量資料,或者高併發時簡單應用告一段落。。。。。

類似於這種執行緒池工具類,論壇有很多,大家可以參考~~~~

如有不對之處,望指正啦