快速失敗機制(fail-fast)
先了解一些詞語
volatile:volatile的本意是“易變的”。volatile關鍵字是一種型別修飾符,用它宣告的型別變量表示可以被某些編譯器未知的因素更改,比如:作業系統、硬體或者其它執行緒等。遇到這個關鍵字宣告的變數,編譯器對訪問該變數的程式碼就不再進行優化,從而可以提供對特殊地址的穩定訪問。當要求使用volatile 宣告的變數的值的時候,系統總是重新從它所在的記憶體讀取資料,即使它前面的指令剛剛從該處讀取過資料。而且讀取的資料立刻被儲存。volatile 指出 i是隨時可能發生變化的,每次使用它的時候必須從i的地址中讀取。對於volatile型別的變數,系統每次用到他的時候都是直接從對應的記憶體當中提取,而不會利用cache當中的原有數值,以適應它的未知何時會發生的變化。
fail-fast 機制是java集合(Collection)中的一種錯誤機制。當多個執行緒對同一個集合的內容進行操作時,就可能會產生fail-fast事件。
例如:當某一個執行緒A通過iterator去遍歷某集合的過程中,若該集合的內容被其他執行緒所改變了;那麼執行緒A訪問集合時,就會丟擲ConcurrentModificationException異常,產生fail-fast事件。在詳細介紹fail-fast機制的原理之前,先通過一個示例來認識fail-fast。
import java.util.*; import java.util.concurrent.*;/*
@desc java集合中Fast-Fail的測試程式。
fast-fail事件產生的條件:當多個執行緒對Collection進行操作時,若其中某一個執行緒通過iterator去遍歷集合時,該集合的內容被其他執行緒所改變;則會丟擲ConcurrentModificationException異常。
fast-fail解決辦法:通過util.concurrent集合包下的相應類去處理,則不會產生fast-fail事件。
本例中,分別測試ArrayList和CopyOnWriteArrayList這兩種情況。ArrayList會產生fast-fail事件,而CopyOnWriteArrayList不會產生fast-fail事件。
(01) 使用ArrayList時,會產生fast-fail事件,丟擲ConcurrentModificationException異常;定義如下:
private static List<String> list = new ArrayList<String>();
(02) 使用時CopyOnWriteArrayList,不會產生fast-fail事件;定義如下:
private static List<String> list = new CopyOnWriteArrayList<String>();
@author skywang
*/
public class FastFailTest {private static List<String> list = new ArrayList<String>();
//private static List<String> list = new CopyOnWriteArrayList<String>();
public static void main(String[] args) {</span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 同時啟動兩個執行緒對list進行操作!</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> ThreadOne().start(); </span><span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> ThreadTwo().start();
}
private static void printAll() {
System.out.println("");String value </span>= <span style="color: rgba(0, 0, 255, 1)">null</span><span style="color: rgba(0, 0, 0, 1)">; Iterator iter </span>=<span style="color: rgba(0, 0, 0, 1)"> list.iterator(); </span><span style="color: rgba(0, 0, 255, 1)">while</span><span style="color: rgba(0, 0, 0, 1)">(iter.hasNext()) { value </span>=<span style="color: rgba(0, 0, 0, 1)"> (String)iter.next(); System.out.print(value</span>+", "<span style="color: rgba(0, 0, 0, 1)">); }
}
/**
- 向list中依次新增0,1,2,3,4,5,每新增一個數之後,就通過printAll()遍歷整個list
*/
private static class ThreadOne extends Thread {
public void run() {
int i = 0;
while (i<6) {
list.add(String.valueOf(i));
printAll();
i++;
}
}
}/**
- 向list中依次新增10,11,12,13,14,15,每新增一個數之後,就通過printAll()遍歷整個list
*/
private static class ThreadTwo extends Thread {
public void run() {
int i = 10;
while (i<16) {
list.add(String.valueOf(i));
printAll();
i++;
}
}
}}
執行結果:
執行該程式碼,丟擲異常java.util.ConcurrentModificationException!即,產生fail-fast事件!
結果說明:
(01) FastFailTest中通過 new ThreadOne().start() 和 new ThreadTwo().start() 同時啟動兩個執行緒去操作list。
ThreadOne執行緒:向list中依次新增0,1,2,3,4,5。每新增一個數之後,就通過printAll()遍歷整個list。
ThreadTwo執行緒:向list中依次新增10,11,12,13,14,15。每新增一個數之後,就通過printAll()遍歷整個list。
(02) 當某一個執行緒遍歷list的過程中,list的內容被另外一個執行緒所改變了;就會丟擲ConcurrentModificationException異常,產生fail-fast事件。
fail-fast解決辦法
fail-fast機制,是一種錯誤檢測機制。它只能被用來檢測錯誤,因為JDK並不保證fail-fast機制一定會發生。若在多執行緒環境下使用fail-fast機制的集合,建議使用“java.util.concurrent包下的類”去取代“java.util包下的類”。
所以,本例中只需要將ArrayList替換成java.util.concurrent包下對應的類即可。
fail-fast原理
產生fail-fast事件,是通過丟擲ConcurrentModificationException異常來觸發的。
那麼,ArrayList是如何丟擲ConcurrentModificationException異常的呢?
我們知道,ConcurrentModificationException是在操作Iterator時丟擲的異常。我們先看看Iterator的原始碼。ArrayList的Iterator是在父類AbstractList.java中實現的。程式碼如下:
package java.util;public abstract class AbstractList<E> extends AbstractCollection<E> implements List<E> {
... </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> AbstractList中唯一的屬性 </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 用來記錄List修改的次數:每修改一次(新增/刪除等操作),將modCount+1</span> <span style="color: rgba(0, 0, 255, 1)">protected</span> <span style="color: rgba(0, 0, 255, 1)">transient</span> <span style="color: rgba(0, 0, 255, 1)">int</span> modCount = 0<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 返回List對應迭代器。實際上,是返回Itr物件。</span> <span style="color: rgba(0, 0, 255, 1)">public</span> Iterator<E><span style="color: rgba(0, 0, 0, 1)"> iterator() { </span><span style="color: rgba(0, 0, 255, 1)">return</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> Itr(); } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Itr是Iterator(迭代器)的實現類</span> <span style="color: rgba(0, 0, 255, 1)">private</span> <span style="color: rgba(0, 0, 255, 1)">class</span> Itr <span style="color: rgba(0, 0, 255, 1)">implements</span> Iterator<E><span style="color: rgba(0, 0, 0, 1)"> { </span><span style="color: rgba(0, 0, 255, 1)">int</span> cursor = 0<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">int</span> lastRet = -1<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改數的記錄值。 </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 每次新建Itr()物件時,都會儲存新建該物件時對應的modCount; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 以後每次遍歷List中的元素的時候,都會比較expectedModCount和modCount是否相等; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 若不相等,則丟擲ConcurrentModificationException異常,產生fail-fast事件。</span> <span style="color: rgba(0, 0, 255, 1)">int</span> expectedModCount =<span style="color: rgba(0, 0, 0, 1)"> modCount; </span><span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">boolean</span><span style="color: rgba(0, 0, 0, 1)"> hasNext() { </span><span style="color: rgba(0, 0, 255, 1)">return</span> cursor !=<span style="color: rgba(0, 0, 0, 1)"> size(); } </span><span style="color: rgba(0, 0, 255, 1)">public</span><span style="color: rgba(0, 0, 0, 1)"> E next() { </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 獲取下一個元素之前,都會判斷“新建Itr物件時儲存的modCount”和“當前的modCount”是否相等; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 若不相等,則丟擲ConcurrentModificationException異常,產生fail-fast事件。</span>
checkForComodification();
try {
E next = get(cursor);
lastRet = cursor++;
return next;
} catch (IndexOutOfBoundsException e) {
checkForComodification();
throw new NoSuchElementException();
}
}</span><span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">void</span><span style="color: rgba(0, 0, 0, 1)"> remove() { </span><span style="color: rgba(0, 0, 255, 1)">if</span> (lastRet == -1<span style="color: rgba(0, 0, 0, 1)">) </span><span style="color: rgba(0, 0, 255, 1)">throw</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> IllegalStateException(); checkForComodification(); </span><span style="color: rgba(0, 0, 255, 1)">try</span><span style="color: rgba(0, 0, 0, 1)"> { AbstractList.</span><span style="color: rgba(0, 0, 255, 1)">this</span><span style="color: rgba(0, 0, 0, 1)">.remove(lastRet); </span><span style="color: rgba(0, 0, 255, 1)">if</span> (lastRet <<span style="color: rgba(0, 0, 0, 1)"> cursor) cursor</span>--<span style="color: rgba(0, 0, 0, 1)">; lastRet </span>= -1<span style="color: rgba(0, 0, 0, 1)">; expectedModCount </span>=<span style="color: rgba(0, 0, 0, 1)"> modCount; } </span><span style="color: rgba(0, 0, 255, 1)">catch</span><span style="color: rgba(0, 0, 0, 1)"> (IndexOutOfBoundsException e) { </span><span style="color: rgba(0, 0, 255, 1)">throw</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> ConcurrentModificationException(); } } </span><span style="color: rgba(0, 0, 255, 1)">final</span> <span style="color: rgba(0, 0, 255, 1)">void</span><span style="color: rgba(0, 0, 0, 1)"> checkForComodification() { </span><span style="color: rgba(0, 0, 255, 1)">if</span> (modCount !=<span style="color: rgba(0, 0, 0, 1)"> expectedModCount) </span><span style="color: rgba(0, 0, 255, 1)">throw</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> ConcurrentModificationException(); } } ...
}
從中,我們可以發現在呼叫 next() 和 remove()時,都會執行 checkForComodification()。若 “modCount 不等於 expectedModCount”,則丟擲ConcurrentModificationException異常,產生fail-fast事件。
要搞明白 fail-fast機制,我們就要需要理解什麼時候“modCount 不等於 expectedModCount”!
從Itr類中,我們知道 expectedModCount 在建立Itr物件時,被賦值為 modCount。通過Itr,我們知道:expectedModCount不可能被修改為不等於 modCount。所以,需要考證的就是modCount何時會被修改。
接下來,我們檢視ArrayList的原始碼,來看看modCount是如何被修改的。
package java.util;View Codepublic class ArrayList<E> extends AbstractList<E>
implements List<E>, RandomAccess, Cloneable, java.io.Serializable
{... </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> list中容量變化時,對應的同步函式</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">void</span> ensureCapacity(<span style="color: rgba(0, 0, 255, 1)">int</span><span style="color: rgba(0, 0, 0, 1)"> minCapacity) { modCount</span>++<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">int</span> oldCapacity =<span style="color: rgba(0, 0, 0, 1)"> elementData.length; </span><span style="color: rgba(0, 0, 255, 1)">if</span> (minCapacity ><span style="color: rgba(0, 0, 0, 1)"> oldCapacity) { Object oldData[] </span>=<span style="color: rgba(0, 0, 0, 1)"> elementData; </span><span style="color: rgba(0, 0, 255, 1)">int</span> newCapacity = (oldCapacity * 3)/2 + 1<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">if</span> (newCapacity <<span style="color: rgba(0, 0, 0, 1)"> minCapacity) newCapacity </span>=<span style="color: rgba(0, 0, 0, 1)"> minCapacity; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> minCapacity is usually close to size, so this is a win:</span> elementData =<span style="color: rgba(0, 0, 0, 1)"> Arrays.copyOf(elementData, newCapacity); } } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 新增元素到佇列最後</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">boolean</span><span style="color: rgba(0, 0, 0, 1)"> add(E e) { </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> ensureCapacity(size + 1); <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Increments modCount!!</span> elementData[size++] =<span style="color: rgba(0, 0, 0, 1)"> e; </span><span style="color: rgba(0, 0, 255, 1)">return</span> <span style="color: rgba(0, 0, 255, 1)">true</span><span style="color: rgba(0, 0, 0, 1)">; } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 新增元素到指定的位置</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">void</span> add(<span style="color: rgba(0, 0, 255, 1)">int</span><span style="color: rgba(0, 0, 0, 1)"> index, E element) { </span><span style="color: rgba(0, 0, 255, 1)">if</span> (index > size || index < 0<span style="color: rgba(0, 0, 0, 1)">) </span><span style="color: rgba(0, 0, 255, 1)">throw</span> <span style="color: rgba(0, 0, 255, 1)">new</span><span style="color: rgba(0, 0, 0, 1)"> IndexOutOfBoundsException( </span>"Index: "+index+", Size: "+<span style="color: rgba(0, 0, 0, 1)">size); </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> ensureCapacity(size+1); <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Increments modCount!!</span> System.arraycopy(elementData, index, elementData, index + 1<span style="color: rgba(0, 0, 0, 1)">, size </span>-<span style="color: rgba(0, 0, 0, 1)"> index); elementData[index] </span>=<span style="color: rgba(0, 0, 0, 1)"> element; size</span>++<span style="color: rgba(0, 0, 0, 1)">; } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 新增集合</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">boolean</span> addAll(Collection<? <span style="color: rgba(0, 0, 255, 1)">extends</span> E><span style="color: rgba(0, 0, 0, 1)"> c) { Object[] a </span>=<span style="color: rgba(0, 0, 0, 1)"> c.toArray(); </span><span style="color: rgba(0, 0, 255, 1)">int</span> numNew =<span style="color: rgba(0, 0, 0, 1)"> a.length; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> ensureCapacity(size + numNew); <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Increments modCount</span> System.arraycopy(a, 0<span style="color: rgba(0, 0, 0, 1)">, elementData, size, numNew); size </span>+=<span style="color: rgba(0, 0, 0, 1)"> numNew; </span><span style="color: rgba(0, 0, 255, 1)">return</span> numNew != 0<span style="color: rgba(0, 0, 0, 1)">; } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 刪除指定位置的元素 </span> <span style="color: rgba(0, 0, 255, 1)">public</span> E remove(<span style="color: rgba(0, 0, 255, 1)">int</span><span style="color: rgba(0, 0, 0, 1)"> index) { RangeCheck(index); </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> modCount++<span style="color: rgba(0, 0, 0, 1)">; E oldValue </span>=<span style="color: rgba(0, 0, 0, 1)"> (E) elementData[index]; </span><span style="color: rgba(0, 0, 255, 1)">int</span> numMoved = size - index - 1<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">if</span> (numMoved > 0<span style="color: rgba(0, 0, 0, 1)">) System.arraycopy(elementData, index</span>+1<span style="color: rgba(0, 0, 0, 1)">, elementData, index, numMoved); elementData[</span>--size] = <span style="color: rgba(0, 0, 255, 1)">null</span>; <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Let gc do its work</span> <span style="color: rgba(0, 0, 255, 1)">return</span><span style="color: rgba(0, 0, 0, 1)"> oldValue; } </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 快速刪除指定位置的元素 </span> <span style="color: rgba(0, 0, 255, 1)">private</span> <span style="color: rgba(0, 0, 255, 1)">void</span> fastRemove(<span style="color: rgba(0, 0, 255, 1)">int</span><span style="color: rgba(0, 0, 0, 1)"> index) { </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> modCount++<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">int</span> numMoved = size - index - 1<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 0, 255, 1)">if</span> (numMoved > 0<span style="color: rgba(0, 0, 0, 1)">) System.arraycopy(elementData, index</span>+1<span style="color: rgba(0, 0, 0, 1)">, elementData, index, numMoved); elementData[</span>--size] = <span style="color: rgba(0, 0, 255, 1)">null</span>; <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Let gc do its work</span>
}
</span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 清空集合</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">void</span><span style="color: rgba(0, 0, 0, 1)"> clear() { </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 修改modCount</span> modCount++<span style="color: rgba(0, 0, 0, 1)">; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> Let gc do its work</span> <span style="color: rgba(0, 0, 255, 1)">for</span> (<span style="color: rgba(0, 0, 255, 1)">int</span> i = 0; i < size; i++<span style="color: rgba(0, 0, 0, 1)">) elementData[i] </span>= <span style="color: rgba(0, 0, 255, 1)">null</span><span style="color: rgba(0, 0, 0, 1)">; size </span>= 0<span style="color: rgba(0, 0, 0, 1)">; } ...
}
從中,我們發現:無論是add()、remove(),還是clear(),只要涉及到修改集合中的元素個數時,都會改變modCount的值。
接下來,我們再系統的梳理一下fail-fast是怎麼產生的。步驟如下:
(01)新建了一個ArrayList,名稱為arrayList。
(02)向arrayList中新增內容。
(03)新建一個“執行緒a”,並在“執行緒a”中通過Iterator反覆的讀取arrayList的值。
(04)新建一個“執行緒b”,在“執行緒b”中刪除arrayList中的一個“節點A”。
(05) 這時,就會產生有趣的事件了。
在某一時刻,“執行緒a”建立了arrayList的Iterator。此時“節點A”仍然存在於arrayList中,建立arrayList時,expectedModCount = modCount(假設它們此時的值為N)。
在“執行緒a”在遍歷arrayList過程中的某一時刻,“執行緒b”執行了,並且“執行緒b”刪除了arrayList中的“節點A”。“執行緒b”執行remove()進行刪除操作時,在remove()中執行了“modCount++”,此時modCount變成了N+1!
“執行緒a”接著遍歷,當它執行到next()函式時,呼叫checkForComodification()比較“expectedModCount”和“modCount”的大小;而“expectedModCount=N”,“modCount=N+1”,這樣,便丟擲ConcurrentModificationException異常,產生fail-fast事件。
至此,我們就完全瞭解了fail-fast是如何產生的!
即,當多個執行緒對同一個集合進行操作的時候,某執行緒訪問集合的過程中,該集合的內容被其他執行緒所改變(即其它執行緒通過add、remove、clear等方法,改變了modCount的值);這時,就會丟擲ConcurrentModificationException異常,產生fail-fast事件。
上面,說明了“解決fail-fast機制的辦法”,也知道了“fail-fast產生的根本原因”。接下來,聊聊併發-Java中的Copy-On-Write容器
Copy-On-Write簡稱COW,是一種用於程式設計中的優化策略。其基本思路是,從一開始大家都在共享同一個內容,當某個人想要修改這個內容的時候,才會真正把內容Copy出去形成一個新的內容然後再改,這是一種延時懶惰策略。從JDK1.5開始Java併發包裡提供了兩個使用CopyOnWrite機制實現的併發容器,它們是CopyOnWriteArrayList和CopyOnWriteArraySet。CopyOnWrite容器非常有用,可以在非常多的併發場景中使用到。
什麼是CopyOnWrite容器
CopyOnWrite容器即寫時複製的容器。通俗的理解是當我們往一個容器新增元素的時候,不直接往當前容器新增,而是先將當前容器進行Copy,複製出一個新的容器,然後新的容器裡新增元素,新增完元素之後,再將原容器的引用指向新的容器。這樣做的好處是我們可以對CopyOnWrite容器進行併發的讀,而不需要加鎖,因為當前容器不會新增任何元素。所以CopyOnWrite容器也是一種讀寫分離的思想,讀和寫不同的容器。
CopyOnWriteArrayList的實現原理
在使用CopyOnWriteArrayList之前,我們先閱讀其原始碼瞭解下它是如何實現的。以下程式碼是向ArrayList裡新增元素,可以發現在新增的時候是需要加鎖的,否則多執行緒寫的時候會Copy出N個副本出來
public boolean add(T e) { final ReentrantLock lock = this.lock; lock.lock(); try {Object[] newElements = Arrays.copyOf(elements, len + 1); // 把新元素新增到新數組裡 newElements[len] = e; // 把原陣列引用指向新陣列 setArray(newElements);Object[] elements </span>=<span style="color: rgba(0, 0, 0, 1)"> getArray(); </span><span style="color: rgba(0, 0, 255, 1)">int</span> len =<span style="color: rgba(0, 0, 0, 1)"> elements.length; </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 複製出新陣列</span>
</span><span style="color: rgba(0, 0, 255, 1)">return</span> <span style="color: rgba(0, 0, 255, 1)">true</span><span style="color: rgba(0, 0, 0, 1)">; } </span><span style="color: rgba(0, 0, 255, 1)">finally</span><span style="color: rgba(0, 0, 0, 1)"> { lock.unlock(); }
}
final void setArray(Object[] a) {
array = a;
}
讀的時候不需要加鎖,如果讀的時候有多個執行緒正在向ArrayList新增資料,讀還是會讀到舊的資料,因為寫的時候不會鎖住舊的ArrayList。
public E get(int index) { return get(getArray(), index); }
CopyOnWrite的應用場景
CopyOnWrite併發容器用於讀多寫少的併發場景。比如白名單,黑名單,商品類目的訪問和更新場景,假如我們有一個搜尋網站,使用者在這個網站的搜尋框中,輸入關鍵字搜尋內容,但是某些關鍵字不允許被搜尋。這些不能被搜尋的關鍵字會被放在一個黑名單當中,黑名單每天晚上更新一次。當用戶搜尋時,會檢查當前關鍵字在不在黑名單當中,如果在,則提示不能搜尋。實現程式碼如下:
package com.ifeve.book;View Codeimport java.util.Map;
import com.ifeve.book.forkjoin.CopyOnWriteMap;
/**
- 黑名單服務
- @author fangtengfei
*/
public class BlackListServiceImpl {</span><span style="color: rgba(0, 0, 255, 1)">private</span> <span style="color: rgba(0, 0, 255, 1)">static</span> CopyOnWriteMap<String, Boolean> blackListMap = <span style="color: rgba(0, 0, 255, 1)">new</span> CopyOnWriteMap<String, Boolean><span style="color: rgba(0, 0, 0, 1)">( </span>1000<span style="color: rgba(0, 0, 0, 1)">); </span><span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">static</span> <span style="color: rgba(0, 0, 255, 1)">boolean</span><span style="color: rgba(0, 0, 0, 1)"> isBlackList(String id) { </span><span style="color: rgba(0, 0, 255, 1)">return</span> blackListMap.get(id) == <span style="color: rgba(0, 0, 255, 1)">null</span> ? <span style="color: rgba(0, 0, 255, 1)">false</span> : <span style="color: rgba(0, 0, 255, 1)">true</span><span style="color: rgba(0, 0, 0, 1)">; } </span><span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">static</span> <span style="color: rgba(0, 0, 255, 1)">void</span><span style="color: rgba(0, 0, 0, 1)"> addBlackList(String id) { blackListMap.put(id, Boolean.TRUE); } </span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)"> * 批量新增黑名單 * * </span><span style="color: rgba(128, 128, 128, 1)">@param</span><span style="color: rgba(0, 128, 0, 1)"> ids </span><span style="color: rgba(0, 128, 0, 1)">*/</span> <span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">static</span> <span style="color: rgba(0, 0, 255, 1)">void</span> addBlackList(Map<String,Boolean><span style="color: rgba(0, 0, 0, 1)"> ids) { blackListMap.putAll(ids); }
}
程式碼很簡單,但是使用CopyOnWriteMap需要注意兩件事情:
1. 減少擴容開銷。根據實際需要,初始化CopyOnWriteMap的大小,避免寫時CopyOnWriteMap擴容的開銷。
2. 使用批量新增。因為每次新增,容器每次都會進行復制,所以減少新增次數,可以減少容器的複製次數。如使用上面程式碼裡的addBlackList方法。
CopyOnWrite的缺點
CopyOnWrite容器有很多優點,但是同時也存在兩個問題,即記憶體佔用問題和資料一致性問題。所以在開發的時候需要注意一下。
記憶體佔用問題。因為CopyOnWrite的寫時複製機制,所以在進行寫操作的時候,記憶體裡會同時駐紮兩個物件的記憶體,舊的物件和新寫入的物件(注意:在複製的時候只是複製容器裡的引用,只是在寫的時候會建立新物件新增到新容器裡,而舊容器的物件還在使用,所以有兩份物件記憶體)。如果這些物件佔用的記憶體比較大,比如說200M左右,那麼再寫入100M資料進去,記憶體就會佔用300M,那麼這個時候很有可能造成頻繁的Yong GC和Full GC。之前我們系統中使用了一個服務由於每晚使用CopyOnWrite機制更新大物件,造成了每晚15秒的Full GC,應用響應時間也隨之變長。頻繁的GC是因為修改CopyOnWriteArrayList裡大量的元素造成的。兩份物件記憶體是指修改前和修改後兩個元素記憶體。
針對記憶體佔用問題,可以通過壓縮容器中的元素的方法來減少大物件的記憶體消耗,比如,如果元素全是10進位制的數字,可以考慮把它壓縮成36進位制或64進位制。或者不使用CopyOnWrite容器,而使用其他的併發容器,如ConcurrentHashMap。
資料一致性問題。CopyOnWrite容器只能保證資料的最終一致性,不能保證資料的實時一致性。所以如果你希望寫入的的資料,馬上能讀到,請不要使用CopyOnWrite容器。
安全失敗:採用安全失敗機制的集合容器,在遍歷時不是直接在集合內容上訪問的,而是先複製原有集合內容,在拷貝的集合上進行遍歷。
由於迭代時是對原集合的拷貝進行遍歷,所以在遍歷過程中對原集合所作的修改並不能被迭代器檢測到,故不會拋 ConcurrentModificationException 異常。
引用自:https://www.cnblogs.com/ccgjava/p/6347425.html?utm_source=itdadao&utm_medium=referral
https://blog.csdn.net/a549654065/article/details/105624519