ConcurrentHashMap 1.8原理解析
- 2019 年 11 月 27 日
- 筆記
JDK 1.8中,Hash家族有這麼一些存在,HashMap,HashTable,LinkedHashMap,ConcurrentHashMap。這裡面支援執行緒安全的有HashTable以及ConcurrentHashMap。對Hash有一個基本了解可以參考本人的從Hash到一致性Hash原理(深度好文) 。
那既然說到ConcurrentHashMap,自然要討論的就是它的執行緒安全性和效能。我們先來看一下HashTable的執行緒安全性以及效能的低下。
public synchronized V put(K key, V value) { // Make sure the value is not null if (value == null) { throw new NullPointerException(); } // Makes sure the key is not already in the hashtable. Entry<?,?> tab[] = table; int hash = key.hashCode(); int index = (hash & 0x7FFFFFFF) % tab.length; @SuppressWarnings("unchecked") Entry<K,V> entry = (Entry<K,V>)tab[index]; for(; entry != null ; entry = entry.next) { if ((entry.hash == hash) && entry.key.equals(key)) { V old = entry.value; entry.value = value; return old; } } addEntry(hash, key, value, index); return null; }public synchronized V get(Object key) { Entry<?,?> tab[] = table; int hash = key.hashCode(); int index = (hash & 0x7FFFFFFF) % tab.length; for (Entry<?,?> e = tab[index] ; e != null ; e = e.next) { if ((e.hash == hash) && e.key.equals(key)) { return (V)e.value; } } return null; }我們對比一下HashMap 1.7的這兩個方法(因為1.8點HashMap會生成紅黑樹,我們暫時先不考慮紅黑樹的問題)
public V put(K key, V value) { if (key == null) return putForNullKey(value); int hash = hash(key); int i = indexFor(hash, table.length); for (Entry<K,V> e = table[i]; e != null; e = e.next) { Object k; if (e.hash == hash && ((k = e.key) == key || key.equals(k))) { V oldValue = e.value; e.value = value; e.recordAccess(this); return oldValue; } } modCount++; addEntry(hash, key, value, i); return null; }public V get(Object key) { if (key == null) return getForNullKey(); Entry<K,V> entry = getEntry(key); return null == entry ? null : entry.getValue(); }final int hash(Object k) { int h = 0; if (useAltHashing) { if (k instanceof String) { return sun.misc.Hashing.stringHash32((String) k); } h = hashSeed; } h ^= k.hashCode(); // This function ensures that hashCodes that differ only by // constant multiples at each bit position have a bounded // number of collisions (approximately 8 at default load factor). //一種演算法,進行4次位移,得到相對比較分散的鏈表 h ^= (h >>> 20) ^ (h >>> 12); return h ^ (h >>> 7) ^ (h >>> 4); }在這裡我們可以看到,他們除了key的hash演算法不同,HashTable的比較簡單,只是用key的哈希值與0x7FFFFFFF(十進位2147483647,二進位1111111111111111111111111111111)進行一次與運算,即為只要相同二進位位上不論0,1全部都變成1,再對table數組的長度取模。而HashMap 1.7則為key的哈希值進行各位無符號位移加異或運算,取得最終哈希值。然後是HashTable不接收null的key,而HashMap接受。他們最大的區別就在於synchronized顯示器鎖了。
synchronized的本質是所有對象的位元組碼中有一個monitor的對象頭,任何執行緒拿到了這個monitor的對象頭就可以對這個對象進行操作,而拿不到monitor對象頭的執行緒就只能等待,直到拿到了monitor的執行緒放棄,其他執行緒才能爭奪這個對象頭來對對象進行操作。那麼問題來了,當大量執行緒高並發的時候,只要有一個執行緒拿到了這個對象頭,其他執行緒對這個對象是既不能讀也不能寫。而對於HashMap來說,如果多執行緒對其進行操作,那麼任意執行緒都可以胡亂修改裡面值的內容造成臟讀,所以HashMap是執行緒不安全的。
那麼我們今天的主角登場了ConcurrentHashMap。我們同樣來看一下這兩個方法。以下是1.8的源碼,首先我們要清楚的是1.8跟1.7已經完全不同,1.7是使用segements(16個segement),每個segement都有一個table(Map.Entry數組),相當於16個HashMap,同步機製為分段鎖,每個segment繼承ReentrantLock;而1.8隻有1個table(Map.Entry數組),同步機製為CAS + synchronized保證並發更新。如果不搞清楚這個問題,那麼你看1.8的源碼可能會很懵逼。
public V put(K key, V value) { return putVal(key, value, false); }final V putVal(K key, V value, boolean onlyIfAbsent) { //無論key還是value,不允許空 if (key == null || value == null) throw new NullPointerException(); //此處獲取hash值的方法與HashTable類似 int hash = spread(key.hashCode()); int binCount = 0; //無限循環 for (Node<K,V>[] tab = table;;) { Node<K,V> f; int n, i, fh; //如果節點數組為null,或者長度為0,初始化節點數組 if (tab == null || (n = tab.length) == 0) tab = initTable(); //如果節點數組的某個節點為null,則put的時候就會採用無鎖競爭來獲取該節點的頭把交椅 else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) { if (casTabAt(tab, i, null, new Node<K,V>(hash, key, value, null))) break; // no lock when adding to empty bin } //需要擴容的時候先擴容,再寫入 else if ((fh = f.hash) == MOVED) tab = helpTransfer(tab, f); else { //如果hash衝突的時候,即多執行緒操作時,大家都有一樣的hash值 V oldVal = null; synchronized (f) { //鎖定節點數組的該節點 if (tabAt(tab, i) == f) { //如果當前該節點為鏈表形態 if (fh >= 0) { binCount = 1; for (Node<K,V> e = f;; ++binCount) { K ek; //找鏈表中找到相同的key,把新value替代老value if (e.hash == hash && ((ek = e.key) == key || (ek != null && key.equals(ek)))) { oldVal = e.val; if (!onlyIfAbsent) e.val = value; break; } Node<K,V> pred = e; //如果找不到key,就添加到鏈表到末尾 if ((e = e.next) == null) { pred.next = new Node<K,V>(hash, key, value, null); break; } } } //如果當前為紅黑樹形態,進行紅黑樹到查找和替代(存在相同的key),或者放入紅黑樹到新葉節點上(key不存在) else if (f instanceof TreeBin) { Node<K,V> p; binCount = 2; if ((p = ((TreeBin<K,V>)f).putTreeVal(hash, key, value)) != null) { oldVal = p.val; if (!onlyIfAbsent) p.val = value; } } } } if (binCount != 0) { //如果鏈表長度超過了8,鏈錶轉紅黑樹 if (binCount >= TREEIFY_THRESHOLD) treeifyBin(tab, i); if (oldVal != null) return oldVal; break; } } } //統計節點個數,檢查是否需要擴容 addCount(1L, binCount); return null; }public V get(Object key) { Node<K,V>[] tab; Node<K,V> e, p; int n, eh; K ek; int h = spread(key.hashCode()); if ((tab = table) != null && (n = tab.length) > 0 && (e = tabAt(tab, (n - 1) & h)) != null) { if ((eh = e.hash) == h) { if ((ek = e.key) == key || (ek != null && key.equals(ek))) return e.val; } else if (eh < 0) return (p = e.find(h, key)) != null ? p.val : null; while ((e = e.next) != null) { if (e.hash == h && ((ek = e.key) == key || (ek != null && key.equals(ek)))) return e.val; } } return null; }讀取的時候,我們沒有看見鎖到存在,說明讀不受多執行緒影響。
對比ConcurrentHashMap和HashTable,我們可以明顯的看到,ConcurrentHashMap在寫的時候,並沒有鎖住整個節點數組,在新節點上使用的是無鎖競爭,在老節點上鎖住的僅僅是一個節點,讀的時候如果不是恰好讀到寫執行緒寫入相同Hash值的位置,不受影響(可以認為我們的操作一般是讀多寫少,這種幾率也比較低)。而HashTable是對整個節點數組進行鎖定,讀到時候不能寫,寫的時候不能讀,這麼一對比就可以明顯感覺到性能差距是巨大的。
雖然ConcurrentHashMap的並發性能還算比較優異,但在億級計算中,卻依然會成為性能瓶頸,具體可以參考本人的Fork/Join框架原理和使用探秘
至於這裡為什麼會慢,我認為在這種超高並發下,節點數組的單節點的的寫寫競爭是互斥的,其次,由於紅黑樹具有讀快寫慢的特性,它要不斷保持樹的平衡而不斷返轉,所以才會使得高並發寫的性能急劇下降。

