HashMap源码解析和设计解读

HashMap源码解析

​ 想要理解HashMap底层数据的存储形式,底层原理,最好的形式就是读它的源码,但是说实话,源码的注释说明全是英文,英文不是非常好的朋友读起来真的非常吃力,我基本上看了差不多七八遍,还结合网上的一些解析,才觉得自己有点理解。

​ 我先画了一个图,HashMap数据存储的结构图,先有个理解,再来看看下面的代码解析可能会好理解些。

HashMap的数据结构

image-20210403232719038

HashMap静态属性


    /**
     * The default initial capacity - MUST be a power of two.
     * 默认的数组容量16
     */
    static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // aka 16

    /**
     * 最大的容量
     */
    static final int MAXIMUM_CAPACITY = 1 << 30;

    /**
     * The load factor used when none specified in constructor.
     * 负载因子,用于扩容,当数组的容量大于等于 0.75*DEFAULT_INITIAL_CAPACITY时,就要扩容
     */
    static final float DEFAULT_LOAD_FACTOR = 0.75f;

    /**
     * 每个桶中数据结构转变为树的链表长度界限,当链表长度为为8时,转成红黑树
     */
    static final int TREEIFY_THRESHOLD = 8;

    /**
     * 当树的结点等于小于等于6时,又转会链表
     */
    static final int UNTREEIFY_THRESHOLD = 6;

    static final int MIN_TREEIFY_CAPACITY = 64;

存储的对象


    /**
     * Basic hash bin node, used for most entries.  (See below for
     * TreeNode subclass, and in LinkedHashMap for its Entry subclass.)
     */
    static class Node<K,V> implements Map.Entry<K,V> {
        final int hash;
        final K key;
        V value;
        Node<K,V> next;

        Node(int hash, K key, V value, Node<K,V> next) {
            this.hash = hash;
            this.key = key;
            this.value = value;
            this.next = next;
        }

        ……省略
    }

这就是HashMap数据存储的形式,以一个Node节点对象存储。而且还是静态的。

普通属性


    /**
     * 这就是HashMap存储数据的本质容器,数组,只不过是Node数组,里面存储的是
     * Node节点
     */
    transient Node<K,V>[] table;

    /**
     * Holds cached entrySet(). Note that AbstractMap fields are used
     * for keySet() and values().
     */
    transient Set<Map.Entry<K,V>> entrySet;

    /**
     * The number of key-value mappings contained in this map.
     */
    transient int size;

    /**
     * 这是用来标记HashMap结构变化的次数的
     */
    transient int modCount;

如何存放数据

构造器和其他的一些方法就先不看了,重点了解下put方法底层树如何来存放数据的

public V put(K key, V value) {
        return putVal(hash(key), key, value, false, true);
    }

一层套一层,接着看putVal方法,这里有一个hash(key),是将每个key生成一个hash值,用处是用来寻找存储的位置

static final int hash(Object key) {
        int h;
        return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
    }
// 这 hashCode是一个本地方法,不管,那为什么又要和无符号右移16位做异或运算呢?
final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
                   boolean evict) {
    	// tab是用来操作存储容器的,p是存储的节点,n是数组的长度,i是数组位置下标
        Node<K,V>[] tab; Node<K,V> p; int n, i;
        if ((tab = table) == null || (n = tab.length) == 0)
            // 数组容器初始化resize(),这个方法后面重点看,就是重新设置容量大小
            n = (tab = resize()).length;
    	// 如果找到的这个位置的Node节点为null,就直接new一个,将put的数据存放进来
    	// (table.length-1)&hash 是HashMap中确定数组存放位置的方式
        if ((p = tab[i = (n - 1) & hash]) == null)
            tab[i] = newNode(hash, key, value, null);
        else {
            // 进到这里,就说明出现了hash碰撞,生成的hash值一样了,找到的位置已经有值了,p不为null
            // e是一个临时节点变量
            Node<K,V> e; K k;
            // 如果hash值一样,key也一样,那就是覆盖嘛,直接吧p给e,到下面或进行value的新旧替换
            if (p.hash == hash &&
                ((k = p.key) == key || (key != null && key.equals(k))))
                e = p;
            // 如果key不一样,判断是否是树节点了,就用树的增加节点方法,这里我们先不研究
            else if (p instanceof TreeNode)
                e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
            else {
                // 如果还不是树节点,就遍历这个桶的链表,将数据加到这个链表的最后
                for (int binCount = 0; ; ++binCount) {
                    if ((e = p.next) == null) {
                        p.next = newNode(hash, key, value, null);
                        // 如果已经大于等于7了,就转成红黑树
                        if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
                            treeifyBin(tab, hash);
                        break;
                    }
                    if (e.hash == hash &&
                        ((k = e.key) == key || (key != null && key.equals(k))))
                        break;
                    p = e;
                }
            }
            // 到这里就是key相同的时候,新旧值替换
            if (e != null) { // existing mapping for key
                V oldValue = e.value;
                if (!onlyIfAbsent || oldValue == null)
                    e.value = value;
                afterNodeAccess(e);// 这个是LinkedHashMap才会用到,HashMap不用管
                return oldValue;
            }
        }
        ++modCount; // 修改记录,这个只有当数组新增了值才会到这里,想上面只增加再同一个桶中的链表后,不会加一
        if (++size > threshold)
            resize(); // 扩容
        afterNodeInsertion(evict);
        return null;
    }

到这里可以再翻到上面去看下存储数据结构的图,可能更好理解

putVal方法整体概括下逻辑应该分为以下几点:

  • 首先先根据key得到hashCode值,确认存放的数组位置
  • 该位置如果没有值,就直接new一个Node节点存放进去
  • 该位置有值,又分为两种情况
    • 如果key相同,则就是替换嘛,把这个key所对应的value给换成新的
    • 如果key不相同,则就是hash冲突,就需要增加该桶的链表长度了,将该数据增加到该链表的后边。

注意:这里没有讨论变成红黑树,临界值8的情况

扩容机制

final Node<K,V>[] resize() {
    	// 定义一个Node[]
        Node<K,V>[] oldTab = table;
    	// 老的容量
        int oldCap = (oldTab == null) ? 0 : oldTab.length;
    	// 老的阈值
        int oldThr = threshold;
    	// 新容量,新阈值
        int newCap, newThr = 0;
        if (oldCap > 0) {
            if (oldCap >= MAXIMUM_CAPACITY) {
                threshold = Integer.MAX_VALUE;
                return oldTab;
            }
            // 每次扩容都是前一次的两倍,阈值也是
            else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                     oldCap >= DEFAULT_INITIAL_CAPACITY)
                newThr = oldThr << 1; // double threshold
        }
        else if (oldThr > 0) // initial capacity was placed in threshold
            newCap = oldThr;
        else {               // zero initial threshold signifies using defaults
            // 这里是最开是初始化的时候,默认容量是16,默认的阈值时0.75*16=12
            newCap = DEFAULT_INITIAL_CAPACITY;
            newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
        }
        if (newThr == 0) {
            float ft = (float)newCap * loadFactor;
            newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                      (int)ft : Integer.MAX_VALUE);
        }
        threshold = newThr;
        
    ……#############这下面才是扩容机制中重新确定每个Node节点所在的位置的精髓所在,单独讲#################
    }

为什么每次扩容设置成前一次的2倍?

我们再putVal方法中看到,HashMap确定数组存储的下标是这样确定的:(table.length-1) & hash,与运算是二进制的运算,都是1则为1,否则为0。

因为table的容量总是2的倍数,所以换成二进制时全部都是1后面都是0,比如16,二进制就是10000,32就是100000,那么减一之后它的二进制就都会是1,比如15的二进制是1111,31的二进制11111,这样再与hash值做与运算的时候离散性会更好,降低hash碰撞

为什么hash计算需要右移16位做异或运算

static final int hash(Object key) {
        int h;
        return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
    }
  1. 首先需要确定的一点是,用hash值是为了快速检索定位,但是需要好的hash算法去减少hash冲突,提高离散性。以这点作为基础,猜想上面这样算法是因为降低hash冲突,提高离散性。
  2. (table.length-1) & hash还是再看确定bin下表的方式,table的长度和hash值做与运算,在实际中table的长度并不会特别大,2的16次方都比较少,更何况是32位,所以如果直接用hashCode()方法生成的hash值做运算,其实大概率只用到了后16位,前十六位就浪费了。所以(h = key.hashCode()) ^ (h >>> 16)先用右移16位做异或运算,其实就是后16位和前16位做异或运算,这样在确定下标中hash的32位都参与了运算,这样既就增加了随机性,提高了离散性。
  3. 为什么是做”异或”运算呢?因为相比于“与”运算和“或”运算,“异或”运算生成0和1的概率是相等的,没有偏重哪一个。
@SuppressWarnings({"rawtypes","unchecked"})
// 确定完容量后,new一个新的数组,将新的数组赋给table这个数组
Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
table = newTab;
if (oldTab != null) {
    // 这里就是来确定老的table中每个桶中每个Node在新的table中的位置是否要移动,怎么移动
    // 这里如果不明白为什么需要在新表中重新确定位置的,看下面的图解可能好理解
    for (int j = 0; j < oldCap; ++j) {
        // 临时节点e
        Node<K,V> e;
        // 取出第j个位置的节点给e
        if ((e = oldTab[j]) != null) {
            oldTab[j] = null;
            // 这说明在这个原来的j位置上不存在hash碰撞,就直接放到新table中相同的位置就行
            if (e.next == null)
                newTab[e.hash & (newCap - 1)] = e;
            else if (e instanceof TreeNode)
                ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
            else { // preserve order
                // 进到这个else就说明在原来j位置存在hash碰撞,形成链表了,e.next不为null
                // 低位节点,loHead地位节点的head,loTail地位节点的尾部
                Node<K,V> loHead = null, loTail = null;
                // 高位节点
                Node<K,V> hiHead = null, hiTail = null;
                Node<K,V> next;
                // 循环遍历这个桶的链表的每个节点,重新弄确定位置
                do {
                    next = e.next;
                    // 这个条件的&运算非常巧妙,如果为0,就说明这个节点不需要移动位置,在新table中也是j这个位置的桶中
                    // 这里这个&运算的结果不为0就为1,下面详细介绍
                    if ((e.hash & oldCap) == 0) {
                        // 这里是理清节点的关系,相当于这里是这个桶中所有不需要移位的Node,又要形成一个新的链表
                        if (loTail == null)
                            loHead = e;
                        else
                            loTail.next = e;
                        loTail = e;
                    }
                    else {
                        // 那这就当然就是需要移位的节点链表了咯
                        if (hiTail == null)
                            hiHead = e;
                        else
                            hiTail.next = e;
                        hiTail = e;
                    }
                } while ((e = next) != null);
                if (loTail != null) {
                    loTail.next = null;
                    // 这里就是低位节点,不需要移位,在新的table中还是j位置
                    newTab[j] = loHead;
                }
                if (hiTail != null) {
                    hiTail.next = null;
                    // 高位节点在新的table中的位置就变成 (原来的位置+原来的容量)
                    newTab[j + oldCap] = hiHead;
                }
            }
        }
    }
}
return newTab;

高位低位节点说明:

上面的代码中 e.hash & oldCap 这个结果为什么不是0就是1呢?

首先要明白为什么多个Node会存到同意的桶中,也就是在寻找数组位置的时候找到了同一个。

确定桶位置的计算方式是:(table.length-1) & hash,因为table.length-1的二进制全是1,在和hash作&运算时如果位数不够,就在前面补0,这时(table.length-1)的二进制中后面的1视为低位,前面的0就是高位,所以这个运算,高位算出来全是0,所以主要看低位。

现在看 e.hash & oldCap,oldCap因为时2的倍数,所以二进制都是1000……的形式,1视为高位,那么所以这个运算中,e.hash的低位不用管,高位可能是1也可能是0,所以运算的结果只能是0或1

那么为什么e.hash高位时1就要移位,是0就不需要呢?

现在已经清楚确定桶位置的计算方式是:(table.length-1) & hash,例如原本容量是16,那么(table.length-1) 二进制就是1111,hash是11111,则在原来的位置是 01111 & 11111 = 15,但是现在扩容之后为32了,现在(table.length-1)二进制为11111,那现在的位置就是11111 & 11111 = 31,改变的位置=原来的位置+原来的容量。

其实原因就是因为节点Node的hash没有变化,可是容量变了,所以如果节点Node的高位为1就是计算出与之前不一样的值,确定的位置当然要发生变化。

原来的数据存储

扩容后的数据存储

非线程安全

jdk1.8中的HashMap线程不安全主要是在多线程并发的时候出现数据覆盖的情况,在putVal方法中

final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
                   boolean evict) {
    	// tab是用来操作存储容器的,p是存储的节点,n是数组的长度,i是数组位置下标
        Node<K,V>[] tab; Node<K,V> p; int n, i;
        if ((tab = table) == null || (n = tab.length) == 0)
            // 数组容器初始化resize(),这个方法后面重点看,就是重新设置容量大小
            n = (tab = resize()).length;
    	// 如果找到的这个位置的Node节点为null,就直接new一个,将put的数据存放进来
    	// (table.length-1)&hash 是HashMap中确定数组存放位置的方式
        if ((p = tab[i = (n - 1) & hash]) == null)
            tab[i] = newNode(hash, key, value, null);

看上面的代码,if ((p = tab[i = (n - 1) & hash]) == null),如果找定位到数组的位置节点为空的话,就直接new一个节点存数据,当多线程时候,出现hash冲突,都定位到同一个位置,当一个A线程进来这个if,还没来得及存数据,另一个B线程进来抢先存了数据,可是A再去存数据的时候,已不会判断是否有值了,就直接覆盖了,所以就将B线程的数据覆盖了。