Contents

Java ConcurrentHashMap

这篇是对javadoop对concurrentHashMap非常棒的源码解析的学习。

Java7 HashMap

HashMap是一个非并发安全的hashmap,使用链表数组实现,逻辑比较简单。

要求容量始终为$2^n$,这样可以利用位运算计算下标,index = hash & (length - 1)

每次扩容为原先的2倍,这样迁移旧数据时,会将位置table[i]中的链表的所有节点,分拆到新的数组中的newTable[i]newTable[i + oldLenght]位置。

Java7 ConcurrentHashMap

ConcurrentHashMap由一个Segment数组实现,Segment通过继承ReentrantLock来进行加锁,所以每次需要加锁的操作锁住的就是一个Segment,有些地方将Segment称为分段锁,这样只要保证每个Segment都是线程安全的,就实现了全局的线程安全。

concurrencyLevel: 默认为16,也就是说ConcurrentHashMap有16个Segment,所以理论上,最多可以同时支持16个线程并发写,只要它们的操作分别分布在不同的Segment上,这个值可以在初始化的时候设置为其他值,但是一旦初始化后,它是不可以扩容的。

假设concurrentcyLevel为16,那么hash值的高4位被用于找到对应的Segment。

Segment内部是有数组+链表组成的

put操作需要对Segment加独占锁,内部操作类似于HashMap

get操作完全没有加锁,完全由代码实现保证不会发生问题。

Java8 HashMap

Java8对HashMap进行了一些修改,引入了红黑树,我们可以通过hash快速定位到数组中的具体下表,但之后需要遍历整个链表寻找我们需要的键值对,时间复杂度取决于链表的长度,为O(n)。为了降低这部分的开销,在java8中,当链表中的元素达到了8个时,会将链表转换为红黑树,此时查找的时间复杂度为 O(logn)

Java7中使用Entry来代表每个HashMap的数据节点,Java8中使用Node,基本没有区别,都是key, value, hash和next这四个属性,不过,Node只能用于链表的情况,红黑树的情况需要使用TreeNode。

Java8 ConcurrentHashMap

/**
 * The array of bins. Lazily initialized upon first insertion.
 * Size is always a power of two. Accessed directly by iterators.
 */
transient volatile Node<K,V>[] table;

/**
 * The next table to use; non-null only while resizing.
 */
// 迁移时使用的临时数组
private transient volatile Node<K,V>[] nextTable;

ConcurrentHashMap底层也是一个数组,每个元素要么是链表,要么是红黑树。

spread函数

static final int HASH_BITS = 0x7fffffff; // usable bits of normal node hash
/**
 * Spreads (XORs) higher bits of hash to lower and also forces top
 * bit to 0. Because the table uses power-of-two masking, sets of
 * hashes that vary only in bits above the current mask will
 * always collide. (Among known examples are sets of Float keys
 * holding consecutive whole numbers in small tables.)  So we
 * apply a transform that spreads the impact of higher bits
 * downward. There is a tradeoff between speed, utility, and
 * quality of bit-spreading. Because many common sets of hashes
 * are already reasonably distributed (so don't benefit from
 * spreading), and because we use trees to handle large sets of
 * collisions in bins, we just XOR some shifted bits in the
 * cheapest possible way to reduce systematic lossage, as well as
 * to incorporate impact of the highest bits that would otherwise
 * never be used in index calculations because of table bounds.
 */
static final int spread(int h) {
    return (h ^ (h >>> 16)) & HASH_BITS;
}

spread函数将原来的hash值进行处理,获取新的hash值,尽量避免hash碰撞。

put过程分析

public V put(K key, V value) {
    return putVal(key, value, false);
}
final V putVal(K key, V value, boolean onlyIfAbsent) {
    if (key == null || value == null) throw new NullPointerException();
  	// 得到hash值
    int hash = spread(key.hashCode());
  	// 记录相应链表的长度
    int binCount = 0;
    for (Node<K,V>[] tab = table;;) {
        Node<K,V> f; int n, i, fh;
      	// 如果数组为空,进行数组初始化
        if (tab == null || (n = tab.length) == 0)
            tab = initTable();
      	// 查找该hash对应的数组位置处的元素
        else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) {
          	// 如果数组该位置为空,用一次cas操作将新值放入其中,如果cas失败,进入下一个循环
            if (casTabAt(tab, i, null,
                         new Node<K,V>(hash, key, value, null)))
                break;                   // no lock when adding to empty bin
        }
      	// 当前位置已经扩容完成,MOVED用于标记扩容
      	// helpTransfer之后会进入下一轮循环
      	// 这里也能看出,put操作如果遇到对应的hash桶已经被迁移,那么不得已,当前线程需要协助transfer,直到整个table迁移完成
        else if ((fh = f.hash) == MOVED)
            tab = helpTransfer(tab, f);
        else {
          	// f是该位置的头节点,而且不为空
            V oldVal = null;
          	// 获取数组该位置头结点的监视器锁
            synchronized (f) {
              	// 获取锁之后重新判断一下当前位置的节点是否已经改变,如果已经改变,进入下一个循环
              	// 当迁移完成时,头节点改成ForwardingNode,判断失败,会进入下一轮循环,走MOVED分支
                if (tabAt(tab, i) == f) {
                  	// 头结点的hash值大于0,说明是链表
                    if (fh >= 0) {
                      	// 用于累加,记录链表的长度
                        binCount = 1;
                        for (Node<K,V> e = f;; ++binCount) {
                            K ek;
                          	// 如果发现了相等的key,判断是否需要进行值覆盖,最后跳出循环
                            if (e.hash == hash &&
                                ((ek = e.key) == key ||
                                 (ek != null && key.equals(ek)))) {
                                oldVal = e.val;
                                if (!onlyIfAbsent)
                                    e.val = value;
                                break;
                            }
                          	// 到了链表的最末端,将这个新值放到链表的最后面
                            Node<K,V> pred = e;
                            if ((e = e.next) == null) {
                                pred.next = new Node<K,V>(hash, key,
                                                          value, null);
                                break;
                            }
                        }
                    }
                    else if (f instanceof TreeBin) { // 红黑树
                        Node<K,V> p;
                        binCount = 2;
                        if ((p = ((TreeBin<K,V>)f).putTreeVal(hash, key,
                                                       value)) != null) {
                            oldVal = p.val;
                            if (!onlyIfAbsent)
                                p.val = value;
                        }
                    }
                }
            }
            if (binCount != 0) {
              	// 判断是否要将链表转换为红黑树,临界值和HashMap一样,也是8
                if (binCount >= TREEIFY_THRESHOLD)
                  	// 这个方法和HashMap中稍微有一点点不同,那就是它不是一定会进行红黑树转换
                  	// 如果当前数据的长度小于64,那么会选择进行数组扩容,而不是转换为红黑树
                    treeifyBin(tab, i);
                if (oldVal != null)
                    return oldVal;
                break;
            }
        }
    }
    addCount(1L, binCount);
    return null;
}

可以看到,ConcurrentHashMap在进行重要操作时,会对数组中的元素进行加锁,这样保证了加锁的粒度适合,避免过粗导致并发性能下降。

初始化数组 initTable

/**
 * Initializes table, using the size recorded in sizeCtl.
 */
private final Node<K,V>[] initTable() {
    Node<K,V>[] tab; int sc;
    while ((tab = table) == null || tab.length == 0) {
      	// 其他线程已经在初始化数组了,spin等待
        if ((sc = sizeCtl) < 0)
            Thread.yield(); // lost initialization race; just spin
      	// CAS一下,将sizeCtl设置为-1,表示抢到了锁
        else if (U.compareAndSwapInt(this, SIZECTL, sc, -1)) {
            try {
                if ((tab = table) == null || tab.length == 0) {
                  	// DEFAULT_CAPACITY默认初始容量为16
                    int n = (sc > 0) ? sc : DEFAULT_CAPACITY;
                  	// 初始化数组,长度为16或者初始化时提供的长度
                    @SuppressWarnings("unchecked")
                    Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n];
                  	// 将新的数组赋值给table,table是volatile
                    table = tab = nt;
                    sc = n - (n >>> 2);
                }
            } finally {
              	// 设置sizeCtl为sc
                sizeCtl = sc;
            }
            break;
        }
    }
    return tab;
}

初始化一个合适大小的数组,然后会设置sizeCtl。

初始化方法中的并发问题是通过对sizeCtl进行一个CAS操作来控制的。

helpTransfer

/**
 * The maximum number of threads that can help resize.
 * Must fit in 32 - RESIZE_STAMP_BITS bits.
 */
private static final int MAX_RESIZERS = (1 << (32 - RESIZE_STAMP_BITS)) - 1;
/**
 * Helps transfer if a resize is in progress.
 */
final Node<K,V>[] helpTransfer(Node<K,V>[] tab, Node<K,V> f) {
    Node<K,V>[] nextTab; int sc;
    if (tab != null && (f instanceof ForwardingNode) &&
        (nextTab = ((ForwardingNode<K,V>)f).nextTable) != null) {
        int rs = resizeStamp(tab.length) << RESIZE_STAMP_SHIFT;
        while (nextTab == nextTable && table == tab &&
               (sc = sizeCtl) < 0) {
          	// 这里有三种情况,不帮忙transfer
          	// 1. 帮助迁移的线程数已经达到上限
          	// 2. 
          	// 3. transferIndex小于0,表示数组已经迁移完成
            if (sc == rs + MAX_RESIZERS || sc == rs + 1 ||
                transferIndex <= 0)
                break;
          	// CAS操作将sizeCtrl加一,成功后进行transfer并跳出循环
            if (U.compareAndSwapInt(this, SIZECTL, sc, sc + 1)) {
                transfer(tab, nextTab);
                break;
            }
        }
        return nextTab;
    }
    return table;
}

链表转红黑树: treeifyBin

/**
 * Replaces all linked nodes in bin at given index unless table is
 * too small, in which case resizes instead.
 */
private final void treeifyBin(Node<K,V>[] tab, int index) {
    Node<K,V> b; int n, sc;
    if (tab != null) {
      	// MIN_TREEIFY_CAPACITY为64
      	// 所以,如果数组长度小于64的时候,其实也就是32或者16或者更小的时候,会进行数组扩容
        if ((n = tab.length) < MIN_TREEIFY_CAPACITY)
          	// 触发扩容
            tryPresize(n << 1);
      	// 当前位置是链表
        else if ((b = tabAt(tab, index)) != null && b.hash >= 0) {
          	// 加锁
            synchronized (b) {
                if (tabAt(tab, index) == b) {
                  	// 遍历链表,建立一颗红黑树
                    TreeNode<K,V> hd = null, tl = null;
                    for (Node<K,V> e = b; e != null; e = e.next) {
                        TreeNode<K,V> p =
                            new TreeNode<K,V>(e.hash, e.key, e.val,
                                              null, null);
                        if ((p.prev = tl) == null)
                            hd = p;
                        else
                            tl.next = p;
                        tl = p;
                    }
                  	// 将红黑树设置到数组相应位置
                    setTabAt(tab, index, new TreeBin<K,V>(hd));
                }
            }
        }
    }
}

扩容: tryPreSize

/**
 * Tries to presize table to accommodate the given number of elements.
 *
 * @param size number of elements (doesn't need to be perfectly accurate)
 */
private final void tryPresize(int size) {
  	// c: size的1.5倍,再加1,再往上去最近的2的n次方
    int c = (size >= (MAXIMUM_CAPACITY >>> 1)) ? MAXIMUM_CAPACITY :
        tableSizeFor(size + (size >>> 1) + 1);
    int sc;
  	// resize开始后, sizeCtl为负数,所以如果已经开始resize,这段逻辑会被跳过
    while ((sc = sizeCtl) >= 0) {
        Node<K,V>[] tab = table; int n;
      	// 初始化数组,和之前类似
        if (tab == null || (n = tab.length) == 0) {
            n = (sc > c) ? sc : c;
            if (U.compareAndSwapInt(this, SIZECTL, sc, -1)) {
                try {
                    if (table == tab) {
                        @SuppressWarnings("unchecked")
                        Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n];
                        table = nt;
                        sc = n - (n >>> 2);
                    }
                } finally {
                    sizeCtl = sc;
                }
            }
        }
      	// 容量足够,跳出循环
        else if (c <= sc || n >= MAXIMUM_CAPACITY)
            break;
        else if (tab == table) {
            int rs = resizeStamp(n);
						// https://bugs.java.com/bugdatabase/view_bug.do?bug_id=8215409 
          	// sc < 0永远不会成立,所以这段代码不起作用,在jdk11中已经去掉
          	// 复制粘贴是每位程序员的必备技能
            if (sc < 0) {
                Node<K,V>[] nt;
                if ((sc >>> RESIZE_STAMP_SHIFT) != rs || sc == rs + 1 ||
                    sc == rs + MAX_RESIZERS || (nt = nextTable) == null ||
                    transferIndex <= 0)
                    break;
                if (U.compareAndSwapInt(this, SIZECTL, sc, sc + 1))
                    transfer(tab, nt);
            }
          	// 这里为什么要加2,没有看懂
            else if (U.compareAndSwapInt(this, SIZECTL, sc,
                                         (rs << RESIZE_STAMP_SHIFT) + 2))
                transfer(tab, null);
        }
    }
}
/**
 * The maximum number of threads that can help resize.
 * Must fit in 32 - RESIZE_STAMP_BITS bits.
 */
// 高16位为0,低16位为1
private static final int MAX_RESIZERS = (1 << (32 - RESIZE_STAMP_BITS)) - 1;
/**
 * The number of bits used for generation stamp in sizeCtl.
 * Must be at least 6 for 32bit arrays.
 */
private static int RESIZE_STAMP_BITS = 16;
/**
 * Returns the stamp bits for resizing a table of size n.
 * Must be negative when shifted left by RESIZE_STAMP_SHIFT.
 */
// n为数组长度,所以一定是2^n,n的前导零个数实际上用更少的位数编码了n
// 从低位起第16位为1(从1开始计数),这样左移16位后一定是一个负数
// 所以 resizeStamp(int n)的效果是将n进行了重新编码,并且添加了resize戳记
static final int resizeStamp(int n) {
    return Integer.numberOfLeadingZeros(n) | (1 << (RESIZE_STAMP_BITS - 1));
}

数据迁移: transfer

将原来的tab数组中的元素迁移到新的nextTab数组中。

之前提到的tryPresize方法中调用transfer不涉及多线程,但transfer方法可以在其他地方被调用。典型地,我们之前在说put方法的时候已经说过了,helpTransfer方法中会调用transfer方法。

此方法支持多线程执行,外围调用此方法时,会保证第一个发起数据迁移的线程,nextTab为null,之后再调用此方法的时候,nextTab不会为null。

原数组长度为n,所有我们有n个迁移任务,让每个线程每次负责一个小任务是最简单的,每做完一个任务再检测是否有其他没做完的任务,帮助迁移旧可以了,而Doug Lea使用了一个stride,简单理解就是步长,每个线程每次负责迁移其中的一部分,如每次迁移16个小任务。所以我们就需要一个全局的调度者来安排哪个线程执行哪几个任务,这个就是属性transferIndex的作用。

第一个发起数据迁移的线程会将transferIndex指向原数组最后的位置,然后从后往前的stride个任务属于第一个线程,然后将transferIndex指向新的位置,再往前的stride个任务属于第二个线程,以此类推,当然,这里说的第二个线程不是真的一定指代了第二个线程,也可以是同一个线程,其实就是将一个大的迁移任务分为一个个任务包。

之前提到,原数组i位置的键值对会被分配到新数组i位置和新数组i + oldLength位置,这样每个迁移小任务相互之前不存在资源竞争。

/**
 * The next table index (plus one) to split while resizing.
 */
private transient volatile int transferIndex;
/**
 * Moves and/or copies the nodes in each bin to new table. See
 * above for explanation.
 */
private final void transfer(Node<K,V>[] tab, Node<K,V>[] nextTab) {
    int n = tab.length, stride;
  	// stide在单核下直接等于n,多核模式下为 n >>> 3 / NCPU,最小值为16
    if ((stride = (NCPU > 1) ? (n >>> 3) / NCPU : n) < MIN_TRANSFER_STRIDE)
        stride = MIN_TRANSFER_STRIDE; // subdivide range
  	// 如果nextTab为null,先进行一次初始化
  	// 之前提过,外围会保证第一个发起迁移的线程调用此方法时,参数nextTab为null
  	// 之后参与迁移的线程调用此方法时,nextTab不为null
    if (nextTab == null) {            // initiating
        try {
            @SuppressWarnings("unchecked")
          	// 容量翻倍
            Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n << 1];
            nextTab = nt;
        } catch (Throwable ex) {      // try to cope with OOME
            sizeCtl = Integer.MAX_VALUE;
            return;
        }
      	// 赋值给nextTable属性
        nextTable = nextTab;
      	// transfer属性用于控制迁移的位置,初始为原先数组的长度
        transferIndex = n;
    }
    int nextn = nextTab.length;
  	// ForwardingNode翻译过来就是正在迁移的Node
  	// 这个构造方法会生成一个Node, key, value和next都是null,关键是hash为MOVED
  	// 后面我们会看到,原数组中位置i处的节点完成迁移工作后,将会将位置i处设置为这个ForwardingNode,用来告诉其他线程该位置已经处理过了
  	// 所以它其实相当于一个标志
    ForwardingNode<K,V> fwd = new ForwardingNode<K,V>(nextTab);
  	// advance指的是做完了一个位置的迁移工作,可以准备做下一个位置的了
    boolean advance = true;
    boolean finishing = false; // to ensure sweep before committing nextTab
  	// i是位置索引,bound是边界,注意是从后往前
    for (int i = 0, bound = 0;;) {
        Node<K,V> f; int fh;
      	// advance为true表示可以进行下一个位置的迁移了
      	// 简单理解结局:i指向了transferIndex, bound指向了transferIndex - stride
        while (advance) {
            int nextIndex, nextBound;
            if (--i >= bound || finishing)
                advance = false;
          	// 将transferIndex赋值给nextIndex
          	// 这里transferIndex一旦小于等于0,说明原数组的所有位置都有相应的线程去处理了
            else if ((nextIndex = transferIndex) <= 0) {
                i = -1;
                advance = false;
            }
            else if (U.compareAndSetInt
                     (this, TRANSFERINDEX, nextIndex,
                      nextBound = (nextIndex > stride ?
                                   nextIndex - stride : 0))) {
              	// nextBound是这次迁移任务的边界,注意是从后往前
                bound = nextBound;
                i = nextIndex - 1;
                advance = false;
            }
        }
        if (i < 0 || i >= n || i + n >= nextn) {
            int sc;
            if (finishing) {
              	// 所有迁移操作都已经完成
                nextTable = null;
              	// 将新的nextTab赋值给table属性,完成迁移
                table = nextTab;
              	// 重新计算sizeCtrl: n为原数组长度,所以sizeCtrl得出的值将是新数组长度的0.75倍
                sizeCtl = (n << 1) - (n >>> 1);
                return;
            }
          	// 之前我们说过,sizeCtrl在迁移前会设置为 (rs << RESIZE_STAMP_SHIFT) + 2
          	// 然后,每有一个线程参与迁移就会将sizeCtrl + 1
          	// 这里使用CAS操作对sizeCtrl进行减一,表示做完了属于自己的任务
            if (U.compareAndSetInt(this, SIZECTL, sc = sizeCtl, sc - 1)) {
              	// 任务结束,方法退出
                if ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT)
                    return;
              	// 所有的迁移任务都已经做完
                finishing = advance = true;
                i = n; // recheck before commit
            }
        }
      	// 如果位置i处是空的,没有任何节点,那么放入刚才初始化的ForwardingNode节点
        else if ((f = tabAt(tab, i)) == null)
            advance = casTabAt(tab, i, null, fwd);
      	// 该位置处是一个ForwardingNode,代表该位置已经迁移过了
        else if ((fh = f.hash) == MOVED)
            advance = true; // already processed
        else {
          	// 对数组该位置处的节点加锁,开始处理数组该位置处的迁移工作
            synchronized (f) {
                if (tabAt(tab, i) == f) {
                    Node<K,V> ln, hn;
                  	// 头节点的hash大于0,说明是链表的Node节点
                    if (fh >= 0) {
                      	// 这里展开解释一下runBits
                      	// 假设一个key的hash值为 0010
                      	// table数组的长度总是2^n,这里假定为4,也就是 0100
                      	// 所以这个对象会被放入 i = hash & (length - 1)位置(效果等价于 hash % length),当然这是因为length一定为2^n
                      	// 还有哪些对象可能被放入这个数组位置呢,需要满足 hash & 0011 = 0010
                      	// 显然低两位要保持一致,不能改变,其余高位可以任意
                      	// 现在发生了两倍扩容,i位置都需要迁移到新的位置 新的位置通过 hash & 0111决定
                      	// 原先数组位置中元素的hash值倒数第三位可能为0,也可能为1,也就是这里的runBits,所以元素会被分布到不同的位置
                      	// 如果为0,和原先一样,分布到i为止
                      	// 如果是1,分布到 i + oldLength位置,oldLength表示原先的数组长度
                        int runBit = fh & n;
                        Node<K,V> lastRun = f;
                      	// 这个循环实际上是一个优化,从前往后遍历单向链表,找到最后的一段链表,
                      	// 链表段的所有元素根据hash值将添加到新数组的同一个位置
                      	// 这个优化去掉,不会对功能有任何影响
                      	// 比较坏的情况就是每次lastRun都是链表中最后一个元素或者很靠后的元素,那么这次遍历就有点浪费了
                      	// 不过Doug Lea也说了,根据统计,如果使用默认的阈值,大约只有1/6的节点需要克隆
                        for (Node<K,V> p = f.next; p != null; p = p.next) {
                            int b = p.hash & n;
                            if (b != runBit) {
                                runBit = b;
                                lastRun = p;
                            }
                        }
                        if (runBit == 0) {
                            ln = lastRun;
                            hn = null;
                        }
                        else {
                            hn = lastRun;
                            ln = null;
                        }
                        for (Node<K,V> p = f; p != lastRun; p = p.next) {
                            int ph = p.hash; K pk = p.key; V pv = p.val;
                            if ((ph & n) == 0)
                                ln = new Node<K,V>(ph, pk, pv, ln);
                            else
                                hn = new Node<K,V>(ph, pk, pv, hn);
                        }
                     		// 迁移完成,设置对应位置的元素,advance设置为true,表示该位置已经迁移完毕
                        setTabAt(nextTab, i, ln);
                        setTabAt(nextTab, i + n, hn);
                        setTabAt(tab, i, fwd);
                      	// 此时旧数组上对应位置的节点可能会被gc,后面访问不到了
                        advance = true;
                    }
                    else if (f instanceof TreeBin) {
                      	// 红黑树的迁移
                        TreeBin<K,V> t = (TreeBin<K,V>)f;
                        TreeNode<K,V> lo = null, loTail = null;
                        TreeNode<K,V> hi = null, hiTail = null;
                        int lc = 0, hc = 0;
                        for (Node<K,V> e = t.first; e != null; e = e.next) {
                            int h = e.hash;
                            TreeNode<K,V> p = new TreeNode<K,V>
                                (h, e.key, e.val, null, null);
                            if ((h & n) == 0) {
                                if ((p.prev = loTail) == null)
                                    lo = p;
                                else
                                    loTail.next = p;
                                loTail = p;
                                ++lc;
                            }
                            else {
                                if ((p.prev = hiTail) == null)
                                    hi = p;
                                else
                                    hiTail.next = p;
                                hiTail = p;
                                ++hc;
                            }
                        }
                      	// 如果一分为二后,节点数小于8,那么将红黑树转换回链表
                        ln = (lc <= UNTREEIFY_THRESHOLD) ? untreeify(lo) :
                            (hc != 0) ? new TreeBin<K,V>(lo) : t;
                        hn = (hc <= UNTREEIFY_THRESHOLD) ? untreeify(hi) :
                            (lc != 0) ? new TreeBin<K,V>(hi) : t;
                        setTabAt(nextTab, i, ln);
                        setTabAt(nextTab, i + n, hn);
                        setTabAt(tab, i, fwd);
                        advance = true;
                    }
                }
            }
        }
    }
}

get过程分析

public V get(Object key) {
    Node<K,V>[] tab; Node<K,V> e, p; int n, eh; K ek;
    int h = spread(key.hashCode());
    if ((tab = table) != null && (n = tab.length) > 0 &&
        (e = tabAt(tab, (n - 1) & h)) != null) {
      	// 判断头节点是否就是查找的节点
        if ((eh = e.hash) == h) {
            if ((ek = e.key) == key || (ek != null && key.equals(ek)))
                return e.val;
        }
      	// 如果头节点的hash小于0,说明正在扩容,或者该位置是红黑树
        else if (eh < 0)
          	// 参考 ForwardingNode.find(int h, Object k) 和 TreeBin.find(int h, Object k)
            return (p = e.find(h, key)) != null ? p.val : null;
      	// 遍历链表
        while ((e = e.next) != null) {
            if (e.hash == h &&
                ((ek = e.key) == key || (ek != null && key.equals(ek))))
                return e.val;
        }
    }
    return null;
}

可以看到get操作的实现基本上是无锁的。

/**
 * A node inserted at head of bins during transfer operations.
 */
static final class ForwardingNode<K,V> extends Node<K,V> {
    final Node<K,V>[] nextTable;
    ForwardingNode(Node<K,V>[] tab) {
        super(MOVED, null, null, null);
        this.nextTable = tab;
    }

    Node<K,V> find(int h, Object k) {
        // loop to avoid arbitrarily deep recursion on forwarding nodes
      	// 通过循环来避免对ForwardingNode的递归
        outer: for (Node<K,V>[] tab = nextTable;;) {
            Node<K,V> e; int n;
          	// 没有找到元素,返回null
            if (k == null || tab == null || (n = tab.length) == 0 ||
                (e = tabAt(tab, (n - 1) & h)) == null)
                return null;
            for (;;) {
                int eh; K ek;
              	// 头节点就是所需要的节点,直接返回
                if ((eh = e.hash) == h &&
                    ((ek = e.key) == k || (ek != null && k.equals(ek))))
                    return e;
                if (eh < 0) {
                    if (e instanceof ForwardingNode) {
                        tab = ((ForwardingNode<K,V>)e).nextTable;
                        continue outer;
                    }
                    else
                        return e.find(h, k);
                }
              	// 搜索到了链表末尾,返回null
                if ((e = e.next) == null)
                    return null;
            }
        }
    }
}

clear过程分析

/**
 * Removes all of the mappings from this map.
 */
public void clear() {
    long delta = 0L; // negative number of deletions
    int i = 0;
    Node<K,V>[] tab = table;
    while (tab != null && i < tab.length) {
        int fh;
      	// 遍历数组中的每个元素
        Node<K,V> f = tabAt(tab, i);
      	// 元素为null,继续下一个
        if (f == null)
            ++i;
      	// 如果当前位置的元素已经被移动到新的数组中,帮助transfer,然后restart
      	// restart 跳到新的table上,重新开始
        else if ((fh = f.hash) == MOVED) {
            tab = helpTransfer(tab, f);
            i = 0; // restart
        }
        else {
          	// 获取当前位置的头节点的监视器
            synchronized (f) {
                if (tabAt(tab, i) == f) {
                    Node<K,V> p = (fh >= 0 ? f :
                                   (f instanceof TreeBin) ?
                                   ((TreeBin<K,V>)f).first : null);
                  	// 遍历链表或者红黑树,获取删除的节点个数
                    while (p != null) {
                        --delta;
                        p = p.next;
                    }
                  	// 清空当前位置
                    setTabAt(tab, i++, null);
                }
            }
        }
    }
    if (delta != 0L)
        addCount(delta, -1);
}

remove操作

/**
 * Removes the key (and its corresponding value) from this map.
 * This method does nothing if the key is not in the map.
 *
 * @param  key the key that needs to be removed
 * @return the previous value associated with {@code key}, or
 *         {@code null} if there was no mapping for {@code key}
 * @throws NullPointerException if the specified key is null
 */
public V remove(Object key) {
    return replaceNode(key, null, null);
}
/**
 * Implementation for the four public remove/replace methods:
 * Replaces node value with v, conditional upon match of cv if
 * non-null.  If resulting value is null, delete.
 */
// cv是compareValue的缩写,表示期望值
// 如果cv不为null并且匹配当前值,将节点的值替换为v,如果替换后的值为null,则删除该节点
final V replaceNode(Object key, V value, Object cv) {
    int hash = spread(key.hashCode());
    for (Node<K,V>[] tab = table;;) {
        Node<K,V> f; int n, i, fh;
      	// 通过hash值判断key不存在,直接返回
        if (tab == null || (n = tab.length) == 0 ||
            (f = tabAt(tab, i = (n - 1) & hash)) == null)
            break;
      	// table正在扩容,帮助扩容,然后进入下一轮循环
        else if ((fh = f.hash) == MOVED)
            tab = helpTransfer(tab, f);
        else {
            V oldVal = null;
            boolean validated = false;
          	// 对数组当前位置的头节点加监视器锁
            synchronized (f) {
                if (tabAt(tab, i) == f) {
                    if (fh >= 0) {
                        validated = true;
                      	// 遍历链表
                        for (Node<K,V> e = f, pred = null;;) {
                            K ek;
                            if (e.hash == hash &&
                                ((ek = e.key) == key ||
                                 (ek != null && key.equals(ek)))) {
                                V ev = e.val;
                              	// 如果cv为null或者cv和当前节点的value相等
                                if (cv == null || cv == ev ||
                                    (ev != null && cv.equals(ev))) {
                                    oldVal = ev;
                                  	// value不为null,替换当前值
                                    if (value != null)
                                        e.val = value;
                                  	// 删除当前节点,当前节点不是头节点
                                    else if (pred != null)
                                        pred.next = e.next;
                                  	// 删除当前节点,当前节点是头节点
                                    else
                                        setTabAt(tab, i, e.next);
                                }
                                break;
                            }
                            pred = e;
                            if ((e = e.next) == null)
                                break;
                        }
                    }
                  	// 红黑树逻辑
                    else if (f instanceof TreeBin) {
                        validated = true;
                        TreeBin<K,V> t = (TreeBin<K,V>)f;
                        TreeNode<K,V> r, p;
                        if ((r = t.root) != null &&
                            (p = r.findTreeNode(hash, key, null)) != null) {
                            V pv = p.val;
                            if (cv == null || cv == pv ||
                                (pv != null && cv.equals(pv))) {
                                oldVal = pv;
                                if (value != null)
                                    p.val = value;
                                else if (t.removeTreeNode(p))
                                    setTabAt(tab, i, untreeify(t.first));
                            }
                        }
                    }
                    else if (f instanceof ReservationNode)
                        throw new IllegalStateException("Recursive update");
                }
            }
            if (validated) {
                if (oldVal != null) {
                    if (value == null)
                        addCount(-1L, -1);
                    return oldVal;
                }
                break;
            }
        }
    }
    return null;
}

size操作

可以看到,size采用类似于LongAdder的方式,将统计mapping数量的工作分散到多个变量上,避免影响性能。

/**
 * A padded cell for distributing counts.  Adapted from LongAdder
 * and Striped64.  See their internal docs for explanation.
 */
@jdk.internal.vm.annotation.Contended static final class CounterCell {
    volatile long value;
    CounterCell(long x) { value = x; }
}
/**
 * Base counter value, used mainly when there is no contention,
 * but also as a fallback during table initialization
 * races. Updated via CAS.
 */
private transient volatile long baseCount;
/**
 * Table of counter cells. When non-null, size is a power of 2.
 */
private transient volatile CounterCell[] counterCells;
/**
 * {@inheritDoc}
 */
public int size() {
    long n = sumCount();
    return ((n < 0L) ? 0 :
            (n > (long)Integer.MAX_VALUE) ? Integer.MAX_VALUE :
            (int)n);
}
final long sumCount() {
    CounterCell[] cs = counterCells;
    long sum = baseCount;
    if (cs != null) {
        for (CounterCell c : cs)
            if (c != null)
                sum += c.value;
    }
    return sum;
}
/**
 * Adds to count, and if table is too small and not already
 * resizing, initiates transfer. If already resizing, helps
 * perform transfer if work is available.  Rechecks occupancy
 * after a transfer to see if another resize is already needed
 * because resizings are lagging additions.
 *
 * @param x the count to add
 * @param check if <0, don't check resize, if <= 1 only check if uncontended
 */
private final void addCount(long x, int check) {
    CounterCell[] cs; long b, s;
    if ((cs = counterCells) != null ||
        !U.compareAndSetLong(this, BASECOUNT, b = baseCount, s = b + x)) {
        CounterCell c; long v; int m;
        boolean uncontended = true;
        if (cs == null || (m = cs.length - 1) < 0 ||
            (c = cs[ThreadLocalRandom.getProbe() & m]) == null ||
            !(uncontended =
              U.compareAndSetLong(c, CELLVALUE, v = c.value, v + x))) {
            fullAddCount(x, uncontended);
            return;
        }
        if (check <= 1)
            return;
        s = sumCount();
    }
    if (check >= 0) {
        Node<K,V>[] tab, nt; int n, sc;
        while (s >= (long)(sc = sizeCtl) && (tab = table) != null &&
               (n = tab.length) < MAXIMUM_CAPACITY) {
            int rs = resizeStamp(n) << RESIZE_STAMP_SHIFT;
            if (sc < 0) {
                if (sc == rs + MAX_RESIZERS || sc == rs + 1 ||
                    (nt = nextTable) == null || transferIndex <= 0)
                    break;
                if (U.compareAndSetInt(this, SIZECTL, sc, sc + 1))
                    transfer(tab, nt);
            }
            else if (U.compareAndSetInt(this, SIZECTL, sc, rs + 2))
                transfer(tab, null);
            s = sumCount();
        }
    }
}

TODO:后面再看