Java контейнер (а) -CurrentHashMap Комментарии (JDK1.8)

резюме

Когда дело доходит до разработки Java многопоточности, если использовать HashMap может вызвать проблему взаимоблокировки, используйте HashTable эффективность не высока. И оба могут быть синхронизированы ConcurrentHashMap также может повысить эффективность параллельности, поэтому на этот раз ConcurrentHashMap наш лучший выбор.

Почему ConcurrentHashMap

  • Используйте HashMap в многопоточной среде положить метод может привести к петле программы, поскольку несколько потоков могут привести к HashMap образует круговой связанный список, узел, который следующий узел списка никогда не нулевой, то он будет производить бесконечный цикл. В это время, скорость загрузки процессора близка к 100%, так что в случае не может быть использована одновременно HashMap.

  • При использовании синхронизированной гарантии в hashTable потокобезопасной, но в условиях жесткой конкуренции нити неэффективны. Потому что, когда один поток для доступа к Hashtable метод синхронизации, другие потоки могут блокировать в ожидании операции размещение резьбы завершена.

  • ConcurrentHashMap идея использования сегментированных блокировок, различные для разных сегментов данных с помощью замков, которые могут поддерживать несколько потоков доступ к другому сегменту данных, не существует конкуренция между такими нитями не встанет, тем самым улучшая эффективность параллелизма.

Краткое введение

При чтении источника ConcurrentHashMap, есть соответствующее описание.

Основная цель дизайна этой хэш-таблицы, чтобы поддерживать одновременную читаемость (обычно метод Get (), но и итераторы и связанные с ними методы) при минимизации обновления раздор. Вторичные цели сохранить потребление пространства примерно такими же или лучше, чем java.util.HashMap и поддерживать высокие начальные скорости вставки на пустом столе многих нитей.

Грубо значение: ConcurrentHashMap в первую очередь предназначен для поддержания параллельной читаемости (как правило, относится, чтобы получить () метод использования, а также включает в себя итеративную и связанную с ними методу), при минимизации обновления реквизиции (т.е. во время операции вставки или когда расширение можно также поддерживать доступ к другим сегментам данных). Вторая цель состоит в том, чтобы быть в соответствии с HashMap или лучше с точки зрения использования пространства, а также поддерживает многопоточную начальную скорость вставки в пустую таблицу.

Java7 и Java8 в ConcurrentHashMap:

В ConcurrentHashMap блокировки сегментов, главным образом, с помощью методов для достижения этих целей.

В качестве Java7 , сегмента ConcurrentHashMap по структуре массива и массив HashEntry. Сегмент представляет собой замок реентерабельного, и является структура массива связанного списка, массив сегмента содержит HashEntry, каждый HashEntry является связанным список структурой. Он сегментирован замком сегмента, ConcurrentHashMap достижения высокой эффективности параллелизма.

В Java8 , добавление ConcurrentHashMap структуры данных сегмента к замку сегмента, то операция по CAS основываются главным образом обеспечить гарантированный сбор данных и использование синхронизированных сегментов данных , соответствующих блокировку для достижения основных функций, что дополнительно улучшает параллелизм. В целях повышения производительности при одновременном решении хэш столкновения, Java - 8 , когда длина цепи превышает определенный порог (8) Список (обращаясь к времени сложность O (N)) преобразуется в красно-черных деревьев (обращаясь к сложности времени это O (длинный (N))) .

Структура Java8 в ConcurrentHashMap

В Java8, ConcurrentHashMap заброшенного класса сегмента, но сохранил сегмент атрибутов для сериализации. В настоящее время используют класс ConcurrentHashMap узел в качестве основного блока хранения для каждого значения ключа (ключ-значение) хранится в одном из узла. В то же время существует несколько подклассов Node, TreeNodes структуры дерева (при преобразовании в красно-черный списке длину дерева больше, чем 8); TreeBins для поддержания TreeNodes. Когда дерево переноса цепи, для ограждения TreeNode. Другими словами, ConcurrentHashMap красно-черное дерево хранится в TreeBin, а не TreeNode; ForwordingNodes является важной структурой, он используется расширение ConcurrentHashMap, является признаком узел, внутри имеет точку nextTable свойство, но и обеспечивает внешний вид заход на посадку;

static class Node<K,V> implements Map.Entry<K,V> {
        final int hash;
        final K key;
        volatile V val;  //使用了volatile属性
        volatile Node<K,V> next;  //使用了volatile属性

        Node(int hash, K key, V val) {
            this.hash = hash;
            this.key = key;
            this.val = val;
        }
        Node(int hash, K key, V val, Node<K,V> next) {
            this(hash, key, val);
            this.next = next;
        }
        public final K getKey()     { return key; }
        public final V getValue()   { return val; }
        public final int hashCode() { return key.hashCode() ^ val.hashCode(); }
        public final String toString() {...}
        public final V setValue(V value) {...}

        public final boolean equals(Object o) {...}

        /**
         * Virtualized support for map.get(); overridden in subclasses.
         */
        Node<K,V> find(int h, Object k) {...}
    }
复制代码

Для обработки узла, узел ForwardingNodes является подклассом важной структуры, он в основном используются в качестве метки, ключевой роли в параллельной обработке, с ForwardingNodes, есть ConcurrentHashMap сегментированы возможности для повышения эффективности параллелизма.

 /**
     * A node inserted at head of bins during transfer operations.
     */
    static final class ForwardingNode<K,V> extends Node<K,V> {
        final Node<K,V>[] nextTable;
        ForwardingNode(Node<K,V>[] tab) {
	        //hash值默认为MOVED(-1)
            super(MOVED, null, null);
            this.nextTable = tab;
        }

        Node<K,V> find(int h, Object k) {
            // loop to avoid arbitrarily deep recursion on forwarding nodes
            //在nextTable中查找,nextTable可以看做是当前hash表的一个副本
            outer: for (Node<K,V>[] tab = nextTable;;) {
                Node<K,V> e; int n;
                if (k == null || tab == null || (n = tab.length) == 0 ||
                    (e = tabAt(tab, (n - 1) & h)) == null)
                    return null;
                for (;;) {
                    int eh; K ek;
                    if ((eh = e.hash) == h &&
                        ((ek = e.key) == k || (ek != null && k.equals(ek))))
                        return e;
                    if (eh < 0) {
                        if (e instanceof ForwardingNode) {
                            tab = ((ForwardingNode<K,V>)e).nextTable;
                            continue outer;
                        }
                        else
                            return e.find(h, k);
                    }
                    if ((e = e.next) == null)
                        return null;
                }
            }
        }
    }
复制代码

Атомная операция в ConcurrentHashMap

Элементы с атомной операции поиска ConcurrentHashMap, заменяя элементы и элементы настройки. Эти атомарные операции играет ключевую роль, вы можете увидеть их тени все основные функции ConcurrentHashMap.

 static final <K,V> Node<K,V> tabAt(Node<K,V>[] tab, int i) {
        return (Node<K,V>)U.getObjectAcquire(tab, ((long)i << ASHIFT) + ABASE);
    }

    static final <K,V> boolean casTabAt(Node<K,V>[] tab, int i,
                                        Node<K,V> c, Node<K,V> v) {
        return U.compareAndSetObject(tab, ((long)i << ASHIFT) + ABASE, c, v);
    }

    static final <K,V> void setTabAt(Node<K,V>[] tab, int i, Node<K,V> v) {
        U.putObjectRelease(tab, ((long)i << ASHIFT) + ABASE, v);
    }
复制代码

реализация функции ConcurrentHashMap

инициализация 1.ConcurrentHashMap

Перед введением инициализации ввести важный параметр sizeCtl, следующие значения:

 /**
     * Table initialization and resizing control.  When negative,the
     * table is being initialized or resized: -1 for initialization,
     * else -(1 + the number of active resizing threads). Otherwise,
     * when table is null, holds the initial table size to use upon
     * creation, or 0 for default. After initialization, holds the
     * next element count value upon which to resize the table.
     * Hash表的初始化和调整大小的控制标志。为负数,Hash表正在初始化或者扩容;
     * (-1表示正在初始化,-N表示有N-1个线程在进行扩容)
     * 否则,当表为null时,保存创建时使用的初始化大小或者默认0;
     * 初始化以后保存下一个调整大小的尺寸。
     */
    private transient volatile int sizeCtl;
复制代码

Этот флаг управления параметр играет роль при инициализации ConcurrentHashMap и расширения используются. ConcurrentHashMap конструктор просто установить ряд параметров, и ни одна таблица Hash не инициализируется. Когда элемент вставки будет инициализировать хэш-таблицу. В начале инициализации, сначала определить значение sizeCtl, если sizeCtl <0, иллюстрирует инициализацию нити, текущий поток будет отказаться от инициализации. В противном случае, SIZECTL значение -1, хэш-таблица инициализируется. После успешной инициализации, установите sizeCtl значения для текущего значения мощности.

 /**
     * Initializes table, using the size recorded in sizeCtl.
     */
    private final Node<K,V>[] initTable() {
        Node<K,V>[] tab; int sc;
        while ((tab = table) == null || tab.length == 0) {
	        //sizeCtl小于0,正在初始化
            if ((sc = sizeCtl) < 0)
                //调用yield()函数,使线程让出CPU资源
                Thread.yield(); // lost initialization race; just spin
            //设置SIZECTL为-1,表示正在初始化
            else if (U.compareAndSetInt(this, SIZECTL, sc, -1)) {
                try {
                    if ((tab = table) == null || tab.length == 0) {
                        int n = (sc > 0) ? sc : DEFAULT_CAPACITY;
                        @SuppressWarnings("unchecked")
                        Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n];
                        table = tab = nt;
                        sc = n - (n >>> 2); //n-(1/4)n,即默认的容量(n * loadFactor)
                    }
                } finally {
                    sizeCtl = sc; //重新设置sizeCtl
                }
                break;
            }
        }
        return tab;
    }
复制代码

2. Определить таблицу индекса Hash элементов

Элементы могут быть рассредоточены в хэш с помощью хэш-алгоритма. Индекс массива определяется с помощью следующего метода в ConcurrentHashMap: Шаг:

static final int spread(int h) {
        return (h ^ (h >>> 16)) & HASH_BITS; 
    }
复制代码

第二步: (длина-1) & (ч ^ (ч >>> 16)) & HASH_BITS);

Метод поставил ConcurrentHashMap

  • Если ключ или значение равно нулю, кидает исключения нулевого указателя;

  • Если таблица длина таблицы равна нулю или 0, таблица инициализации, вызовите метод initTable ().

  • Расчет текущего положения ключей индекса, хэш-таблица, если текущий узел непосредственно вставлен пустая, элементы. (Обратите внимание, что использование замка находится в передней части CAS, говорят операция)

  • Если хэш текущей позиции значения элемента узла -1, что указывает на это узел ForwaringNodes, т.е. продолжающееся расширение. Затем текущий поток присоединиться к расширению.

  • Текущий узел не является нулевым, блокировка текущего узла, текущий узел вставляется в элемент. В Java8, когда длина узла больше, чем 8, он будет преобразован в узел дерева.

	/** Implementation for put and putIfAbsent */
	final V putVal(K key, V value, boolean onlyIfAbsent) {
		//数据不合法,抛出异常
        if (key == null || value == null) throw new NullPointerException();
        //计算索引的第一步,传入键值的hash值
        int hash = spread(key.hashCode());
        int binCount = 0; //保存当前节点的长度
        for (Node<K,V>[] tab = table;;) {
            Node<K,V> f; int n, i, fh; K fk; V fv;
            if (tab == null || (n = tab.length) == 0)
                tab = initTable(); //初始化Hash表
            else if ((f = tabAt(tab, i = (n - 1) & hash)) == null) {
	            //利用CAS操作将元素插入到Hash表中
                if (casTabAt(tab, i, null, new Node<K,V>(hash, key, value)))
                    break;  // no lock when adding to empty bin(插入null的节点,无需加锁)
            }
            else if ((fh = f.hash) == MOVED) //f.hash == -1 
	            //正在扩容,当前线程加入扩容
                tab = helpTransfer(tab, f);
            else if (onlyIfAbsent && fh == hash &&  // check first node
                     ((fk = f.key) == key || fk != null && key.equals(fk)) &&
                     (fv = f.val) != null)
                return fv;
            else {
                V oldVal = null;
                //当前节点加锁
                synchronized (f) {
                    if (tabAt(tab, i) == f) {
                        if (fh >= 0) {
                            binCount = 1;
                            for (Node<K,V> e = f;; ++binCount) {
                                K ek;
                                //插入的元素键值的hash值有节点中元素的hash值相同,替换当前元素的值
                                if (e.hash == hash &&
                                    ((ek = e.key) == key ||
                                     (ek != null && key.equals(ek)))) {
                                    oldVal = e.val;
                                    if (!onlyIfAbsent)
	                                    //替换当前元素的值
                                        e.val = value;
                                    break;
                                }
                                Node<K,V> pred = e;
                                //没有相同的值,直接插入到节点中
                                if ((e = e.next) == null) {
                                    pred.next = new Node<K,V>(hash, key, value);
                                    break;
                                }
                            }
                        }
                        //节点为树
                        else if (f instanceof TreeBin) {
                            Node<K,V> p;
                            binCount = 2;
                            if ((p = ((TreeBin<K,V>)f).putTreeVal(hash, key,
                                                           value)) != null) {
                                oldVal = p.val;
                                if (!onlyIfAbsent)
	                                //替换旧值
                                    p.val = value;
                            }
                        }
                        else if (f instanceof ReservationNode)
                            throw new IllegalStateException("Recursive update");
                    }
                }
                if (binCount != 0) {
	                //如果节点长度大于8,转化为树
                    if (binCount >= TREEIFY_THRESHOLD)
                        treeifyBin(tab, i);
                    if (oldVal != null)
                        return oldVal; 
                    break;
                }
            }
        }
        addCount(1L, binCount);
        return null;
    }
复制代码

механизм расширения ConcurrentHashMap

Когда число элементов в ConcurrentHashMap достигают крышки * loadFactor, о необходимости расширения. Расширение в основном за счет передачи () метод, когда поток поместить операцию, если продолжающееся расширение, расширение может быть добавлено с помощью метода helpTransfer (). Другими словами, ConcurrentHashMap поддержка расширения многопоточный, несколько потоков для обработки различных узлов.

  • Разложение началось, сначала вычисляется шаг, то есть, каждый поток выделяется для расширения числа узлов (по умолчанию 16). Это значение рассчитывается в соответствии с текущей мощности и количества ЦП (шаг = (NCPU> 1) (п >>> 3) / NCPU :? Н), минимум 16.

  • Далее, инициализация таблицы временного Hash nextTable, если nextTable 2 раза оригинального нуль, инициализация nextTable длина;

  • Путем вычисления шага хэш-таблицы, пересекающей, в котором атомные координаты с помощью (compareAndSetInt) записи. Через время цикла, если они пропустить этот шаг узел в пределах потока. В противном случае, следующий шаг;

  • Если текущий узел является пустым, между этим узлом к ​​узлу в ForwardingNodes старой таблицы Hash, указывая на то, что узел был обработан.

  • Если хэш-значение текущего элемента узла MOVED (f.hash == -1), это указывает на то, что это узел ForwardingNodes, пропустить. В противном случае, перезапуск обработки узлов;

  • Блокировка текущего узла, операция расширения этого шага, операция перерасчета позиция HashMap элемент такой же, то есть, ключевой элемент тока хэша длина и операции, если результат равен 0 позиция остается неизменной , то в положение г + п. Отличающийся тем, что процессорный элемент является последним элементом квалифицированным, это может быть обратное после расширения, но в хэш-таблице Эта последовательность не сильно влияет.

  • И, наконец, если список является новая структура список узлов с прямым доступом к верхней низко, и если в древовидной структуре, рассчитанной в тех же самых высоких и низких узлов, требуется, чтобы судить о том, чтобы преобразования в соответствии с длиной древовидной структуры узла.

 /**
     * Moves and/or copies the nodes in each bin to new table. See
     * above for explanation.
     */
    private final void transfer(Node<K,V>[] tab, Node<K,V>[] nextTab) {
        int n = tab.length, stride;
        //根据长度和CPU的数量计算步长,最小是16
        if ((stride = (NCPU > 1) ? (n >>> 3) / NCPU : n) < MIN_TRANSFER_STRIDE)
            stride = MIN_TRANSFER_STRIDE; // subdivide range
        if (nextTab == null) {            // initiating
            try {
                @SuppressWarnings("unchecked")
                //初始化新的Hash表,长度为原来的2倍
                Node<K,V>[] nt = (Node<K,V>[])new Node<?,?>[n << 1];
                nextTab = nt;
            } catch (Throwable ex) {      // try to cope with OOME
                sizeCtl = Integer.MAX_VALUE;
                return;
            }
            nextTable = nextTab;
            transferIndex = n;
        }
        int nextn = nextTab.length;
        //初始化ForwardingNodes节点
        ForwardingNode<K,V> fwd = new ForwardingNode<K,V>(nextTab);
        boolean advance = true; //是否跨过节点的标记
        boolean finishing = false; // to ensure sweep before committing nextTab
        for (int i = 0, bound = 0;;) {
            Node<K,V> f; int fh;
            //根据步长判断是否需要跨过节点
            while (advance) {
                int nextIndex, nextBound;
                //到达没有处理的节点下标
                if (--i >= bound || finishing)
                    advance = false;
                else if ((nextIndex = transferIndex) <= 0) {
                //所有节点都已经接收处理
                    i = -1;
                    advance = false;
                }
                else if (U.compareAndSetInt
                         (this, TRANSFERINDEX, nextIndex,
                          nextBound = (nextIndex > stride ?
                                       nextIndex - stride : 0))) {
                //更新下表transferIndex,在步长的范围内都忽略
                    bound = nextBound;
                    i = nextIndex - 1;
                    advance = false;
                }
            }
            //所有节点都被接收处理或者已经处理完毕
            if (i < 0 || i >= n || i + n >= nextn) {
                int sc;
                //处理完毕
                if (finishing) {
                    nextTable = null;
                    table = nextTab;
                    //更新sizeCtl
                    sizeCtl = (n << 1) - (n >>> 1);
                    return;
                }
                //判断所有节点是否全部被处理
                if (U.compareAndSetInt(this, SIZECTL, sc = sizeCtl, sc - 1)) {
                    if ((sc - 2) != resizeStamp(n) << RESIZE_STAMP_SHIFT)
                        return;
                    finishing = advance = true;
                    i = n; // recheck before commit
                }
            }
            //如果节点为null,直接标记为已接收处理
            else if ((f = tabAt(tab, i)) == null)
                advance = casTabAt(tab, i, null, fwd);
            //键值的hash为-1,表示这是一个ForwardingNodes节点,已经被处理
            else if ((fh = f.hash) == MOVED)
                advance = true; // already processed
            else {
	            //对当前节点进行加锁
                synchronized (f) {
                    if (tabAt(tab, i) == f) {
                        Node<K,V> ln, hn;
                        if (fh >= 0) {
	                        //索引位置是否改变的标志
                            int runBit = fh & n;
                            Node<K,V> lastRun = f; //最后一个元素
                            for (Node<K,V> p = f.next; p != null; p = p.next) {
                                int b = p.hash & n;
                                //重新计算更新直到最后一个元素
                                if (b != runBit) {
                                    runBit = b;
                                    lastRun = p;
                                }
                            }
                            //runBit = 0,保持位置不变
                            if (runBit == 0) {
                                ln = lastRun;
                                hn = null;
                            }
                            //runBit = 1,位置时i+n
                            else {
                                hn = lastRun;
                                ln = null;
                            }
                            //重新遍历节点元素
                            for (Node<K,V> p = f; p != lastRun; p = p.next) {
                                int ph = p.hash; K pk = p.key; V pv = p.val;
                                //构建低位(位置不变)新的链表
                                if ((ph & n) == 0)
                                    ln = new Node<K,V>(ph, pk, pv, ln);
                                    //构建高位(i+n)新的链表
                                else
                                    hn = new Node<K,V>(ph, pk, pv, hn);
                            }
                            //将新的链表设置到新的Hash表中相应的位置
                            setTabAt(nextTab, i, ln);
                            setTabAt(nextTab, i + n, hn);
                            //将原来的Hash表中相应位置的节点设置为ForwardingNodes节点
                            setTabAt(tab, i, fwd);
                            advance = true;
                        }
                        //如果节点是树的结构
                        else if (f instanceof TreeBin) {
                            TreeBin<K,V> t = (TreeBin<K,V>)f;
                            TreeNode<K,V> lo = null, loTail = null;
                            TreeNode<K,V> hi = null, hiTail = null;
                            int lc = 0, hc = 0;
                            for (Node<K,V> e = t.first; e != null; e = e.next) {
                                int h = e.hash;
                                TreeNode<K,V> p = new TreeNode<K,V>
                                    (h, e.key, e.val, null, null);
                                //同样的方式计算新的索引位置
                                if ((h & n) == 0) {
	                                //构建新的链表结构
                                    if ((p.prev = loTail) == null)
                                        lo = p;
                                    else
                                        loTail.next = p;
                                    loTail = p;
                                    ++lc;
                                }
                                else {
                                //构建新的链表结构
                                    if ((p.prev = hiTail) == null)
                                        hi = p;
                                    else
                                        hiTail.next = p;
                                    hiTail = p;
                                    ++hc;
                                }
                            }
                            //判断是否需要转化为树
                            ln = (lc <= UNTREEIFY_THRESHOLD) ? untreeify(lo) :
                                (hc != 0) ? new TreeBin<K,V>(lo) : t;
                            //判断是否需要转化为树
                            hn = (hc <= UNTREEIFY_THRESHOLD) ? untreeify(hi) :
                                (lc != 0) ? new TreeBin<K,V>(hi) : t;
                            //将新的链表设置到新的Hash表中相应的位置
                            setTabAt(nextTab, i, ln);
                            setTabAt(nextTab, i + n, hn);
                            //将原来的Hash表中相应位置的节点设置为ForwardingNodes节点
                            setTabAt(tab, i, fwd);
                            advance = true;
                        }
                    }
                }
            }
        }
    }
复制代码

ConcurrentHashMap получить методы

ConcurrentHashMap получить метод считывает данные из таблицы Hash, и не вступает в противоречие с расширением. Этот метод не синхронизирован замок.

  • Вычисление позиции индекса по ключу хэша, и, если условие удовлетворяется, возвращает соответствующее значение непосредственно;

  • Если хэш-значение соответствующего узла меньше 0, то есть, расширение узла выполняется, чтобы найти способ вызова непосредственно найти ForwardingNodes узел.

  • В противном случае, обход текущего узла до тех пор, пока не найдешь соответствующий элемент.

/**
     * Returns the value to which the specified key is mapped,
     * or {@code null} if this map contains no mapping for the key.
     *
     * <p>More formally, if this map contains a mapping from a key
     * {@code k} to a value {@code v} such that {@code key.equals(k)},
     * then this method returns {@code v}; otherwise it returns
     * {@code null}.  (There can be at most one such mapping.)
     *
     * @throws NullPointerException if the specified key is null
     */
    public V get(Object key) {
        Node<K,V>[] tab; Node<K,V> e, p; int n, eh; K ek;
        int h = spread(key.hashCode());
        //满足条件直接返回对应的值
        if ((tab = table) != null && (n = tab.length) > 0 &&
            (e = tabAt(tab, (n - 1) & h)) != null) {
            if ((eh = e.hash) == h) {
                if ((ek = e.key) == key || (ek != null && key.equals(ek)))
                    return e.val;
            }
            //e.hash<0,正在扩容
            else if (eh < 0)
                return (p = e.find(h, key)) != null ? p.val : null;
            //遍历当前节点
            while ((e = e.next) != null) {
                if (e.hash == h &&
                    ((ek = e.key) == key || (ek != null && key.equals(ek))))
                    return e.val;
            }
        }
        return null;
    }
复制代码

резюме

ConcurrentHashMap представил здесь, главным образом, для ConcurrentHashMap чаще используется для анализа характеристик, если вы заинтересованы в другом содержании, вы можете прочитать соответствующий источник.

рекомендация

отjuejin.im/post/5d1578de6fb9a07ed136e829