Java 集合深入理解 :HashMap之扩容 数据迁移

Posted 踩踩踩从踩

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Java 集合深入理解 :HashMap之扩容 数据迁移相关的知识,希望对你有一定的参考价值。

Java 集合深入理解 (十一) :哈希表之HashMap原理

目录

Java 集合深入理解 (十一) :哈希表之HashMap原理

前言

hashmap中扩容方法(resize())

扩容调用的时间段

源码分析

putIfAbsent方法

get(Object key)方法

remove(Object key) 方法

keySet()方法

HashIterator 迭代器

总结


前言

 上一篇我做了哈希表之HashMap原理的分析包括,整个属性 及构造方法  put方法的整体分析,也有了个大概,这篇文章进一步解析扩容 数据迁移  删除的原理分析

hashmap中扩容方法(resize())

扩容调用的时间段

  • put方法中,初始化hashmap  
  • size大于所设置threshold(阈值)时
  • 以及红黑叔转换时,当数组长度小于最小容量
  • 以及jdk1.8后提供的computeIfAbsent 和putIfAbsent 方法中

源码分析

源码分析前有几个问题,hashmap是怎么扩容的,扩容过后数据是怎么在重新分配数据,一次性扩容多大的数组 ,让我们带着这些问题去看看

  /**
     * 初始化或加倍表大小。如果为空,则在符合田间阈值下的初始容量目标。
     * 否则,因为我们使用的是二次幂展开,所以每个容器中的元素必须保持在同一索引处,或者移动
     * 在新表中具有二次方偏移量。
     *
     * @return the table
     */
    final Node<K,V>[] resize() {
        //将原散列表获取,而不直接操作散列表
        Node<K,V>[] oldTab = table;
        int oldCap = (oldTab == null) ? 0 : oldTab.length;
        int oldThr = threshold;
        int newCap, newThr = 0;
        //原table不为空
        if (oldCap > 0) {
            //原容量已经达到最大容量了,无法进行扩容,直接返回老容量
            if (oldCap >= MAXIMUM_CAPACITY) {
                threshold = Integer.MAX_VALUE;
                return oldTab;
            }
            // 老容量大于等于默认初始化容量 (16) 设置新容量为旧容量的两倍,就算 容量小于初始容量容量都会扩大一倍,但阈值不增加
            else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                     oldCap >= DEFAULT_INITIAL_CAPACITY)
                newThr = oldThr << 1; // 扩大一倍 threshold 
        }
         /**
        * 在构造方法中,没有指定initialCapacity, 则不会给threshold赋值, 该值被初始化为0
        * 指定了initialCapacity, 该值被初始化成大于initialCapacity的最小的2的次幂
    	* 这里这种情况指的是原table为空,并且在初始化的时候指定了容量,则用threshold作为table的实际大小
		*/

        else if (oldThr > 0) 
            newCap = oldThr;
        else {               // 零初始阈值表示使用默认值 
            newCap = DEFAULT_INITIAL_CAPACITY;
            newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
        }
        
        // 计算指定了initialCapacity情况下的新的 threshold ,指定容量小于默认容量也会走到这里
        if (newThr == 0) { 
            float ft = (float)newCap * loadFactor;
            newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                      (int)ft : Integer.MAX_VALUE);
        }
        threshold = newThr;
        

        //上面进行计算出新的阈值及新的容量  就开始实际扩容
        @SuppressWarnings({"rawtypes","unchecked"})
            Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];

        table = newTab;
        //不是第一次扩容
        if (oldTab != null) {
            for (int j = 0; j < oldCap; ++j) {
                Node<K,V> e;
                if ((e = oldTab[j]) != null) {
                    /** 这里注意, table中存放的只是Node的引用,这里将oldTab[j]=null只是清除旧表的引用, 
                   * 但是真正的node节点还在, 只是现在由e指向它 并没有指向为null
                   */
                    oldTab[j] = null;
                   //桶中只有一个节点,直接放入新桶中
                    if (e.next == null)
                        newTab[e.hash & (newCap - 1)] = e;
                    //桶中为红黑树,则对树进行拆分
                    else if (e instanceof TreeNode)
                        ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
                    else { // 维持秩序
                        //对链表进行拆分
                        Node<K,V> loHead = null, loTail = null;
                        Node<K,V> hiHead = null, hiTail = null;
                        Node<K,V> next;
                        //遍历链表进行拆分
                        do {
                            next = e.next;
                            if ((e.hash & oldCap) == 0) {
                                if (loTail == null)
                                    loHead = e;
                                else
                                    loTail.next = e;
                                loTail = e;
                            }
                            else {
                                if (hiTail == null)
                                    hiHead = e;
                                else
                                    hiTail.next = e;
                                hiTail = e;
                            }
                        } while ((e = next) != null);
                        if (loTail != null) {
                            loTail.next = null;
                            newTab[j] = loHead;
                        }
                        if (hiTail != null) {
                            hiTail.next = null;
                            newTab[j + oldCap] = hiHead;
                        }
                    }
                }
            }
        }
        return newTab;
    }

对链表进行扩容元素拆分

测试数据

public static void main(String[] args) {
		 List<String> list = new ArrayList<>();
		    list.add("ff");
		    list.add("ssd");
		    list.add("c");
		    list.add("e4wewre");
		    list.add("f");
		    list.add("s");
		    list.add("vfgx6");
		    list.add("gfxcrt");
		    list.add("alvpo");
		    list.add("vsdfbh");
		    list.add("bsdfnhj");
		    list.add("zucxio");
		    list.add("iu8xce");
		    list.add("yhjghk");
		    list.add("plwop");
		    list.add("r");
		    for (String key : list) {
		        int hash = key.hashCode() ^ (key.hashCode() >>> 16);
		        System.out.println("字符串:" + key + " \\tIdx(16):" + ((16 - 1) & hash) + " \\tBit值:" + Integer.toBinaryString(hash) + " - " + Integer.toBinaryString(hash & 16) + " \\t\\tIdx(32):" + ((
		        Integer.toBinaryString(key.hashCode()) +" "+ Integer.toBinaryString(hash) + " " + Integer.toBinaryString((32 - 1) & hash))));
		    }
	}


字符串:ff 	Idx(16):0 	Bit值:110011000000 - 0 		Idx(32):110011000000 110011000000 0
字符串:ssd 	Idx(16):5 	Bit值:11011111000000101 - 0 		Idx(32):11011111000000100 11011111000000101 101
字符串:c 	Idx(16):3 	Bit值:1100011 - 0 		Idx(32):1100011 1100011 11
字符串:e4wewre 	Idx(16):3 	Bit值:111110010011100011101000000011 - 0 		Idx(32):111110010011100000010001001101 111110010011100011101000000011 11
字符串:f 	Idx(16):6 	Bit值:1100110 - 0 		Idx(32):1100110 1100110 110
字符串:s 	Idx(16):3 	Bit值:1110011 - 10000 		Idx(32):1110011 1110011 10011
字符串:vfgx6 	Idx(16):11 	Bit值:110101011101100001000011011 - 10000 		Idx(32):110101011101100010010110101 110101011101100001000011011 11011
字符串:gfxcrt 	Idx(16):4 	Bit值:10110101100110000010011001010100 - 10000 		Idx(32):10110101100110001001001111001100 10110101100110000010011001010100 10100
字符串:alvpo 	Idx(16):3 	Bit值:101100010011100110101100011 - 0 		Idx(32):101100010011100100011101010 101100010011100110101100011 11
字符串:vsdfbh 	Idx(16):10 	Bit值:11001111110111111010011101011010 - 10000 		Idx(32):11001111110111110110100010000101 11001111110111111010011101011010 11010
字符串:bsdfnhj 	Idx(16):12 	Bit值:1010000100010011111001101100 - 0 		Idx(32):1010000100010011010001111101 1010000100010011111001101100 1100
字符串:zucxio 	Idx(16):8 	Bit值:11010110110011100001110011011000 - 10000 		Idx(32):11010110110011101100101000010110 11010110110011100001110011011000 11000
字符串:iu8xce 	Idx(16):6 	Bit值:10111001101110000110001101110110 - 10000 		Idx(32):10111001101110001101101011001110 10111001101110000110001101110110 10110
字符串:yhjghk 	Idx(16):10 	Bit值:11010100011001010111101011101010 - 0 		Idx(32):11010100011001011010111010001111 11010100011001010111101011101010 1010
字符串:plwop 	Idx(16):1 	Bit值:110010111010010101101000001 - 0 		Idx(32):110010111010010110100011100 110010111010010101101000001 1
字符串:r 	Idx(16):2 	Bit值:1110010 - 10000 		Idx(32):1110010 1110010 10010

 

对链表进行拆分

 

if ((e.hash & oldCap) == 0) {
    if (loTail == null)
        loHead = e;
    else
        loTail.next = e;
    loTail = e;
}
else {
    if (hiTail == null)
        hiHead = e;
    else
        hiTail.next = e;
    hiTail = e;
}

 通过源码和图进行分析知道了整个扩容拆分就来自于 该段代码,将链表进行重分组装

数据量大了之后,明显扩容相当消耗性能

最后扩容过后的数组应该为原数组的两倍

putIfAbsent方法

从源码上看和 put方法是一样的  ,但 onlyIfAbsent 设置为true  也就是key对应的value已经存在,就返回存在的value,不进行替换。  在jdk1.8中,作者的用意是用来做缓存的api操作

 @Override
    public V putIfAbsent(K key, V value) {
        return putVal(hash(key), key, value, true, true);
    }

get(Object key)方法

 /**
*返回指定键映射到的值,或者{@code null},如果此映射不包含键的映射。
*
*<p>更正式地说,如果此映射包含来自键的映射{@code k}到值{@code v}这样{@code(key==null?k==空:
*equals(k))},则此方法返回{@codev};否则它返回{@code null}(最多可以有一个这样的映射。)
*
*<p>返回值{@code null}不一定</i>指示映射不包含密钥的映射;这也是映射可能显式地将键映射到{@code null}。
*{@link#containsKey containsKey}操作可用于
*区分这两种情况。
*
*@see#put(object,object)
*/
    public V get(Object key) {
        Node<K,V> e;
        return (e = getNode(hash(key), key)) == null ? null : e.value;
    }

这里get方法还是比较简单的 主要就是找到对应的 object类,进行返回数据;始终检查第一个节点,第一个进行遍历进行查找

remove(Object key) 方法

  /**
     * 从此映射中删除指定键的映射(如果存在)。
     *
     * @param  要从映射中删除其映射的键
     * @return 与<tt>键相关的上一个值,或
     *         <tt>null</tt> if there was no mapping for <tt>key</tt>.
     *         (A <tt>null</tt> return can also indicate that the map
     *         previously associated <tt>null</tt> with <tt>key</tt>.)
     */
    public V remove(Object key) {
        Node<K,V> e;
        return (e = removeNode(hash(key), key, null, false, true)) == null ?
            null : e.value;
    }

分析 removeNode方法

   /**
     * 实现Map.remove和相关方法 是final的
     *
     * @param hash的key值
     * @param key the key
     * @param value要匹配的值if matchValue,else忽略
     * @param matchValue if true仅在值相等时删除
     * @param 如果为false,则在删除时不移动其他节点
     * @return 节点,如果没有则为null
     */
    final Node<K,V> removeNode(int hash, Object key, Object value,
                               boolean matchValue, boolean movable) {
        Node<K,V>[] tab; Node<K,V> p; int n, index;
        // 获取n为table长度,index为hash后的位置
        // 如果当前table已经初始化,且index位置上的元素不为空,则进入if判断,准备查找需要删除的元素
        if ((tab = table) != null && (n = tab.length) > 0 &&
            (p = tab[index = (n - 1) & hash]) != null) {
            Node<K,V> node = null, e; K k; V v;
            //如果当前index位置上第一个元素则是需要被删除的元素,则将node指定为p,开始删除
            //如果不是则进入else循环开始查找
            if (p.hash == hash &&
                ((k = p.key) == key || (key != null && key.equals(k))))
                node = p;
            //如果当前index位置上下一个元素不为空,则判断类型进行查找
            else if ((e = p.next) != null) {
                if (p instanceof TreeNode)
                    node = ((TreeNode<K,V>)p).getTreeNode(hash, key);
                else {
                     //如果当前index位置为链表,则循环向后查找
                    do {
                        if (e.hash == hash &&
                            ((k = e.key) == key ||
                             (key != null && key.equals(k)))) {
                            node = e;
                            break;
                        }
                        p = e;
                    } while ((e = e.next) != null);
                }
            }
            //如果node不为null,则代表查找到key值对应的元素
            if (node != null && (!matchValue || (v = node.value) == value ||
                                 (value != null && value.equals(v)))) {
                //如果被查找到的node类型为树类型,则调用树的删除方法
                if (node instanceof TreeNode)
                    ((TreeNode<K,V>)node).removeTreeNode(this, tab, movable);
                else if (node == p)
                    tab[index] = node.next;
                else
                    p.next = node.next;
                //将操作数加一
                ++modCount;
                --size;
                afterNodeRemoval(node);
                return node;
            }
        }
        return null;
    }

这里对remove方法进行备注展示,这些都是比较简单的循环查找,我就不怎么解释

keySet()方法

keyset方法用于获取到 所有的key 集合 ,查看源码put中没有添加 到set集合中,并且支持迭代器元素删除,这一一的疑问通过找到源码去看

  /**
     * 返回此映射中包含的键的{@link Set}视图。
     * 集合由映射支持,因此对映射的更改
     * 反映在场景中,反之亦然。如果地图被修改
     * 当集合上的迭代正在进行时(除了通过
     * 迭代器自己的<tt>remove</tt>操作)的结果
     * 迭代未定义。支持元素移除,
     * 从地图上删除相应的映射, 
     * <tt>Iterator.remove</tt>, <tt>Set.remove</tt>,
     * <tt>removeAll</tt>, <tt>retainAll</tt>, and <tt>clear</tt>
     * operations.  It does not support the <tt>add</tt> or <tt>addAll</tt>
     * operations.
     *
     * @return 此地图中包含的键的集合视图
     */
    public Set<K> keySet() {
        Set<K> ks = keySet;
        if (ks == null) {
            ks = new KeySet();
            keySet = ks;
        }
        return ks;
    }


  final class KeySet extends AbstractSet<K> {
        public final int size()                 { return size; }
        public final void clear()               { HashMap.this.clear(); }
        public final Iterator<K> iterator()     { return new KeyIterator(); }
        public final boolean contains(Object o) { return containsKey(o); }
        public final boolean remove(Object key) {
            return removeNode(hash(key), key, null, false, true) != null;
        }
        public final Spliterator<K> spliterator() {
            return new KeySpliterator<>(HashMap.this, 0, -1, 0, 0);
        }
        public final void forEach(Consumer<? super K> action) {
            Node<K,V>[] tab;
            if (action == null)
                throw new NullPointerException();
            if (size > 0 && (tab = table) != null) {
                int mc = modCount;
                for (int i = 0; i < tab.length; ++i) {
                    for (Node<K,V> e = tab[i]; e != null; e = e.next)
                        action.accept(e.key);
                }
                if (modCount != mc)
                    throw new ConcurrentModificationException();
            }
        }
    }
  • 通过 调用KeySet 方法 ,创建keyset对象给我们,这个keyset对象,是继承自 abstractset的,它会实现  一些set常用的方法
  • 主要是通过调用hashmap的公共方法进行实现
  • 在源码中还给我们实现了KeyIterator迭代器,KeyIterator 是继承HashIterator 迭代器, 后面我们继续讨论迭代器 

HashIterator 迭代器

从源码中可以看到 所有的迭代器,都来自于HashIterator 迭代器 ,并只做了把next方法重构,重点研究HashIterator

 final class KeyIterator extends HashIterator
        implements Iterator<K> {
        public final K next() { return nextNode().key; }
    }

    final class ValueIterator extends HashIterator
        implements Iterator<V> {
        public final V next() { return nextNode().value; }
    }

    final class EntryIterator extends HashIterator
        implements Iterator<Map.Entry<K,V>> {
        public final Map.Entry<K,V> next() { return nextNode(); }
    }

 

  abstract class HashIterator {
        Node<K,V> next;        // 要返回的下一个条目
        Node<K,V> current;     // 当前条目
        int expectedModCount;  // 对于快速故障
        int index;             // 当前插槽

        HashIterator() {
            expectedModCount = modCount;
            Node<K,V>[] t = table;
            current = next = null;
            index = 0;
            if (t != null && size > 0) { // 提前到第一个入口
                do {} while (index < t.length && (next = t[index++]) == null);
            }
        }

        public final boolean hasNext() {
            return next != null;
        }

        final Node<K,V> nextNode() {
            Node<K,V>[] t;
            Node<K,V> e = next;
            if (modCount != expectedModCount)
                throw new ConcurrentModificationException();
            if (e == null)
                throw new NoSuchElementException();
            if ((next = (current = e).next) == null && (t = table) != null) {
                do {} while (index < t.length && (next = t[index++]) == null);
            }
            return e;
        }

        public final void remove() {
            Node<K,V> p = current;
            if (p == null)
                throw new IllegalStateException();
            if (modCount != expectedModCount)
                throw new ConcurrentModificationException();
            current = null;
            K key = p.key;
            removeNode(hash(key), key, null, false, false);
            expectedModCount = modCount;
        }
    }

由图基本了解了整个思路是怎么样的跳转

 

 

总结

整个hashmap扩容机制,也遍历等方法 ,迭代器在我们日常应用中应用很广泛,希望这篇文章对你理解hashmap有整体的一个了解

以上是关于Java 集合深入理解 :HashMap之扩容 数据迁移的主要内容,如果未能解决你的问题,请参考以下文章

Java 集合框架—— HashMap

Java 集合深入理解 (十四) :Hashtable实现原理研究

深入理解JAVA集合系列:HashMap源码解读

Java 集合深入理解 :ArrayList源码解析,及动态扩容机制

深入理解HashMap

Java集合详解9:2021年的hashmap面试题怎么考?涵盖性能优化扩容并发问题等核心考点