LinkedHashMap源码分析与LRU实现
Posted 2k-Gamer
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了LinkedHashMap源码分析与LRU实现相关的知识,希望对你有一定的参考价值。
LinkedHashMap可认为是哈希表和链接列表综合实现,并允许使用null值和null键。LinkedHashMap实现与HashMap的不同之处在于,LinkedHashMap维护着一个运行于所有条目的双重链接列表。此链接列表定义了迭代顺序,该迭代顺序可以是插入顺序或者是访问顺序。 LinkedHashMap的实现不是同步的。如果多个线程同时访问LinkedHashMap,而其中至少一个线程从结构上修改了该映射,则它必须保持外部同步。
1.LinkedHashMap的存储结构
LinkedHashMap中加入了一个head头结点,将所有插入到该LinkedHashMap中的Entry按照插入的先后顺序(accessOrder标志位默认为false)依次加入到以head为头结点的双向循环链表的尾部。
LinkedHashMap实际上就是HashMap和LinkedList两个集合类的存储结构的结合。在LinkedHashMapMap中,所有put进来的Entry都保存在如图所示的哈希表中,但它又额外定义了一个以head为头结点的空的双向循环链表,每次put进来Entry,除了将其保存到对哈希表中对应的位置上外,还要将其插入到双向循环链表的尾部。
下面我们来分析LinkedHashMap的源代码。
2.LinkedHashMap成员变量
LinkedHashMap采用的hash算法和HashMap相同,但它重新定义了数组中保存的元素Entry,该Entry除了保存当前对象的引用外,还保存了其上一个元素before和下一个元素after的引用,从而在哈希表的基础上又构成了双向链接列表。
1.//双向循环链表的头结点,整个LinkedHashMap中只有一个header,
2.//(此链表不同于HashMap里面的那个next链表)
3.//它将哈希表中所有的Entry贯穿起来,header中不保存key-value对,只保存前后节点的引用
4. private transient Entry<K,V> header;
5.
6.//双向链表中元素排序规则的标志位。
7.//accessOrder为false,表示按插入顺序排序
8.//accessOrder为true,表示按访问顺序排序
9. private final boolean accessOrder;
10.
11.
12. /**
13. * LinkedHashMap的Entry元素。
14. * 继承HashMap的Entry元素,又保存了其上一个元素before和下一个元素after的引用。
15. */
16.private static class Entry<K,V> extends HashMap.Entry<K,V> {
17. Entry<K,V> before, after;
18. …… //Entry类涉及到的方法,下面会继续分析
19.}
3.构造函数
LinkedList一共提供了五个构造方法。
1.// 构造方法1,构造一个指定初始容量和加载因子的、按照插入顺序的LinkedList
2.//加载因子取默认的0.75f
3.
4.public LinkedHashMap(int initialCapacity, float loadFactor) {
5. super(initialCapacity, loadFactor);
6. accessOrder = false;
7.}
8.
9.// 构造方法2,构造一个指定初始容量的LinkedHashMap,取得键值对的顺序是插入顺序
10.//加载因子取默认的0.75f
11.
12.public LinkedHashMap(int initialCapacity) {
13. super(initialCapacity);
14. accessOrder = false;
15.}
16.
17.// 构造方法3,用默认的初始化容量和加载因子创建一个LinkedHashMap,取得键值对的顺序是插入顺序
18.//加载因子取默认的0.75f
19.
20.public LinkedHashMap() {
21. super();
22. accessOrder = false;
23.}
24.
25.// 构造方法4,通过传入的map创建一个LinkedHashMap,容量为默认容量(16)和
26.//(map.zise()/DEFAULT_LOAD_FACTORY)+1的较大者,加载因子为默认值0.75
27.
28.public LinkedHashMap(Map<? extends K, ? extends V> m) {
29. super(m);
30. accessOrder = false;
31.}
32.
33.// 构造方法5,根据指定容量、加载因子和指定链表中的元素排序的规则 创建一个LinkedHashMap
34.public LinkedHashMap(int initialCapacity,
35. float loadFactor,
36. boolean accessOrder) {
37. super(initialCapacity, loadFactor);
38. this.accessOrder = accessOrder;
39.}
我们已经知道LinkedHashMap的Entry元素继承HashMap的Entry,提供了双向链表的功能。在HashMap的构造器中,最后会调用init()方法,进行相关的初始化,这个方法在HashMap的实现中是空方法(感叹模板模式的精妙!),只是提供给子类实现相关的初始化调用。LinkedHashMap重写了init()方法,在调用父类的构造方法完成构造后,进一步实现了对其元素Entry的初始化操作。分析init()方法,的确是对header进行了初始化,并构造成一个双向循环链表(和LinkedList的存储结构是一样的)。
1.void init() {
2. header = new Entry<K,V>(-1, null, null, null);
3. header.before = header.after = header;
4.}
4.元素存储
LinkedHashMap重写了父类HashMap的put方法调用的子方法void addEntry(int hash, K key, V value, int bucketIndex) 和void createEntry(int hash, K key, V value, int bucketIndex),提供了自己特有的双向链接列表的实现。
1.//覆写HashMap中的addEntry方法,LinkedHashmap并没有覆写HashMap中的put方法,
2. //而是覆写了put方法所调用的addEntry方法和recordAccess方法,
3. //put方法在插入的key已存在的情况下,会调用recordAccess方法,
4. //在插入的key不存在的情况下,要调用addEntry插入新的Entry
5.void addEntry(int hash, K key, V value, int bucketIndex) {
6. //创建新的Entry,并插入到LinkedHashMap中
7. createEntry(hash, key, value, bucketIndex);
8.
9. //双向链表的第一个有效节点(header后的那个节点)为近期最少使用的节点
10. Entry<K,V> eldest = header.after;
11. //如果有必要,则删除掉该近期最少使用的节点,
12. //这要看对removeEldestEntry的覆写,由于默认为false,因此默认是不做任何处理的。
13. if (removeEldestEntry(eldest)) {
14. removeEntryForKey(eldest.key);
15. } else {
16. //超过阈值,扩容到原来的2倍
17. if (size >= threshold)
18. resize(2 * table.length);
19. }
20.}
21.
22.void createEntry(int hash, K key, V value, int bucketIndex) {
23. HashMap.Entry<K,V> old = table[bucketIndex];
24. Entry<K,V> e = new Entry<K,V>(hash, key, value, old);
25. table[bucketIndex] = e;
26. // 调用元素的addBrefore方法,将元素加入到哈希、双向链接列表。
27. //每次插入Entry时,都将其移到双向链表的尾部,
28. //这便会按照Entry插入LinkedHashMap的先后顺序来迭代元素,
29. //同时,新put进来的Entry是最近访问的Entry,把其放在链表末尾,符合LRU算法的实现
30. e.addBefore(header);
31. size++;
32.}
33.//双向循环立链表中,将当前的Entry插入到existingEntry的前面
34.private void addBefore(Entry<K,V> existingEntry) {
35. after = existingEntry;
36. before = existingEntry.before;
37. before.after = this;
38. after.before = this;
39.}
40.
41.//该方法默认返回false,我们一般在用LinkedHashMap实现LRU算法时,
42.//要覆写该方法,一般的实现是,当设定的内存(这里指节点个数)达到最大值时,返回true,
43.//这样put新的Entry(该Entry的key在哈希表中没有已经存在)时,
44.//就会调用removeEntryForKey方法,将最近最少使用的节点删除(head后面的那个节点,实际上是最近没有使用)。
45. protected boolean removeEldestEntry(Map.Entry<K,V> eldest) {
46. return false;
47. }
48.}
5.元素读取
LinkedHashMap重写了父类HashMap的get方法。由于的链表的增加、删除操作是常量级的,性能不会带来较大损失。LinkedHashMap 最牛逼的地方在于recordAccess()方法。
1.//覆写HashMap中的get方法,通过getEntry方法获取Entry对象。
2. //注意这里的recordAccess方法,
3. //如果链表中元素的排序规则是按照插入的先后顺序排序的话,该方法什么也不做,
4. //如果链表中元素的排序规则是按照访问的先后顺序排序的话,则将e移到链表的末尾处。
5.public V get(Object key) {
6. // 调用父类HashMap的getEntry()方法,取得要查找的元素。
7. Entry<K,V> e = (Entry<K,V>)getEntry(key);
8. if (e == null)
9. return null;
10. // 记录访问顺序。
11. e.recordAccess(this);
12. return e.value;
13.}
14.//覆写HashMap中的recordAccess方法(HashMap中该方法为空),
15.//当调用父类的put方法,在发现插入的key已经存在时,会调用该方法,
16.//调用LinkedHashmap覆写的get方法时,也会调用到该方法,
17.//该方法提供了LRU算法的实现,它将最近使用的Entry放到双向循环链表的尾部,
18.//accessOrder为true时,get方法会调用recordAccess方法
19.//put方法在覆盖key-value对时也会调用recordAccess方法
20.//它们导致Entry最近使用,因此将其移到双向链表的末尾
21.void recordAccess(HashMap<K,V> m) {
22. LinkedHashMap<K,V> lm = (LinkedHashMap<K,V>)m;
23. //如果链表中元素按照访问顺序排序,则将当前访问的Entry移到双向循环链表的尾部,
24. //如果是按照插入的先后顺序排序,则不做任何事情。
25. if (lm.accessOrder) {
26. lm.modCount++;
27. remove();//移除当前访问的Entry
28. addBefore(lm.header);//将当前访问的Entry插入到链表的尾部
29. }
30.}
6.元素删除
LinkedHashMap没有重写remove(Object key)方法,重写了被remove调用的recordRemoval方法,再一次感叹模板方法模式的精妙!
HahsMap remove(Object key)把数据从横向数组 * 竖向next链表里面移除之后(就已经完成工作了,所以HashMap里面recordRemoval是空的实现调用了此方法
但在LinkedHashMap里面,还需要移除header链表里面Entry的after和before关系。
7.元素遍历
1.//迭代器
2. private abstract class LinkedHashIterator<T> implements Iterator<T> {
3. Entry<K,V> nextEntry = header.after;
4. Entry<K,V> lastReturned = null;
5.
6. /**
7. * The modCount value that the iterator believes that the backing
8. * List should have. If this expectation is violated, the iterator
9. * has detected concurrent modification.
10. */
11. int expectedModCount = modCount;
12.
13. public boolean hasNext() {
14. return nextEntry != header;
15. }
16.
17. public void remove() {
18. if (lastReturned == null)
19. throw new IllegalStateException();
20. if (modCount != expectedModCount)
21. throw new ConcurrentModificationException();
22.
23. LinkedHashMap.this.remove(lastReturned.key);
24. lastReturned = null;
25. expectedModCount = modCount;
26. }
27. //从head的下一个节点开始迭代
28. Entry<K,V> nextEntry() {
29. if (modCount != expectedModCount)
30. throw new ConcurrentModificationException();
31. if (nextEntry == header)
32. throw new NoSuchElementException();
33.
34. Entry<K,V> e = lastReturned = nextEntry;
35. nextEntry = e.after;
36. return e;
37. }
38. }
39. //key迭代器
40. //看出这三个类都很简单,只有一个next()方法,next()方法也只是去调用LinkedHashIterator类中相应的方法
41. private class KeyIterator extends LinkedHashIterator<K> {
42. public K next() { return nextEntry().getKey(); }
43. }
44. //value迭代器
45. private class ValueIterator extends LinkedHashIterator<V> {
46. public V next() { return nextEntry().value; }
47. }
48. //Entry迭代器
49. private class EntryIterator extends LinkedHashIterator<Map.Entry<K,V>> {
50. public Map.Entry<K,V> next() { return nextEntry(); }
51. }
8.基于LinkedHashMap实现LRU Cache
用LinkedHashmap实现LRU算法,就要覆写方法removeEldestEntry。该方法默认返回false,我们一般在用LinkedHashMap实现LRU算法时,要覆写该方法,一般的实现是,当设定的内存(这里指节点个数)达到最大值时,返回true,这样put新的Entry(该Entry的key在哈希表中没有已经存在)时,就会调用removeEntryForKey方法,将最近最少使用的节点删除(head后面的那个节点,实际上是最近没有使用)。
LinkedHashMap是如何实现LRU的。首先,当accessOrder为true时,才会开启按访问顺序排序的模式,才能用来实现LRU算法。我们可以看到,无论是put方法还是get方法,都会导致目标Entry成为最近访问的Entry,因此便把该Entry加入到了双向链表的末尾(get方法通过调用recordAccess方法来实现,put方法在覆盖已有key的情况下,也是通过调用recordAccess方法来实现,在插入新的Entry时,则是通过createEntry中的addBefore方法来实现),这样便把最近使用了的Entry放入到了双向链表的后面,多次操作后, 双向链表前面的Entry便是最近没有使用的,这样当节点个数满的时候,删除的最前面的Entry(head后面的那个Entry)便是最近最少使用的Entry。
1./*LRU是Least Recently Used 近期最少使用算法。
2. *通过HashLiekedMap实现LRU的算法的关键是,如果map里面的元素个数大于了缓存最大容量,则删除链表头元素
3. */
4.
5./*public LinkedHashMap(int initialCapacity,float loadFactor,boolean accessOrder)
6. *LRU参数参数:
7. *initialCapacity - 初始容量。
8. *loadFactor - 加载因子(需要是按该因子扩充容量)。
9. *accessOrder - 排序模式( true) - 对于访问顺序(get一个元素后,这个元素被加到最后,使用了LRU 最近最少被使用的调度算法),对于插入顺序,则为 false,可以不断加入元素。
10. */
11.
12. /*相关思路介绍:
13. * 当有一个新的元素加入到链表里面时,程序会调用LinkedHahMap类中Entry的addEntry方法,
14. *而该方法又会 会调用removeEldestEntry方法,这里就是实现LRU元素过期机制的地方,
15. * 默认的情况下removeEldestEntry方法只返回false,表示可以一直表链表里面增加元素,在这个里 *修改一下就好了。
16. *
17. */
18.
19./*
20.测试数据:
21.11
22.7 0 7 1 0 1 2 1 2 6
23.*/
24.
25.import java.util.*;
26.public class LRULinkedHashMap<K,V> extends LinkedHashMap<K,V>{
27. private int capacity; //初始内存容量
28.
29. LRULinkedHashMap(int capacity){ //构造方法,传入一个参数
30. super(16,0.75f,true); //调用LinkedHashMap,传入参数
31. this.capacity=capacity; //传递指定的最大内存容量
32. }
33. @Override
34. public boolean removeEldestEntry(Map.Entry<K, V> eldest){
35. //,每加入一个元素,就判断是size是否超过了已定的容量
36. System.out.println("此时的size大小="+size());
37. if((size()>capacity))
38. {
39. System.out.println("超出已定的内存容量,把链表顶端元素移除:"+eldest.getValue());
40. }
41. return size()>capacity;
42. }
43.
44. public static void main(String[] args) throws Exception{//方便实例,直接将异常抛出
45. Scanner cin = new Scanner(System.in);
46.
47. System.out.println("请输入总共内存页面数: ");
48. int n = cin.nextInt();
49. Map<Integer,Integer> map=new LRULinkedHashMap<Integer, Integer>(n);
50.
51. System.out.println("请输入按顺序输入要访问内存的总共页面数: ");
52. int y = cin.nextInt();
53.
54. System.out.println("请输入按顺序输入访问内存的页面序列: ");
55. for(int i=1;i<=y;i++)
56. {
57. int x = cin.nextInt();
58. map.put(x, x);
59. }
60. System.out.println("此时内存中包含的页面数是有:");
61. //遍历此时内存中的页面并输出
62. for(java.util.Map.Entry<Integer, Integer> entry: map.entrySet()){
63. System.out.println(entry.getValue());
64. }
65. }
66.}
9.总结
1.LinkedHashMap继承自HashMap,具有HashMap的大部分特性,比如支持null键和值,默认容量为16,装载因子为0.75,非线程安全等等;
2.LinkedHashMap通过设置accessOrder控制遍历顺序是按照插入顺序还是按照访问顺序。当accessOrder为true时,可以利用其完成LRU缓存的功能;
3.LinkedHashMap内部维护了一个双向循环链表,并且其迭代操作时通过链表完成的,而不是去遍历hash表。
以上是关于LinkedHashMap源码分析与LRU实现的主要内容,如果未能解决你的问题,请参考以下文章