HashMap

前言:

从今天开始我将介绍Map系列接口,我认为Map是集合类中概念最多,实现最复杂的一类接口。在讲解过程中会涉及到不少数据结构的知识,这部分知识点需要读者额外花一定时间系统学习。

HashMap是Map的一个实现类,这个类很重要,是很多集合类的实现基础,底层用的就是他,比如前文中讲到的HashSet,下文要讲到的LinkedHashMap。我们可以将HashMap看成是一个小型的数字字典,他以key-value的方式保存数据,Key全局唯一,并且key和value都允许为null。

HashMap底层是通过维护一个数据来保存元素。当创建HashMap实例的时候,会通过指定的数组大小以及负载因子等参数创建一个空的数组,当在容器中添加元素的时候,首先会通过hash算法求得key的hash值,再根据hash值确定元素在数组中对应的位置,最后将元素放入数组对应的位置。在添加元素的过程中会出现hash冲突问题,冲突处理的方法就是判断key值是否相同,如果相同则表明是同一个元素,替换value值。如果key值不同,则把当前元素添加到链表尾部。这里引出了一个概念,就是HashMap的数据结构其实是:hash表+单向链表。通过链表的方式把所有冲突元素放在了数组的同一个位置。但是当链表过长的时候会影响HashMap的存取效率。因此我们在实际使用HashMap的时候就需要考虑到这个问题,那么该如何控制hash冲突的出现频率呢?HashMap中有一个负载因子(loadFactor)的概念。容器中实际存储元素的size = loadFactor * 数组长度,一旦容器元素超出了这个size,HashMap就会自动扩容,并对所有元素重新执行hash操作,调整位置。好了说了这么多,下面就开始介绍源码实现。

一、Node结构介绍

Node类实现了Map.Entry接口,他是用于存放数据的实体,是容器中存放数据的最小单元。Node的数据结构是一个单向链表,为什么选用这种结构?那是因前文讲到的,HashMap存放数据的结构是:hash表+单向链表。下面给出定义Node的源码:

  1. static class Node<K,V> implements Map.Entry<K,V> {
  2. final int hash;
  3. final K key;
  4. V value;
  5. Node<K,V> next;
  6. Node(int hash, K key, V value, Node<K,V> next) {
  7. this.hash = hash;
  8. this.key = key;
  9. this.value = value;
  10. this.next = next;
  11. }
  12. public final K getKey() { return key; }
  13. public final V getValue() { return value; }
  14. public final String toString() { return key + "=" + value; }
  15. public final int hashCode() {
  16. return Objects.hashCode(key) ^ Objects.hashCode(value);
  17. }
  18. public final V setValue(V newValue) {
  19. V oldValue = value;
  20. value = newValue;
  21. return oldValue;
  22. }
  23. public final boolean equals(Object o) {
  24. if (o == this)
  25. return true;
  26. if (o instanceof Map.Entry) {
  27. Map.Entry<?,?> e = (Map.Entry<?,?>)o;
  28. if (Objects.equals(key, e.getKey()) &&
  29. Objects.equals(value, e.getValue()))
  30. return true;
  31. }
  32. return false;
  33. }
  34. }

这个结构非常简单,定义了一个hash和key,hash值是对key进行hash以后得到的。value保存实际要存储的对象。next指向下一个节点。当hash冲突以后,就会将冲突的元素放入这个单向链表中。

二、创建HashMap

创建HashMap实例有四个构造方法,这里着重介绍一个,看源码:

  1. public HashMap(int initialCapacity, float loadFactor) {
  2. if (initialCapacity < 0)
  3. throw new IllegalArgumentException("Illegal initial capacity: " +
  4. initialCapacity);
  5. if (initialCapacity > MAXIMUM_CAPACITY)
  6. initialCapacity = MAXIMUM_CAPACITY;
  7. if (loadFactor <= 0 || Float.isNaN(loadFactor))
  8. throw new IllegalArgumentException("Illegal load factor: " +
  9. loadFactor);
  10. this.loadFactor = loadFactor;
  11. this.threshold = tableSizeFor(initialCapacity);
  12. }
  13. // HashMap的数组大小是有讲究的,他必须是2的幂,这里通过一个牛逼哄哄的位运算算法,找到大于或等于initialCapacity的最小的2的幂
  14. static final int tableSizeFor(int cap) {
  15. int n = cap - 1;
  16. n |= n >>> 1;
  17. n |= n >>> 2;
  18. n |= n >>> 4;
  19. n |= n >>> 8;
  20. n |= n >>> 16;
  21. return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
  22. }

构造方法中有两个参数,第一个initialCapacity定义map的数组大小,第二个loadFactor意为负载因子,他的作用就是当容器中存储的数据达到loadFactor限度以后,就开始扩容。如果不设定这样参数的话,loadFactor就等于默认值0.75。但是细心的你会发现,容器创建以后,并没有创建数组,原来table是在第一次被使用的时候才创建的,而这个时候threshold = initialCapacity * loadFactor。 这才是这个容器的真正的负载能力。
tableSizeFor这个方法的目的是找到大于或等于initialCapacity的最小的2的幂,这个算法写的非常妙,值得我们细细品味。
假设cap=7
第一步 n = cap -1 = 6 = 00000110
第二步 n|= n>>>1:
n>>>1表示无符号右移1位,那么二进制表示为00000011,此时00000110 | 00000011 = 00000111
第三步 n|=n>>>2:
00000111 & 00000001 = 00000111
第四部 n|=n>>>4:
00000111 & 00000000 = 00000111
第五步 n|=n>>>8;
00000111 & 00000000 = 00000111
第六步 n|=n>>>16;
00000111 & 00000000 = 00000111
最后 n + 1 = 00001000
其实他的原理很简单,第一步先对cap-1是因为如果cap原本就是一个2的幂,那么最后一步加1,会使得这个值变成原来的两倍,但事实上原来这个cap就是2的幂,就是我们想要的值。接下来后面的几步无符号右移操作是把高位的1补到低位,经过一系列的位运算以后的值必定是000011111…他的低位必定全是1,那么最后一步加1以后,这个值就会成为一个00010000…(2的幂次),这就是通过cap找到2的幂的方法。看到如此简约高效的算法,我服了。

三、put添加元素

添加一个元素是所有容器中的标配功能,但是至于添加方式那就各有千秋,Map添加元素的方式是通过put,向容器中存入一个Key-Value对。下面我将详细介绍put的实现过程,这个方法非常重要,吃透了这个方法的实现原理,基本也就能搞懂HashMap是怎么一回事了。

  1. public V put(K key, V value) {
  2. return putVal(hash(key), key, value, false, true);
  3. }
  4. // 获取key的hash值,这里讲hash值的高16位右移和低16位做异或操作,目的是为了减少hash冲突,使hash值能均匀分布。
  5. static final int hash(Object key) {
  6. int h;
  7. return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
  8. }
  9. final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
  10. boolean evict) {
  11. Node<K,V>[] tab; Node<K,V> p; int n, i;
  12. // 如果是第一次添加元素,那么table是空的,首先创建一个指定大小的table。
  13. if ((tab = table) == null || (n = tab.length) == 0)
  14. n = (tab = resize()).length;
  15. // 通过对hash与数组长度的与操作,确定key对应的数组位置,然后读取该位置中的元素。
  16. if ((p = tab[i = (n - 1) & hash]) == null)
  17. // 如果当前位置为空,那么就在当前数组位置,为这个key-value创建一个节点。
  18. tab[i] = newNode(hash, key, value, null);
  19. else {
  20. // 如果当前位置已经存在元素,那么就要逐个读取这条链表的元素。
  21. Node<K,V> e; K k;
  22. // 如果key和hash值都等于当前头元素,那么这存放的两个元素是相同的。
  23. if (p.hash == hash &&
  24. ((k = p.key) == key || (key != null && key.equals(k))))
  25. e = p;
  26. // 如果当前位置的链表类型是TreeNode,那么就讲当前元素以红黑树的形式存放。
  27. else if (p instanceof TreeNode)
  28. e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
  29. else {
  30. for (int binCount = 0; ; ++binCount) {
  31. // 遍历链表的所有元素,如果都未找到相同key的元素,那么说明这个元素并不在容器中存在,因此将他添加到链表尾部,并结束遍历。
  32. if ((e = p.next) == null) {
  33. p.next = newNode(hash, key, value, null);
  34. if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
  35. treeifyBin(tab, hash);
  36. break;
  37. }
  38. // 如果在遍历过程中,发现了相同的key值,那么就结束遍历。
  39. if (e.hash == hash &&
  40. ((k = e.key) == key || (key != null && key.equals(k))))
  41. break;
  42. p = e;
  43. }
  44. }
  45. // 如果e != null 说明在当前容器中,存在一个相同的key值,那么就要替换key所对应的value
  46. if (e != null) {
  47. V oldValue = e.value;
  48. if (!onlyIfAbsent || oldValue == null)
  49. e.value = value;
  50. // 这是专门留给LinkedHashMap调用的回调函数,LinkedHashMap会实现这个方法。从这里可以看出,HashMap充分的考虑了他的扩展性。
  51. afterNodeAccess(e);
  52. return oldValue;
  53. }
  54. }
  55. ++modCount;
  56. // 这里判断当前元素的数量是否超过了容量的上限,如果超过了,就要重新进行扩容,并对当前元素重新hash,所以再次扩容以后的元素位置都是会改变的。
  57. if (++size > threshold)
  58. resize();
  59. // 此方法也是HashMap留给LinkedHashMap实现的回调方法。透露一下,因为LinkedHashMap在插入元素以后,都会维护他的一个双向链表
  60. afterNodeInsertion(evict);
  61. return null;
  62. }

四、get获取元素

使用HashMap有一个明显的优点,就是他的存取时间开销基本维持在O(1),除非在数据量大了以后hash冲突的元素多了以后,对其性能有一定的影响。那么现在介绍的get方法很好的体现了这个优势。

  1. public V get(Object key) {
  2. Node<K,V> e;
  3. return (e = getNode(hash(key), key)) == null ? null : e.value;
  4. }
  5. // 同一个key的hash值是相同的,通过hash就可以求出数组的下标,便可以在O(1)的时间内获取元素。
  6. final Node<K,V> getNode(int hash, Object key) {
  7. Node<K,V>[] tab; Node<K,V> first, e; int n; K k;
  8. // 在容器不为空,并且对应位置也存在元素的情况下,那么就要遍历链表,找到相同key值的元素。
  9. if ((tab = table) != null && (n = tab.length) > 0 &&
  10. (first = tab[(n - 1) & hash]) != null) {
  11. // 如果第一个元素的key值相同,那么这个元素就是我们要找的。
  12. if (first.hash == hash &&
  13. ((k = first.key) == key || (key != null && key.equals(k))))
  14. return first;
  15. // 如果第一个元素不是我们要找的,接下来就遍历链表元素,如果遍历完了以后都没找到,说明不存在这个key值
  16. if ((e = first.next) != null) {
  17. if (first instanceof TreeNode)
  18. return ((TreeNode<K,V>)first).getTreeNode(hash, key);
  19. do {
  20. if (e.hash == hash &&
  21. ((k = e.key) == key || (key != null && key.equals(k))))
  22. return e;
  23. } while ((e = e.next) != null);
  24. }
  25. }
  26. return null;
  27. }

五、remove删除元素

删除元素的实现原理和put,get都类似。remove通过给定的key值,找到在hash表中对应的位置,然后找出相同key值的元素,对其删除。

  1. public V remove(Object key) {
  2. Node<K,V> e;
  3. return (e = removeNode(hash(key), key, null, false, true)) == null ?
  4. null : e.value;
  5. }
  6. // 通过key的hash值定位元素位置,并对其删除。这里的实现和put基本相同,我只在不同的地方做一下解释。
  7. final Node<K,V> removeNode(int hash, Object key, Object value,
  8. boolean matchValue, boolean movable) {
  9. Node<K,V>[] tab; Node<K,V> p; int n, index;
  10. if ((tab = table) != null && (n = tab.length) > 0 &&
  11. (p = tab[index = (n - 1) & hash]) != null) {
  12. Node<K,V> node = null, e; K k; V v;
  13. if (p.hash == hash &&
  14. ((k = p.key) == key || (key != null && key.equals(k))))
  15. node = p;
  16. else if ((e = p.next) != null) {
  17. if (p instanceof TreeNode)
  18. node = ((TreeNode<K,V>)p).getTreeNode(hash, key);
  19. else {
  20. do {
  21. if (e.hash == hash &&
  22. ((k = e.key) == key ||
  23. (key != null && key.equals(k)))) {
  24. node = e;
  25. break;
  26. }
  27. p = e;
  28. } while ((e = e.next) != null);
  29. }
  30. }
  31. // 如果找到了相同的key,接下来就要判断matchValue参数,matchValue如果是true的话,就说明
  32. // 需要检查被删除的value是否相同,只有相同的情况下才能删除元素。如果matchValue是false的话
  33. // 就不需要判断value是否相同。
  34. if (node != null && (!matchValue || (v = node.value) == value ||
  35. (value != null && value.equals(v)))) {
  36. if (node instanceof TreeNode)
  37. ((TreeNode<K,V>)node).removeTreeNode(this, tab, movable);
  38. else if (node == p)
  39. tab[index] = node.next;
  40. else
  41. p.next = node.next;
  42. ++modCount;
  43. --size;
  44. afterNodeRemoval(node);
  45. return node;
  46. }
  47. }
  48. return null;
  49. }

六、resize动态扩容

resize这个方法非常重要,他在添加元素的时候就会被调用到。resize的目的是在容器的容量达到上限的时候,对其扩容,使得元素可以继续被添加进来。这里需要关注两个参数threshold和loadFactor,threshold表示容量的上限,当容器中元素数量大于threshold的时候,就要扩容,并且每次扩容都是原来的两倍。loadFactor表示hash表的数组大小。这两个参数的配合使用可以有效的控制hash冲突数量。

  1. final Node<K,V>[] resize() {
  2. Node<K,V>[] oldTab = table;
  3. int oldCap = (oldTab == null) ? 0 : oldTab.length;
  4. int oldThr = threshold;
  5. int newCap, newThr = 0;
  6. // 如果容器并不是第一次扩容的话,那么oldCap必定会大于0
  7. if (oldCap > 0) {
  8. if (oldCap >= MAXIMUM_CAPACITY) {
  9. threshold = Integer.MAX_VALUE;
  10. return oldTab;
  11. }
  12. // threshold和数组大小cap共同扩大为原来的两倍
  13. else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
  14. oldCap >= DEFAULT_INITIAL_CAPACITY)
  15. newThr = oldThr << 1;
  16. }
  17. // 第一次扩容,并且设定了threshold值。
  18. else if (oldThr > 0)
  19. newCap = oldThr;
  20. else {
  21. // 如果在创建的时候并没有设置threshold值,那就用默认值
  22. newCap = DEFAULT_INITIAL_CAPACITY;
  23. newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
  24. }
  25. if (newThr == 0) {
  26. // 第一次扩容的时候threshold = cap * loadFactor
  27. float ft = (float)newCap * loadFactor;
  28. newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
  29. (int)ft : Integer.MAX_VALUE);
  30. }
  31. threshold = newThr;
  32. // 创建数组
  33. @SuppressWarnings({"rawtypes","unchecked"})
  34. Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
  35. table = newTab;
  36. // 如果不是第一次扩容,那么hash表中必然存在数据,需要将这些数据重新hash
  37. if (oldTab != null) {
  38. // 遍历所有元素
  39. for (int j = 0; j < oldCap; ++j) {
  40. Node<K,V> e;
  41. if ((e = oldTab[j]) != null) {
  42. oldTab[j] = null;
  43. if (e.next == null)
  44. // 重新计算在数组中的位置。
  45. newTab[e.hash & (newCap - 1)] = e;
  46. else if (e instanceof TreeNode)
  47. ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
  48. else { // preserve order
  49. // 这里分两串,lo表示原先位置的所有,hi表示新的索引
  50. Node<K,V> loHead = null, loTail = null;
  51. Node<K,V> hiHead = null, hiTail = null;
  52. Node<K,V> next;
  53. do {
  54. next = e.next;
  55. // 因为cap都是2的幂次,假设oldCap == 10000,
  56. // 假设e.hash= 01010 那么 e.hash & oldCap == 0。
  57. // 老位置= e.hash & oldCap-1 = 01010 & 01111 = 01010
  58. // newCap此时为100000,newCap-1=011111。
  59. // 此时e.hash & newCap 任然等于01010,位置不变。
  60. // 如果e.hash 假设为11010,那么 e.hash & oldCap != 0
  61. // 原来的位置为 e.hash & oldCap-1 = 01010
  62. // 新位置 e.hash & newCap-1 = 11010 & 011111 = 11010
  63. // 此时 新位置 != 老位置 新位置=老位置+oldCap
  64. // 因此这里分类两个索引的链表
  65. if ((e.hash & oldCap) == 0) {
  66. if (loTail == null)
  67. loHead = e;
  68. else
  69. loTail.next = e;
  70. loTail = e;
  71. }
  72. else {
  73. if (hiTail == null)
  74. hiHead = e;
  75. else
  76. hiTail.next = e;
  77. hiTail = e;
  78. }
  79. } while ((e = next) != null);
  80. if (loTail != null) {
  81. loTail.next = null;
  82. newTab[j] = loHead;
  83. }
  84. if (hiTail != null) {
  85. hiTail.next = null;
  86. newTab[j + oldCap] = hiHead;
  87. }
  88. }
  89. }
  90. }
  91. }
  92. return newTab;
  93. }

七、遍历

HashMap遍历有三种方式,一种是对key遍历,还有一种是对entry遍历和对value遍历。这三种遍历方式都是基于对HashIterator的封装,三种实现方式大同小异,因此我着重介绍EntryIterator的实现。

  1. // 对HashMap元素进行遍历。
  2. public Set<Map.Entry<K,V>> entrySet() {
  3. Set<Map.Entry<K,V>> es;
  4. // 第一次遍历的时候,实例化entrySet。
  5. return (es = entrySet) == null ? (entrySet = new EntrySet()) : es;
  6. }
  7. final class EntrySet extends AbstractSet<Map.Entry<K,V>> {
  8. public final int size() { return size; }
  9. public final void clear() { HashMap.this.clear(); }
  10. public final Iterator<Map.Entry<K,V>> iterator() {
  11. return new EntryIterator();
  12. }
  13. public final boolean contains(Object o) {
  14. if (!(o instanceof Map.Entry))
  15. return false;
  16. Map.Entry<?,?> e = (Map.Entry<?,?>) o;
  17. Object key = e.getKey();
  18. Node<K,V> candidate = getNode(hash(key), key);
  19. return candidate != null && candidate.equals(e);
  20. }
  21. public final boolean remove(Object o) {
  22. if (o instanceof Map.Entry) {
  23. Map.Entry<?,?> e = (Map.Entry<?,?>) o;
  24. Object key = e.getKey();
  25. Object value = e.getValue();
  26. return removeNode(hash(key), key, value, true, true) != null;
  27. }
  28. return false;
  29. }
  30. public final Spliterator<Map.Entry<K,V>> spliterator() {
  31. return new EntrySpliterator<>(HashMap.this, 0, -1, 0, 0);
  32. }
  33. public final void forEach(Consumer<? super Map.Entry<K,V>> action) {
  34. Node<K,V>[] tab;
  35. if (action == null)
  36. throw new NullPointerException();
  37. if (size > 0 && (tab = table) != null) {
  38. int mc = modCount;
  39. for (int i = 0; i < tab.length; ++i) {
  40. for (Node<K,V> e = tab[i]; e != null; e = e.next)
  41. action.accept(e);
  42. }
  43. if (modCount != mc)
  44. throw new ConcurrentModificationException();
  45. }
  46. }
  47. }
  48. final class EntryIterator extends HashIterator
  49. implements Iterator<Map.Entry<K,V>> {
  50. public final Map.Entry<K,V> next() { return nextNode(); }
  51. }
  52. // HashMap自己实现的遍历方法。上面的所有方法都是围绕这个类展开的。下面具体讲解这个类的实现原理。
  53. abstract class HashIterator {
  54. Node<K,V> next; // 指向下一个元素
  55. Node<K,V> current; // 指向当前元素
  56. int expectedModCount;
  57. int index; // 当前元素位置
  58. HashIterator() {
  59. expectedModCount = modCount;
  60. Node<K,V>[] t = table;
  61. current = next = null;
  62. index = 0;
  63. if (t != null && size > 0) { // 找到table中的第一个元素
  64. do {} while (index < t.length && (next = t[index++]) == null);
  65. }
  66. }
  67. public final boolean hasNext() {
  68. return next != null;
  69. }
  70. final Node<K,V> nextNode() {
  71. Node<K,V>[] t;
  72. Node<K,V> e = next;
  73. if (modCount != expectedModCount)
  74. throw new ConcurrentModificationException();
  75. if (e == null)
  76. throw new NoSuchElementException();
  77. // 判断当前元素是否为链表中的最后一个元素,如果在链表尾部,那么就需要重新遍历table,
  78. // 顺序找到下元素的位置。
  79. if ((next = (current = e).next) == null && (t = table) != null) {
  80. do {} while (index < t.length && (next = t[index++]) == null);
  81. }
  82. return e;
  83. }
  84. // 删除当前遍历的元素。
  85. public final void remove() {
  86. Node<K,V> p = current;
  87. if (p == null)
  88. throw new IllegalStateException();
  89. if (modCount != expectedModCount)
  90. throw new ConcurrentModificationException();
  91. current = null;
  92. K key = p.key;
  93. removeNode(hash(key), key, null, false, false);
  94. expectedModCount = modCount;
  95. }
  96. }

总结一下这个遍历的过程是 EntrySet -> EntryIterator -> HashIterator。同理对key的遍历过程就是 KeySet -> KeyIterator -> HashIterator。可以看出来不管是哪种遍历,最终都是调用了HashIterator。