Java集合(七)--基于jdk1.8的HashMap源码


一、背景:

HashMap在开发中经常用,面试源码方面也会经常问到,今天总结一下,包括在后面有相关面试题。

本文不会对红黑树代码由太多深入研究,特别是删除方面太复杂,面试也不会问到,知道红黑树基本实现原理就可以了。

源码基于jdk1.8,我们都知道1.8版本的HashMap有很大改变,通过数组+链表+红黑树实现。

二、图例:

关于链表和红黑树相关内容,可以参考:

三、源码:

1、基本结构:

public class HashMap extends AbstractMap
    implements Map, Cloneable, Serializable {

    private static final long serialVersionUID = 362498820763181265L;
}

继承了AbstractMap,实现Cloneable和Serializable接口,可以实现clone、序列化以及反序列化。

2、成员变量:

static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // 默认初始容量16,容量一定是2的次幂

static final int MAXIMUM_CAPACITY = 1 << 30;	// 最大容量

static final float DEFAULT_LOAD_FACTOR = 0.75f;	// 默认加载因子

static final int TREEIFY_THRESHOLD = 8;	// 树形化阈值,也就是当链表的节点个数大于等于这个值时,会将链表转化为红黑树

static final int UNTREEIFY_THRESHOLD = 6;	// 解除树形化阈值,也就是当链表的节点个数小于等于这个值时,会将红黑树转换成普通的链表

// 树形化的另一条件Map数组的长度阈值64。当数组的长度小于这个值时,就算树形化阈达标,链表也不会转化为红黑树,而是优先扩容数组resize()
static final int MIN_TREEIFY_CAPACITY = 64;

transient Node[] table;	// 保存元素的内部数组

transient Set> entrySet;	// 保存Entry的set

transient int size;	// 当前存储的键值对的数量

transient int modCount;	// 集合被修改的次数,用于迭代器的快速失败

int threshold;	// 阈值=Capacity*loadFactor

final float loadFactor;	// 加载因子

3、构造方法:

public HashMap() {
	this.loadFactor = DEFAULT_LOAD_FACTOR;
}
public HashMap(int initialCapacity) {
	this(initialCapacity, DEFAULT_LOAD_FACTOR);
}
public HashMap(int initialCapacity, float loadFactor) {
	if (initialCapacity < 0)	// 初始容量<0,抛出异常
		throw new IllegalArgumentException("Illegal initial capacity: " +
										   initialCapacity);
	if (initialCapacity > MAXIMUM_CAPACITY)	// 初始容量 > MAXIMUM_CAPACITY,赋值为MAXIMUM_CAPACITY
		initialCapacity = MAXIMUM_CAPACITY;
	if (loadFactor <= 0 || Float.isNaN(loadFactor))	// 初始容量<0,或者不是数字,抛出异常
		throw new IllegalArgumentException("Illegal load factor: " + loadFactor);
	this.loadFactor = loadFactor;
	this.threshold = tableSizeFor(initialCapacity);	// 初始容量,返回的是initialCapacity的最小二次幂
}

5、tableSizeFor():

static final int tableSizeFor(int cap) {
	int n = cap - 1;
	n |= n >>> 1;
	n |= n >>> 2;
	n |= n >>> 4;
	n |= n >>> 8;
	n |= n >>> 16;
	return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
}

.>>>无符号右移,高位补0,最终返回最小二次幂,例如:cap=13,返回16,cap=17,返回32,因为容量要求为2的次幂。

6、Node:

static class Node implements Map.Entry {
	final int hash;	//key的hash值
	final K key;
	V value;
	Node next;	//next node	

	Node(int hash, K key, V value, Node next) {
		this.hash = hash;
		this.key = key;
		this.value = value;
		this.next = next;
	}

	public final K getKey()        { return key; }
	public final V getValue()      { return value; }
	public final String toString() { return key + "=" + value; }

	public final int hashCode() {
		return Objects.hashCode(key) ^ Objects.hashCode(value);
	}

	public final V setValue(V newValue) {
		V oldValue = value;
		value = newValue;
		return oldValue;
	}

	public final boolean equals(Object o) {
		if (o == this)
			return true;
		if (o instanceof Map.Entry) {
			Map.Entry<?,?> e = (Map.Entry<?,?>)o;
			if (Objects.equals(key, e.getKey()) &&
				Objects.equals(value, e.getValue()))
				return true;
		}
		return false;
	}
}

Node为HashMap的内部类,就是单向链表,比较简单。

TreeNode为红黑树的实现,看看就行,容易看的脑阔疼。

7、put():

public V put(K key, V value) {
	return putVal(hash(key), key, value, false, true);	// 调用putVal()
}

// onlyIfAbsent为false,可以update oldValue,为true,不会update
// evict为false,处于创建模式,HashMap中不起作用,在LinkedHashMap有作用
final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
			   boolean evict) {
	Node[] tab; Node p; int n, i;
	if ((tab = table) == null || (n = tab.length) == 0)	// 如果当前数组为null,或者数组的length为0,进行扩容(有初始化的作用)
		n = (tab = resize()).length;
	if ((p = tab[i = (n - 1) & hash]) == null)	// (n-1)&hash就是寻址,找到key对应的下标,对应位置如果没有数据,直接生成一个新的节点
		tab[i] = newNode(hash, key, value, null);
	else {	// 否则对应下标有值
		Node e; K k;
		if (p.hash == hash &&
			((k = p.key) == key || (key != null && key.equals(k))))	// key对应位置的首节点和key相同,直接覆盖value
			e = p;
		else if (p instanceof TreeNode)	// 如果首节点是红黑树
			e = ((TreeNode)p).putTreeVal(this, tab, hash, key, value);
		else {	// 首节点为链表
			for (int binCount = 0; ; ++binCount) {
				if ((e = p.next) == null) {	// 新生成一个节点,添加到链表尾部
					p.next = newNode(hash, key, value, null);
					if (binCount >= TREEIFY_THRESHOLD - 1) //如果>=8-1,尝试进行树形化
						treeifyBin(tab, hash);
					break;
				}
				if (e.hash == hash &&
					((k = e.key) == key || (key != null && key.equals(k))))
					break;
				p = e;	//
			}
		}
		if (e != null) { // 覆盖oldValue
			V oldValue = e.value;
			if (!onlyIfAbsent || oldValue == null)
				e.value = value;
			afterNodeAccess(e);
			return oldValue;
		}
	}
	++modCount;	// 修改次数+1
	if (++size > threshold)	// 如果元素个数大于阈值,进行扩容
		resize();
	afterNodeInsertion(evict);
	return null;
}

添加/修改流程:

1、判断数据是否为空,如果为null,通过resize()进行初始化

2、如果key对应位置为null,直接生成节点,假如数组对应位置

3、否则就是可以对应位置有值

  3.1).变量p为key对应位置节点,如果直接和key相等,也就是这个node只是一个节点,不是链表或者红黑树,直接通过变量e保存p

  3.2).如果p instanceof 为红黑树,添加到红黑树

  3.3).如果p为链表,循环链表是否有对应key,true先保存下来,false,key对应节点添加到尾部,并判断链表长度是否 > TREEIFY_THRESHOLD - 1 = 7,true,尝试进行树形化

final void treeifyBin(Node[] tab, int hash) {
	int n, index; Node e;
	if (tab == null || (n = tab.length) < MIN_TREEIFY_CAPACITY)	//判断数组长度与MIN_TREEIFY_CAPACITY,不大于64的情况下,进行扩容,而不是树形化
		resize();
	else if ((e = tab[index = (n - 1) & hash]) != null) {	//树形化的具体步骤
		TreeNode hd = null, tl = null;
		//省略后面代码
	}
}

4、覆盖oldValue

5、判断是否扩容

resize():
final Node[] resize() {
	Node[] oldTab = table;
	int oldCap = (oldTab == null) ? 0 : oldTab.length;
	int oldThr = threshold;
	int newCap, newThr = 0;
	if (oldCap > 0) {	
		if (oldCap >= MAXIMUM_CAPACITY) {// oldCapacity > MAXIMUM_CAPACITY,赋值Integer.MAX_VALUE,直接返回
			threshold = Integer.MAX_VALUE;
			return oldTab;
		}
		else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
				 oldCap >= DEFAULT_INITIAL_CAPACITY)	// 否则扩容为oldThreshold的2倍
			newThr = oldThr << 1; // double threshold
	}
	else if (oldThr > 0) // oldCap = 0,oldThr > 0,将oldThr赋值给newCap
		newCap = oldThr;
	else {               // oldCap = 0,oldThr = 0,进行初始化
		newCap = DEFAULT_INITIAL_CAPACITY;
		newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
	}
	if (newThr == 0) {
		float ft = (float)newCap * loadFactor;
		newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
				  (int)ft : Integer.MAX_VALUE);
	}
	threshold = newThr;	// 新的阈值
	@SuppressWarnings({"rawtypes","unchecked"})
		Node[] newTab = (Node[])new Node[newCap];	// 生成一个新的数组
	table = newTab;
	if (oldTab != null) {
		for (int j = 0; j < oldCap; ++j) {
			Node e;
			if ((e = oldTab[j]) != null) {	// 如果对应下标有值
				oldTab[j] = null;	// oldTab对应下标设置为null,便于GC
				if (e.next == null)	// 如果对应下标位置只是数组,赋值到新数组
					newTab[e.hash & (newCap - 1)] = e;
				else if (e instanceof TreeNode)	// 如果对应下标位置为红黑树
					((TreeNode)e).split(this, newTab, j, oldCap);
				else { //如果对应下标位置为链表
					Node loHead = null, loTail = null;	// 需要存放到原来的位置
					Node hiHead = null, hiTail = null;	// 需要存放到原来的位置 + oldCap
					Node next;
					do {
						next = e.next;
						if ((e.hash & oldCap) == 0) {	// hash对应oldCap的bit为0
							if (loTail == null)
								loHead = e;
							else
								loTail.next = e;
							loTail = e;
						}
						else {	//hash对应oldCap的bit为1
							if (hiTail == null)
								hiHead = e;
							else
								hiTail.next = e;
							hiTail = e;
						}
					} while ((e = next) != null);
					if (loTail != null) {	// hash对应oldCap的bit为0的key放到原位
						loTail.next = null;
						newTab[j] = loHead;
					}
					if (hiTail != null) {	// hash对应oldCap的bit为1的key放到原位 + oldCap
						hiTail.next = null;
						newTab[j + oldCap] = hiHead;
					}
				}
			}
		}
	}
	return newTab;
}

resize()在jdk1.8和之前版本的区别:

举例:oldCapacity=8,之前hash等于3,11,19,27的key,index都是3

jdk1.7:需要重新对地址重新寻址,扩容之后Capacity=16,index分别为3,11,3,11,但是有一点是会把之前index的数据先添加到链表的尾部,再把链表添加到对应数组位置,所以会导致同一位置的数据发生倒置,代码如下

int i = indexFor(e.hash, newCapacity);
e.next = newTable[i];
newTable[i] = e;
e = next;

jdk1.8:不需要进行重新hash,上述四个key,通过hash&oldCapacity分别得到:0,8,0,8,结果为0的,保存到原index,其他保存在原index + oldCapacity,而且hash冲突的数据扩容之后不会倒置。

总结:是否rehash、hash冲突的数据顺序是两个版本的主要区别。

PS:原数组如果存在null,扩容之后null仍然存在。

8、remove():

public V remove(Object key) {
	Node e;
	return (e = removeNode(hash(key), key, null, false, true)) == null ?
		null : e.value;
}
final Node removeNode(int hash, Object key, Object value,
						   boolean matchValue, boolean movable) {
	Node[] tab; Node p; int n, index;
	if ((tab = table) != null && (n = tab.length) > 0 &&
		(p = tab[index = (n - 1) & hash]) != null) {	//hash对应位置的数据不为null
		Node node = null, e; K k; V v;
		if (p.hash == hash &&
			((k = p.key) == key || (key != null && key.equals(k))))	//如果对应下标位置只是数组
			node = p;
		else if ((e = p.next) != null) {
			if (p instanceof TreeNode)	//如果对应下标位置为红黑树
				node = ((TreeNode)p).getTreeNode(hash, key);
			else {	//如果对应下标位置为链表
				do {
					if (e.hash == hash &&
						((k = e.key) == key ||
						 (key != null && key.equals(k)))) {
						node = e;
						break;
					}
					p = e;
				} while ((e = e.next) != null);
			}
		}
		if (node != null && (!matchValue || (v = node.value) == value ||
							 (value != null && value.equals(v)))) {				//对应这三种情况,分别删除
			if (node instanceof TreeNode)
				((TreeNode)node).removeTreeNode(this, tab, movable);
			else if (node == p)
				tab[index] = node.next;
			else
				p.next = node.next;
			++modCount;
			--size;
			afterNodeRemoval(node);
			return node;
		}
	}
	return null;
}

9、get():

public V get(Object key) {
	Node e;
	return (e = getNode(hash(key), key)) == null ? null : e.value;
}
final Node getNode(int hash, Object key) {
	Node[] tab; Node first, e; int n; K k;
	if ((tab = table) != null && (n = tab.length) > 0 &&
		(first = tab[(n - 1) & hash]) != null) {
		if (first.hash == hash && // always check first node
			((k = first.key) == key || (key != null && key.equals(k))))
			return first;
		if ((e = first.next) != null) {
			if (first instanceof TreeNode)
				return ((TreeNode)first).getTreeNode(hash, key);
			do {
				if (e.hash == hash &&
					((k = e.key) == key || (key != null && key.equals(k))))
					return e;
			} while ((e = e.next) != null);
		}
	}
	return null;
}

也没啥好说的,也是三种情况下(数组、红黑树、链表)的搜索。

10、遍历:

public static void main(String[] args) throws IOException {
	HashMap map = new HashMap(4);
	map.put(1, "a");
	map.put(2, "b");
	map.put(3, "c");
	map.put(4, "d");
	map.keySet().forEach((key) -> {
		System.out.println(key + " " + map.get(key));
	});
	map.values().forEach((value) -> {
		System.out.println(value);
	});
	Set> entry = map.entrySet();
	entry.forEach((entry1) -> {
		System.out.println(entry1.getKey() + " " + entry1.getValue());
	});
	Iterator> iterator = map.entrySet().iterator();
	while(iterator.hasNext()){
		Map.Entry mapEntry = iterator.next();
		System.out.println(mapEntry.getKey() + " " + mapEntry.getValue());
	}
}

如果只是获取key/value,可以使用keySet()和values()。

否则建议使用后两种。

四、面试题:

1、为什么HashMap的Capacity要保持2的次幂?

1).因为HashMap寻址通过(length - 1) & hash,如果length不是2的次幂,例如10,通过前面的表达式,很多位置永远不可能被使用,例如0001,0100等。

也就不能通过(length - 1) & hash来实现取模,位运算的效率是远远高于取余%运算的。包括resize()操作等,这些实现都需要修改。

2).如果不是这样计算下标位置的方法不能通过(length - 1) & hash实现,因为[]table有些位置永远不可能被占用,从而造成浪费。所以HashMap通过tableSizeFor()来保证Capacity一定是2的次幂。

2、jdk1.8和之前版本对于HashMap实现的区别?

1、取消了成员变量Capacity,保存到threshold。

2、链表和红黑树的转化,有两个条件,链表到红黑树的查询效率:从O(N)变成O(logn)。

3、扩容resize()实现不同。

4、hash()实现不同。

3、HashMap的Node[]序列化

和其他集合的实现相同,都是通过重写writeObject()和readObject()实现自定义序列化,把Node[]通过transient修饰。

4、HashMap的table为什么是transient的

因为HashMap是基于HashCode的,HashCode作为Object的方法,是native的。

这意味着HashCode和底层实现相关,不同的虚拟机可能有不同的HashCode算法。再进一步说得明白些就是,可能同一个Key在虚拟机A上的HashCode=1,在虚拟机B上的HashCode=2,在虚拟机C上的HashCode=3。

所以自己通过writeObject()达到序列化的目的。

5、hashmap和hashtable区别:

1、HashMap的初始容量为16,扩容为2倍,Hashtable初始容量为11,扩容为2倍+1,两者的填充因子默认都是0.75。

2、HashMap和Hashtable的底层实现都是数组+链表结构实现。

3、两者计算hash的方法不同。

4、hashtable的key和value都不能为null,而hashmap都可以。

5、hashtable线程安全,hashmap线程不安全。

6、HashMap的key和value能为null吗?

key和value都可以为null,但是只能保存一个。key为null的元素保存在数组的下标0位置。

发生扩容null照样存在。

HashMap map = new HashMap(4);
map.put(null, null);
map.put(null, null);
map.put(2, "b");
map.put(3, "c");
map.put(4, "d");
map.put(5, "d");
Set> entry = map.entrySet();
entry.forEach((entry1) -> {
	System.out.println(entry1.getKey() + " " + entry1.getValue());
});
输出结果:
null null
2 b
3 c
4 d
5 d

内容参考:一文搞定HashMap的实现原理和面试 - 掘金