HashMap怎麼hash?又如何map?
HashMap 是 Java 中 Map 的一個實現類,它是一個雙列結構(資料+連結串列),這樣的結構使得它的查詢和插入效率都很高。HashMap 允許 null 鍵和值,它的鍵唯一,元素的儲存無序,並且它是執行緒不安全的。
由於 HashMap 的這些特性,它在 Java 中被廣泛地使用,下面我們就基於 Java 8 分析一下 HashMap 的原始碼。
雙列結構:陣列+連結串列
首先 HashMap 是一個雙列結構,它是一個散列表,儲存方式是鍵值對。 它繼承了 AbstractMap,實現了 Map<K,V> Cloneable Serializable 介面。
HashMap 的雙列結構是陣列 Node[]+連結串列,我們知道陣列的查詢很快,但是修改很慢,因為陣列定長,所以新增或者減少元素都會導致陣列擴容。而連結串列結構恰恰相反,它的查詢慢,因為沒有索引,需要遍歷連結串列查詢。但是它的修改很快,不需要擴容,只需要在首或者尾部新增即可。HashMap 正是應用了這兩種資料結構,以此來保證它的查詢和修改都有很高的效率。
HashMap 在呼叫 put() 方法儲存元素的時候,會根據 key 的 hash 值來計算它的索引,這個索引有什麼用呢?HashMap 使用這個索引來將這個鍵值對儲存到對應的陣列位置,比如如果計算出來的索引是 n,則它將儲存在 Node[n] 這個位置。
HashMap 在計算索引的時候儘量保證它的離散,但還是會有不同的 key 計算出來的索引是一樣的,那麼第二次 put 的時候,key 就會產生衝突。HashMap 用連結串列的結構解決這個問題,當 HashMap 發現當前的索引下已經有不為 null 的 Node 存在時,會在這個 Node 後面新增新元素,同一索引下的元素就組成了連結串列結構,Node 和 Node 之間如何聯絡可以看下面 Node 類的原始碼分析。
先了解一下 HashMap 裡陣列的幾個引數:
DEFAULT_INITIAL_CAPACITY,預設初始長度,16:
static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // aka 16
MAXIMUM_CAPACITY,最大長度,2^30:
static final int MAXIMUM_CAPACITY = 1 << 30;
DEFAULT_LOAD_FACTOR,預設載入因子,0.75:
static final float DEFAULT_LOAD_FACTOR = 0.75f; final float loadFactor;
threshold,閾值,擴容的臨界值(capacity * load factor)
int threshold;
再看看 HashMap 建構函式
// 初始長度 載入因子 public HashMap(int initialCapacity, float loadFactor) public HashMap(int initialCapacity) // 無參構造 public HashMap() // 初始化一個Map public HashMap(Map<? extends K, ? extends V> m)
下邊是非常重要的一個內部類 Node ,它實現了 Map.Entry,Node 是 HashMap 中的基本元素,每個鍵值對都儲存在一個 Node 物件裡, Node 類有四個成員變數:hash key 的雜湊值、鍵值對 key 與 value,以及 next 指標。next 也是 Node 型別,這個 Node 指向的是連結串列下一個鍵值對,這也就是前文提到的 hash 衝突時 HashMap 的處理辦法。
Node 類內部實現了 Map.Entry 介面中的 getKey()、getValue() 等方法,所以在遍歷 Map 的時候我們可以用 Map.entrySet() 。
static class Node<K,V> implements Map.Entry<K,V> { final int hash; // 雜湊值 final K key; V value; // 連結串列結構, 這裡的next將指向連結串列的下一個Node鍵值對 Node<K,V> next; Node(int hash, K key, V value, Node<K,V> next) { ... } public final K getKey(){ return key; } public final V getValue(){ return value; } }
HashMap put() 流程
put() 方法
put() 主要是將 key 和 value 儲存到 Node 陣列中,HashMap 根據 key 的 hash 值來確定它的索引,原始碼裡 put 方法將呼叫內部的 putVal() 方法。
public V put(K key, V value) { return putVal(hash(key), key, value, false, true); }
HashMap 在 put 鍵值對的時候會呼叫 hash() 方法計算 key 的 hash 值,hash() 方法會呼叫 Object 的 native 方法 hashCode() 並且將計算之後的 hash 值高低位做異或運算,以增加 hash 的複雜度。(Java 裡一個 int 型別佔 4 個位元組,一個位元組是 8 bit,所以下面原始碼中的 h 與 h 右移 16 位就相當於高低位異或)
static final int hash(Object key) { int h; return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16); } //key.hashCode() 是Object類的native方法, 實現是將內部地址轉換成一個integer, 但是並不是由Java實現的 public native int hashCode();
putVal() 方法
這部分是主要 put 的邏輯
- 計算容量:根據 map 的 size 計算陣列容量大小,如果元素數量也就是 size 大於陣列容量 ×0.75,則對陣列進行擴容,擴容到原來的 2 倍。
- 查詢資料索引:根據 key 的 hash 值和陣列長度找到 Node 陣列索引。
- 儲存:這裡有以下幾種情況(假設計算出的 hash 為 i,陣列為 tab,變數以程式碼為例)
- 當前索引為 null,直接 new 一個 Node 並存到數組裡,tab[i]=newNode(hash, key, value, null)
- 陣列不為空,這時兩個元素的 hash 是一樣的,再呼叫 equals 方法判斷 key 是否一致,相同,則覆蓋當前的 value,否則繼續向下判斷
- 上面兩個條件都不滿足,說明 hash 發生衝突,Java 8 裡實現了紅黑樹,紅黑樹在進行插入和刪除操作時通過特定演算法保持二叉查詢樹的平衡,從而可以獲得較高的查詢效能。本篇也是基於 Java 8 的原始碼進行分析,在這裡 HashMap 會判斷當前陣列上的元素 tab[i] 是否是紅黑樹,如果是,呼叫紅黑樹的 putTreeVal 的 put 方法,它會將新元素以紅黑樹的資料結構儲存到陣列中。
如果以上條件都不成立,表明 tab[i] 上有其它 key 元素存在,並且沒有轉成紅黑樹結構,這時只需呼叫 tab[i].next 來遍歷此連結串列,找到連結串列的尾然後將元素存到當前連結串列的尾部。
transient Node<K,V>[] table; final V putVal(int hash, K key, V value, boolean onlyIfAbsent, boolean evict) { Node<K,V>[] tab; Node<K,V> p; int n, i; // 根據當前的map size計算容量大小capacity, 主要實現是在resize()中計算capacity,需要擴容的時候, 長度左移一位(二倍) if ((tab = table) == null || (n = tab.length) == 0) n = (tab = resize()).length; // 這裡就是經常說的桶結構了, 看過HashMap介紹的都知道它的內部有不同的桶, 這個桶實際上就是一個連結串列結構 // 在這個地方, HashMap先判斷key所屬的桶是否存在。 (n - 1) & hash 相當於計算桶的序號, 根據桶序號來找到對應的桶 // 這裡的table 是HashMap的陣列, 陣列為空就新建一個數組 newNode(hash, key, value, null) if ((p = tab[i = (n - 1) & hash]) == null) tab[i] = newNode(hash, key, value, null); else { //陣列不為空, 先判斷key是否存在, 存在 就覆蓋value Node<K,V> e; K k; if (p.hash == hash && ((k = p.key) == key || (key != null && key.equals(k)))) e = p; // 如果此連結串列是紅黑樹結構(TreeNode) else if (p instanceof TreeNode) e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value); else { // 迴圈當前連結串列, 找出p.next為空的位置就是連結串列的末端, 新增上 for (int binCount = 0; ; ++binCount) { if ((e = p.next) == null) { p.next = newNode(hash, key, value, null); // 這裡會判斷這個連結串列是否需要轉換為紅黑樹連結串列 if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st treeifyBin(tab, hash); break; } if (e.hash == hash && ((k = e.key) == key || (key != null && key.equals(k)))) break; p = e; } } if (e != null) { // existing mapping for key V oldValue = e.value; if (!onlyIfAbsent || oldValue == null) e.value = value; afterNodeAccess(e); return oldValue; } } ++modCount; if (++size > threshold) // put之後,如果元素個數大於當前的陣列容量了,進行陣列擴容 resize(); afterNodeInsertion(evict); return null; }
HashMap 的 get()
get() 方法會呼叫 getNode() 方法,這是 get() 的核心,getNode() 方法的兩個引數分別是 hash 值和 key。
public V get(Object key) { Node<K,V> e; return (e = getNode(hash(key), key)) == null ? null : e.value; }
這裡重點來看 getNode() 方法,前面講到過,HashMap 是通過 key 生成的 hash 值來儲存到陣列的對應索引上,HashMap 在 get 的時候也是用這種方式來查詢元素的。
- 根據 hash 值和陣列長度找到 key 對應的陣列索引。
- 拿到當前的陣列元素,也就是這個連結串列的第一個元素 first,先用 hash 和 equals() 判斷是不是第一個元素,是的話直接返回,不是的話繼續下面的邏輯。
- 不是連結串列的第一個元素,判斷這個元素 first 是不是紅黑樹,如果是呼叫紅黑樹的 getTreeNode 方法來查詢。
- 如果不是紅黑樹結構,從 first 元素開始遍歷當前連結串列,直到找到要查詢的元素,如果沒有則返回 null。
final Node<K,V> getNode(int hash, Object key) { // tab: HashMap的陣列 Node<K,V>[] tab; Node<K,V> first, e; int n; K k; // 判斷陣列不為空, 桶不為空 if ((tab = table) != null && (n = tab.length) > 0 && (first = tab[(n - 1) & hash]) != null) { // 先查詢桶的第一個元素 if (first.hash == hash && // always check first node ((k = first.key) == key || (key != null && key.equals(k)))) return first; // 不是第一個元素 if ((e = first.next) != null) { // 如果是紅黑樹, 則用紅黑樹的方法查詢 if (first instanceof TreeNode) return ((TreeNode<K,V>)first).getTreeNode(hash, key); // 不是紅黑樹, 遍歷桶, 直到找到對應的key, 返回 do { // 1. 判斷hash值是否相等; 2. 判斷key相等。 防止hash碰撞發生 if (e.hash == hash && ((k = e.key) == key || (key != null && key.equals(k)))) return e; } while ((e = e.next) != null); } } return null; }
陣列擴容時再雜湊(re-hash)的理解
前面提到,當 HashMap 在 put 元素的時候,HashMap 會呼叫 resize() 方法來重新計算陣列容量,陣列擴容之後,陣列長度發生變化。我們知道 HashMap 是根據 key 的 hash 和陣列長度計算元素位置的,那當陣列長度發生變化時,如果不重新計算元素的位置,當我們 get 元素的時候就找不到正確的元素了,所以 HashMap 在擴容的同時也重新對陣列元素進行了計算。
這時還有一個問題,re-hash 的時候同一個桶(bucket)上的連結串列會重新排列還是連結串列仍然在同一桶上。先考慮一下當它擴容的時候同一個桶上的元素再與新陣列長度做與運算 & 時,可能計算出來的陣列索引不同。假如陣列長度是 16,擴容後的陣列長度將是 32。
下邊用二進位制說明這個問題:
最終的結果是 0000 1111,和用 oldLen 計算的結果一樣,其實看上式可以發現真正能改變索引值的是 hash 第 5 位(從右向左)上的值,也就是 length 的最高非零位,所以,同一個連結串列上的元素在擴容後,它們的索引只有兩種可能,一種就是保持原位(最高非零位是 0),另一種就是 length+ 原索引 i (第五位是 1,結果就相等於 25+原索引 i,也就是 length+i)。
下邊所示的 HashMap 原始碼中就是用這個思路來 re-hash 一個桶上的連結串列,e.hash & oldCap == 0 判斷 hash 對應 length 的最高非 0 位是否是 1,是 1 則把元素存在原索引,否則將元素存在 length+原索引的位置。HashMap 定義了四個 Node 物件,lo 開頭的是低位的連結串列(原索引),hi 開頭的是高位的連結串列(length+原索引,所以相當於是新 length 的高位)。
Node<K,V> loHead = null, loTail = null;// 低位索引(原索引)上的元素 Node<K,V> hiHead = null, hiTail = null;// 高位索引(新索引)上的元素 Node<K,V> next; do { next = e.next; // 判斷是否需要放到新的索引上 if ((e.hash & oldCap) == 0) { // 最高非零位與操作結果是0,擴容後元素索引不發生變化 if (loTail == null) loHead = e; else loTail.next = e; loTail = e; } else { // 需要將元素放到新的索引上 if (hiTail == null) hiHead = e; else hiTail.next = e; hiTail = e; } } while ((e = next) != null); if (loTail != null) { loTail.next = null; // 這部分的連結串列索引沒有發生變化,將連結串列放到原索引上 newTab[j] = loHead; } if (hiTail != null) { hiTail.next = null; // 這部分的連結串列索引發生變化,將連結串列放到新索引上 newTab[j + oldCap] = hiHead; }
HashMap 與 HashTable
另外對比一下 HashMap 與 HashTable:
- HashMap 是 執行緒不安全 的,HashTable 執行緒安全,因為它在 get、put 方法上加了 synchronized 關鍵字。
- HashMap 和 HashTable 的 hash 值是不一樣的,所在的桶的計算方式也不一樣。HashMap 的桶是通過 & 運算子來實現 (tab.length - 1) & hash,而 HashTable 是通過取餘計算,速度更慢(hash & 0x7FFFFFFF) % tab.length (當 tab.length = 2^n 時,因為 HashMap 的陣列長度正好都是 2^n,所以兩者是等價的)
- HashTable 的 synchronized 是方法級別的,也就是它是在 put() 方法上加的,這也就是說任何一個 put 操作都會使用同一個鎖,而實際上不同索引上的元素之間彼此操作不會受到影響;ConcurrentHashMap 相當於是 HashTable 的升級,它也是執行緒安全的,而且只有在同一個桶上加鎖,也就是說只有在多個執行緒操作同一個陣列索引的時候才加鎖,極大提高了效率。
總結
- HashMap 底層是 陣列+連結串列 結構,陣列長度預設是 16,當元素的個數大於陣列長度×0.75 時,陣列會擴容。
- HashMap 是 散列表 ,它根據 key 的 hash 值來找到對應的陣列索引來儲存, 發生 hash 碰撞的時候(計算出來的 hash 值相等) HashMap 將採用拉鍊式來儲存元素,也就是我們所說的單向連結串列結構。
- 在 Java7 中,如果 hash 碰撞,導致拉鍊過長,查詢的效能會下降, 所以在 Java8 中新增 紅黑樹結構 ,當一個桶的長度超過 8 時,將其轉為紅黑樹連結串列,如果小於 6,又重新轉換為普通連結串列。
- re-hash 再雜湊問題:HashMap 擴容的時候會重新計算每一個元素的索引,重新計算之後的索引只有兩種可能,要麼等於原索引要麼等於原索引加上原陣列長度。
- 由上一條可知,每次擴容,整個 hash table 都需要重新計算索引,非常耗時,所以在日常使用中一定要注意這個問題。
參考文件
- ofollow,noindex" target="_blank">Why is the bucket size 16 by default in HashMap?
- 集合原始碼解析之 HashMap(基於 Java8)
- Java HashMap 工作原理
- HashMap 原始碼詳細分析(JDK1.8)
作者介紹
樊騰飛,有開源精神,樂於分享,希望通過寫部落格認識更多志同道合的人。個人部落格: rollsbean.com