hashmap底層原理面試:hashmap源碼擴容

HashMap實現原理和源碼詳細分析

ps:本博客基於Jdk1.8

學習要點:

1、知道HashMap的數據結構

2、了解HashMap中的散列演算法

3、知道HashMap中put、remove、get的代碼實現

4、HashMap的哈希衝突是什麼?怎麼處理的?

5、知道HashMap的擴容機制

1、什麼是HashMap?

HashMap 基於哈希表的 Map 介面實現,是以 key-value 存儲形式存在 ,HashMap 的實現不是同步的,這意味著它不是線程安全的。它的 key、value 都可以為 null,此外,HashMap 中的映射不是有序的。

2、HashMap的特性

  • Hash存儲無序的
  • key和value都可以存儲null值,但是key只能存唯一的一個null值
  • jdk8之前的數據結構是數組+鏈表,Jdk8之後變成數組+鏈表+紅黑樹
  • 閥值大於8並且數組長度大於64才會轉為紅黑樹

3、HashMap的數據結構

JDK7的情況,是數組加鏈接,hash衝突時候,就轉換為鏈表:

你們都想知道的HashMap實現原理和源碼詳細分析

jdk8的情況,jdk8加上了紅黑樹,鏈表的數量大於8而且數組長度大於64之後,就轉換為紅黑樹,紅黑樹節點小於6之後,就又轉換為鏈表:

你們都想知道的HashMap實現原理和源碼詳細分析

翻下HashMap源碼,對應的節點信息:

static class Node<K,V> implements Map.Entry<K,V> {
        // hashCode
        final int hash;
        final K key;
        V value;
        // 鏈表的next指針就不為null
        Node<K,V> next;

        Node(int hash, K key, V value, Node<K,V> next) {
            this.hash = hash;
            this.key = key;
            this.value = value;
            this.next = next;
        }
        // ...
}        

4、HashMap初始化操作

4.1、成員變數

public class HashMap<K,V> extends AbstractMap<K,V>
    implements Map<K,V>, Cloneable, Serializable {
	/**
     * 序列號版本號
     */
    private static final long serialVersionUID = 362498820763181265L;

   /**
     * 初始化容量,為16=2的4次冪
     */
    static final int DEFAULT_INITIAL_CAPACITY = 1 << 4; // aka 16

   /**
     * 最大容量,為2的30次冪
     */
    static final int MAXIMUM_CAPACITY = 1 << 30;

    /**
     * 默認的負載因子,默認值是0.75
     */
    static final float DEFAULT_LOAD_FACTOR = 0.75f;

    /**
     * 鏈表節點樹超過8就轉為為紅黑樹
     */
    static final int TREEIFY_THRESHOLD = 8;
    
    /**
     * 紅黑樹節點少於6就再轉換回鏈表
     */
    static final int UNTREEIFY_THRESHOLD = 6;
    
    /**
     * 桶中結構轉化為紅黑樹對應的數組長度最小的值
     */
    static final int MIN_TREEIFY_CAPACITY = 64;
    
    // ...
	
	 /**
     * HashMap存儲元素的數組
     */
	transient Node<K,V>[] table;

    /**
     * 用來存放緩存
     */
    transient Set<Map.Entry<K,V>> entrySet;

    /**
     * HashMap存放元素的個數
     */
    transient int size;

    /**
     * 用來記錄HashMap的修改次數
     */
    transient int modCount;

    /**
     * 用來調整大小下一個容量的值(容量*負載因子)
     */
    int threshold;

    /**
     * Hash表的負載因子
     */
    final float loadFactor;

}    

4.2、 構造方法

public HashMap(int initialCapacity, float loadFactor) {
    // 初始容量不能小於0,小於0直接拋出IllegalArgumentException
    if (initialCapacity < 0)
        throw new IllegalArgumentException("Illegal initial capacity: " +
                                           initialCapacity);
     // 初始容量大於最大容量的時候,取最大容量作為初始容量
    if (initialCapacity > MAXIMUM_CAPACITY)
        initialCapacity = MAXIMUM_CAPACITY;
     // 負載因子不能小於0,而且要是數值類型,isNan:true,表示就是非數值類型
    if (loadFactor <= 0 || Float.isNaN(loadFactor))
        throw new IllegalArgumentException("Illegal load factor: " +
                                           loadFactor);
    // 將指定的負載因子賦值給全局變數
    this.loadFactor = loadFactor;
    // threshold  = (容量) * (負載因子)
    this.threshold = tableSizeFor(initialCapacity);
}


public HashMap(int initialCapacity) {
     // 初始化容量和默認負載因子
    this(initialCapacity, DEFAULT_LOAD_FACTOR);
}
public HashMap() {
    // 默認的負載因子為0.75
	this.loadFactor = DEFAULT_LOAD_FACTOR;
}

然後,我們知道HashMap的默認容量是16,然後是在哪裡賦值的?從上面這個代碼就可以知道this.threshold = tableSizeFor(initialCapacity);

static final int tableSizeFor(int cap) {
    int n = cap - 1;
    n |= n >>> 1;
    n |= n >>> 2;
    n |= n >>> 4;
    n |= n >>> 8;
    n |= n >>> 16;
    return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
}

這裡涉及到計算機基本知識的,右移運算和或運算,下面給出圖例:通過比較麻煩的計算得出n為16

你們都想知道的HashMap實現原理和源碼詳細分析

往代碼里翻,還找到下面這個構造方法public HashMap(Map<? extends K, ? extends V> m):這個構造方法是用於構造一個映射關係與指定 Map 相同的新 HashMap:

public HashMap(Map<? extends K, ? extends V> m) {
    this.loadFactor = DEFAULT_LOAD_FACTOR;
     putMapEntries(m, false);
 }

看一下putMapEntries這個方法:

final void putMapEntries(Map<? extends K, ? extends V> m, boolean evict) {
    // 傳入的集合長度
    int s = m.size();
    if (s > 0) {
     	// 判斷table是否已經初始化處理
        if (table == null) { // pre-size 未初始化的情況
            // 加上1.0F的目的是對小數向上取整,保證最大容量,減少resize的調用次數
            float ft = ((float)s / loadFactor) + 1.0F;
            int t = ((ft < (float)MAXIMUM_CAPACITY) ?
                     (int)ft : MAXIMUM_CAPACITY);
            // 計算出來的t大於HashMap的閥值,進行tableSizeFor
            if (t > threshold)
                threshold = tableSizeFor(t);
        }
        else if (s > threshold) // 已經初始化的情況,進行擴容resize
            resize();
         // 遍歷,將map中的所有元素都添加到hashMap中
        for (Map.Entry<? extends K, ? extends V> e : m.entrySet()) {
            K key = e.getKey();
            V value = e.getValue();
            putVal(hash(key), key, value, false, evict);
        }
    }
}

5、Jdk8中HashMap的演算法

5.1、HashMap中散列演算法

在HashMap的java.util.HashMap#hash,這個方法中有特定的用於計算哈希值的方法:這個方法的作用?這個方法就是用於hashMap當put對應的key之後,計算特定的hashCode,然後再(n-1)&hash計算對應的數組table的下標,這個後面跟一下HashMap源碼才比較清楚:

static final int hash(Object key) {
    int h;
    return (key == null) ? 0 : (h = key.hashCode()) ^ (h >>> 16);
}

看起來代碼只有兩行,然後其實蘊含了一種散列演算法的思想,下面簡單分析一下:這裡先將代碼進行拆分,看起來清晰點:

static final int hash(Object key) {
    // 傳入的key為null,返回默認值0
    if (key == null) return 0;
    // 計算哈希code
    int h = key.hashCode();
    // 將計算出來的hashCode右移16位,相當於乘於(1/2)的16次方
    int t = h >>> 16;
    // 將兩個值做異或運算然後返回
    return h ^ t;
}

其實裡面要做的事情是先計算出hashCode,然後將hashCode右移16位,然後這兩個數再做異或運算。看起來是這麼一回事,然後作者的意圖是什麼?首先既然是散列演算法,散列演算法的目的就是為了讓數據均勻分布

你們都想知道的HashMap實現原理和源碼詳細分析

從圖可以看出,使用異或運算,出現0和1的概率是相等的,所以這就是為什麼要使用異或運算的原因,散列演算法的本質目的就是為了讓數據均勻分布,使用異或運算得出的哈希值因為比較均勻散列分布,所以出現哈希衝突的概率就小很多

補充:

與運算:兩個數相應的位數字都是1,與運算後是1,其餘情況是0;或運算:兩個數相應的位數字只要有1個是1,或運算後是1,否則是0;異或運算:兩個數相應的位數字相同,結果是0,否則是1;

然後為什麼再進行右移16位?我們知道,int類型最大的數值是2的32次方,然後可以分為高16位加上低16位,右移16位就是使數值變小了,「左大右小」,這個是位移運算的準則

5.2、什麼是HashMap中哈希衝突?

哈希衝突也可以稱之為哈希碰撞,理論上的哈希衝突是指計算出來的哈希值一樣,導致衝突了,不過在HashMap中的哈希衝突具體是指(n-1)&hash,這個值是hashMap里數組的下標。Jdk8之前的處理方法是通過鏈表處理,只要hash衝突了,就會將節點添加到鏈表尾部;jdk8之後的做法是通過鏈表+紅黑樹的方法,最開始哈希衝突了,也是用鏈表,然後鏈表節點達到8個,數組長度超過64的情況,轉成紅黑樹,這個可以在源碼里找到答案

翻下源碼,HashMap#putVal,裡面的邏輯,先校驗計算出來的,數組tab的下標,i=(n-1)&hash是否衝突了,不衝突就新增節點,衝突的情況,轉鏈表或者紅黑樹

if ((p = tab[i = (n - 1) & hash]) == null)
            tab[i] = newNode(hash, key, value, null);

6、Jdk8中HashMap的put操作

  • put方法的核心流程
  1. 根據hashcode計算數組的下標
  2. 對應下標數組為空的情況,新增節點
  3. 否則就是哈希衝突了,如果桶使用鏈表節點,就新增到鏈表節點尾部,使用了紅黑樹就新增到紅黑樹里

上面是核心的流程,忽略了存在重複的鍵,則為該鍵替換新值 value, size 大於閾值 threshold,則進行擴容等等這些情況

ok,還是跟一下put源碼:

public V put(K key, V value) {
    return putVal(hash(key), key, value, false, true);
}

final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
                   boolean evict) {
    Node<K,V>[] tab; Node<K,V> p; int n, i;
    // 第1次新增,初始數據resize
    if ((tab = table) == null || (n = tab.length) == 0)
        n = (tab = resize()).length;
    // 判斷是否出現hash衝突
    if ((p = tab[i = (n - 1) & hash]) == null)
        // hash不衝突,新增節點
        tab[i] = newNode(hash, key, value, null);
    else { // 哈希衝突的情況,使用鏈表或者紅黑樹處理
        Node<K,V> e; K k;
        // 存在重複的鍵的情況,key和hash都相等
        if (p.hash == hash &&
            ((k = p.key) == key || (key != null && key.equals(k))))
            // 將舊的節點對象賦值給新的e
            e = p;
        else if (p instanceof TreeNode) // 使用了紅黑樹節點
              // 將節點放到紅黑樹中
            e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
        else { // 鏈表的情況
             // 無限循環
            for (int binCount = 0; ; ++binCount) {
                // 一直遍歷,找到尾節點
                if ((e = p.next) == null) {
                    // 將新節點添加到尾部
                    p.next = newNode(hash, key, value, null);
                    // 節點數量大於8,轉為紅黑樹
                    if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
                        treeifyBin(tab, hash);
                    // 跳出循環
                    break;
                }
                // 也是為了避免hashCode和key一樣的情況
                if (e.hash == hash &&
                    ((k = e.key) == key || (key != null && key.equals(k))))
                    break;
                // 重新賦值,用於鏈表的遍歷
                p = e;
            }
        }
        // 桶中找到的key、hash相等的情況,也就是找到了重複的鍵,要使用新值替換舊值
        if (e != null) { // existing mapping for key
            // 記錄e的值
            V oldValue = e.value;
            if (!onlyIfAbsent || oldValue == null)
                // 用新值替換舊值
                e.value = value;
            // 訪問後回調
            afterNodeAccess(e);
            // 返回舊值
            return oldValue;
        }
    }
    // 記錄修改次數
    ++modCount;
    // size大於threshole,進行擴容
    if (++size > threshold)
        resize();
     // 回調方法
    afterNodeInsertion(evict);
    return null;
}

然後是怎麼轉換為紅黑樹的?紅黑樹的知識相對比較複雜

final void treeifyBin(Node<K,V>[] tab, int hash) {
    int n, index; Node<K,V> e;
    // MIN_TREEIFY_CAPACITY值為64,也就是說數組長度小於64是不會真正轉紅黑樹的
    if (tab == null || (n = tab.length) < MIN_TREEIFY_CAPACITY)
    	// 擴容方法
        resize();
     // 轉紅黑樹操作
    else if ((e = tab[index = (n - 1) & hash]) != null) {
        // 紅黑樹的頭節點hd和尾節點t1
        TreeNode<K,V> hd = null, tl = null;
        do {
            // 構建樹節點
            TreeNode<K,V> p = replacementTreeNode(e, null);
            if (tl == null)
                // 新節點p賦值給紅黑樹的頭節點
                hd = p;
            else {
                // 新節點的前節點就是原來的尾節點t1
                p.prev = tl;
                // 尾部節點t1的next節點就是新節點
                tl.next = p;
            }
            tl = p;
        } while ((e = e.next) != null);
        // 讓數組的節點執行新建的樹節點,之後這個節點就變成TreeNode
        if ((tab[index] = hd) != null)
            hd.treeify(tab);
    }
}

7、HashMap的擴容機制

這個知識點是HashMap中的一個重點之一,也是一個比較難的問題

7.1、什麼時候需要擴容?

當hashMap中元素個數超過threshold,threshold為數組長度乘以負載因子loadFactor,loadFactor默認是0.75f

7.2、什麼是HashMap的擴容?

resize這個方法是HashMap的擴容方法,是比較耗時的。HashMap在擴容時,都是翻兩倍,比如16的容量擴大到32,。HashMap進行擴容的方法是比較巧妙的,擴容後,與原來的下標(n-1)&hash相對,其實只是多了1bit位。擴容後節點要麼是在原來位置,聽起來好像很懵,所以還是認真看下面的分析:

下面給出例子,比如從容量為16擴容到32時,畫圖表示:

你們都想知道的HashMap實現原理和源碼詳細分析

進行擴容,擴大到原來的兩倍:

你們都想知道的HashMap實現原理和源碼詳細分析

到這一步,下標(n-1) & hash,擴容後的數據10101和原來的00101相比,其實就是多了1bit,10101是十進位的21,而21=5+16,就是「原位置+舊容量」,還有另外一種情況是保持為0的情況,這種情況是不改變位置的

下面給出一份表格,數據如圖:

你們都想知道的HashMap實現原理和源碼詳細分析

容量為16的情況

你們都想知道的HashMap實現原理和源碼詳細分析

有低位的兩個指針loHead、lloTail,高位的兩個指針hiHead、hiTail

你們都想知道的HashMap實現原理和源碼詳細分析

擴容到32之後,再兩個鏈表加到對應位置。分別有兩種情況,保持原來位置的和「原位置+舊容量」這個位置

你們都想知道的HashMap實現原理和源碼詳細分析

所以,擴容的過程,對應的節點位置改變是這樣的過程:

你們都想知道的HashMap實現原理和源碼詳細分析

7.3、resize的源碼實現

經過上面比較詳細的分析,這個實現邏輯是可以在代碼里找到對應的,ok,跟一下對應的源碼:

final Node<K,V>[] resize() {
   // 得到當前的節點數組
    Node<K,V>[] oldTab = table;
    // 數組的長度
    int oldCap = (oldTab == null) ? 0 : oldTab.length;
    int oldThr = threshold;
    int newCap, newThr = 0;
    // 計算擴容後的大小
    if (oldCap > 0) {
        if (oldCap >= MAXIMUM_CAPACITY) { // 超過最大容量 即 1 <<< 30
             // 超過最大容量就不擴充了,修改閥值為最大容量
            threshold = Integer.MAX_VALUE;
            return oldTab;
        }
        // 沒超過的情況,擴大為原來的兩倍
        else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                 oldCap >= DEFAULT_INITIAL_CAPACITY)
            newThr = oldThr << 1; // double threshold
    }
    else if (oldThr > 0) // initial capacity was placed in threshold
         // 老閥值賦值給新的數組長度
        newCap = oldThr;
    else {               // zero initial threshold signifies using defaults
        // 使用默認值16
        newCap = DEFAULT_INITIAL_CAPACITY;
        newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
    }
    // 重新計算閥值,然後要賦值給threshold
    if (newThr == 0) {
        float ft = (float)newCap * loadFactor;
        newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                  (int)ft : Integer.MAX_VALUE);
    }
    // 新的閥值,原來默認是12,現在變為24
    threshold = newThr;
    // 創建新的節點, newCap是新的數組長度,為32
    @SuppressWarnings({"rawtypes","unchecked"})
        Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
    table = newTab;
    if (oldTab != null) {
        for (int j = 0; j < oldCap; ++j) {
            Node<K,V> e;
            if ((e = oldTab[j]) != null) {
                oldTab[j] = null;
                if (e.next == null)
                    newTab[e.hash & (newCap - 1)] = e;
                else if (e instanceof TreeNode)
                     // 是紅黑樹節點,調用split方法
                    ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
                else { // preserve order 是鏈表的情況
                	// 定義相關的指針     
                    Node<K,V> loHead = null, loTail = null;
                    Node<K,V> hiHead = null, hiTail = null;
                    Node<K,V> next;
                    do {
                        next = e.next;
                        // 不需要移動位置
                        if ((e.hash & oldCap) == 0) {
                            if (loTail == null)
                                loHead = e;
                            else
                                loTail.next = e;
                            loTail = e;
                        }
                        else { // 需要移動位置 ,調整到「原位置+舊容量」這個位置 
                            if (hiTail == null)
                                hiHead = e;
                            else
                                // hiTail指向要移動的節點e
                                hiTail.next = e;
                            hiTail = e;
                        }
                    } while ((e = next) != null);
                    if (loTail != null) {
                        loTail.next = null;
                        // 位置不變
                        newTab[j] = loHead;
                    }
                    if (hiTail != null) {
                        // hiTail指向null
                        hiTail.next = null;
                        // oldCap是舊容量 ,移動到「原位置+舊容量」這個位置
                        newTab[j + oldCap] = hiHead;
                    }
                }
            }
        }
    }
    return newTab;
}

8、Jdk8中HashMap的remove操作

remove方法,這裡思路是先要找到元素的位置,如果是鏈表,遍歷鏈表remove元素就可以,紅黑樹的情況就遍歷紅黑樹找到節點,然後remove樹節點,如果這時候樹節點數小於6,這種情況就要轉鏈表

@Override
public boolean remove(Object key, Object value) {
    return removeNode(hash(key), key, value, true, true) != null;
}

final Node<K,V> removeNode(int hash, Object key, Object value,
                               boolean matchValue, boolean movable) {
    Node<K,V>[] tab; Node<K,V> p; int n, index;
    // 數組下標是(n-1)&hash,能找得到元素的情況
    if ((tab = table) != null && (n = tab.length) > 0 &&
        (p = tab[index = (n - 1) & hash]) != null) {
        Node<K,V> node = null, e; K k; V v;
        // 桶上的節點就是要找的key
        if (p.hash == hash &&
            ((k = p.key) == key || (key != null && key.equals(k))))
            // 將Node指向該節點
            node = p;
        else if ((e = p.next) != null) { // 鏈表或者是紅黑樹節點的情況
            if (p instanceof TreeNode)
                // 找到紅黑樹節點
                node = ((TreeNode<K,V>)p).getTreeNode(hash, key);
            else { // 鏈表的情況
                // 遍歷鏈表,找到需要找的節點
                do {
                    if (e.hash == hash &&
                        ((k = e.key) == key ||
                         (key != null && key.equals(k)))) {
                        node = e;
                        break;
                    }
                    p = e;
                } while ((e = e.next) != null);
            }
        }
        // 找到節點之後
        if (node != null && (!matchValue || (v = node.value) == value ||
                             (value != null && value.equals(v)))) {
            if (node instanceof TreeNode)
            	// 紅黑樹remove節點
                ((TreeNode<K,V>)node).removeTreeNode(this, tab, movable);
            else if (node == p)
                // 鏈表remove,通過改變指針
                tab[index] = node.next;
            else
                p.next = node.next;
            // 記錄修改次數
            ++modCount;
            // 變動的數量
            --size;
            afterNodeRemoval(node);
            return node;
        }
    }
    return null;
}

9、Jdk8中HashMap的get操作

get方法:通過key找到value,這個方法比較容易理解

 public V get(Object key) {
   Node<K,V> e;
    return (e = getNode(hash(key), key)) == null ? null : e.value;
}

final Node<K,V> getNode(int hash, Object key) {
   Node<K,V>[] tab; Node<K,V> first, e; int n; K k;
   // 如果哈希表不為空並且key對應的桶上不為空
   if ((tab = table) != null && (n = tab.length) > 0 &&
       (first = tab[(n - 1) & hash]) != null) {
       // 根據索引的位置檢查第一個節點
       if (first.hash == hash && // always check first node
           ((k = first.key) == key || (key != null && key.equals(k))))
           return first;
       if ((e = first.next) != null) { // 不是第1個節點的情況,那就有可能是鏈表或者紅黑樹節點
           if (first instanceof TreeNode)
               // 根據getTreeNode獲取紅黑樹節點
               return ((TreeNode<K,V>)first).getTreeNode(hash, key);
            // 鏈表的情況,只能遍歷鏈表
           do {
               if (e.hash == hash &&
                   ((k = e.key) == key || (key != null && key.equals(k))))
                   return e;
           } while ((e = e.next) != null);
       }
   }
   return null;
}

10、HashMap相關面試題

  • HashMap的數據結構是什麼?
  • 在jdk8之前是數組+鏈表,jdk8之後是數組+鏈表+紅黑樹
  • HashMap 中 hash 函數是怎麼實現的?
  • 先通過jdk的hashCode()方法獲取hashCode,右移16位,然後這兩個數再做異或運算
  • 什麼是HashMap中的哈希衝突?
  • 哈希衝突,也可以稱之為哈希碰撞,一般是值計算出的哈希值一樣的,在HashMap中是根據計算出的hash,再去計算數組table下標(n-1)&hash一樣了,也就是衝突了
  • HashMap是如何處理哈希衝突問題的?
  • 在jdk8之前是通過鏈表的方法,jdk8之後是通過鏈表+紅黑樹的方法
  • HashMap是線程安全的?
  • HashMap不是線程安全的,因為源碼里沒加同步鎖也沒其它保證線程安全的操作
  • HashMap不是線程安全的,然後有什麼方法?
  • 可以使用ConcurrentHashMap
  • ConcurrentHashMap是怎麼保證線程安全的?
  • ConcurrentHashMap在Jdk8中 使用了CAS加上synchronized同步鎖來保證線程安全

原創文章,作者:投稿專員,如若轉載,請註明出處:https://www.506064.com/zh-tw/n/225478.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
投稿專員的頭像投稿專員
上一篇 2024-12-09 14:44
下一篇 2024-12-09 14:44

相關推薦

發表回復

登錄後才能評論