HashMap

HashMap是java中的一个容器类,实现了Map接口,可以存放键值对,键和值都可以为null(键仅可以有一个null,而值可以有多个null),在声明时传入的泛型必须是对象类型,诸如intdouble等的基本类型是不行的,要转成包装类。它是非同步的,与之相反的是concurrentHashMap

HashMap的实现是基于散列表算法的,每个对象都有自己的哈希值,根据哈希值可以快速定位到元素的位置。Hashmap结合了数组和链表以及平衡树(红黑树)的方式对元素进行存储。它定义了一个Node类,用来存储键和值,同时Node有一个Node属性的next字段,所以可以生成链表。HashMap的存储过程是这样的,内部默认初始化一个容量大小为16的Node数组,称为哈希桶,插入元素时计算元素的哈希值在根据数组容量大小定位到数组的某个位置。

从上的操作中可以看出有几个问题:

  • 为什么默认哈希桶默认初始值为16
  • 如何处理传入的键的哈希值并给出一个数组定位
  • 数组长度总是有限的,存储元素多了无可避免会发生冲突,HashMap是如何解决冲突的
  • 当存储元素多到一定时候,怎么扩展空间
  • 既然是非同步的,在多线程环境下可能发生什么情况

下图是HashMap的成员变量(没特别说明,源码都基于java 8)

HashMap的属性字段

这是几个比较重要的字段:

  • DEFAULT_INITIAL_CAPACITY 初始容量,大小为16
  • MAXIMUM_CAPACITY 允许存储的最大容量
  • DEFAULT_LOAD_FACTOR 装载因子,和空间重分配有关
  • TREEIFY_THRESHOLD 链表转化为红黑树的阈值
  • table 哈希桶,是Node类型的数组

通过HashMap的构造函数可以设定哈希桶的初始大小以及装载因子,但最终的大小并不一定是这个值,HashMap会根据传入的数进行合理运算,保证大小是2的幂次方。这涉及到根据hash值分配位置的原因,好的做法是根据哈希值做相应的操作得到均匀分散的位置,HashMap采用位运算求余,然后再经过扰动操作得出最终结果。

结合源码分析,通过HashMap(int)的构造函数可以看到和tableSizeFor方法有关。

public HashMap(int initialCapacity, float loadFactor) {
        // 初始化大小是负数
        if (initialCapacity < 0)
            throw new IllegalArgumentException("Illegal initial capacity: " +
                                               initialCapacity);
        // 超出最大容量则设为最大容量值                                       
        if (initialCapacity > MAXIMUM_CAPACITY)
            initialCapacity = MAXIMUM_CAPACITY;
        // 装载因子是否合理
        if (loadFactor <= 0 || Float.isNaN(loadFactor))
            throw new IllegalArgumentException("Illegal load factor: " +
                                               loadFactor);
        this.loadFactor = loadFactor;
        // 设置阈值
        this.threshold = tableSizeFor(initialCapacity);
    }
static final int tableSizeFor(int cap) {
        int n = cap - 1;
        n |= n >>> 1;
        n |= n >>> 2;
        n |= n >>> 4;
        n |= n >>> 8;
        n |= n >>> 16;
        return (n < 0) ? 1 : (n >= MAXIMUM_CAPACITY) ? MAXIMUM_CAPACITY : n + 1;
    }

tableSizeFor方法执行完后会得到第一个不比传入整数小的符合2的幂次方大小的整数,比如传入3会得到4,传入7会得到8等。方法中一开始n = cap - 1是由于如果传入 数本身就是2的幂次方,得出的结果会不正确,所以要先减一。当进行第一次插入操作时,如果哈希桶是空的会进行resize操作,在resize方法中会设置容量大小为2的幂次方。

putVal方法

HashMap的键可能不是整数类型,定位数组坐标需要整数类型,在计算哈希值时利用ObjecthashCode得到这个整数。HashMap在定位元素哈希桶位置时做了(n - 1) & hash的操作,其目的是求余,通过位运算可以提高效率,而n是2的幂次方可以让hash值分配得更均匀。比如A的hash值为10101010,B的哈希值为01011110,那么n-1的值是类似于11111全1的,它和hash值相与时能保证低位和原来的一样,若不是2的幂次方,则n-1可能会导致hash值低位会改变,本来差异挺大的hash值也可能碰撞,导致分配不均。此外,官方也利用了扰动函数对碰撞进行了优化。由上,HashMap在实现上要求哈希桶的容量大小为2的幂次方。同时,官方也建议在知道HashMap需要存储多少元素的情况下最后在构造方法中传入初始化大小。

插入元素根据位置插入到哈希桶,如果此时该位置上为null在放进去,如果有则判断是不是键一样,一样则覆盖原来的值,否则生成一个链表,在JAVA 8 中,如果链表长度超过了8,则会构造为红黑树。(在最差的情况下,数组查找为O(1),链表为O(n),而平衡树可达到O(log n),将链表转化为红黑树可以提高速率)。


 final V putVal(int hash, K key, V value, boolean onlyIfAbsent,
                   boolean evict) {
        Node<K,V>[] tab; Node<K,V> p; int n, i;
        // 如果是空表或容量大小为0,则重新分配大小
        if ((tab = table) == null || (n = tab.length) == 0)
            n = (tab = resize()).length;
        // 根据哈希定位元素位置,当前位置为null则插入
        if ((p = tab[i = (n - 1) & hash]) == null)
            tab[i] = newNode(hash, key, value, null);
        else {
            Node<K,V> e; K k;
            // 插入元素的key和存在元素的一样,覆盖原值
            if (p.hash == hash &&
                ((k = p.key) == key || (key != null && key.equals(k))))
                e = p;
            // 如果存在对象是红黑树
            // TreeNode继承自LinkedHashMapEntry继承自Node
            else if (p instanceof TreeNode)
            // 红黑树操作
                e = ((TreeNode<K,V>)p).putTreeVal(this, tab, hash, key, value);
            else {
            // 遍历链表
                for (int binCount = 0; ; ++binCount) {
                    // 已经是链表尾部,将新元素插入当前元素的后面
                    if ((e = p.next) == null) {
                        p.next = newNode(hash, key, value, null);
                        // 当链表大小超过红黑树阈值时将链表转为红黑树
                        if (binCount >= TREEIFY_THRESHOLD - 1) // -1 for 1st
                            treeifyBin(tab, hash);
                        break;
                    }
                    // 链表中找到一样的元素,覆盖之
                    if (e.hash == hash &&
                        ((k = e.key) == key || (key != null && key.equals(k))))
                        break;
                    // 链表的下一个元素
                    p = e;
                }
            }
            if (e != null) { // existing mapping for key
                V oldValue = e.value;
                if (!onlyIfAbsent || oldValue == null)
                    e.value = value;
                // afterNodeAccess是空方法,此外还有afterNodeInsertion、afterNodeRemoval也一样
                // 分别意为节点访问后、节点插入后、节点移除,重写方法实现相应的功能
                afterNodeAccess(e);
                return oldValue;
            }
        }
        ++modCount;
        // 如果此时哈希桶大小超过阈值,进行扩容
        if (++size > threshold)
            resize();
        afterNodeInsertion(evict);
        return null;
    }

当哈希桶元素个数超过阈值时会进行扩容,threshold就是阈值,阈值=装载因子 * 容量大小,默认初始阈值为DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY,即值为6。HashMap并不是等哈希桶被装满后才进行扩容,所以设置了一个阈值,若低于这个阈值说明空间利用还充足,若超过则表明插入元素发生碰撞的几率很大了。扩容在HashMapresize方法执行。

final Node<K,V>[] resize() {
        // 记录原来的哈希桶、容量大小、阈值
        Node<K,V>[] oldTab = table;
        int oldCap = (oldTab == null) ? 0 : oldTab.length;
        int oldThr = threshold;
        int newCap, newThr = 0;
        // 原容量大小 > 0
        if (oldCap > 0) {
            // 已经是最大容量了,阈值设为和容量大小一样
            if (oldCap >= MAXIMUM_CAPACITY) {
                threshold = Integer.MAX_VALUE;
                return oldTab;
            }
            // 将容量和阈值扩为原来的1倍
            else if ((newCap = oldCap << 1) < MAXIMUM_CAPACITY &&
                     oldCap >= DEFAULT_INITIAL_CAPACITY)
                newThr = oldThr << 1; // double threshold
        }
        // 空表有阈值,将新容量设为原阈值大小
        else if (oldThr > 0) // initial capacity was placed in threshold
            newCap = oldThr;
        else {               // zero initial threshold signifies using defaults
        // 空表空阈值,设置默认初始值
            newCap = DEFAULT_INITIAL_CAPACITY;
            newThr = (int)(DEFAULT_LOAD_FACTOR * DEFAULT_INITIAL_CAPACITY);
        }
        // 如果新阈值为0,利用新容量大小*装载因子得到新阈值
        if (newThr == 0) {
            float ft = (float)newCap * loadFactor;
            newThr = (newCap < MAXIMUM_CAPACITY && ft < (float)MAXIMUM_CAPACITY ?
                      (int)ft : Integer.MAX_VALUE);
        }
        // 设置当前阈值
        threshold = newThr;
        @SuppressWarnings({"rawtypes","unchecked"})
            // 声明一个扩容之后的新哈希桶,将原来元素装入
            Node<K,V>[] newTab = (Node<K,V>[])new Node[newCap];
        table = newTab;
        // 原表有值
        if (oldTab != null) {
            // 遍历哈希桶数组
            for (int j = 0; j < oldCap; ++j) {
                Node<K,V> e;
                if ((e = oldTab[j]) != null) {
                    oldTab[j] = null;
                    // 数组j只有一个元素,计算新位置后直接放入
                    if (e.next == null)
                        newTab[e.hash & (newCap - 1)] = e;
                    // 如果数组j是一个红黑树
                    else if (e instanceof TreeNode)
                    // 进行红黑树高度降低或直接解散红黑树 ((TreeNode<K,V>)e).split(this, newTab, j, oldCap);
                    else { // preserve order
                        // 将链表重分配,定义低位和高位。低位指原来的位置,高位为扩展后的位置(它为旧位置+原来容量大小)。
                        // 比如原来容量大小为4,存储着0->4->8,1->5,2,3这几个元素
                        // 未扩容时0、4和8根据哈希定位都在第0个(0 ^ 11 = 0,100 ^ 11 = 0,1000 ^ 11 = 0)
                        // 但扩容后4在新表的第5个,即hi = oldCap + j(j表示原来在第几个,100 ^ 111 = 4 > 0,4 + 0 = 4,在新表的tab[4]上,故为第5个)。
                        Node<K,V> loHead = null, loTail = null;
                        Node<K,V> hiHead = null, hiTail = null;
                        Node<K,V> next;
                        do {
                            next = e.next;
                            // 利用位运算得出如果等于零则给元素处于低位,否则为高位
                            // 表示扩容后处在低位,即例子说的0,8
                            if ((e.hash & oldCap) == 0) {
                                // 如果还是有碰撞,建立新的链
                                if (loTail == null)
                                    loHead = e;
                                else
                                    loTail.next = e;
                                loTail = e;
                            }
                            // 表示扩容后在高位
                            else {
                                if (hiTail == null)
                                    hiHead = e;
                                else
                                    hiTail.next = e;
                                hiTail = e;
                            }
                        // 直至链表重新分完
                        } while ((e = next) != null);
                        // 这里的操作就是上面所说的,低位链表还是在低位,高位的则放置在newTab[j + oldCap]位置上
                        if (loTail != null) {
                            loTail.next = null;
                            newTab[j] = loHead;
                        }
                        if (hiTail != null) {
                            hiTail.next = null;
                            newTab[j + oldCap] = hiHead;
                        }
                    }
                }
            }
        }
        return newTab;
    }
HashMap扩容

图片来自

HashMap不是同步的,在高并发的情况下会导致这样的情况发生:在JDK1.7时,由于扩容后的新数组与原数组的指针引用关系会导致链表出现死循环,在JDK1.8则没有死锁问题,但是会在put操作时由于覆盖导致出现数据丢失的情况。

static HashMap<Integer, Integer> sHashMap = new HashMap<>();

    public static void main(String[] args) throws InterruptedException {

        new Thread(() -> {
            for (int j = 0; j < 100000; j++) {
                int finalJ = j;
                new Thread(() -> {
                    sHashMap.put(finalJ, finalJ);
                }).start();
            }
        }).start();

        Thread.sleep(5000);
        for (int i = 0; i < 100000; i++) {
            if (sHashMap.get(i) == null)
                System.out.println("value is null");
        }
    }
    // output:
    // value is null
    // ……

HashMapHashtableConcurrentHashMap相比缺乏同步操作,Hashtable继承自Dictionary,在重要方法前加上了synchronized前缀,key和value不能为null,在定位数组位置时采用除模取余法,插入是先判断之前是否有记录,有则覆盖,否则数组HashtableEntry数量加一,此时如果超过阈值会进行扩容。从扩容方法rehashint newCapacity = (oldCapacity << 1) + 1可知哈希桶的数量大小为奇数个,默认构造函数设置初始大小为11,Hashtable扩容时没有涉及红黑树,只是将链表拆分重新分配位置,采用的是头插法。

// 从高位开始
for (int i = oldCapacity ; i-- > 0 ;) {
            for (HashtableEntry<K,V> old = (HashtableEntry<K,V>)oldMap[i] ; old != null ; ) {
                HashtableEntry<K,V> e = old;
                old = old.next;

                int index = (e.hash & 0x7FFFFFFF) % newCapacity;
                // 从这可知是头插法
                e.next = (HashtableEntry<K,V>)newMap[index];
                newMap[index] = e;
            }
        }

ConcurrentHashMap也是同步的,不过没有直接采用synchronized,而是使用了CAS,相比于Hashtable在性能上更快。多个线程对Hashtable哈希桶竞争写操作时会发生阻塞,而ConcurrentHashMap则将同步的粒度减小了,在JDK1.7通过对segments数组(每一个segment相当于一个HashMap)中的单个segment上锁可以让多个segment可以并发执行。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,214评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,307评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,543评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,221评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,224评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,007评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,313评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,956评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,441评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,925评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,018评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,685评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,234评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,240评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,464评论 1 261
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,467评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,762评论 2 345

推荐阅读更多精彩内容

  • 关于你的思维活动,有一点值得注意,即你很少被问题难倒。的确是这样,偶尔你会碰到这样的问题:17×24=?你无法立即...
    chaim阅读 202评论 0 0
  • 读过太多的关于秋的诗句文章,或悲凉,或高昂,有“自古逢秋悲寂寥,我言秋日胜春朝”这种明媚的秋,有余秋雨饱含思念的《...
    多如艾米阅读 205评论 0 0