MyBatis一级缓存机制

MyBatis一级缓存机制

问题引入

今天遇到了一个非常奇怪的生产环境问题。话不多说,先上问题代码(代码经过脱敏处理):

public Map<String, Double> queryDataFromDatabase(String id, Integer count) {
        Map<String, Double> map = super.dao.selectOne(id);

        if (map != null && !map.isEmpty()) {
            Double weight = map.get("weight");
            // 其他Map字段获取值
            ......
                
            map.put("weight", weight * count);
            // 其他业务处理
            ......
                
        } else {
            map = Maps.newHashMap();
        }
        return map;
}

public void handlerService() {
    // 获取id,可能重复
    List<String> ids = getIds();
    // count从其他地方动态获取,此处简化处理
    int count = 50;
    for(String id : ids) {
        Map<String, Double> map = queryDataFromDatabase(id, count);
        // 其他需要用到map的业务逻辑
        ......
    }
}

代码不符合规范,但看起来也不会出现啥问题,从数据库里根据id获取一个map集合,并往其中的weight更新重量。一切看起来都很正常,如果Mybatis没有一级缓存的话

问题就出在这。当有一段业务需要用到上述代码时出现了相同的id当第一个id运行完时,一切都很正常,从数据库里拿到weight再运行map.put("weight", weight * count);,更改weight的值,返回整个哈希表,处理其他逻辑。相关数据如下:

count == 50
id == 123
----修改前weight == 30
----修改后weight == 1500

当相同的id(123)再次运行到这段逻辑时,相关数据变成了这样:

count == 50
id == 123
----修改前weight == 1500
----修改后weight == 75000

而数据库里面weight的值一直为30,从没有改变过。

直接原因

作为一名菜鸡程序员,我都还没了解过mybatis的运行机制,以前也从没遇到过这么离谱的问题。好好的数据怎么从数据库里面取出来后就变大了呢?一顿搜索,还是没有任何头绪,知道我看到了这么一张图:

图片来源https://tech.meituan.com/2018/01/19/mybatis-cache.html

CachingExecutor!缓存!不会是从缓存里面直接获取的值,然后代码又正好把新的weight赋值到缓存好的map对象里去了吧?于是我做了下面的修改

public Map<String, Double> queryDataFromDatabase(String id, Integer count) {
    Map<String, Double> map = super.dao.selectOne(id);
    Map<String, Double> weightMap = new HashMap<>(2);
    if (map != null && !map.isEmpty()) {
        Double weight = map.get("weight");
        // 其他Map字段获取值
        ......
            
        weightMap.put("weight", weight * count);
        // 其他业务处理
        ......
            
    }
    return weightMap;
}

public void handlerService() {
    // 获取id,可能重复
    List<String> ids = getIds();
    // count从其他地方动态获取,此处简化处理
    int count = 50;
    for(String id : ids) {
        Map<String, Double> map = queryDataFromDatabase(id, count);
        // 其他需要用到map的业务逻辑
        ......
    }
}

改动不大,就是新实例化了一个weightMap 然后把修改后的weight值赋值到这个新的哈希表中去,原来从mybatis(我几乎可以确定第二次不是从数据库里取的值,而是从mybatis缓存中获取到的值)中获取到的map保持不动。再次运行代码,得到两次结果如下:

  • 第一次
count == 50
id == 123
----修改前map.get("weight") == 30
----修改后weightMap.get("weight") == 1500
  • 第二次
count == 50
id == 123
----修改前map.get("weight") == 30
----修改后weightMap.get("weight") == 1500

果然,只要我在新实例化出来的对象里面进行修改,那么原来的值就不会改变,所以当运行同一段sql语句时,第一次获取到结果后,mybatis会缓存一份结果,后续运行到相同的sql时会直接从缓存中获取结果,而这个结果是一个地址,指向同一个对象。

追根溯源

至此,问题是得到解决了实例化一个新的对象,在新的对象上改动原有的值就行,不会影响到缓存结果。但都查到这了,不得跟着源码找找证据?

由于我们只关注缓存,所以前面部分代码略过,debug信息取再次获取数据时的调试部分

注:此处selectList()方法会在返回集合后判断长度是否为1,为1时返回集合第0个元素,如果大于1的话会抛异常,所以实际上还是selectOne(),具体代码略去,只做简要说明

public class DefaultSqlSession implements SqlSession {
    private final Executor executor;
    private final Configuration configuration;

    ......

    public DefaultSqlSession(Configuration configuration, Executor executor, boolean autoCommit) {
      this.configuration = configuration;
      this.executor = executor;
      this.dirty = false;
      this.autoCommit = autoCommit;
    }

    @Override
    public <E> List<E> selectList(String statement, Object parameter, RowBounds rowBounds) {
      try {
        MappedStatement ms = configuration.getMappedStatement(statement);
        return executor.query(ms, wrapCollection(parameter), rowBounds, Executor.NO_RESULT_HANDLER);
      } catch (Exception e) {
        throw ExceptionFactory.wrapException("Error querying database.  Cause: " + e, e);
      } finally {
        ErrorContext.instance().reset();
      }
    }
}
  1. 此处的executor已经在DefaultSqlSession的构造函数前就被实例化为了CachingExecutor,具体实例化过程以后再补充
image-20230811170205109.png
  1. 此处的Executor.NO_RESULT_HANDLER比较重要,会一直传递到获取数据处,值为null

executorquery方法:(此处略去了生成CacheKey key的部分,会在最后补充)

public class CachingExecutor implements Executor {
    @Override
    public <E> List<E> query(MappedStatement ms, Object parameterObject, RowBounds rowBounds, ResultHandler resultHandler, CacheKey key, BoundSql boundSql) throws SQLException {
    Cache cache = ms.getCache();
    if (cache != null) {
        flushCacheIfRequired(ms);
        if (ms.isUseCache() && resultHandler == null) {
          ensureNoOutParams(ms, boundSql);
          @SuppressWarnings("unchecked")
          List<E> list = (List<E>) tcm.getObject(cache, key);
          if (list == null) {
            list = delegate.<E> query(ms, parameterObject, rowBounds, resultHandler, key, boundSql);
            tcm.putObject(cache, key, list);
          }
          return list;
        }
      }
      return delegate.<E> query(ms, parameterObject, rowBounds, resultHandler, key, boundSql);
    }
}

看吧,这有个ms.getCache()方法,获取缓存的值,是不是就这样找到源头了呢?没这么简单,看debug调试吧:

image-20230811171225715.png

null.....空!要知道,这是已经存过一次数据,再次运行相同sql的部分了

别急,这其实是mybatis的二级缓存,而二级缓存是需要手动开启的,我们项目没有配置,因此此处就为空啦。想了解二级缓存的,等我哪天再遇到相关问题了再来研究研究吧,这次先略过。

由于上面获取二级缓存为空,因此执行delegate.<E> query(ms, parameterObject, rowBounds, resultHandler, key, boundSql);方法,进入到BaseExecutor类中:

public abstract class BaseExecutor implements Executor {
    @SuppressWarnings("unchecked")
    @Override
    public <E> List<E> query(MappedStatement ms, Object parameter, RowBounds rowBounds, ResultHandler resultHandler, CacheKey key, BoundSql boundSql) throws SQLException {
      ErrorContext.instance().resource(ms.getResource()).activity("executing a query").object(ms.getId());
      if (closed) {
        throw new ExecutorException("Executor was closed.");
      }
      if (queryStack == 0 && ms.isFlushCacheRequired()) {
        clearLocalCache();
      }
      List<E> list;
      try {
        queryStack++;
        list = resultHandler == null ? (List<E>) localCache.getObject(key) : null;
        if (list != null) {
          handleLocallyCachedOutputParameters(ms, key, parameter, boundSql);
        } else {
          list = queryFromDatabase(ms, parameter, rowBounds, resultHandler, key, boundSql);
        }
      } finally {
        queryStack--;
      }
      if (queryStack == 0) {
        for (DeferredLoad deferredLoad : deferredLoads) {
          deferredLoad.load();
        }
        
        deferredLoads.clear();
        if (configuration.getLocalCacheScope() == LocalCacheScope.STATEMENT) {
          clearLocalCache();
        }
      }
      return list;
    }
}

list = resultHandler == null ? (List<E>) localCache.getObject(key) : null;注意这段代码

如果resultHandlernulllistlocalCache.getObject(key)中获取值,否则list置为空。前面我们已经说过了,resultHandler实际只传递了一个null值过来。

image-20230811174136495.png

可以看到我们从localCache.getObject(key)取到了第一次从数据库拿到结果后保存的缓存值,注意其地址,

image-20230811174505912.png

这是Map<String, Double> map = super.dao.selectOne(id);我们项目业务代码中map的地址,与mybatis中获取的一致。因此,对业务代码中map的修改会影响到mybatis中的缓存。

至此,原理找到了,下次遇到这么坑的代码也不用摸不着头脑了。这点东西花了我一个多小时打断点,找原因。又花了大半个下午的时间写博客。我就想诅咒写这段代码的同事每天下班前半小时都出现新bug要他解决!!!!

参考博客:

聊聊MyBatis缓存机制

image-20230811170205109.png

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,793评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,567评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,342评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,825评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,814评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,680评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,033评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,687评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,175评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,668评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,775评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,419评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,020评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,978评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,206评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,092评论 2 351
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,510评论 2 343

推荐阅读更多精彩内容