ezorm 之 redis 功能构建篇

什么,用redis替换mysql?疯了吧!

拒绝总得有理有据:

  1. redis作为内存数据库在体量上是容纳不了磁盘数据库的,完全替换是不可能也没必要
  2. 业务服务通常逻辑复杂,如何实现复杂的sql查询。磁盘数据库一句sql查询搞定的事,我得准备多少key/value的数据关系才能实现查询。
  3. 以上都不是问题的情况下,一旦发生数据变更,key/value的数据关系如何同步

以上三个问题足以让我对redis替换mysql望而却步了。如此多的业务关系时时变更,同样作为内存数据库,我宁愿选择mongodb,至少它在某种层面上支持类sql的条件查询。即使只有两三张表的数据的业务服务,完全用redis替换mysql的工作量也不能小觑。完全手写是不可能的,所以任务要求是通过ezorm自动生成代码的方式来实现redis替换mysql。难度再度提升,代码必须通用化才能用工具生成。

其实,到我开始编写代码的那一刻,我都不知道支持redis的orm会做成啥样。当然,还是从最基础的增删改查做起(这是大部分orm提供的主要功能)减少程序员重复的编码工作。

当然我也不是完全从零开始,我已经有了基础ezorm工具,它已经支持 mssql、mysql和mongo了。所以,增加redis支持是理所当然的了。当然如果只是对象的增删改查,难度到也不大。

第一版本

不同于关系型数据库,增删改查的接口是:insert/update/delete/select,redis的增删改查只需要提供两个接口就好了,set/get。为了简化代码,我提供了一套object接口,只要实现了object接口的对象可以直接通过反射操作进行对象的redis存取操作,这样一来,我只需要让对象实现接口函数即可。这就是我第一版做的事情。

Paste_Image.png

当然这个版本,我还提供了一个关键的对象定义属性,就是 dbs 属性。之前的orm版本中,一个对象定义只能存在一个db属性定义,对于redis对象而言,完全可能和关系型数据对象具有相同的结构。如果再去生成一套对象结构定义显然是不合理的。

第一个版本还实现查询接口,支持按索引查询。虽然粗糙了点,至少看起来和关系数据库提供的接口接近了。

Paste_Image.png

第二版本

很明显,在第一版本中没有发挥orm的优势就自动生成代码将一切影响效率的操作迁移至编译阶段。而对象的反射显然除了加快了开发进度,简化代码。在关键的在执行效率上大打折扣。于是乎第二版本我移除了所有反射操作,通过orm模板的关键特性自动生成对象字段的读写操作。于是生成的代码就变成了以下形式:

Paste_Image.png

第三版本

虽然在前两个版本,我就针对redis提供的数据结构进行功能划分:
通用对象存储(object)
对象关系存储(relation)

其中,对象的存储在redis里可以使用以下结构
<key/value> pair 用于json对象存储
hash用于需要独立设置字段的对象

而对于对象关系的存储redis提供几种类型都可以支持:
<key/value> pair
set 集合结构
zset有序集合结构
geo地理位置结构
list列表结构

其实在前两个版本中关系对象(relation)的存储该如何定义一直是件困扰我的事,既需要能过通过某种形式定义出来,又不能让用户随意定义。
通用对象的定义用户是可以完全自定义对象的列(Field)的,但关系对象(Relation)如何定义呢?先看一下,redis中几种类型的具体操作命令:

Paste_Image.png

前两个版本的做法是同样利用之前通用对象的定义方法让用户定义字段,但其实redis对set/zset/geo/list都有严格的特殊要求,除了key和value外,在zset中增加的score,在geo中增加了longtitude和latitude。前两版本的做法就是去验证用户定义关系对象的字段数与字段名称,显然是很傻的做法,在实际应用中必定坑洼不断。

所以在这个版本中对关系对象类型的定义进行了抽象,既然所有关系对象结构均有key和value字段,而key字段显然都是string类型,我只需要增加一个新的定义属性:valuetype类型。通过这个属性结合模型的storetype来定义关系对象即可:

Paste_Image.png

有了valuetype后,我考虑到如果能够直接通过关系对象找到对象岂不完美,因为value对于使用者而言还必须进行一次转化。所以这时我又增加了modeltype类型,对于关系对象的定义中valuetype刚好是modeltype定义的主键类型的话,那么直接在生成代码的时候就生成相应接口岂不妙哉。

Paste_Image.png

第四版本

其实完成了第三个版本后,我就跃跃欲试想小试牛刀了。但是问题也就来了,主要是:

  1. 基础对象的数据准备
  2. 关系对象的数据准备

同时,虽然我可以定义以上两种对象,但是实际如何替换现有查询语句我仍然一头雾水。基础对象的查询很简单,只要有id就可以查询和关系型orm操作接口类似。

基础对象的数据准备也很简单,对象只有dbs同时支持mysql和redis,就可以通过mysql对象提供的查询接口将所有对象取出来,再枚举调用redis对象的set接口就可以完成基础对象的数据准备。

而对于关系对象的数据准备,肯定最好的方式也是从数据库直接导入最直接。所以就想到了一个新的属性就是:importSQL属性。

Paste_Image.png

这个属性一度让我兴奋不已。因为它不但帮我实现了对象的数据准备问题,还帮我解决了对象的数据同步问题。增加这个属性后,对象相应增加了以下接口:

Paste_Image.png

现在,可以真正开始使用ezorm的redis功能了,看看实际使用的代码吧。

总结

Paste_Image.png

接下来,我们应该做什么呢?请关注新项目redis-orm. 我们将完成索引的模拟。提前告知下模拟索引的功能:

Paste_Image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,921评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,635评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,393评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,836评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,833评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,685评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,043评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,694评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,671评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,670评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,779评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,424评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,027评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,984评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,214评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,108评论 2 351
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,517评论 2 343

推荐阅读更多精彩内容

  • 1. Java基础部分 基础部分的顺序:基本语法,类相关的语法,内部类的语法,继承相关的语法,异常的语法,线程的语...
    子非鱼_t_阅读 31,577评论 18 399
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,597评论 18 139
  • 和谁一起去吃,比去哪里吃更重要!——Bill Xie 家庭式/亲密团队式的朋友,聚会推荐粤菜和早茶 有车去市区的话...
    xiekun2008阅读 406评论 0 1
  • 很晚了,以往这个时候该睡了!但今天不想睡了!想写下我第一次周总结。我很想感谢教练,那天晚上入小密圈第一次提问,其实...
    Beinggrowing阅读 349评论 1 2
  • 我原本就不该知道这一切。 ——《神奇动物在哪里》 文丨旧故麻袋 ∨ 据说,因为今年中国电影票房惨淡,广电总菊为了想...
    旧故麻袋阅读 2,206评论 0 0