浅谈提升统计页面获取数据效率的实现思路

ROR项目中经常会有统计页面的需求。统计页面由于数据量和运算量较大,因此不同的数据获取计算方法,可能对页面加载的速度有极大的影响(可能加载时间会差10倍以上)。下面分享一下我最近用过的一种方法(其实应该说是思路)

应用场景——比如我需要统计全国各个省份下,在指定时间范围内,所有订单的状况(未付款、已付款、已收货、已评价)

解决思路——
早期我可能会用比较笨的方法,先将31个省份用each迭代输出,然后每行再根据省份,去数据库里查询省份==当前省份,状态等于指定状态的订单的总数。这么算下来,先对省份表进行了一次查询,然后31个省份,每个省份针对四种不同的状态,各查询了四次,总计对数据库进行了125次查询。这还是省份数量和状态数量不多的情况。这样做,代码写起来虽然很简单,但付出的代价是非常大的,当数据量大到一定程度时,可能会出现页面加载超时而报错的结果。

现在,我说一下我的解决思路:对于这类的统计,推荐用sql语句一次性从数据库里取出所有需要用到的结果,然后按照一定规则,将结果推入一个哈希中,最后再view里合理调用这个哈希进行输出。拿上面的例子来说,具体的实现方法是这样的:

1.取数据

sql = "select o.province_id, o.status, count(o.id) as total_num from orders o where o.created_at >= 'xxxx-xx-xx' and o.created_at <= 'xxxx-xx-xx' group by o.province_id, o.status"
search  = Order.find_by_sql([sql])

2.创建一个存结果的hash

@result = {}
seach.each do |s|
  @result["#{s.province}_#{s.status}"] = s.total_num
end
上面这些代码我大致解释一下:先通过数据库的group by方法,把需要的统计结果,按照省份和订单状态的维度进行切割,并取出。然后通过这两个参数来往@result这个空的哈希里推送数据,理论上,每个省份会有四条数据(因为可能为空)
然后我们再一次性从province表中取出需要用到的省份信息
@provinces = Province.all.map{|p| [p.id, p.name] }

3.前台view里输出

假设order表的status字段用了枚举: Status = {unpay: 1, payed: 2, received: 3, commented: 4},我们用Oreder::Status.values可以直接获得一个[1, 2, 3, 4]数组
%table
  %tr 
    %th 省份 
    %th 未付款
    %th 已付款
    %th 已收货
    %th 已评价
  @provinces.each do |p|
    %tr
      %td= p[1]#这个就是省份的名称,因为@provinces是一个数组,数组的每个元素又是一个数组
      Order::Status.values.each do |s|
        %td= @result["#{p[0]}_#{s}"] || 0
#上面这一句是view最重要的方法,根据在controller里推送进@result哈希里的数据的命名规则,调出这些数据,如果没有被调用到,说明该时间段内,该省份在当前状态下,没有订单,因此如果为空,则补一个0即可。
#至此整个统计页面都完成了,可以看到,首先,代码量非常少,简洁易懂。其次,整个统计只对数据库进行了两次查询,并且在view里也没有逐项调用子方法去计算结果,而是简单的利用.each来输出哈希里的值,因此整个页面对系统的产生的负担非常小,页面加载速度也非常快,几乎都是秒开。

以上便是我对此类页面的一些心得,希望内给各位读者一些启发。若是有大神觉得有更简洁高效的方法,希望能不吝赐教。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,723评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,080评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,604评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,440评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,431评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,499评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,893评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,541评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,751评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,547评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,619评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,320评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,890评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,896评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,137评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,796评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,335评论 2 342

推荐阅读更多精彩内容