【ILR】基于ILRuntime的数据热更方案

基础需求描述

数据热更,是手游开发过程中常面临的一个需求。

在配置表字段不变的情况下, 数据的变动是无需程序关注的。但是当字段发生变动时,就是程序需要处理的数据热更的情形。

下面我们来设计一张UI表,并在后续的例子中也会用到它。

UI表的字段名 ID UI显示名称 UI类型 开启音效
原始字段 * * *
新增字段 *

策划新需求,需要打开UI时播放一个音效,所以就有了新增的开启音效字段。

现在,让我们基于ILRuntime,来看看几种数据热更方案。这些也是我这些年所经理的项目中常见的方案。基于这些方案以及我现在的开发需求,我也设计了全新的数据热更方案,用于解决之前方案所面临的问题。

原有项目方案

数据全放热更工程

这种方案最为简单粗暴。

基于项目全放热更的设计或对应模块全在热更工程中的设计,将数据结构以及序列化后的数据实例全都在ILRuntime的热更工程里。

比如UI模块全放在了热更工程中,那么它用到的UI表也就放在了热更工程里。这样,当UI表发生结构变动时,也仅仅相当于代码热更,确实开发起来更简单粗暴有效。

(那么,葛二蛋,代价是什么?)

这样的实现终究有其需要付出的代价。ILRuntime中实现的类在实例化时,会比C#天然实现的类占用更多的内存(可以简单理解为ILRuntime中每个字段都有一些额外的数据存储)。因为这样的设计将热更数据也完全放在了热更工程里,所以导致了内存占用居高不下。

我之前所经历的一个项目在采用这个方案后,优化热更工程的内存占用一直是我们的重点任务。尤其当大部分数据都放在了热更里时,这个问题会愈发严重,毕竟动辄几十张数据表,成百万计的数据量,内存消耗还是很恐怖的。

数据表有更新就全放热更工程

这种方案其实是针对全热更方案的问题而产生的一个变种。

项目开发阶段,所有数据都在主工程内,使用原生的C#进行实例的创建、管理。一旦上线后有热更需求,就在热更工程内存放一份新的数据表结构,使用命名空间与原有表结构进行区分。数据序列化时除了主工程内的那一份,热更里额外序列化一份数据存储在热更工程内。

以UI表举例,主工程里的结构是这样的:

namespace Project
{
    public class TableUI
    {
        public int Id;
        public string Name;
        public int Type;
    }
}

一旦出现热更需求,就会在热更工程里放一份全新的结构:

namespace Project.Hotfix
{
    public class TableUI
    {
        public int Id;
        public string Name;
        public int Type;
        public string Audio;
    }
}

理论上讲,这个方案在改表结构的热更需求比较少的情况下还是不错的。可终究同一个数据同时存在两份是对内存极大地不尊重。

此外,我们程序在开发项目时,常规情况下会用到Project.TableUI,一旦这个表出现热更需求就需要变更为使用Project.Hotfix.TableUI。可是我们终究还得开发下一个大版本,为了性能我们终究会把上一个版本的新增字段放回到主工程内,这时候就不得不面临维护两套代码了:一套使用Project.TableUI,一套使用Project.Hotfix.TableUI,这么做对开发人员很不友好。

所以,这套方案虽然比第一套在内存上有些许改善,但我仍认为这套方案极不合理。

增量更新方案

这套方案是我对现在的项目新设计的方案,主要就是吸取前两个方案的经验教训,既能实现数据热更,还需要内存友好,更重要的是对开发人员要尽量无感。

设计思路

下面以UI表的热更需求,给出我现在方案所涉及的类图与代码:

增量热更方案下TableUI相关类图

主工程内的代码:

namespace Project
{
    public class TableUI
    {
        public int Id;
        public string Name;
        public int Type;
        public IHotfixData HotfixData;
        public void Deserialize(Stream stream)
        {
            ...
            HotfixData?.Deserialize(stream);
        }
    }
    
    public interface IHotfixData
    {
        void Deserialize(Stream stream);
    }
}

热更工程内的代码:

namespace Project.Hotfix
{
    public class TableUIHotfixData : IHotfixData
    {
        public string Audio;
        public void Deserialize(Stream stream) { ... }
    }
}

这套方案的核心设计思路,就是数据本身还是以存储在主工程为主

面临热更需求,则在热更工程内实现该类对应的热更数据类,继承IHotfixData接口,将新增的字段放到里面。之后将该类实例化后绑定到TableUI表的HotfixData字段。当对实例进行数据的序列化时,通过调用各自的Deserialize实现。

这样做的好处,对比之前的方案,就是只让热更的数据放在热更工程内,尽可能减少其内存占用。

开发友好

下一个问题,如何做到开发友好?

对于逻辑开发程序员,我当然希望在获取到一个TableUI的实例后,直接通过.就能拿到我所需要的的数据。而现在的矛盾点,则集中在命名空间以及数据来源这两部分,所以我们需要利用设计和C#提供的语法来解决这个困难。


首先我们明确一个新的设计:所有的字段都配有一个Get方法。

namespace Project
{
    public class TableUI
    {
        public int Id;
        public string Name;
        public int Type;
        
        public int GetId() => Id;
        public string GetName() => Name;
        public int GetType() => Type;
        
        public IHotfixData HotfixData;
    }
}

这样的设计,无论TableUI.Id亦或是TableUI.GetId()都可以获得我想要的数据。


然后,在此基础上,我们在热更工程里再利用一下C#的语言特性:

namespace Project.Hotfix
{
    public static class TableUIHotfixDataUtil
    {
        public static string GetAudio(this TableUI table)
        {
            return ((TableUIHotfixData)table.HotfixData).Audio;
        }
    }
}

这样,在热更代码里,我可以使用TableUI.GetAudio()来获取我希望得到的新增的数据字段的内容。


最后,就是见证开发友好的时刻了。

当开发下一版的主工程时,之前的热更数据也已经整合进了主工程。那么主工程里的数据代码就变成了以下这样:

namespace Project
{
    public class TableUI
    {
        public int Id;
        public string Name;
        public int Type;
        public string Audio;
        
        public int GetId() => Id;
        public string GetName() => Name;
        public int GetType() => Type;
        public string GetAudio() => Audio;
        
        public IHotfixData HotfixData;
    }
}

而之前调用TableUI.GetAudio()的代码无需任何修改。

对于逻辑开发程序员来说,底层不是他们关注的重点,他们只需要知道有一个Get方法可以获得我所需要的数据就可以了。

面临的问题

其实这套方案实现之后,也许是限于我们现有的数据系列化与反序列化的方案,也是有一些问题存在的。

现有问题

我们现在的数据是按照二进制进行序列化与反序列化的,这就导致数据文件可以做到比较小、序列化反序列化速度比较快,但是数据的反序列化必须按照序列化时的顺序进行,容错率其实很低。

也正是这一设计,导致我们现在需要对策划配表进行管控,在开发热更版本时:

  1. 主工程内的字段不可删除
  2. 主工程内的字段顺序不可变更
  3. 新增字段只能放在现有字段之后
  4. 主工程内的字段的字段名、字段类型不可变更

这些都是项目开发时的隐藏成本,即便我们可以通过工具实现自动化生成管理,也需要面对策划的各种行为进行跟踪监视,以避免他们犯错。

其实还有一些别的方法可以尽量减少这种掣肘,只是需要多付出一些性能的代价。

可以尝试的改进

当我们开发热更工程时,主工程内的字段当然是应该加以限制的,起码不应该删除或变更类型。所以我们着重解决的就应当是字段顺序问题。

针对这个问题,其实可以考虑使用json、xml作为数据序列化与反序列化的格式。这样,每个字段在加载时根据一个字符串名去加载所需的数据,就可以解决字段顺序所导致的潜藏的问题。

但是我刚刚说过了,这么做的代价就是性能。无论解析json、xml的计算性能,抑或是将他们加载进内存的内存压力,整体性能相较现有的二进制方案都是远远不及的。


以上就是我总结的ILRuntime下的数据热更方案。其实很多细节我没有给出,因为每个项目对待ILRuntime的加载、数据的管理和加载会有区别,所以热更数据如何注册绑定如何序列化不是这篇文章要讲的内容,所以我选择了省略不讲。

既要利用ILRuntime带给我们的热更的便利性,又要避免它潜在的性能大坑,我认为我花了两天去设计实现的这个新方案是能满足我对它的期望的。

©著作权归作者所有,转载或内容合作请联系作者
禁止转载,如需转载请通过简信或评论联系作者。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,937评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,503评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,712评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,668评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,677评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,601评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,975评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,637评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,881评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,621评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,710评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,387评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,971评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,947评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,189评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,805评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,449评论 2 342

推荐阅读更多精彩内容