diamond简述

diamond简述 - 简书
http://www.jianshu.com/p/213c6c158815
为什么说基于数据库做配置存储是比较好的方案

  • 典型的多读少写(类似传统的web服务)

  • 数据库的灾备很成熟,master-master或者master-slave都可以

  • 基于数据库比较容易做权限控制(不只是web界面的权限,还要防止恶意读写配置)
    为什么不存储Properties文件,或者配置文件?

因为存储多个properties文件,或者其它配置文件,会造成比较混乱,用户不能直观的得到所有的配置。即使用key冲突也不能及时的发现。

在XDiamond里是以key/value方式来存储值,一个项目里只有一个key/value的map,这样清晰直观,所见即所得。


需求
为什么需要全局配置中心?

  • 公共配置零散

比如有一个memcached集群,有多个项目同时会用到,那么对于管理者来说,他搞不清楚谁用了这个集群。 对于使用者来说,可能也不清楚一个Memcached Client对象是从哪里来的,使用的是哪个集群。

  • 公共配置修改的问题

比如有一个memcached集群,一开始是3个结点的,后面增加到5个结点。如果这个地址改变了的话,需要下游所有的应用都要修改,耗时耗力,而且容易遗漏。

  • client jar包里的配置问题

一种常见的情景是: 业务方A提供了一个client jar包,业务方B想要使用业务A的功能时,先把业务方A的client jar加到依赖里,然后还要import业务方A的spring配置文件。 业务方A有自己的配置文件,那么业务方A要么自己隐式加载了配置,要么需要业务方B显式地为业务A增加配置。这两种方式都不理想,还可能会导致配置的key冲突的问题。

  • client jar包升级,配置需要升级的问题

业务方B使用了业务方A的client jar包,当业务方A升级了jar,增加了配置,业务方B是否要跟着修改?这样导致流程漫长,而且容易出错。

  • 多个配置文件,导致混乱

项目时间长之后,配置文件会越来越多,逐渐混乱。

  • 配置的安全问题

生产环境的数据库连接信息是写在svn里呢,还是放在生产机器上?能否明确有权限的人员才能看到敏感的配置信息?
为什么不使用zookeeper/etcd做为存储?

优点:

  • 客户端通过watch监听结节,更新比较方便

缺点:

  • 大量连接时,zookeeper压力比较大(360通过增加一个proxy解决)

  • 跨机房同步问题

  • 权限管理

从实际的开源项目来看,基于zookeeper的都没有实现权限管理(如果有误的话,请告之)。如果有应用恶意删除了zookeeper上的配置,将会是一场灾难,而zookeeper通常是没有备份的。

为什么说基于数据库做配置存储是比较好的方案

  • 典型的多读少写(类似传统的web服务)

  • 数据库的灾备很成熟,master-master或者master-slave都可以

  • 基于数据库比较容易做权限控制(不只是web界面的权限,还要防止恶意读写配置)
    为什么不存储Properties文件,或者配置文件?

因为存储多个properties文件,或者其它配置文件,会造成比较混乱,用户不能直观的得到所有的配置。即使用key冲突也不能及时的发现。

在XDiamond里是以key/value方式来存储值,一个项目里只有一个key/value的map,这样清晰直观,所见即所得。

XDiamond配置中心的解决方案

  • 类maven的依赖关系,抽取公共配置,通过依赖关系解决公共配置,client jar配置的问题

  • 支持足够复杂的维度,参考maven:groupId, artifactId, version(仅有group维度不够)

  • 支持多种环境/profile(实际业务是复杂的,仅支持product/dev/test不够)

  • 一个应用只有一个最终的properties,界面所见即所得

  • 结合Spring PropertyPlaceholder 机制,应用轻松迁移

  • 应用启动时打印配置,避免隐藏加载

  • 通过权限控制,结合Secret key,保证配置的安全

  • 配置缓存在本地,防止应用因为网络问题而不能启动
    权限设计

  • Group里的用户有access等级:owner, master, developer, reporter, guest

  • Profile可以设置access等级,只有owner/master的用户才可以查看修改product环境下的配置

  • 组/用户管理,可以同步LDAP数据

  • 用secretkey防止恶意访问
    XDiamond Server

  • tcp端口5678,长连接,主动推送修改的配置

  • http api

  • 配置以key/value方式保存


XDiamond Client

客户端用以下的参数来获取配置

  • groupId

  • artifactId

  • version

  • profile

  • secretkey(可选)

对于应用来说,获取到的是一个properties对象,结合Spring的PropertyPlaceholderConfigurer。

对于应用来说,迁入迁出成本非常低。迁入只要在spring xml里增加一个Bean,迁出可以直接改回传统的加载Properties文件的方式。应用不需要编写任何代码,和Spring结合非常简单。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,293评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,604评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,958评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,729评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,719评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,630评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,000评论 3 397
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,665评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,909评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,646评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,726评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,400评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,986评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,959评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,996评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,481评论 2 342

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,594评论 18 139
  • 需求 为什么需要全局配置中心? - 公共配置零散 比如有一个memcached集群,有多个项目同时会用到,那么对于...
    胖虎大哥阅读 801评论 0 2
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 46,732评论 6 342
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,424评论 25 707
  • 今天爸爸回来了,一个多月没看见爸爸了,看见爸爸很高兴飞奔过去抱住爸爸,爸爸问他想我吗?儿子赶紧点头说想了。爸爸问他...
    小燕子_9d7e阅读 197评论 0 2