2019-08-13

day31 综合架构备份服务章节

课程介绍

1. rsync备份服务传输数据原理
2. rsync备份服务命令参数说明
3. rsync备份服务企业应用方式
4. rsync备份服务常见异常问题
5. rsync备份服务全网备份项目(上机测验练习题)

课程知识回顾部分

1. rsync 分为全量备份 增量备份
2)rsync 有本地备份 远程备份 守护进程模式备份三种模式
3)rsync守护进程方式部署
a 确认软件是否安装/安装软件程序
b 编写配置文件
c 创建虚拟用户 (不可登录的虚拟用户)
d 创建密码文件(改权限为600)
e 创建传输文件目录backup (改属主属组)

2. rsync守护进程模式备份数据原理
第一步: 客户端 --> 服务端 发送请求传输数据信息 执行命令 有认证用户信息 传输数据信息
第二步: 服务端 --> 客户端 接受传输数据信息 审核认证用户 接着 发送回复信息 需要认证密码
第三步: 客户端 --> 服务端 发送请求传输数据信息 发送认证密码信息
第四步: 服务端 --> 客户端 发送确认信息
第五步: 客户端 --> 服务端 用户携带数据通过网络进行传输 需要对用户身份进行替换---rsync(配置文件指定)
第六步: 服务端 --> 客户端 发送数据存储完毕确认信息 将数据保存到备份目录中 备份目录权限属主为rsync 修改备份目录的属主属组信息

image.png

错误整合一:
chgrp ".hosts.rFMg5m" (in backup) failed: Operation not permitted (1)
错误为什么产生?

chgrp(修改数据属组信息) fake super = yes (伪装超级用户管理员)此配置未配置好 所以在最后一步将 数据保存在备份目录时修改备份目录为属主属组信息被阻止 更改配置后错误消失

rsync命令参数

-a,--archive(归档模式参数;等价于-rlptgoD)包含此列所有参数
-r,--recursive(递归传输目录)
-l,--links(备份传输软链接文件保持属性不变)只是快捷方式
-L,--copy-links(备份传输软链接文件时,会将源文件内容信息进行备份)快捷方式指向东西都会传
-p,--perms(保持权限信息不变)644 755
-t,--times(保持文件修改时间不变)
-g,--group&-o,--owner(保持文件属组信息不变&属组信息不变)
-D,--devices(保持设备文件属性信息不变 c b s )

-v,--verbose(显示过程,结果信息)
-P,--partial(显示传输进度信息)
--exclude=PATTERN(根据指定数据信息进行单个排除)
--exclude-from=FILE(根据指定文件进行批量排除数据信息)
--delete(进行无差异传输 同步目录数据时,保证目录中数据信息也是一模一样)
-z,--compress(在传输文件时进行压缩传输,提高传输效率)
--bwlimit=RATE(限制传输速率)
--password-file(实现免交互传输数据信息)

补充:客户端部署过程

第一个里程:创建生成密码文件
echo oldboy:123>/etc/rsync.password

第二个里程:在客户端实现免交互传输
reync -avz /oldboy/oldboy.txt rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password

rsync守护进程备份服务企业应用

守护进程模式:
推: 客户端--数据备份 --备份服务器
拉: 客户端--数据恢复 --备份服务器
服务端--数据备份-- 客户端(部署rsync守护进程)

企业多模块应用过程:

1. 守护进程模式多模块实现
第一个里程: 配置文件中创建多个模块信息
添加多个模块信息 /etc/rsyncd.conf

[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
[dev_backup]
comment = "backup dir by oldboy"
path = /backup/dev_dir/
[dba_backup]
comment = "backup dir by oldboy"
path = /backup/dba_dir/
第二个里程: 确认指定模块路径是否存在/权限是否正确
第三个里程: 重启rsync服务

2. 守护进程数据排除功能
方法一:
第一个里程: 创建环境
mkdir /oldboy/oldboy{01..03}
touch /oldboy/oldboy{01..03}/{a..c}.txt
第二个里程: 利用--exclude 排除需要排除的文件相对路径信息(相对于你要传输的文件的所在路径)
rsync -avz /oldboy/ --exclude=oldboy01/ --exclude=oldboy03/b.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
说明:利用--exclude排除数据信息,需要利用相对路径指定需要排除的数据,相对路径是相对于同步目录而言

方法二:
利用rsync命令参数实现:
--exclude-from
第一个里程: 编写排除数据信息文件
[root@nfs01 oldboy]# cat execlude.txt
oldboy01/a.txt
oldboy02/b.txt
oldboy03/c.txt
第二个里程: 利用命令参数进行排除多个数据
rsync -avz /oldboy/ --exclude from=/oldboy/execlude.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password

方法三:利用服务端配置文件参数
exclude --- 指定数据进行排除同步 == 客户端命令参数 --exclude
exclude from --- 指定多个数据排除文件信息,排除多个数据 == 客户端命令参数 --exclude-from
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude = oldboy01/a.txt oldboy02/b.txt
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude from = /backup/sa_dir/execlude.txt
补充: rsyncd.conf配置文件说明
全局配置: 在模块上面配置的信息,为全局配置,会影响所有模块
局部配置: 在模块里面配置的信息,为局部配置,只会影响指定模块

3. 守护进程模式数据无差异同步
--delete
企业应用: 保证数据同步一致 存储服务器数据 == 备份服务器数据
PS: --delete参数,一定要慎用,容易造成误删数据

4. 守护进程模式创建子目录功能
[root@nfs01 oldboy]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::sa_backup/oldboy/ --password-file=/etc/rsync.password
sending incremental file list
created directory oldboy
hosts
sent 219 bytes received 72 bytes 582.00 bytes/sec
total size is 335 speedup is 1.15

5. 守护进程模式访问策略功能
白名单配置/黑名单配置
参见图示

白/黑名单配置图示.png

6. 守护进程模式列表功能说明 (了解)
list = false --- 可以实现客户端列表显示备份服务端所有模块信息
[root@nfs01 oldboy]# rsync rsync_backup@172.16.1.41::
sa_backup "sa backup dir"
dev_backup "dev backup dir"
dba_backup "dba backup dir"

课程知识总结:

1) rsync服务传输原理
2) rsync服务命令参数
3) rsync服务企业应用
a 多模块配置应用
b 数据传输排除功能 局部配置/全局配置
c 数据传输无差异同步
d 创建子目录功能
e 守护进程访问策略
f 守护进程列表功能

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 195,980评论 5 462
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 82,422评论 2 373
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 143,130评论 0 325
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,553评论 1 267
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,408评论 5 358
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,326评论 1 273
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,720评论 3 386
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,373评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,678评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,722评论 2 312
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,486评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,335评论 3 313
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,738评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,009评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,283评论 1 251
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,692评论 2 342
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,893评论 2 335

推荐阅读更多精彩内容