事物四大特性实现原理,-日志,数据备份,主从复制,高可用架构与高性能架构.md

事物四大特性实现原理:

mysql中其实还存了redo 与 undo,

undo记录了事物开始时的状态, 如果回滚, 就能根据undo回到当初的状态, 从而实现原子性,一致性

redo在commit时记录事物里做的操作, 实现持久性

1. 日志

  1. 错误日志

    在mysql的配置文件中的[mysqld]配置路径
    vim /etc/my.cnf
    log_error=/var/log/mysql.log
    
    cat /var/log/mysql.log
    分析其中的[error]
    
    
  2. 二进制日志 (binlog,逻辑型日志)

    1. 作用: 记录所有变更类的语句
        DDL,DCL :以语句方式(statement)记录
        DML(已提交的事务语句):默认是以行模式记录(row模式,数据行的变化)
        可以做数据恢复和操作的审计
    2. 配置方法
     在mysql的配置文件中的[mysqld]配置路径
     vim /etc/my.cnf
     log_bin=/opt/mysql/data/mysql-bin
     binlog_format=row
     server_id=6
        sync_binlog=1
    3. 查看日志信息
     mysql> show binary logs;
     mysql> show master status;
    4. 日志内容查看
     按事件查看日志内容
     mysql> show binlog events in 'mysql-bin.000012';
     直接查看日志内容
     [root@standby data]# mysqlbinlog --base64-output=decode-rows -vvv /opt/mysql/data/mysql-bin.000012 |more
    5. 截取二进制日志(截取mysql-bin.000012下的219到186613条记录)
     [root@standby data]# mysqlbinlog --start-position=219 --stop-position=186613 /opt/mysql/data/mysql-bin.000012 >/tmp/binlog.sql
    
    
  3. 慢日志(slow-log): 查询时长超过一定时间的查询语句会被记录

    配置
    slow_query_log=1
    slow_query_log_file=/opt/mysql/data/standby-slow.log
    long_query_time=1    
    log_queries_not_using_indexes=1
    
    使用Box
    Anemometer基于pt-query-digest将MySQL慢查询可视化
    
    

2. 数据备份

1\. 将表t1数据存到txt文件中
mysql> select xxxx from t1  into outfile '/tmp/redis.txt'

2\. 将表t1数据存到Redis中
[root@standby /]# mysql -uroot -p123 -e "select concat(
                    'hmset city_',id,' id ', id,
                    ' name ',name,' countrycode ',countrycode,
                    ' district ',district,' population ',population
                  ) from world.city limit 10 "|redis-cli

3\. mysqldump 工具 
3.1 全库备份 , 备份sql语句
[root@standby /]# mysqldump -uroot -p123 -A >/backup/full.sql

3.2 备份一个或多个指定库
[root@standby /]# mysqldump -uroot -p123 -B world bbs  >/backup/wb.sql

3.3 备份单库中的表
mysqldump -uroot -p123  world city country  >/backup/ccc.sql

--master-data=2       备份时记录二进制日志的状态
--single-transaction  开启innodb热备功能
-R 
--triggers

完整备份语句 
[root@standby /]# 
mysqldump -uroot -p123 -A --master-data=2 --single-transaction -R --triggers >/backup/full.sql

3. 主从复制

两台服务器A与B , A为主服务器, B为从服务器 , A与B保持一比一的状态, 当A服务器挂了立马切换B服务器

基于二进制日志完成的

首先创建两个mysql实例 https://www.jianshu.com/p/e1337510327b

主 ------> 从
3307---->3308

1. 主库的操作
主库开启二进制日志
vim /data/3307/my.cnf 
log_bin=/data/3307/mysql-bin

启动3307
[root@standby 3307]# systemctl restart mysqld3307

3307中创建复制用户
[root@standby backup]# mysql -S /data/3307/mysql.sock
grant replication slave on *.* to repl@'10.0.0.%' identified by '123';

查看3307状态, 
mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000001 |      154 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+

File 为当前使用的2进制日志
Position 为最新的数据位置

2. 从库操作
3308节点开启主从复制功能
[root@standby 3307]# mysql -S /data/3308/mysql.sock
mysql> CHANGE MASTER TO
  MASTER_HOST='10.0.0.200',  # 主库的ip
  MASTER_USER='repl',    # 之前创建的复制用户的username
  MASTER_PASSWORD='123', # 之前创建的复制用户的PASSWORD
  MASTER_PORT=3307,      # 主库端口号
  # 一下两个为之前主库查到的状态值, 也就是从主库的这个位置开始同步
  MASTER_LOG_FILE='mysql-bin.000001',  
  MASTER_LOG_POS=154;

 mysql> start slave; # 开启从库
 mysql> show slave status\G 查看从库的状态

 如果从库的状态有以下两个代表ok了
 Slave_IO_Running: Yes
 Slave_SQL_Running: Yes

4. 高可用架构与高性能架构

  1. 高可用架构的分级29级 , 39级 , 49级 , 59级

    层级 每年工作的时间占比 一年down机时间 评价
    29级 99% 1%*365D=3.65D = 87.6h 垃圾, 没法用
    39级 99.9% 0.1%*365D = 8.76h 比较好
    49级 99.99% 0.876h = 52.56min 比较牛逼
    59级 99.999% 5. 256min 很牛逼了
  2. MySQL高可用架构介绍

    MHA
    MGR + Mysql router + mysql shell===>Mysql Innodb Cluster==>mongodb sharding cluster
    PXC
    galera cluster
    
    
  3. 高性能架构

    读写分离中间件
        atlas  360在用   C++编写
        maxscale mariadb
        proxySQL 
        DRDS(需要购买, 阿里的产品)
        mysql router
    
    分布式架构
     分片集群中间件
         Mycat 
            DBLE 
            TDDL
            DRDS
    
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,362评论 5 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,330评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,247评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,560评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,580评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,569评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,929评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,587评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,840评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,596评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,678评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,366评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,945评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,929评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,165评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,271评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,403评论 2 342

推荐阅读更多精彩内容