- 特点:行锁设计、支持mvcc、支持外键、提供一致性非锁定读,同时设计被用来最有效的利用及使用内存和cpu
- Innodb创始人(1964芬兰赫尔辛基)linux linus的大学校友
- ACID是指
- 原子性(Atomic)
- 一致性(consistent)
- 隔离性(isolated)
- 持久性(durable)
- Innodb存储引擎架构
后台线程的主要作用是负责刷新内存池中的数据,保证内存池中的数据缓存是最新的数据,此外将已刷新的数据刷新到磁盘文件,同时保证数据库发生异常情况下innodb能恢复到正常运行状态
- 后台线程(Innodb存储引擎是多线程的模型)
- Master thread
- Io thread 异步io
- Purge thread 垃圾清理、回收
- Page cleaner thread 脏页刷新操作
- 内存
- 数据缓冲池
- 提高数据库整体性能,协调cpu速度与磁盘速度的鸿沟
- 配置参数:innodb_buffer_pool_size
- 缓存对象:索引页、数据页、undo页、insert buffer 、自适应hash索引等
- 数据缓冲池
可以配置多个缓存实例来提高并发:innodb_buffer_pool_instances
-
内存管理算法(LRU List、Free List、Flash List)
- LRU List 最近最少使用
- 及最频繁使用的页在LRU列表的前端,最少使用的页在LRU列的尾端,当缓冲池不能存放新读取到的页时,首先释放LRU列表的尾端的页
- Innodb对LRU传统算法进行了优化,新数据页不是直接放到LRU首端,而是放到midpoint位置(可通过innodb_old_blocks_pct配置),midpoint之后的为old之前的为new(最活跃的热点数据),使用midpoint的目的是为了不让一些并非真正的活跃热点数据占用了new列表空间
- LRU列表用来管理缓存池中页的可用性,Flash列表用来管理将页刷回磁盘,二者互不影响
- LRU List 最近最少使用
-
重做日志缓冲(redo log buffer)
- 默认8m可通过innodb_log_buffer_size设置
- 以下几种情况会把缓冲区的重做日志刷新到磁盘
- Master thread每秒刷新
- 每个事务提交
- 当重做日志缓冲池剩余空间小于1/2
额外的内存池
-
Checkpoint技术
- 为了避免发生数据丢失问题,当前数据库系统普遍采用write ahead log策略,即先写重做日志再修改页,当发生宕机时可通过重做日志来恢复
- Checkpoint技术是为了解决以下几个问题
- 缩短数据库恢复的时间
- 缓冲池不够用时,将脏页刷新到磁盘
- 重做日志不可用时,刷新脏页
- Checkpoint分类
- Sharp Checkpoint
- 发生在数据库关闭时将所有脏页刷新回磁盘 默认工作方式配置是innodb_fast_shutdown=1
- Fuzzy Checkpoint
- 发生在运行时,刷新一部分到磁盘而不是全部,即以下四种情况
- Master thread checkpoint 每秒或每10秒
- FLUSH_LRU_LIST checkpoint
- Async/sync flash checkpoint 当重做日志不可用时
- Dirty page too much checkpoint 当缓冲区脏页数据过多时
- 发生在运行时,刷新一部分到磁盘而不是全部,即以下四种情况
- Sharp Checkpoint
-
Master thread 工作方式
- 随着版本的不断升级,不断优化1秒操作和10秒刷新操作的算法,使其性能不断地提升
-
Innodb关键特性
- 插入缓冲(insert buffer)保证innodb的性能上的提升
- 只能应用在非唯一辅助索引插入操作
-
两次写(double wirte)保证innodb的数据页的可靠性
- 插入缓冲(insert buffer)保证innodb的性能上的提升
如果写入磁盘过程中崩溃,innodb可从共享空间中的doublewrite找到该页的副本,将其复制到表空间文件,再应用重做日志
可以通过配置skip_innodb_doublewrite来禁止使用doublewrite功能,不过对于需要提供数据高可靠性的主服务器,任何时候用户都应该确保开启此功能
- 自适应哈希索引(adaptive hash index)AHI
- Innodb会监控对表上各个索引页的查询,如果观察到建立哈希索引可以带来速度提升,则建立哈希索引
- 会自动根据访问的频率和模式自动为热点页建立哈希索引
- 要求:对这个页的连续访问模式必须是一样的(及where后面查询条件一样,值也一样)
- 异步io(Asynchronous io)AIO
- 刷新邻接页(flush neighbor page)
- 工作原理:当刷新一个脏页时,innodb引擎会检测该页所在区(extent)的所有页,如果是脏页那么一起刷新,如果是固态硬盘有较高的iops性能的磁盘建议将其设置为0关闭此特性innodb_flush_neighbors
- 自适应哈希索引(adaptive hash index)AHI
-
启动、关闭与恢复
- Innodb_fast_shutdown 默认为1
- Innodb_force_recovery 默认为0