网站首页 > 技术文章 正文
1。逻辑读 物理读如何找到对应的记录数据
Linux文件系统页(OS Page)的大小是4KB。同样地,MySQL作为一个程序也是有最小交互单位的,即InnoDB Buffer Pool能处理的最小单位,可以通过以下SQL命令查看:
l逻辑存储单元分为
段: 一个表可以理解为一个段(数据段 索引段 回滚段)
区: 段是由区组成 (一个段可以分为4个区) 区是由64个连续的页组成
页:一个页的大小就是16kb 一个区的大小就是 16kb * 64 =1M
一个页里面包含了多个page 页是磁盘io的最小单位
存在磁盘中的我们叫做页 在内存中叫buffer 16kb buffer和页是一一对应的
每个buffer的状态分为三种:
free buffer 没有被使用的buffer
clean buffer是和磁盘中的数据一致的buffer
dirty buffer 与磁盘中的数据不一致的数据 就是脏的
内存buffer的管理 (量)
insert buffer------和数据页一样也是物理页的一个组成部分
是将 update insert del 等操作产生的io 由随机的io边为顺序的io(insert buffer就是起到缓存的作用) 避免随机io产生的性能 提高数据库的io读写性能,将普通索引转化为顺序io的顺序操作
当数据库插入很慢时 我们需要添加insert buffer的大小 (其只要求是普通索引) 默认最大占比为50%
dubble write (数据的可靠性)由2M的内存空间组成
Double write 带给innodb存储引擎的是数据的可靠性.
起因:当数据库宕机时,可能发生数据库写一个页面,而这个页只写了一部分,这就是所谓的partial page write.
恢复原理:mysql在恢复的时候是通过检查page的checksum来决定这个page是否需要恢复的,checksum就是当前这个page最后一个事务的事务号,如系统找不到checksum,mysql就无法对该行数据执行写入操作。。
Double write 是innodb在tablespace上的128个页(2个区)2MB;
原理:为了解决partial page write问题,当mysql将脏数据flush 到data file的时候,先使用memcopy将脏数据复制到内存中的double write buffer,之后通过double write buffer再分2次,每次写入1MB到共享表空间,然后马上调用fsync函数,同步到磁盘上,避免缓冲带来的问题,在这个过程中,doublewrite是顺序写,开销并不大,在完成doublewrite写入后,再将double write buffer写入各表空间文件,这时是离散写入。
聚集索引 是顺序性的存放和 普通索引是随机的存放的 数据是离散插入的
对于非聚集索引的插入或者update,purge等操作,并非每一次直接插入索引页,而是把若干对于同一页面的更新缓存起来合并为一次性操作
随机IO—顺序IO 避免随机IO带来性能消耗,提高写性能。
原理:
a:先判断插入的非聚集索引页是否在缓冲池中
b:如果在,直接插入
c:如果不在,先放入插入缓冲区中,欺骗数据库,这个非聚集的索引已经插入到叶子节点了。
d:然后再以一定频率执行插入缓冲和非聚集索引页子节点的合并操作
自适应hash索引
Innodb存储引擎会监控对表上索引的查找,如果观察到建立哈希索引可以带来速度上的提升,则建立哈希索引,所以称之为自适应的。
自适应哈希索引通过缓冲池的B+树构造而来,因此建立的速度很快。而且不需要将整个表都建hash index,innodb会自动根据访问频率和模式来为某些页建立哈希索引。
启用自适应hash index后,读写速度提高2倍,辅助索引的连接操作,性能提高5倍(left join 提高五倍的性能)
问题 如何解决处理数据库中某些表是 myisam的数据引擎改为innodb
查询对应的引请表
SELECT table_name, engine FROM information_schema.tables WHERE table_schema = 'your_database_name';
整理并且批量修改
ALTER TABLE table_name ENGINE = InnoDB;
- 上一篇: 块存储是什么?核心原理和作用是什么?
- 下一篇: 宇宙科幻文明系列:宇宙法则——宇宙构成元素(1)
猜你喜欢
- 2025-04-26 《我的世界》机械动力物流元件合成表与功能详解
- 2025-04-26 BSD、Solaris、Unix 的文件系统: UFS/UFS2、ZFS 及其他存储技术
- 2025-04-26 电商系统购物车模块设计
- 2025-04-26 AI如何将“一篇文章”一键转换成“讲解视频”?
- 2025-04-26 存储过程:强大与便捷的完美融合
- 2025-04-26 业务对象、数据实体、物理表傻傻分不清楚
- 2025-04-26 Win11学院:如何从Win10(MBR)无损数据升级到Win11(GPT)
- 2025-04-26 电脑存储清理对比:Macbook更强还是Windows老练?
- 2025-04-26 宇宙科幻文明系列:宇宙法则——宇宙构成元素(1)
- 2025-04-26 块存储是什么?核心原理和作用是什么?
- 04-27JavaScript注释:单行注释和多行注释详解
- 04-27贼好用的 Java 工具类库
- 04-27一文搞懂,WAF阻止恶意攻击的8种方法
- 04-27详细教你微信公众号正文页SVG交互开发
- 04-27Cookie 和 Session 到底有什么区别?
- 04-27教你一招,给你的店铺,网站,博客等添加“一键分享”功能
- 04-27按DeepSeek AI的规划,自学开发小程序第7天
- 04-27《JAVASCRIPT高级程序设计》第二章
- 最近发表
- 标签列表
-
- cmd/c (64)
- c++中::是什么意思 (83)
- 标签用于 (65)
- sqlset (59)
- ps可以打开pdf格式吗 (58)
- phprequire_once (61)
- localstorage.removeitem (74)
- routermode (59)
- vector线程安全吗 (70)
- & (66)
- java (73)
- org.redisson (64)
- log.warn (60)
- cannotinstantiatethetype (62)
- js数组插入 (83)
- resttemplateokhttp (59)
- gormwherein (64)
- linux删除一个文件夹 (65)
- mac安装java (72)
- reader.onload (61)
- outofmemoryerror是什么意思 (64)
- flask文件上传 (63)
- eacces (67)
- 查看mysql是否启动 (70)
- 无效的列索引 (74)