频繁查询mysql数据库导致崩溃 5
使用了ibatis的级联查询,有三张表ABC表A-B是一对多B-C也是一对多,查询A的数据的时候就把B中的数据关联查询出来,查询B的数据的时候就把C中的数据查询出来,一次...
使用了ibatis的级联查询,有三张表 A B C 表 A-B是一对多 B-C也是一对多,
查询A的数据的时候就把B中的数据关联查询出来,查询B的数据的时候就把C中的数据查询出来,一次性将数据全部查询出来就回去占用很多的CPU,数据量大的时候可能会导致服务器挂掉,所以我就把A的数据一条一条的查询出来,然后关联查询B和C的数据,就会有所改善,但是随之而来又有问题,就会频繁的访问数据库,导致我的MYSQL所在的服务器当掉…… 哎 各位大侠有没有好的点子? 比如:连接池 我用的 ibatis struts2 spring3 展开
查询A的数据的时候就把B中的数据关联查询出来,查询B的数据的时候就把C中的数据查询出来,一次性将数据全部查询出来就回去占用很多的CPU,数据量大的时候可能会导致服务器挂掉,所以我就把A的数据一条一条的查询出来,然后关联查询B和C的数据,就会有所改善,但是随之而来又有问题,就会频繁的访问数据库,导致我的MYSQL所在的服务器当掉…… 哎 各位大侠有没有好的点子? 比如:连接池 我用的 ibatis struts2 spring3 展开
3个回答
2021-03-03 · MySQL开源数据库领先者
关注
展开全部
MySQL 在崩溃恢复时,会遍历打开所有 ibd 文件的 header page 验证数据字典的准确性,如果 MySQL 中包含了大量表,这个校验过程就会比较耗时。 MySQL 下崩溃恢复确实和表数量有关,表总数越大,崩溃恢复时间越长。另外磁盘 IOPS 也会影响崩溃恢复时间,像这里开发库的 HDD IOPS 较低,因此面对大量的表空间,校验速度就非常缓慢。另外一个发现,MySQL 8 下正常启用时居然也会进行表空间校验,而故障恢复时则会额外再进行一次表空间校验,等于校验了 2 遍。不过 MySQL 8.0 里多了一个特性,即表数量超过 5W 时,会启用多线程扫描,加快表空间校验过程。
如何跳过校验MySQL 5.7 下有方法可以跳过崩溃恢复时的表空间校验过程嘛?查阅了资料,方法主要有两种:
1. 配置 innodb_force_recovery可以使 srv_force_recovery != 0 ,那么 validate = false,即可以跳过表空间校验。实际测试的时候设置 innodb_force_recovery =1,也就是强制恢复跳过坏页,就可以跳过校验,然后重启就是正常启动了。通过这种临时方式可以避免崩溃恢复后非常耗时的表空间校验过程,快速启动 MySQL,个人目前暂时未发现有什么隐患。2. 使用共享表空间滑敏替代独立表空间这样就不需要打开 N 个 ibd 文件了,只哗碰需要打开一个 ibdata 文件即可,大大节省了校验时间。自从听了姜老师讲过使用共享表空间替代独立表空间解决 drop 大表时性能抖动的原理后,感觉共享表空间在很多业务环境下,反而更有优势。
临时冒出另外一种解决想法,即用 GDB 调试崩溃恢复,通过临时修改 validate 变量值让 MySQL 跳过表空间验证过程,然后让 MySQL 正常关闭,重新启动就可以正常启动了。但是实际测试发现,如果以 debug 模式运行,确实可以临时修改 validate 变量,跳过表信芦枝空间验证过程,但是 debug 模式下代码运行效率大打折扣,反而耗时更长。而以非 debug 模式运行,则无法修改 validate 变量,想法破灭。
如何跳过校验MySQL 5.7 下有方法可以跳过崩溃恢复时的表空间校验过程嘛?查阅了资料,方法主要有两种:
1. 配置 innodb_force_recovery可以使 srv_force_recovery != 0 ,那么 validate = false,即可以跳过表空间校验。实际测试的时候设置 innodb_force_recovery =1,也就是强制恢复跳过坏页,就可以跳过校验,然后重启就是正常启动了。通过这种临时方式可以避免崩溃恢复后非常耗时的表空间校验过程,快速启动 MySQL,个人目前暂时未发现有什么隐患。2. 使用共享表空间滑敏替代独立表空间这样就不需要打开 N 个 ibd 文件了,只哗碰需要打开一个 ibdata 文件即可,大大节省了校验时间。自从听了姜老师讲过使用共享表空间替代独立表空间解决 drop 大表时性能抖动的原理后,感觉共享表空间在很多业务环境下,反而更有优势。
临时冒出另外一种解决想法,即用 GDB 调试崩溃恢复,通过临时修改 validate 变量值让 MySQL 跳过表空间验证过程,然后让 MySQL 正常关闭,重新启动就可以正常启动了。但是实际测试发现,如果以 debug 模式运行,确实可以临时修改 validate 变量,跳过表信芦枝空间验证过程,但是 debug 模式下代码运行效率大打折扣,反而耗时更长。而以非 debug 模式运行,则无法修改 validate 变量,想法破灭。
今至电子科技有限公司
2024-08-23 广告
2024-08-23 广告
数据库备份是确保数据安全与业务连续性的关键环节。我们上海今至电子科技有限公司高度重视数据保护,定期执行全面的数据库备份策略。这包括使用先进工具和技术,对关键业务数据进行自动化备份,并存储在安全可靠的外部存储介质或云端。通过定期验证备份的完整...
点击进入详情页
本回答由今至电子科技有限公司提供
展开全部
你换一台好的服务器就行了,最好是能挂中型ERP系统数据库那种。
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
用框架,就受限于框架,拿到源码改闭棚一下吧,加入 memcache 加一层缓存。没有memcache 使用文件缓存也行,效果肯定轿哗则有提升。
做的项目多了,反而不芦旅在喜欢用框架。
做的项目多了,反而不芦旅在喜欢用框架。
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询