记一次大库大表的治理过程
💡
原文中文,约10400字,阅读约需25分钟。
📝
内容提要
该文章讨论了MySQL数据库的治理问题,包括降低磁盘使用率、降低主库QPS和消除慢SQL。介绍了大表数据结转、拦截无参数查询、查询切从库和慢SQL治理等治理方案。讨论了分库分表和迁云作为可能的治理方案。
🎯
关键要点
- 文章讨论MySQL数据库治理问题,包括降低磁盘使用率、主库QPS和消除慢SQL。
- 数据库目前是一主两从,硬件资源过保,存在故障风险和性能问题。
- 磁盘空间占用情况较高,急需通过数据结转或删除来降低占用比例。
- 存在大表问题,多个业务线共用一个应用导致数据混合。
- 主库QPS远高于从库,需将部分查询切换到从库以降低主库负担。
- 慢SQL查询影响系统稳定性,需进行治理。
- 治理目标包括降低磁盘使用率、降低主库QPS和消除慢SQL。
- 治理方案包括大表数据结转、拦截无参数查询、查询切换到从库。
- 通过数据结转,成功降低470G磁盘空间占用。
- 拦截无参数查询有效避免了因无参查询导致的慢SQL。
- 通过分析接口调用量,成功将主库QPS降低30%。
- 慢SQL治理取得显著成效,10s以上的慢SQL完全消除,5s以上消除80%。
- 分库分表和迁云作为未来可能的治理方案,但需谨慎评估风险和成本。
➡️