TiDB 社区智慧合集丨TiDB 相关 SQL 脚本大全
内容提要
这篇文章整理了社区同学提供的一系列TiDB相关SQL脚本,包括缓存表、TSO时间转换、读取历史数据、查询tikv_gc_life_time和tikv_gc_safe_point默认时长、搜索某个用户的TopN慢查询、统计间隔5分钟的数据、反解析digest成SQL文本等内容。同时还介绍了其他查询和管理TiDB的技巧和命令。
延伸解读
脚本覆盖的运维场景
本文整理的脚本覆盖了从日常查询到故障恢复的多个场景,包括缓存表设置、TSO时间转换、历史数据读取、慢查询分析、热点Region查找、数据恢复、批量修改库名、集群升级等。这些脚本大多来自社区实践,可直接用于TiDB的运维和问题排查,但需注意脚本中的示例参数(如IP、端口、用户名)应根据实际环境调整。
历史数据读取的三种方式
文章介绍了读取历史数据的三种方法:AS OF TIMESTAMP语法、系统变量tidb_read_staleness和tidb_snapshot。AS OF TIMESTAMP可用于SELECT和事务,tidb_read_staleness指定从当前时间往前的一段时间范围,tidb_snapshot则设置一个具体时间点。使用这些功能时需注意GC生命周期(tikv_gc_life_time)的限制,超出保留期的历史数据将无法读取。
慢查询与热点分析工具
针对性能问题,文章提供了多个分析脚本:搜索某个用户的TopN慢查询、查询耗时最高的慢SQL并分类(如point_get、coprocessor_process等)、查找读流量排名前10的热点Region、统计读写热点表。这些脚本基于information_schema中的slow_query、cluster_slow_query、tidb_hot_regions等表,能帮助快速定位性能瓶颈,但需注意查询时间范围和数据量,避免对生产环境造成额外压力。
数据恢复与清理的注意事项
文章包含恢复数据的FLASHBACK TABLE语法(适用于drop或truncate)、恢复数据到新数据库的loader工具用法,以及清理大量数据的脚本。FLASHBACK TABLE需在GC时间范围内使用,且可能受表结构变更影响。清理脚本采用分批删除(limit 10000)并循环执行,以减小对TiDB的影响,但需谨慎设置删除条件,避免误删。执行前建议在测试环境验证。
Q&A
TiDB 中如何将 TSO 时间戳转换为可读时间?
有两种方法:1. 使用函数 TIDB_PARSE_TSO,例如 SELECT TIDB_PARSE_TSO(437447897305317376); 2. 使用 pd-ctl 工具,连接 PD 后执行 tso 命令,例如 tiup ctl:v6.4.0 pd -i -u http://pdip:2379 然后输入 tso 437447897305317376。
TiDB 如何读取历史数据?
有三种方式:1. 使用 AS OF TIMESTAMP 语法,可用于 SELECT、START TRANSACTION READ ONLY 和 SET TRANSACTION READ ONLY;2. 通过系统变量 tidb_read_staleness 设置时间范围,如 set @@tidb_read_staleness="-5";3. 通过系统变量 tidb_snapshot 设置快照时间,如 set @@tidb_snapshot="2016-10-08 16:45:26",清空变量则读取最新数据。
如何查询 TiDB 中某个用户的 TopN 慢查询?
可以使用以下 SQL:select query_time,query,user from information_schema.slow_query where is_internal=false and user = "user1" order by query_time desc limit 2; 其中 user1 替换为目标用户名,limit 控制返回条数。
TiDB 中如何查看表的大小?
可以使用以下 SQL 查询表大小:SELECT t.TABLE_NAME, t.TABLE_ROWS, round(t.DATA_LENGTH/1024/1024/1024,2) data_GB, round(t.INDEX_LENGTH/1024/1024/1024,2) index_GB FROM INFORMATION_SCHEMA.TABLES t WHERE table_schema = 'test' and t.table_type='BASE TABLE' order by t.TABLE_ROWS desc; 也可以使用 CONCAT 格式化输出。
TiDB 中如何恢复被 drop 或 truncate 的表?
可以使用 FLASHBACK TABLE 语句:FLASHBACK TABLE target_table_name [TO new_table_name]; 该语句适用于 drop 和 truncate 操作后的数据恢复。
TiDB 中如何绑定执行计划?
可以使用 CREATE BINDING 语句绑定执行计划,默认是 session 级别。例如:create binding for select * from t using select * from t use index(); 也可以使用 show bindings 查看绑定,使用 drop binding 删除绑定。