TiDB 5.0.2 Release Notes

发版日期：2021 年 6 月 10 日

TiDB 版本：5.0.2

兼容性更改

Tools
- TiCDC
  - 在 cdc cli changefeed 命令中废弃 --sort-dir 参数，用户可在 cdc server 命令中设定 --sort-dir #1795

新功能

TiKV
- 默认开启 Hibernate Region 特性 #10266

提升改进

TiDB
- 当内存中的统计信息缓存是最新的时，避免后台作业频繁读取 mysql.stats_histograms 表造成高 CPU 使用率 #24317
TiKV
- BR 支持 S3 兼容的存储（基于 virtual-host 寻址模式）#10243
- 为 TiCDC 扫描的速度添加背压 (back pressure) 功能 #10151
- 减少 TiCDC 进行初次扫描的内存使用量 #10133
- 提升了悲观事务中 TiCDC Old Value 的缓存命中率 #10089
- 让 Region 分裂更均匀，缓解有写入热点时 Region 大小的增长速度超过分裂速度的问题 #9785
TiFlash
- 优化锁操作以避免 DDL 语句和读数据相互阻塞
- 支持 INTEGER 和 REAL 类型转化为 REAL 类型
Tools
- TiCDC
  - 添加关于数据表内存使用情况的监控 #1885
  - 优化排序阶段的内存和 CPU 使用 #1863
  - 删除了一些可能让用户困惑的无用日志信息 #1759
- Backup & Restore (BR)
  - 优化了一些含糊的报错信息 #1132
  - 支持检查备份的版本信息 #1091
  - 支持备份和恢复 mysql schema 下的系统表 #1143 #1078
- Dumpling
  - 修复备份失败却没有错误输出的问题 #280

Bug 修复

TiDB
- 修复了在某些情况下，使用前缀索引和 Index Join 导致的 panic 的问题 #24547 #24716 #24717
- 修复了 point get 的 prepare plan cache 被事务中的 point get 语句不正确使用的问题 #24741
- 修复了当排序规则为 ascii_bin 或 latin1_bin 时，写入错误的前缀索引值的问题 #24569
- 修复了正在执行的事务被 GC worker 中断的问题 #24591
- 修复了当 new-collation 开启且 new-row-format 关闭的情况下，点查在聚簇索引下可能出错的问题 #24541
- 为 Shuffle Hash Join 重构分区键的转换功能 #24490
- 修复了当查询包含 HAVING 子句时，在构建计划的过程中 panic 的问题 #24045
- 修复了列裁剪优化导致 Apply 算子和 Join 算子执行结果错误的问题 #23887
- 修复了从 Async Commit 回退的主锁无法被清除的问题 #24384
- 修复了一个统计信息 GC 的问题，该问题可能导致重复的 fm-sketch 记录 #24357
- 当悲观锁事务收到 ErrKeyExists 错误时，避免不必要的悲观事务回滚 #23799
- 修复了当 sql_mode 包含 ANSI_QUOTES 时，数值字面值无法被识别的问题 #24429
- 禁止如 INSERT INTO table PARTITION (<partitions>) ... ON DUPLICATE KEY UPDATE 的语句从 non-listed partitions 读取数据 #24746
- 修复了当 SQL 语句包含 GROUP BY 以及 UNION 时，可能会出现的 index out of range 的问题 #24281
- 修复了 CONCAT 函数错误处理排序规则的问题 #24296
- 修复了全局变量 collation_server 对新会话无法生效的问题 #24156
TiKV
- 修复了由于读取旧值而导致的 TiCDC OOM 问题 #9996 #9981
- 修复了聚簇主键列在次级索引上的 latin1_bin 字符集出现空值的问题 #24548
- 新增 abort-on-panic 配置，允许 TiKV 在 panic 时生成 core dump 文件。用户仍需正确配置环境以开启 core dump。 #10216
- 修复了 TiKV 不繁忙时 point get 查询性能回退的问题 #10046
PD
- 修复在 store 数量多的情况下，切换 PD Leader 慢的问题 #3697
- 修复删除不存在的 evict leader 调度器时出现 panic 的问题 #3660
- 修复 offline peer 在合并完后未更新统计的问题 #3611
TiFlash
- 修复并发复制共享 Delta 索引导致结果错误的问题
- 修复当存在数据缺失的情况下 TiFlash 无法启动的问题
- 修复旧的 dm 文件无法被自动清理的问题
- 修复 TiFlash 在 Compaction Filter 特性开启时可能崩溃的问题
- 修复 ExchangeSender 可能传输重复数据的问题
- 修复了从 Async Commit 回退的锁无法被 TiFlash 清除的问题
- 修复当 TIMEZONE 类型的转换结果包含 TIMESTAMP 类型时返回错误结果的问题
- 修复 TiFlash 在 Segment Split 期间异常退出的问题
- 修复非根节点 MPP 任务的执行信息显示不正确的问题
Tools
- TiCDC
  - 修复 Avro 输出中丢失时区信息的问题 #1712
  - 支持清理 Unified Sorter 过期的文件并禁止共享 sort-dir 目录 #1742
  - 修复存在大量过期 Region 信息时 KV 客户端可能锁死的问题 #1599
  - 修复 --cert-allowed-cn 参数中错误的帮助消息 #1697
  - 修复因更新 explicit_defaults_for_timestamp 而需要 MySQL SUPER 权限的问题 #1750
  - 添加 sink 流控以降低内存溢出的风险 #1840
  - 修复调度数据表时可能发生的同步终止问题 #1828
  - 修复 TiCDC changefeed 断点卡住导致 TiKV GC safe point 不推进的问题 #1759
- Backup & Restore (BR)
  - 修复 log restore 时丢失删除事件的问题 #1063
  - 修复 BR 发送过多无用 RPC 请求到 TiKV 的问题 #1037
  - 修复备份失败却没有错误输出的问题 #1043
- TiDB Lightning
  - 修复在生成 KV 数据时可能发生的 panic 问题 #1127
  - 修复 TiDB-backend 模式下因没有开启 autocommit 而无法加载数据的问题 #1104
  - 修复数据导入期间 Batch Split Region 因键的总大小超过 Raft 条目限制而可能失败的问题 #969