TiDB 2.1 Beta Release Notes

    2018 年 6 月 29 日，TiDB 发布 2.1 Beta 版。相比 2.0 版本，该版本对系统稳定性、优化器、统计信息以及执行引擎做了很多改进。

    • SQL 优化器
      • 优化 选择范围，提升执行性能
      • 优化关联子查询，下推 Filter 和扩大索引选择范围，部分查询的效率有数量级的提升
      • 在 UPDATE、DELETE 语句中支持 Index Hint 和 Join Hint
      • 优化器 Hint TIDM_SMJ 在没有索引可用的情况下可生效
      • 支持更多函数下推：ABS/CEIL/FLOOR/IS TRUE/IS FALSE
      • 在常量折叠过程中特殊处理函数 IF 和 IFNULL
      • 优化 EXPLAIN 语句输出格式
    • SQL 执行引擎
      • 实现并行 Hash Aggregate 算子，部分场景下能提高 Hash Aggregate 计算性能 350%
      • 实现并行 Project 算子，部分场景下性能提升达 74%
      • 并发地读取 Hash Join 的 Inner 表和 Outer 表的数据，提升执行性能
      • 修复部分场景下 INSERT … ON DUPLICATE KEY UPDATE … 结果不正确的问题
      • 修复 /FLOOR/CEIL/DIV 内建函数的结果不正确的问题
    • Server
      • 添加 HTTP API 打散 table 的 Regions 在 TiKV 集群中的分布
      • 添加 auto_analyze_ratio 系统变量控制自动 analyze 的阈值
      • 添加 HTTP API 控制是否打开 general log
      • 添加 HTTP API 在线修改日志级别
      • 在 general log 和 slow query log 中添加 user 信息
    • 兼容性
      • 支持更多 MySQL 语法
      • BIT 聚合函数支持 ALL 参数
      • 支持 SHOW PRIVILEGES 语句
    • DML
      • 减少 INSERT INTO SELECT 语句的内存占用
      • 修复 Plan Cache 的性能问题
      • 添加 tidb_retry_limit 系统变量控制事务自动重试的次数
      • 添加 tidb_disable_txn_auto_retry 系统变量控制事务是否自动重试
      • 修复写入 time 类型的数据精度问题
      • 支持本地冲突事务排队，优化冲突事务性能
      • 修复 UPDATE 语句的 Affected Rows
      • 优化 insert ignore on duplicate key update 语句性能
      • 优化 Create Table 语句的执行速度
      • 优化 Add index 的速度，在某些场景下速度大幅提升
      • 修复 Alter table add column 增加列超过表的列数限制的问题
      • 修复在某些异常情况下 DDL 任务重试导致 TiKV 压力增加的问题
      • 修复在某些异常情况下 TiDB 不断重载 Schema 信息的问题
    • DDL
      • 不再输出外键相关的内容
      • 支持 select tidb_is_ddl_owner() 语句，方便判断 TiDB 是否为 DDL Owner
      • 修复某些场景下 YEAR 类型删除索引的问题
      • 修复并发执行场景下的 Rename table 的问题
      • 支持 ALTER TABLE RENAME KEY TO 语法
      • admin show ddl jobs 输出信息中添加表名、库名等信息
    • PD 节点间开启 Raft PreVote，避免网络隔离后恢复时产生的重新选举
    • 优化 Balance Scheduler 频繁调度小 Region 的问题
    • 优化热点调度器，在流量统计信息抖动时适应性更好
    • region merge 调度时跳过数据行数较多的 Region
    • 默认开启 raft learner 功能，降低调度时出现宕机导致数据不可用的风险
    • pd-recover 移除 max-replica 参数
    • 增加 Filter 相关的 metrics
    • 修复 tikv-ctl unsafe recovery 之后 Region 信息没更新的问题
    • 修复某些场景下副本迁移导致 TiKV 磁盘空间耗尽的问题
    • 兼容性提示
      • 由于新版本存储引擎更新，不支持在升级后回退至 2.0.x 或更旧版本
      • 新版本默认开启 raft learner 功能，如果从 1.x 版本集群升级至 2.1 版本，须停机升级或者先滚动升级 TiKV，完成后再滚动升级 PD
    • 升级 Rust 到 nightly-2018-06-14 版本
    • 开启 PreVote，避免网络隔离后恢复时产生的重新选举
    • 添加 metric，显示 RocksDB 内部每层的文件数和 ingest 相关的信息
    • GC 运行时打印版本太多的 key
    • 使用 static metric 优化多 label metric 性能（YCSB raw get 提升 3%）
    • 去掉多个模块的 box，使用范型提升运行时性能（YCSB raw get 提升 3%）
    • 使用 asynchronous log 提升写日志性能
    • 增加收集线程状态的 metric
    • 通过减少程序中 的使用来减少内存拷贝的次数，提升性能