TiDB 是 PingCAP 自主研发的开源分散式关系型数据库，具备商业级数据库的资料可靠性，可用性，安全性等特性，支援线上弹性水平扩充套件，相容 MySQL 协议及生态，创新性实现 OLTP 及 OLAP 融合。
TiDB 3.0 版本显著提升了大规模丛集的稳定性，丛集支援 150+ 储存节点，300+TB 储存容量长期稳定执行。易用性方面引入大量降低使用者运维成本的优化，包括引入 Information_Schema 中的多个实用系统检视、EXPLAIN ANALYZE、SQL Trace 等。在效能方面，特别是 OLTP 效能方面，3.0 比 2.1 也有大幅提升，其中 TPC-C 效能提升约 4.5 倍，Sysbench 效能提升约 1.5 倍，OLAP 方面，TPC-H 50G Q15 因实现 View 可以执行，至此 TPC-H 22 个 Query 均可正常执行。新功能方面增加了视窗函式、检视（实验特性）、分割槽表、外挂系统、悲观锁（实验特性）。
截止本文发稿时 TiDB 已在 500+ 使用者的生产环境中长期稳定执行，涵盖金融、保险、制造，互联网，游戏等领域，涉及交易、资料中台、历史库等多个业务场景。不同业务场景对关系型数据库的诉求可用 “百花齐放”来形容，但对关系数据库最根本的诉求未发生任何变化，如资料可靠性，系统稳定性，可扩充套件性，安全性，易用性等。请跟随我们的脚步梳理 TiDB 3.0 有什么样的惊喜。
一、提升大规模丛集稳定性
3.0 与 2.1 版本相比，显著提升了大规模丛集的稳定性，支援单丛集 150+ 储存节点，300+TB 储存容量长期稳定执行，主要的优化点如下：1. 优化 Raft 副本之间的心跳机制，按照 Region 的活跃程度调整心跳频率，减小冷资料对丛集的负担。
2. 热点排程策略支援更多引数配置，采用更高优先级，并提升热点排程的准确性。
3. 优化 PD 排程流程，提供排程限流机制，提升系统稳定性。
4. 新增分散式 GC 功能，提升 GC 的效能，降低大丛集 GC 时间，提升系统稳定性。
二、提升查询计划的稳定性
众所周知，数据库查询计划的稳定性对业务至关重要，TiDB 3.0 版本采用多种优化手段提升查询计划的稳定性，如下：1. 新增 Fast Analyze 功能，提升收集统计资讯的速度，降低丛集资源的消耗及对业务的影响。
2. 新增 Incremental Analyze 功能，提升收集单调递增的索引统计资讯的速度，降低丛集资源的消耗及对业务的影响。
3. 在 CM-Sketch 中新增 TopN 的统计资讯，缓解 CM-Sketch 杂凑冲突导致估算偏大，提升代价估算的准确性，提升查询计划的稳定性。
4. 引入 Skyline Pruning 框架，利用规则防止查询计划过度依赖统计资讯，缓解因统计资讯滞后导致选择的查询计划不是最优的情况，提升查询计划的稳定性。
5. 新增 SQL Plan Management 功能，支援在查询计划不准确时手动系结查询计划，提升查询计划的稳定性。
三、提升系统性能，TPC-C 效能提升约 4.5 倍，Sysbench 效能提升约 1.5 倍
1. OLTP
3.0 与 2.1 版本相比 Sysbench 的 Point Select，Update Index，Update Non-Index 均提升约 1.5 倍，TPC-C 效能提升约 4.5 倍。主要的优化点如下：
1. TiDB 持续优化 SQL 执行器，包括：优化 NOT EXISTS 子查询转化为 Anti Semi Join，优化多表 Join 时 Join 顺序选择等。
2. 优化 Index Join 逻辑，扩大 Index Join 算子的适用场景并提升代价估算的准确性。
3. TiKV 批量接收和传送讯息功能，提升写入密集的场景的 TPS 约 7%，读密集的场景提升约 30%。
4. TiKV 优化内存管理，减少 Iterator Key Bound Option 的内存分配和拷贝，多个 Column Families 共享 block cache 提升 cache 命中率等手段大幅提升效能。
5. 引入 Titan 储存引擎外挂，提升 Value 值超过 1KB 时效能，缓解 RocksDB 写放大问题，减少磁盘 IO 的占用。
6. TiKV 新增多执行绪 Raftstore 和 Apply 功能，提升单节点内可扩充套件性，进而提升单节点内并发处理能力和资源利用率，降低延时，大幅提升丛集写入能力。
2. TiDB Lightning
TiDB Lightning 效能与 2019 年年初相比提升 3 倍，从 100GB/h 提升到 300GB/h，即 28MB/s 提升到 85MB/s，优化点，如下：
1. 提升 SQL 转化成 KV Pairs 的效能，减少不必要的开销。
2. 提升单表汇入效能，单表支援批量汇入。
3. 提升 TiKV-Importer 汇入资料效能，支援将资料和索引分别汇入。
4. TiKV-Importer 支援上传 SST 档案限速功能。
四、提升系统安全性
RBAC（Role-Based Access Control，基于角色的许可权访问控制）是商业系统中最常见的许可权管理技术之一，通过 RBAC 思想可以构建最简单“使用者-角色-许可权”的访问许可权控制模型。RBAC 中使用者与角色关联，许可权与角色关联，角色与许可权之间一般是多对多的关系，使用者通过成为什么样的角色获取该角色所拥有的许可权，达到简化许可权管理的目的，通过此版本的迭代 RBAC 功能开发完成。IP 白名单功能（企业版特性）：TiDB 提供基于 IP 白名单实现网络安全访问控制，使用者可根据实际情况配置相关的访问策略。
Audit log 功能（企业版特性）：Audit log 记录使用者对数据库所执行的操作，通过记录 Audit log 使用者可以对数据库进行故障分析，行为分析，安全审计等，帮助使用者获取资料执行情况。
加密储存（企业版特性）：TiDB 利用 RocksDB 自身加密功能，实现加密储存的功能，保证所有写入到磁盘的资料都经过加密，降低资料泄露的风险。
完善许可权语句的许可权检查，新增 ANALYZE，USE，SET GLOBAL，SHOW PROCESSLIST 语句许可权检查。
五、提升系统易用性
1. 新增 SQL 方式查询慢查询，丰富 TiDB 慢查询日志内容，如：Coprocessor 任务数，平均/最长/90% 执行/等待时间，执行/等待时间最长的 TiKV 地址，简化慢查询定位工作，提高排查慢查询问题效率，提升产品易用性。2. 新增系统配置项合法性检查，优化系统监控项等，提升产品易用性。
3. 新增对 TableReader、IndexReader 和 IndexLookupReader 算子内存使用情况统计资讯，提高 Query 内存使用统计的准确性，提升处理内存消耗较大语句的效率。
4. 制定日志规范，重构日志系统，统一日志格式，方便使用者理解日志内容，有助于通过工具对日志进行定量分析。
5. 新增 EXPLAIN ANALYZE 功能，提升SQL 调优的易用性。
6. 新增 SQL 语句 Trace 功能，方便排查问题。
7. 新增通过 unix_socket 方式连线数据库。
8. 新增快速恢复被删除表功能，当误删除资料时可通过此功能快速恢复资料。
六、增强 HTAP 能力
TiDB 3.0 新增 TiFlash 元件，解决复杂分析及 HTAP 场景。TiFlash 是列式储存系统，与行储存系统实时同步，具备低延时，高效能，事务一致性读等特性。通过 Raft 协议从 TiKV 中实时同步行存资料并转化成列储存格式持久化到一组独立的节点，解决行列混合储存以及资源隔离性问题。TiFlash 可用作行储存系统（TiKV）实时映象，实时映象可独立于行储存系统，将行储存及列储存从物理隔离开，提供完善的资源隔离方案，HTAP 场景最优推荐方案；亦可用作行储存表的索引，配合行储存对外提供智慧的 OLAP 服务，提升约 10 倍复杂的混合查询的效能。TiFlash 目前处于 Beta 阶段，计划 2019 年 12 月 31 日之前 GA，欢迎大家申请试用。
七、未来规划
未来我们会继续投入到系统稳定性，易用性，效能，弹性扩充套件方面，向用户提供极致的弹性伸缩能力，极致的效能体验，极致的使用者体验。稳定性方面 V4.0 版本将继续完善 V3.0 未 GA 的重大特性，例如：悲观事务模型，View，Table Partition，Titan 行储存引擎，TiFlash 列储存引擎；引入近似物理备份恢复解决分布数据库备份恢复难题；优化 PD 排程功能等。
效能方面 V4.0 版本将继续优化事务处理流程，减少事务资源消耗，提升效能，例如：1PC，省去获取 commit ts 操作等。
弹性扩充套件方面，PD 将提供弹性扩充套件所需的元资讯供外部系统呼叫，外部系统可根据元资讯及负载情况动态伸缩丛集规模，达成节省成本的目标。
八、社群概况
我们相信战胜“未知”最好的武器就是社群的力量，基础软件需要坚定地走开源路线。截止发稿我们已经完成 41 篇源代码阅读文章。TiDB 开源社群总计 265 位 Contributor，6 位 Committer，在这里我们对社群贡献者表示由衷的感谢，希望更多志同道合的人能加入进来，也希望大家在 TiDB 这个开源社群能够有所收获。TiDB 3.0 GA Release Notes：https://pingcap.com/docs-cn/v3.0/releases/3.0-ga/
