TiKV 内存参数性能调优

    TiKV 最底层使用的是 RocksDB 做为持久化存储,所以 TiKV 的很多性能相关的参数都是与 RocksDB 相关的。TiKV 使用了两个 RocksDB 实例,默认 RocksDB 实例存储 KV 数据,Raft RocksDB 实例(简称 RaftDB)存储 Raft 数据。

    TiKV 使用了 RocksDB 的 (CF) 特性。

      • write CF 存储的是数据的版本信息 (MVCC) 以及索引相关的数据,相关的参数位于 [rocksdb.writecf] 项中;
      • CF 存储的是锁信息,系统使用默认参数。
    • Raft RocksDB 实例存储 Raft log。

      • default CF 主要存储的是 Raft log,与其对应的参数位于 [raftdb.defaultcf] 项中。

    所有的 CF 默认共同使用一个 block cache 实例。通过在 [storage.block-cache] 下设置 capacity 参数,你可以配置该 block cache 的大小。block cache 越大,能够缓存的热点数据越多,读取数据越容易,同时占用的系统内存也越多。如果要为每个 CF 使用单独的 block cache 实例,需要在 [storage.block-cache] 下设置 shared=false,并为每个 CF 配置单独的 block cache 大小。例如,可以在 [rocksdb.writecf] 下设置 参数来配置 write CF 的大小。

    每个 CF 有各自的 write-buffer,大小通过 write-buffer-size 控制。

    1. TiKV 在处理大的查询的时候(例如 select * from ...)会读取数据然后在内存中生成对应的数据结构返回给 TiDB,这个过程中 TiKV 会占用一部分内存
    1. 生产环境中,不建议将 TiKV 部署在 CPU 核数小于 8 或内存低于 32GB 的机器上
    2. 如果对写入吞吐要求比较高,建议使用吞吐能力比较好的磁盘
    3. 如果对读写的延迟要求非常高,建议使用 IOPS 比较高的 SSD 盘