其他分享
首页 > 其他分享> > lightning

lightning

作者:互联网

TiDB Lightning 是一个将全量数据高速导入到 TiDB 集群的工具,将dumpling备份的数据全部读取出来,直接存到tikv节点中

 

 

 

1.ddl发给tidb-server去执行,建库,建表语句,不是从tidb-server插入数据(也就是说不执行insert,)。

2.而是将读取到的数据直接载入tikv节点中。(因为建库建表语句已经有了,从pd集群上获取tivk的元数据和集群信息)

  将表进行分割,然后读取,转化成键值对并排序,并发的导入到tikv本地存储中,在写入到tikv下的rockdb存储引擎。 这个"写入本地临时存储文件"指的是tivk服务器上的临时存储目录,并不是直接导入到tikv中

标签:导入到,存储,建表,读取,tikv,lightning,集群
来源: https://www.cnblogs.com/p0st/p/15526844.html