谁有V8.5和V7.1两个版本,帮我对比一下load data的性能

【TiDB 版本】V8.5.3

【问题复现路径】V7.1 load data 10分钟,V8.5.3 load data 2两小时

哪位大神的环境里面有两个版本的,对比测试一下。

1 个赞

load data多少数据。我这边试试。

两个版本的配置也发一下。

这个差距有点大。。。它们的硬件配置,参数配置一样吗

控制变量法。是不是除了版本以外,其他东西都一样

批量导入还是一个事务导入?

请提供下导入条件呗:比如数据文件格式、数据量、数据文件个数等等细节~

这些条件我都清楚,我只是想看看已经升级了V8.5的先驱,试试load data,跟你们以前版本的感觉差异大不大。

我这边的环境V8.5的配置是比V7.1的高,而且同一个集群升级前后,我感觉这个load data差距也太大了。

1 个赞

呵呵,先驱者啊~

发下配置对比.

不发,你们哪位有V8.5的可以试试。

我V8的配置比V7的高,导入速度反而慢了几十倍。

1 个赞


https://docs.pingcap.com/zh/tidb/stable/sql-statement-load-data/#mysql-兼容性

应该是新版本机制变了。而且 tidb_dml_batch_size 失效也会导致不能拆批,导致性能下降

还有这种事?

要求两者集群和资源配置都需要保持一致

学习了

原来官方早有说明呀

旁路导入性能吗