TIDB512张分表数据合并到合表

TiDBer_zlV10J3C · 2026 年5 月 13 日 06:20

现在再TIDB有512张分表，现在我们需要将这512张分表的数据再TIDB上建立一张合表然后将这512张分表的数据合并到这张合并中，类似于阿里mysql同步时候用的DTS/DATAX,想知道TIDB有这种工具吗？目前TIDB版本8.5

TiDBer_jYQINSnf · 2026 年5 月 13 日 08:18

随缘天空 · 2026 年5 月 13 日 08:49

使用如下命令试试呢：

INSERT INTO 目标合表 SELECT * FROM 分表_001;
INSERT INTO 目标合表 SELECT * FROM 分表_002;
– …以此类推

zhanggame1 · 2026 年5 月 13 日 09:01

需要实时同步吗，可以停机还是导出在导入快点

Royce1220 · 2026 年5 月 13 日 10:19

需要增量数据吗

纯白镇的小智 · 2026 年5 月 14 日 02:21

用 dumpling和lightning 这两个工具

wbslxw · 2026 年5 月 14 日 04:15

用 dumpling 导出所有分表数据为 SQL/CSV，再用 lightning 并行导入合表，性能最高，支持断点续传，适合大数据量。

TiDBer_odwPM8gO · 2026 年5 月 14 日 04:21

优先用 Dumpling+Lightning 做全量合并，增量同步用 TiCDC+Flink，小数据量可直接用 SQL 脚本批量插入。

TiDBer_00001 · 2026 年5 月 14 日 17:08

先备份一下呗，这样就不怕错了。

Augenstern · 2026 年5 月 14 日 23:36

优先用 Dumpling+Lightning 做全量合并

菩提老祖 · 2026 年5 月 15 日 00:23

同上

yg_2024 · 2026 年5 月 18 日 07:55

数据量是多大？从分表到合表，是不是有逻辑映射？

独善其身 · 2026 年5 月 19 日 01:52

只是一个union吗

Royce1220 · 2026 年5 月 19 日 08:42

使用导出导入吧

TiDBer_1834 · 2026 年5 月 26 日 12:57

可以使用Dumpling+Lightning

TiDB001 · 2026 年5 月 29 日 14:56

dumpling和lightning

mtmt · 2026 年6 月 4 日 06:08

可以尝试用dm全量导入

TiDB001 · 2026 年6 月 4 日 07:30

如果数据量比较大，通过主键分批插入

大唐天子 · 2026 年6 月 5 日 01:09

Dumpling 批量导出，Lightning 并行入库，高性能带断点续传，适配海量分表合并。