PingKai Logo下载

平凯星辰 Clinic 数据采集说明

本文提供了平凯星辰 Clinic 诊断服务(以下简称为平凯星辰 Clinic)在使用 TiUP 部署的 TiDB 集群和 DM 集群中能够采集的诊断数据类型,并列出了各个采集项对应的采集参数。当执行 Clinic Diag 诊断客户端(以下简称为 Diag)数据采集命令时,你可以依据需要采集的数据类型,在命令中添加所需的采集参数。

通过平凯星辰 Clinic 在使用 TiUP 部署的集群中采集的数据用于诊断和分析集群问题。

Clinic Server 是部署在云端的云服务,根据数据存储的位置不同,分为以下两个独立的服务:

  • Clinic Server 中国区:如果你把采集的数据上传到了 Clinic Server 中国区,这些数据将存储于平凯星辰设立在 AWS 中国区(北京)的 S3 服务。平凯星辰对数据访问权限进行了严格的访问控制,只有经授权的内部技术人员可以访问该数据。
  • Clinic Server 美国区:如果你把采集的数据上传到了 Clinic Server 美国区,这些数据将存储于平凯星辰设立在 AWS 美国区的 S3 服务。平凯星辰对数据访问权限进行了严格的访问控制,只有经授权的内部技术人员可以访问该数据。

平凯数据库集群

本节列出了 Diag 在使用 TiUP 部署的 TiDB 集群中能够采集的诊断数据类型。

平凯数据库集群信息

诊断数据类型输出文件平凯星辰 Clinic 采集参数
集群基础信息,包括集群 IDcluster.json每次收集默认采集
集群详细信息meta.yaml每次收集默认采集

平凯数据库诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志tidb.log--include=log
Error 日志tidb_stderr.log--include=log
慢日志tidb_slow_query.log--include=log
配置文件tidb.toml--include=config
实时配置config.json--include=config

TiKV 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志tikv.log--include=log
Error 日志tikv_stderr.log--include=log
配置文件tikv.toml--include=config
实时配置config.json--include=config

PD 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志pd.log--include=log
Error 日志pd_stderr.log--include=log
配置文件pd.toml--include=config
实时配置config.json--include=config
tiup ctl:v<CLUSTER_VERSION> pd -u http://${pd IP}:${PORT} store 的输出结果store.json--include=config
tiup ctl:v<CLUSTER_VERSION> pd -u http://${pd IP}:${PORT} config placement-rules show 的输出结果placement-rule.json--include=config

TiFlash 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志tiflash.log--include=log
Error 日志tiflash_stderr.log--include=log
配置文件tiflash-learner.tomltiflash-preprocessed.tomltiflash.toml--include=config
实时配置config.json--include=config

TiCDC 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志ticdc.log--include=log
Error 日志ticdc_stderr.log--include=log
配置文件ticdc.toml--include=config
Debug 数据info.txtstatus.txtchangefeeds.txtcaptures.txtprocessors.txt--include=debug(默认不采集)

Prometheus 监控数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
所有的 Metrics 数据{metric_name}.json--include=monitor
Alert 列表alerts.json--include=monitor

平凯数据库系统变量

诊断数据类型输出文件平凯星辰 Clinic 采集参数
获取 TiDB 系统变量(默认不采集,采集需要额外提供数据库账号)mysql.tidb.csv--include=db_vars(默认不采集)
global_variables.csv--include=db_vars(默认不采集)

集群节点的系统信息

诊断数据类型输出文件平凯星辰 Clinic 采集参数
内核日志dmesg.log--include=system
系统和硬件的基础信息insight.json--include=system
系统 /etc/security/limits.conf 中的内容limits.conf--include=system
内核参数列表sysctl.conf--include=system
socket 统计信息(即 ss 的命令结果)ss.txt--include=system

DM 集群

本节列出了 Diag 在使用 TiUP 部署的 DM 集群中能够采集的诊断数据类型。

DM 集群信息

诊断数据类型输出文件平凯星辰 Clinic 采集参数
集群基础信息,包括集群 IDcluster.json每次收集默认采集
集群详细信息meta.yaml每次收集默认采集

dm-master 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志dm-master.log--include=log
Error 日志dm-master_stderr.log--include=log
配置文件dm-master.toml--include=config

dm-worker 诊断数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
日志dm-worker.log--include=log
Error 日志dm-worker_stderr.log--include=log
配置文件dm-work.toml--include=config

Prometheus 监控数据

诊断数据类型输出文件平凯星辰 Clinic 采集参数
所有的 Metrics 数据{metric_name}.json--include=monitor
Alert 列表alerts.json--include=monitor

集群节点的系统信息

诊断数据类型输出文件平凯星辰 Clinic 采集参数
内核日志dmesg.log--include=system
系统和硬件基础信息insight.json--include=system
系统 /etc/security/limits.conf 中的内容limits.conf--include=system
内核参数列表sysctl.conf--include=system
socket 统计信息(即 ss 的命令结果)ss.txt--include=system