【数据库】TDengine 清理旧数据
2026/6/6 23:55:01 网站建设 项目流程

TDengine 清理旧数据

  • TDengine 清理旧数据

TDengine 清理旧数据

TDengine 清理旧数据主要有两种方式:设置 TTL 自动过期(推荐) 和 手动 DELETE。以下是具体操作说明。

  1. 设置 TTL(自动清理,推荐)
    TTL 代表数据存活时间,单位为“天”。设置后,TDengine 会在指定天数后自动删除数据(后台周期性执行,默认每 24 小时检查一次)。

对超级表(STABLE)设置
如果你的 original_ft、raw_data 等表是基于超级表的(这是最常见的设计),只需对超级表执行一条命令即可:

ALTERSTABLE phTest.original_ft TTL30;-- 保留30天,超过的自动删ALTERSTABLE phTest.raw_data TTL30;

对普通表设置(若没使用超级表)

-- 针对每个子表设置(不推荐,表多时麻烦)ALTERTABLEphTest.of_2059963026013945856_vibration_kurtosis TTL30;

注意:同一个超级表下的所有子表共享 TTL,只需在超级表上设置一次。

查看当前 TTL

SHOWSTABLESLIKE'original_ft';-- 查看超级表的 TTL 字段
  1. 手动 DELETE(精确到毫秒,立即执行但消耗资源)
    如果不想等 TTL 自动清理,或者需要更灵活的时间范围(例如精确到小时),可以使用 DELETE 语句。注意:DELETE 不会释放磁盘空间,需要额外执行 COMPACT。

示例:删除 2025-01-01 以前的所有数据

-- 对原始特征表(假设 ts 是主时间戳列)DELETEFROMphTest.original_ftWHEREts<'2025-01-01 00:00:00';-- 对原始数据存储表DELETEFROMphTest.raw_dataWHEREts<'2025-01-01 00:00:00';注意事项DELETE是异步操作,返回成功后后台实际删除,可能需要一段时间。

不会释放磁盘空间,必须手动触发压缩:

COMPACTDATABASEphTest;

或者等系统自动压缩(依赖 comp 参数,默认可能很慢)。

如果数据量巨大,DELETE 可能会非常慢且影响性能,建议在低峰期执行,并且优先使用 TTL。

  1. 清理后回收磁盘空间
    无论采用哪种方式删除数据,文件不会立即缩小,需要执行压缩:
COMPACTDATABASEphTest;-- 或者只压缩某个超级表(3.0+ 支持)COMPACTTABLEphTest.original_ft;

查看压缩状态:

SELECT*FROMINFORMATION_SCHEMA.INS_TABLE_COMPACTSWHEREdb_name='phTest'ORDERBYstart_timeDESC;

压缩可能需要较长时间,且会消耗 CPU,请在业务低峰执行。

根据你的日志推断的快速操作
从错误日志看,你至少有两个核心超级表(或表名模式):

phTest.original_ft

phTest.raw_data

建议先设置 TTL 防止未来再写满,然后手动 DELETE 极旧数据并压缩以马上释放空间:

-- 1. 立即释放:删除 2025 年之前的数据(按实际需要调整时间)DELETEFROMphTest.original_ftWHEREts<'2025-01-01';DELETEFROMphTest.raw_dataWHEREts<'2025-01-01';-- 2. 设置自动保留 30 天ALTERSTABLE phTest.original_ft TTL30;ALTERSTABLE phTest.raw_data TTL30;-- 3. 压缩数据库回收空间COMPACTDATABASEphTest;查询当前数据的时间范围 如果不确定要删除多久前的数据,可以先查询最旧的数据时间:
SELECTMIN(ts)FROMphTest.original_ft;SELECTMAX(ts)FROMphTest.original_ft;

根据业务需求决定保留时长(例如:保留最近 30 天、90 天等)。执行完上述操作后,再配合之前的文件清理,磁盘空间应该会显著恢复。

需要专业的网站建设服务?

联系我们获取免费的网站建设咨询和方案报价,让我们帮助您实现业务目标

立即咨询