在高并發(fā)、長(zhǎng)周期的時(shí)序數(shù)據(jù)場(chǎng)景中，查詢性能、安全性與生態(tài)兼容性，始終是系統(tǒng)演進(jìn)的關(guān)鍵。

近日，TDengine TSDB 3.3.8.0 版本正式上線，本次更新帶來(lái)了 Rollup SMA 多層級(jí)預(yù)計(jì)算、TimeRange-Wise SMA 時(shí)間范圍預(yù)計(jì)算、TLS 加密傳輸、TDgpt 數(shù)據(jù)補(bǔ)全、MySQL 函數(shù)增強(qiáng)、taosX 邏輯備份與 ORC 數(shù)據(jù)源接入等多項(xiàng)功能升級(jí)，全面提升系統(tǒng)的性能、可擴(kuò)展性與數(shù)據(jù)安全。

本文為你整理了該版本九大核心更新亮點(diǎn)，來(lái)看看哪些能力能幫你把系統(tǒng)跑得更快、用得更穩(wěn)、管得更省心。

重要更新亮點(diǎn)

一、Rollup SMA 與 TimeRange-Wise SMA：多層級(jí)自動(dòng)降采樣與時(shí)間范圍預(yù)計(jì)算

SMA（預(yù)計(jì)算）機(jī)制是 TDengine TSDB 提升查詢性能的核心技術(shù)，其核心思想是“空間換時(shí)間”。通過(guò)預(yù)先計(jì)算并存儲(chǔ)聚合結(jié)果，在查詢時(shí)直接使用這些結(jié)果，避免全量掃描原始數(shù)據(jù)，從而大幅降低 I/O 開(kāi)銷和計(jì)算延遲，尤其適用于海量時(shí)序數(shù)據(jù)的聚合分析場(chǎng)景。

在 3.3.8.0 中，TDengine TSDB 增強(qiáng)了 SMA 機(jī)制，帶來(lái)以下兩項(xiàng)重要更新：

1. Rollup SMA（多層級(jí)滾動(dòng)預(yù)計(jì)算）（企業(yè)版）
   • 支持最多三級(jí)存儲(chǔ)層級(jí)（Level 1–3），原始數(shù)據(jù)與聚合數(shù)據(jù)分層存儲(chǔ)，并為每層指定聚合周期和保存時(shí)長(zhǎng)；
   • 可自動(dòng)觸發(fā)降采樣計(jì)算并刪除原數(shù)據(jù)，實(shí)現(xiàn)數(shù)據(jù)生命周期管理，平衡查詢性能與存儲(chǔ)成本；
   • 支持 AVG、SUM、MIN、MAX、FIRST、LAST 等聚合函數(shù)；
   • 常適用于 DevOps、監(jiān)控看板等關(guān)注長(zhǎng)期數(shù)據(jù)趨勢(shì)而非單一精確點(diǎn)的場(chǎng)景。

2. TimeRange-Wise SMA（時(shí)間范圍預(yù)計(jì)算）
   • 專為高頻使用 INTERVAL 的查詢優(yōu)化；
   • 采用流式計(jì)算邏輯，提升高頻時(shí)間窗聚合的響應(yīng)速度；
   • 適用于對(duì)特定列頻繁聚合、分組統(tǒng)計(jì)及時(shí)間范圍查詢的場(chǎng)景。

除此之外，TDengine TSDB 還支持 Block-Wise SMA （數(shù)據(jù)塊預(yù)計(jì)算），該機(jī)制在數(shù)據(jù)落盤時(shí)自動(dòng)完成聚合計(jì)算，并在查詢階段智能使用預(yù)計(jì)算結(jié)果，無(wú)需額外配置即可加速常見(jiàn)聚合查詢，是 SMA 家族的重要組成部分。

?? 本次 SMA 機(jī)制的增強(qiáng)，使用戶能夠?qū)崿F(xiàn)自動(dòng)降采樣與多層級(jí)數(shù)據(jù)管理，在兼顧性能與成本的同時(shí)，進(jìn)一步強(qiáng)化 TDengine TSDB 在大規(guī)模歷史數(shù)據(jù)查詢中的優(yōu)勢(shì)。

二、MySQL 聚合與條件函數(shù)支持

為增強(qiáng) SQL 兼容性，3.3.8.0 新增對(duì)部分 MySQL 聚合與條件函數(shù)的支持，包括：

• 聚合函數(shù)：std, variance, stddev_samp, var_samp, group_concat
• 條件函數(shù)：if, ifnull, nvl, nullif, nvl2
• 比較運(yùn)算符：isnull, isnotnull, coalesce

?? 這一增強(qiáng)顯著提升了 SQL 遷移與跨平臺(tái)開(kāi)發(fā)的便利性，用戶可更輕松地在 TDengine TSDB 中運(yùn)行 MySQL 語(yǔ)法查詢。

三、TLS 證書加密傳輸：通信更安全（企業(yè)版）

TLS 是一種用于保障網(wǎng)絡(luò)通信安全及數(shù)據(jù)完整性的加密協(xié)議，通過(guò)在傳輸層對(duì)網(wǎng)絡(luò)連接進(jìn)行加密，為通信應(yīng)用程序之間提供保密性和數(shù)據(jù)完整性。為進(jìn)一步保障數(shù)據(jù)傳輸安全，3.3.8.0 在原生接口層面全面支持 TLS 加密：

• 對(duì)傳輸層通信進(jìn)行加密，防止竊聽(tīng)與截取；
• 支持身份認(rèn)證與數(shù)據(jù)完整性校驗(yàn)；
• 各原生連接接口現(xiàn)已支持 SSL 加密（WebSocket 早已支持）。

?? 這項(xiàng)更新大幅提升了 TDengine TSDB 在關(guān)鍵行業(yè)與跨網(wǎng)絡(luò)部署中的安全合規(guī)能力。

四、TDgpt 數(shù)據(jù)補(bǔ)全：時(shí)序智能增強(qiáng)

TDgpt 新增缺失數(shù)據(jù)補(bǔ)齊功能，基于 moment 時(shí)序模型自動(dòng)檢測(cè)并補(bǔ)全時(shí)間序列中的缺失點(diǎn)：

• 要求輸入數(shù)據(jù)的時(shí)間戳嚴(yán)格等間隔；
• 對(duì)于時(shí)間間隔不均的序列，建議先進(jìn)行窗口聚合后再補(bǔ)齊缺失區(qū)間；
• 示例：SELECT imputation(i01, 'algo=moment,freq=s') FROM foo;

?? 該能力幫助用戶在分析和建模前快速修復(fù)時(shí)序數(shù)據(jù)，提高預(yù)測(cè)與分析結(jié)果的準(zhǔn)確性。

五、taosX：支持邏輯備份/恢復(fù)與 ORC 數(shù)據(jù)源（企業(yè)版）

TDengine TSDB 企業(yè)版核心組件 taosX 本次迎來(lái)兩項(xiàng)關(guān)鍵增強(qiáng)：

• 邏輯備份與恢復(fù)
  • 支持?jǐn)?shù)據(jù)庫(kù)、超級(jí)表、查詢結(jié)果及元數(shù)據(jù)備份；
  • 可用于數(shù)據(jù)遷移、審計(jì)、分享與修復(fù)；
  • 命令行使用示例：taosx run --from "taos://IP:PORT/db_name" --to "local:/path/to/backup"

• ORC 文件數(shù)據(jù)源
  • 支持讀取 ORC 文件數(shù)據(jù)并導(dǎo)入 TDengine TSDB；
  • 兼容 Hadoop/Hive 等生態(tài)，支持列投影、批量讀取及映射配置。

?? 這使 TDengine TSDB 能更高效地與大數(shù)據(jù)生態(tài)協(xié)同，實(shí)現(xiàn)從數(shù)據(jù)采集到分析的全鏈路貫通。

六、taosgen：新增特性與性能優(yōu)化

taosgen 是時(shí)序數(shù)據(jù)領(lǐng)域產(chǎn)品的性能基準(zhǔn)測(cè)試工具，支持?jǐn)?shù)據(jù)生成、寫入性能測(cè)試等功能。本次也帶來(lái)多項(xiàng)功能增強(qiáng)與性能改進(jìn)：

• 支持使用函數(shù)表達(dá)式生成數(shù)據(jù)，可靈活構(gòu)造周期性或隨機(jī)特征值；
• 支持將生成數(shù)據(jù)輸出至 MQTT Broker，topic 支持使用 {table} 占位符動(dòng)態(tài)指定主題；
• 新增數(shù)據(jù)緩存生成機(jī)制并默認(rèn)啟用，較即時(shí)生成模式寫入性能提升約 10%；
• 優(yōu)化寫入引擎，整體寫入 TDengine TSDB 的速度較 taosBenchmark 提升約 10%。

?? 本次升級(jí)讓 taosgen 在數(shù)據(jù)仿真、性能測(cè)試及多源驗(yàn)證等場(chǎng)景下更高效、更靈活。

七、taosAdapter：支持記錄 SQL 到 CSV 文件

TDengine TSDB 適配組件 taosAdapter 本次新增 SQL 記錄功能，可自動(dòng)捕獲并導(dǎo)出查詢請(qǐng)求：

• 支持自動(dòng)啟停與定時(shí)抓取指定時(shí)間段內(nèi)的 SQL 請(qǐng)求；
• 將抓取結(jié)果結(jié)構(gòu)化存儲(chǔ)為 CSV 文件，包含時(shí)間、QID、用戶、IP、接收時(shí)間、返回時(shí)間、執(zhí)行時(shí)長(zhǎng)及 SQL 語(yǔ)句等字段；
• 文件支持按大小與時(shí)間切割、保留數(shù)量限制、壓縮存儲(chǔ)及磁盤空間保留策略；
• 提供 HTTP 接口，支持動(dòng)態(tài)開(kāi)啟、關(guān)閉抓取功能及查詢運(yùn)行狀態(tài)。

?? 該功能幫助用戶輕松實(shí)現(xiàn) SQL 審計(jì)、性能分析與問(wèn)題追蹤，為系統(tǒng)運(yùn)維與優(yōu)化提供更豐富的數(shù)據(jù)依據(jù)。

八、生態(tài)與連接器能力增強(qiáng)

• JDBC WebSocket：支持多端點(diǎn)負(fù)載均衡與 failover，提升可用性與容災(zāi)能力；
• C WebSocket Connector：自動(dòng)重連與任務(wù)續(xù)傳，性能提升約 15%；
• ODBC Connector：支持微軟 ADO 接口，可用 VB、C#、Python 等語(yǔ)言訪問(wèn) TDengine TSDB；

?? 新版連接器持續(xù)完善開(kāi)發(fā)體驗(yàn)與生態(tài)兼容，為企業(yè)部署提供更高效率與可靠性。

九、引擎層優(yōu)化與增強(qiáng)

• 流計(jì)算性能優(yōu)化與資源效率提升
• 高并發(fā)場(chǎng)景下 Last 查詢的優(yōu)化與加速
• 分離數(shù)據(jù)查詢和元數(shù)據(jù)查詢處理線程
• ?持通過(guò) scan 命令掃描時(shí)序數(shù)據(jù)?件的完整性
• 調(diào)整 Balance Vgroup Leader 命令的執(zhí)?邏輯，使 VGroup 的 Leader 分布更加均勻
• ?持對(duì)雙副本數(shù)據(jù)庫(kù)使? REDISTRIBUTE命令
• 改造 S3 數(shù)據(jù)遷移的狀態(tài)控制機(jī)制，提升精確性與效率
• 增加 show ssmigrate 命令?于查看共享存儲(chǔ)遷移進(jìn)度
• STMT2 ?持 Blob 和 Decimal
• 支持通過(guò)函數(shù) find_in_set、like_in_set、regexp_in_set 實(shí)現(xiàn)多值標(biāo)簽
• ?持 date 函數(shù)
• partition by tag ?持字符串運(yùn)算
• TDgpt ?持 PROPHET 算法
• ?持狀態(tài)窗?起?點(diǎn)配置
• 浮點(diǎn)數(shù)?持 BSS（Byte-Stream-Split）字節(jié)流分割編碼

除此之外，每個(gè)版本都會(huì)做很多其他的工作，比如 bug 修復(fù)、功能優(yōu)化等等。如果想要了解新版本（時(shí)序數(shù)據(jù)庫(kù)功能更新）更加詳細(xì)的發(fā)布信息，可以移步至 https://github.com/taosdata/TDengine/releases/tag/ver-3.3.8.1 查看發(fā)布說(shuō)明。

歡迎大家下載使用，如有任何問(wèn)題請(qǐng)及時(shí)聯(lián)系我們獲得支持。