TDengine 3.0 自去年 8 月份發(fā)布以來(lái)，已經(jīng)被大量用戶下載使用。在此過程中，濤思的研發(fā)同學(xué)也沒有懈怠，針對(duì)大家在社群、各種我們能觸達(dá)到的平臺(tái)上提出的種種有價(jià)值的反饋，都一一進(jìn)行了記錄，并開始尋求更高效的實(shí)現(xiàn)方法。

終于，在 2023 年的第一季度， TDengine 第一個(gè)重要改進(jìn)版本 3.0.3.0 發(fā)布，這一版本涉及到的更新內(nèi)容包括數(shù)據(jù)重整、事件窗口、標(biāo)簽索引、taosX、taosExplorer 等功能或組件。經(jīng)過這一系列的功能優(yōu)化與加強(qiáng)，TDengine 的性能、易用性、運(yùn)維便利性都有大幅提升。

下面我們一起來(lái)看一下這一版本的詳細(xì)更新信息：

數(shù)據(jù)重整 (Data Compact) ——Enterprise only

包含以下優(yōu)化：

• 對(duì)寫入數(shù)據(jù)庫(kù)中所有 Vnode 的所有數(shù)據(jù)文件進(jìn)行重整，生成新的落盤文件
• 清除已刪除的表的所有數(shù)據(jù)
• 清除 delete 語(yǔ)句刪除的所有數(shù)據(jù)
• 合并更新的所有數(shù)據(jù)
• 生成新的文件，提升查詢性能

借助此功能，用戶可以重整數(shù)據(jù)庫(kù)，清除掉無(wú)用數(shù)據(jù)、重復(fù)數(shù)據(jù)。除了能夠釋放存儲(chǔ)空間外，查詢性能也會(huì)有巨大的提升，且原有的亂序數(shù)據(jù)和重復(fù)數(shù)據(jù)的比例越高性能提升越顯著。

事件窗口 (Event Window)

包含以下優(yōu)化：

• 按照用戶指定的條件來(lái)決定開啟和結(jié)束窗口的邊界
• 豐富窗口類型，提供更靈活的窗口支持，滿足由事件驅(qū)動(dòng)的業(yè)務(wù)需求

更詳細(xì)信息請(qǐng)參考官方文檔（http://tdlake.cn/5W1eL4）

標(biāo)簽索引 (Tag Index)

包含以下優(yōu)化：

• 可以按需在標(biāo)簽列上創(chuàng)建和刪除索引，之前版本僅對(duì)第一個(gè)標(biāo)簽內(nèi)置了索引
• 可以按需創(chuàng)建標(biāo)簽索引，提升基于標(biāo)簽過濾的查詢的性能

taosX——Enterprise only

包含以下優(yōu)化：

• 從 2.x 到 3.0 以及 3.0 到 3.0 的數(shù)據(jù)復(fù)制，包括存量和增量數(shù)據(jù)
• 備份數(shù)據(jù)到本地文件，從本地文件恢復(fù)數(shù)據(jù)

詳細(xì)說明：

• 支持 select-with-stable tables 參數(shù)（2.6 遷移到 2.6 下）
• 增強(qiáng)錯(cuò)誤處理
• REST API support for Data In.

• Add name field for task props （數(shù)據(jù)源命名）.
• Add labels field (更方便和定制化地對(duì)任務(wù)進(jìn)行標(biāo)記和查詢)
• Add detail query parameter (數(shù)據(jù)源 DSN 自動(dòng)解析，用于查看和編譯數(shù)據(jù)源)
• Add trigger field for task schedule (定時(shí)自動(dòng)增量備份).

• 修復(fù) 2.6 內(nèi)存泄漏問題
• 修復(fù) unreachable 和 panic 問題

taosExplorer——Enterprise only

使用該工具可基于 Web UI查看、操作、和管理 TDengine 集群。

詳細(xì)說明：

• Data Explorer——

• 使用圖形界面查看和瀏覽集群中的數(shù)據(jù)庫(kù)、超級(jí)表、子表、普通表
• 使用圖形界面創(chuàng)建和刪除庫(kù)、超級(jí)表、子表、普通表
• 輸入和執(zhí)行 SQL 語(yǔ)句，查看執(zhí)行結(jié)果
• 收藏常用的 SQL 語(yǔ)句以快速執(zhí)行
• 瀏覽 SQL 語(yǔ)句的執(zhí)行記錄
• 數(shù)據(jù)導(dǎo)入(Data In)——從另一 TDengine 集群導(dǎo)入數(shù)據(jù)

• 創(chuàng)建和刪除 Topic
• 創(chuàng)建和刪除流
• 管理用戶和權(quán)限
• 備份數(shù)據(jù)到本地文件和從本地文件中恢復(fù)
• 從另一集群復(fù)制數(shù)據(jù)到當(dāng)前集群，從當(dāng)前集群復(fù)制數(shù)據(jù)到另一集群
• 集群管理和運(yùn)維——添加/刪除 dnode/mnode/gnode
• 基于Grafana進(jìn)行集群監(jiān)控

Java/Python 連接器

• 優(yōu)化后的連接器支持基于 WebSocket 的消息訂閱
• 既支持 TDengine Cloud 也支持獨(dú)立部署的 TDengine 集群
• 類似 REST，可以不依賴 taosc library，但比 REST 性能更好
• 接口風(fēng)格和 Kafka 基本一致
• API 和示例代碼詳見官網(wǎng)文檔

Grafana Plugin

• Dashboard 可以監(jiān)控 HTTP status code

在 TDinsight V3.x TaosAdapter Row 中新增 dashboard，展示 taosadapter 的所有 http 狀態(tài)碼，數(shù)據(jù)來(lái)源為 log 庫(kù)的 “taosadapter_restful_http_request_total”表。

• 多維數(shù)據(jù)場(chǎng)景下的統(tǒng)一告警

Grafana 8.x 之后的版本添加 unified alert， TDengine Grafana plugin v3.2.9 添加了對(duì)多維數(shù)據(jù)場(chǎng)景下 unified alert 支持。在 add query 面板設(shè)置 “INPUT SQL”、 “Group by column name(s)” 即可展示多維數(shù)據(jù)，然后添加 expression 設(shè)置數(shù)據(jù)的閾值，即可配置 unified alert。

詳細(xì)信息可以參考發(fā)布說明(https://github.com/taosdata/TDengine/releases/tag/ver-3.0.3.0)。歡迎大家下載使用 TDengine，有任何問題，都可以添加小T vx：tdengine 申請(qǐng)加入 TDengine 用戶交流群，及時(shí)向我們的解決方案專家尋求支持與幫助。