智光電氣子公司智光研究院最初采用基于 Apache Hadoop 的 CDH 集群來處理海量時序數(shù)據(jù),但由于數(shù)據(jù)量巨大導(dǎo)致資源消耗嚴(yán)重,集群穩(wěn)定性下降甚至存在崩潰風(fēng)險,亟需對時序數(shù)據(jù)處理方案進(jìn)行技術(shù)升級。經(jīng)過充分測試和評估,團(tuán)隊決定將由 HBase 處理的時序數(shù)據(jù)業(yè)務(wù)抽離出來,引入 TDengine 時序數(shù)據(jù)庫,作為獨立的數(shù)據(jù)中臺來降低 Hadoop 集群壓力。
在新方案中,設(shè)備數(shù)據(jù)經(jīng)過邊緣網(wǎng)關(guān)采集、MQTT 協(xié)議上報、Kafka 集群傳輸后,分別存入原始數(shù)據(jù)和分鐘級數(shù)據(jù)兩個數(shù)據(jù)庫中。經(jīng)官方協(xié)助優(yōu)化后,TDengine 助力該項目實現(xiàn)了壓縮率和查詢性能的大幅提升:半年數(shù)據(jù)磁盤占用由 HBase 的 10TB 降至 TDengine 的 2TB,存儲成本降低 80%,同時千億級數(shù)據(jù)查詢耗時穩(wěn)定在毫秒至 2 秒內(nèi),有效提升了整體應(yīng)用效率。
TDengine 微信公眾號后臺發(fā)送 “智光電氣”關(guān)鍵詞, 快速獲取智光電氣+TDengine 完整解決方案資料!



互聯(lián)網(wǎng).png)



-1.png)







證.png)


伙伴.png)
伙伴.png)
伙伴.png)



