直接回答

領導問爲什麼不能用一個數據庫把設備、測點、告警全裝下?雙庫分工由數據特徵決定:時序庫存高頻測點歷史(高寫入、壓縮),關係庫存設備檔案、用戶、工單(事務一致性強);兩者通過設備 ID 關聯,強行合一必然在某一側犧牲性能。 FEXCloud 物聯網雲平臺按"時序庫 + 關係庫"雙庫並行架構組織數據,數據特徵決定存儲歸宿。

一個場景:某園區能源平臺第一版用一個關係數據庫——測點數據寫入後平臺越來越慢,半年後查詢歷史曲線要十幾秒——換成時序庫 + 關係庫雙庫後,寫入快了、曲線秒開、設備檔案和工單照常管理。一個庫裝不下兩種數據:高頻測點數據要時序庫的寫入與壓縮,設備檔案和工單要關係庫的事務一致性——數據特徵不同,存儲就必須分家。

一、兩類數據的負載特徵對比:一個寫多、一個變多

測點數據(時序)——高頻寫入、幾乎不修改:每臺設備每秒或每分鐘產生一個值——寫入是主導負載,讀多用於查歷史曲線; 檔案業務數據(關係)——低頻寫入、頻繁修改:設備檔案、用戶權限、工單狀態——事務性操作多,改一處要鎖表、要一致; 寫入模式差異——時序數據"只增不改":append-only,追加寫入最自然;業務數據"改了又改":update/delete 頻繁; 讀模式差異——時序數據"按時間掃一段":查某設備某時段曲線;業務數據"按條件查一條":查某工單、某用戶。

一句話:測點數據"只增不改、按時間掃",檔案業務數據"改了又改、按條件查"——一個寫入模型、一個事務模型,天生兩種存儲。

一個負載實例:某平臺 300 臺設備、每臺 50 個測點、5 秒一個週期——每秒寫入 3000 條測點記錄——業務數據一天也就改幾百次——一個庫扛 3000 條/秒的追加寫入,還得保證工單修改的一致性——兩件事放在一起,數據庫兩邊都做不好。負載特徵決定存儲分工:高頻追加走時序庫、低頻事務走關係庫,各幹各的強項。

二、時序庫:寫入吞吐與壓縮保留

寫入吞吐——時序庫爲"高寫入"設計:批量寫入、順序寫盤——每秒幾萬條是常態,追加寫入不鎖表; 壓縮保留——時序數據按時間分區 + 壓縮:相同趨勢的數值壓縮存儲——原始值保留期後降採樣,長期曲線也能查; 保留策略——"熱數據高精度、冷數據降精度":最近 30 天原始精度、更早按 5 分鐘或 1 小時聚合——存儲成本可控; 查詢優勢——按時間範圍掃一段:曲線查詢、趨勢聚合是時序庫的專長——毫秒級返回。

一句話:時序庫的看家本領是"寫得多、存得省、查得快"——批量寫入、時間分區壓縮、按時間掃曲線——測點歷史就是爲它而生。

一個時序實例:某項目一年測點數據 30 億條——時序庫按天分區 + 壓縮後佔用不到 200GB——最近 30 天原始精度、更早按 5 分鐘聚合——查詢任意一天曲線秒開。時序庫的壓縮讓"存得起"——30 億條原始數據壓縮到 200GB,歷史曲線想查就查。

三、關係庫:設備檔案與業務事務

檔案數據——設備臺賬、用戶權限、項目配置:低頻寫入、頻繁修改——要結構化、要關係約束; 事務一致性——工單狀態流轉:創建→處理→關閉——每一步要麼成功要麼回滾,不允許中間態; 關係查詢——設備與測點、設備與告警、用戶與權限——按外鍵關聯查詢,業務報表靠它; 強一致保障——ACID 事務:同一操作多個表一起變——關係庫的看家本領,時序庫做不好。

一句話:關係庫的看家本領是"事務一致、關係清晰"——設備檔案、工單流轉、權限管理——業務操作要的強一致,關係庫給得了。

一個關係實例:某平臺工單流程:告警觸發→派單→處理→驗收——每一步要改工單狀態、要寫操作日誌、要通知相關人——一個事務裏多張表一起變——關係庫保證"要麼全成功、要麼全回滾"。業務事務要強一致——工單流轉多表聯動,關係庫的 ACID 保證每一步都不出錯。

四、雙庫一致性:以哪邊爲準的策略

設備 ID 是橋樑——時序庫的測點記錄帶設備 ID、關係庫的設備檔案主鍵也是設備 ID——兩個庫通過設備 ID 關聯; 一致性策略——"檔案爲準、數據爲軸":設備在不在、叫什麼名,以關係庫檔案爲準;測點值多少,以時序庫數據爲準——兩邊各自權威; 刪除與變更——設備退役:關係庫標記退役、時序庫按設備 ID 清歷史——先檔案後數據,避免孤兒記錄; 同步方式——新設備建檔:先寫關係庫(設備 ID 生成)→ 再有時序數據寫入——順序保證兩邊都不缺。

一句話:雙庫不強求"同一條數據兩邊都在"——設備檔案以關係庫爲準、測點數據以時序庫爲準——通過設備 ID 關聯,各管各的權威區。

一個一致性實例:某設備退役——運維在關係庫把設備標記退役——時序庫按設備 ID 歸檔歷史數據——平臺查該設備:檔案顯示已退役、歷史曲線仍可查——兩邊各管各的,數據不矛盾。雙庫一致性的關鍵是"分權威"——檔案歸關係庫、數據歸時序庫,設備 ID 串起兩邊,不衝突不冗餘。

五、中小規模項目的最小可行組合

規模分檔——小型項目(幾十臺設備):單機時序庫 + 關係庫(或內置)即可——不必上集羣; 中型項目(幾百臺設備):時序庫 + 關係庫雙實例部署——一臺服務器或雲上託管都行; 庫選型——時序庫選成熟開源/雲託管產品(按寫入量定規格)、關係庫用主流數據庫(按業務複雜度定); 演進路徑——從小到大的平滑路徑:先雙庫單機 → 數據量上來再分庫/擴容——架構不推倒重來。

一句話:中小項目不用上覆雜架構——時序庫 + 關係庫兩個實例就是最小可行組合——按設備量和業務複雜度定規格,規模大了平滑擴容。

一個組合實例:某園區 200 臺設備——時序庫(雲託管、按寫入量計費)+ 關係庫(單實例)雙庫——兩套實例一套部署,一個月運維一次——後期設備到 500 臺,時序庫擴容即可。最小可行組合不是"最簡省"而是"夠用且能長"——雙庫單機起步,設備量上來擴時序庫,架構不用推倒。

六、強行合一會怎樣:三個真實代價

代價一:寫入拖垮業務查詢——一個庫同時扛高頻寫入和業務事務——寫入把磁盤 IO 吃滿,工單查詢變慢; 代價二:壓縮與事務互斥——時序要壓縮分區、業務要事務鎖——兩種機制在一個庫裏互相打架; 代價三:模型擰巴——測點數據要"按時間掃"、業務要"按條件查"——一個表模型顧此失彼,SQL 越寫越怪。

一句話:強行合一的三個代價——寫入拖垮查詢、壓縮與事務互斥、模型擰巴——不是"能不能用",是"兩邊都做不好"。

一個代價實例:某平臺第一版單庫——三個月後測點數據佔滿磁盤 IO——工單查詢從 1 秒變 10 秒、曲線查詢要十幾秒——拆成雙庫後各回各的強項。強行合一的代價是"兩邊都慢"——數據特徵不同,分庫不是可選項是必選項。

八、雙庫運維要點:數據不丟、查詢不慢

備份策略——時序庫按分區備份(冷數據低頻率備份)、關係庫全量 + 增量備份——備份節奏跟著數據溫度走; 監控指標——時序庫盯寫入延遲與磁盤水位、關係庫盯連接數與慢查詢——兩個庫各自看門; 歸檔清理——時序庫按保留策略自動降採樣與過期刪除、關係庫定期歸檔歷史工單——存儲成本隨保留策略可控; 故障恢復——時序庫斷寫重連後續傳、關係庫主從切換——恢復順序:先恢復業務(關係庫)、再補歷史(時序庫)。

一句話:雙庫運維各管各的強項——時序庫盯寫入與磁盤、關係庫盯事務與慢查詢——備份、監控、歸檔、恢復四件事,按庫的負載特徵分別做。

一個運維實例:某平臺時序庫磁盤水位到 80%——按保留策略把 90 天前的原始數據降採樣到 5 分鐘聚合——水位回到 60%,歷史曲線仍可查——雙庫運維"溫度分區",冷數據該降就降。運維不是平均用力——時序庫按溫度管理存儲,關係庫按事務保障一致,雙庫各按各的節奏。

九、回到微物聯:雙庫架構怎麼落地

把雙庫邏輯落到產品上:FEXCloud 物聯網雲平臺按"時序庫 + 關係庫"雙庫並行組織——時序庫存測點歷史(高寫入、壓縮保留),關係庫存設備檔案與業務事務(強一致),設備 ID 關聯兩邊、各管權威區——中小項目雙庫單機起步、規模大了平滑擴容。平臺落地的雙庫路徑:①設備 ID 統一 → ②時序庫存數據、關係庫存檔案 → ③檔案爲準、數據爲軸 → ④按規模定規格——四步走完,雙庫並行。

一句總結:能源平臺雙庫並行 = 數據特徵分工——時序庫存高頻測點(寫入+壓縮)、關係庫存檔案業務(事務+關係)——設備 ID 關聯、各管權威區,強行合一必然某一側犧牲性能。數據特徵不同,存儲就得分家——時序庫管"數據流",關係庫管"業務態",各幹各的強項。

一句提醒:雙庫不是兩套系統各管各的——設備 ID 是橋樑、檔案與數據分權威——設備退役先檔案後數據、新設備先建檔後採數——順序對了,兩邊數據纔不矛盾。雙庫並行關鍵是"分清楚誰權威"——檔案歸關係庫、數據歸時序庫,設備 ID 串起兩邊。

適用範圍與限制

  • 本文關於「資料中臺」的結論,適用於橋樑等場景;相關判據以公開規範與微物聯產品資料整理,產品參數以最新版選型手冊與產品知識庫為依據。
  • 文中量化判據(保護範圍、通流與殘壓、接地電阻、閾值與分級等)以本文所述前提成立;現場電壓等級、接地形式、環境類別與負荷性質與文中假設不一致時,相關數值需重新覈算。涉及 FEXCloud 物聯網雲平臺 的具體配置,應按實際迴路參數複核。
  • 具體產品型號與參數以最新版選型手冊與產品知識庫為準,本文不構成選型與採購建議。
  • 文中引用的標準編號以現行有效版本為準;標準換版後,相關量化結論需重新核對。
  • 涉及具體專案的部署與實施,需由具備資質的工程師結合現場勘察與設計圖紙完成。

常見問題

能源平臺為什麼要時序庫+關聯式資料庫雙庫並行

雙庫分工由數據特徵決定:時序庫存高頻測點歷史(高寫入、壓縮),關係庫存設備檔案、用戶、工單(事務一致性強);兩者通過設備 ID 關聯