[發明專利]時序數據存儲的方法及終端設備

有效

• 申請號: 201911154327.3
• 申請日: 2019-11-22
• 公開（公告）號: CN111046038B
• 公開（公告）日: 2023-02-28
• 發明（設計）人: 王彬;馬桂旭;陳哲平;傅克文
• 申請（專利權）人: 廈門科燦信息技術有限公司;科華恒盛股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/28
• 代理公司: 石家莊國為知識產權事務所 13120
• 代理人: 付曉娣

本發明適用于數據處理技術領域，提供了一種時序數據存儲的方法及終端設備，該方法包括：采集所有傳感器的測點數據，并獲取所述測點數據對應的時間戳；將所述測點數據按預設規則劃分為不同的類別，將不同類型的測點數據以及所述測點數據對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中，每個數據庫文件存儲對應類別的測點數據以及對應的時間戳，從而可以使得數據庫占用的存儲空間固定，不會隨著時間的增長而增長。

技術領域

本發明屬于數據處理技術領域，尤其涉及一種時序數據存儲的方法及終端設備。

背景技術

通常對不同傳感器的成千上萬的數據進行收集后，將獲得的大量數據采用關系型數據庫進行存儲。傳統關系性數據庫，數據以行和列的形式進行存放，行與行之間使用主鍵進行區分，不同表之間的數據還可以建立邏輯關鍵。例如，將所有傳感器的不同測點數據以列的方式進行保存，時間軸則是以行的方式插入。但是伴隨著數據基數的增長，數據占用的存儲空間也在不斷的增長，并且每次在關系型數據庫中插入數據時都會更新傳感器所有測點的數據，導致存儲空間迅速飆升以及磁盤寫入的時間也比較久。

發明內容

有鑒于此，本發明實施例提供了一種時序數據存儲的方法及終端設備，以解決現有技術中存儲數據時會導致存儲空間迅速飆升以及磁盤寫入的時間也比較久的問題。

本發明實施例的第一方面提供了一種時序數據存儲的方法，包括：

采集所有傳感器的測點數據，并獲取所述測點數據對應的時間戳；

將所述測點數據按預設規則劃分為不同的類別，將不同類型的測點數據以及所述測點數據對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中，每個數據庫文件存儲對應類別的測點數據以及對應的時間戳。

在一實施例中，在所述采集所有傳感器的測點數據之前，還包括：

在首次進行測點數據存儲之前，根據測點數據的存儲周期以及總存儲時間，將環形數據庫的存儲空間劃分為固定數量的存儲空間，不同的存儲空間存儲不同的數據庫文件。

在一實施例中，在所述將所述測點數據按預設規則劃分為不同的類別之后，還包括：

建立分類查詢表，所述分類查詢表中包括多條記錄，每條記錄包括測點數據類別以及對應的數據庫文件。

在一實施例中，所述采集所有傳感器的測點數據，包括：

根據待采集測點數據的不同類別，采用不同的采樣頻率采集傳感器的測點數據。

在一實施例中，所述將不同類型的測點數據以及所述測點數據對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中，包括：

采用內存映射方式，將所述不同類型的測點數據以及所述測點數據對應的時間戳中待處理數據加載到內存二維矩陣空間中；

在預設時間將所述內存二維矩陣空間中存儲的數據轉存至磁盤中環形數據庫中對應的數據庫文件中。

在一實施例中，所述二維矩陣空間以行為時間軸、列為傳感器的不同測點數據的形式存儲所述待處理數據。

在一實施例中，在所述將不同類型的測點數據以及所述測點數據對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中之前，還包括：

根據所述環形數據庫中存儲的時間戳建立索引，并根據所述時間戳建立時序；

所述將不同類型的測點數據以及所述測點數據對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中，包括：

根據建立的索引，將對應的時序以及對應的測點數據存儲到環形數據庫中對應的數據庫文件中；

根據上述存儲方式將剩余測點數據以及對應的時間戳分別存儲到環形數據庫中對應的數據庫文件中；