[發明專利]一種分裂分區的方法及裝置

有效

• 申請號: 201810494401.5
• 申請日: 2018-05-22
• 公開（公告）號: CN110519319B
• 公開（公告）日: 2022-02-11
• 發明（設計）人: 王玉華;王鵬宇;董明;李林森
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: H04L67/1097
• 分類號: H04L67/1097
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 韓東艷

1.一種分裂分區的方法，其特征在于，所述方法包括：

根據目標時間段開始前Hbase表中已存儲的數據記錄，預測在所述目標時間段內需要占用所述Hbase表中的分區的第一數目；

當所述第一數目大于第二數目時，從所述第二數目個分區中獲取存儲率超過預設存儲率閾值的分區作為目標分區，所述第二數目個分區是預先分配的在所述目標時間段內需要占用所述Hbase表中的分區；

當獲取的目標分區的數目小于或等于第三數目時，在所述目標分區對應的分裂時間分裂所述目標分區，所述分裂時間晚于獲取所述目標分區的獲取時間，所述第三數目等于所述第一數目減去所述第二數目。

2.如權利要求1所述的方法，其特征在于，所述根據目標時間段開始前Hbase表中已存儲的數據記錄，預測在所述目標時間段內需要占用所述Hbase表中的分區的第一數目，包括：

根據Hbase表已存儲的數據記錄總量和所述Hbase表中已使用的空間容量，計算所述Hbase表中的每條數據記錄的平均數據量；

通過預測模型預測在所述目標時間段內產生的待存儲數據記錄的數目；

根據所述待存儲數據記錄的數目、所述平均數據量和分區容量，計算在所述目標時間段內需要占用所述Hbase表中的分區的第一數目。

3.如權利要求2所述的方法，其特征在于，所述預測在所述目標時間段內需要占用所述Hbase表中的分區的第一數目之前，還包括：

根據所述目標時間段開始前所述Hbase表中存儲的數據記錄，生成所述預測模型。

4.如權利要求3所述的方法，其特征在于，所述根據所述目標時間段開始前所述Hbase表中存儲的數據記錄，生成所述預測模型，包括：

根據所述Hbase表中的各條數據記錄對應的時間戳，獲取第一單位時間集合和第二單位時間集合，第一單位時間集合包括第一時間戳與第二時間戳之間的每個單位時間內產生的第一數據記錄數目，所述第二單位時間集合包括第二時間戳和第三時間戳之間的每個單位時間內產生的第一數據記錄數目，第一時間戳是所述Hbase表中的各條數據記錄對應的時間戳中離當前最早的時間戳，第三時間戳是所述Hbase表中的各條數據記錄對應的時間戳中離當前最近的時間戳，第二時間戳位于所述第一時間戳和所述第三時間戳之間；

獲取至少一個循環神經網絡RNN參數中的第一參數值，根據所述至少一個RNN參數的第一參數值設置第一RNN的RNN參數，得到第二RNN；

根據所述第一單位時間集合、所述第二單位時間集合和所述第二RNN生成所述預測模型。

5.如權利要求4所述的方法，其特征在于，所述根據所述第一單位時間集合、所述第二單位時間集合和所述第二RNN生成所述預測模型，包括：

根據第一單位時間集合中的每個單位時間的第一數據記錄數目，通過所述第二RNN生成第一模型；

通過所述第一模型預測位于第二時間戳和第三時間戳之間的各單位時間內產生的第二數據記錄數目，得到第三單位時間集合；

在第二單位時間集合和第三單位時間集合滿足預設條件時，將第一模型確定為預測模型。

6.如權利要求5所述的方法，其特征在于，所述方法還包括：

在第二單位時間集合和第三單位時間集合不滿足預設條件時，獲取RNN參數對應的第二參數值，根據所述RNN參數對應的第二參數值設置所述第二RNN的RNN參數，得到第三RNN；

根據所述第一單位時間集合、所述第二單位時間集合和所述第三RNN生成所述預測模型。

7.如權利要求1所述的方法，其特征在于，所述從所述第二數目個分區中獲取存儲率超過預設存儲率閾值的分區作為目標分區之后，還包括：

確定獲取所述目標分區的獲取時間所在的當天日期，在所述當天日期內選擇一個時間點并將所述時間點確定為所述目標分區對應的分裂時間，所述分裂時間晚于所述當天日期內的預設時間點。