[發明專利]一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法

在審

• 申請號: 202110682128.0
• 申請日: 2021-06-20
• 公開（公告）號: CN113360706A
• 公開（公告）日: 2021-09-07
• 發明（設計）人: 周瑩;方澤梁;蔣澤飛
• 申請（專利權）人: 杭州登虹科技有限公司
• 主分類號: G06F16/71
• 分類號: G06F16/71;G06F16/732
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法，其特征在于：包括Timeline的raw記錄存儲和Timeline的事件存儲；

Timeline的raw記錄存儲包括以下步驟：

步驟一、配置對象存儲生命周期策略,配置鍵前綴/raw_record過期策略,實現過期raw記錄文件自動清理；

步驟二、切割云存儲攝像頭上傳的視頻流，生成視頻raw文件，根據raw記錄的開始時間戳，按小時匯聚raw記錄，生成raw記錄文件，保存raw記錄文件到至對象存儲；

raw記錄文件的對象存儲鍵為 /raw_record/{mac}/{yyyyMMdd}/{HH}，其中mac為攝像頭的唯一標識，yyyyMMdd 為raw記錄的年月日，HH為小時，圖示為mac為123456的攝像頭，將一條開始時間戳為161378646000的raw記錄，匯聚到/raw_record/123456/20210220/02的raw記錄文件；

步驟三、用戶回放視頻時，通過攝像頭mac和播放時間反向生成raw記錄文件的對象存儲鍵，解析raw記錄文件；

Timeline的事件存儲包括以下步驟：

步驟一、配置Elasticsearch集群，一個Elasticsearch集群至少有3個實例，在業務量增大時，可動態增加實例，設置Elasticsearch索引的分片數，分片數一般為實例數的2倍，這種配置即有高可用性，也不會浪費過多的存儲資源；

步驟二、配置Elasticsearch的索引模板，由于每天都會生成一個Elasticsearch索引，模板使得索引創建可以自動完成；

步驟三、根據攝像頭上報的事件的開始時間戳， 將時間戳轉換為UTC時間，存儲到Elasticsearch的Event-{yyyyMMdd}索引下，并通過mac進行分片路由，進行分片路由的好處是查詢時不需要不需要在多個實例上搜索后匯總，查詢速度更快；

步驟四、查詢事件時，根據查詢時間定位到具體的Elasticsearch索引， 根據mac進行分片路由；

步驟五、通過刪除整個Elasticsearch索引的方式快速高效的進行過期事件清理。

2.根據權利要求1所述的一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法，其特征在于：Timeline的raw記錄存儲將視頻raw記錄， 以一小時為單位，匯聚在一個raw記錄文件中，raw記錄文件每行表示一條raw記錄，上傳至對象存儲。

3.根據權利要求1所述的一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法，其特征在于：Elasticsearch是一個企業級的分布式搜索引擎，查詢速度快，可靠性高，穩定性高，適合用來存儲事件。

4.根據權利要求1所述的一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法，其特征在于：Elasticsearch的索引和分片技術，可以實現事件的存儲負載均衡和快速清理，根據事件的時間，將其存儲在Elasticsearch的Event-{yyyyMMdd}索引下，并通過攝像頭的mac進行分片路由。

5.根據權利要求1所述的一種基于對象存儲與Elasticsearch的視頻Timeline存儲方法，其特征在于：當需要對Elasticsearch進行擴容時，只需要增加新索引的分片數，而不會影響歷史索引，通過刪除過期的Elasticsearch索引就可以進行快速的過期事件清理。