[發明專利]一種數字視網膜體系結構及軟件架構方法及系統

有效

• 申請號: 201910804261.1
• 申請日: 2019-08-28
• 公開（公告）號: CN111090773B
• 公開（公告）日: 2023-02-07
• 發明（設計）人: 賈惠柱;李源;楊長水;齊峰;解曉東;高文
• 申請（專利權）人: 北京大學
• 主分類號: G06F16/71
• 分類號: G06F16/71;G06F16/783;H04N7/18;H04N19/85
• 代理公司: 北京辰權知識產權代理有限公司 11619
• 代理人: 劉廣達

1.一種數字視網膜體系結構及軟件架構的方法，其特征在于，包括：

接入視頻流；

對視頻流進行壓縮，得到視頻濃縮流；

對視頻流進行輸入適配和系統調度后，進行預處理；

對預處理后的視頻流進行智能運算，得到視頻流的特征流；

將視頻濃縮流和特征流匹配后進行封裝后傳輸給云端服務器；

云端服務器的雙流智能交互中間件接收封裝后的視頻濃縮流和特征流，并將視頻濃縮流和特征流分別存儲于相應數據庫，并

接收終端的離線檢索指令，將離線檢索指令的交互目標通過引用交互中間件發送至相應的計算引擎；

計算引擎計算得到目標特征，將目標特征通過應用智能交互中間件發送至檢索引擎；

檢索引擎在相應的數據庫中檢索，將檢索結果及檢索結果相關聯的視頻發送至終端進行顯示；和/或

接收終端的實時追蹤指令，將實時追蹤得到的結果返回至終端進行顯示。

2.如權利要求1所述的一種數字視網膜體系結構及軟件架構的方法，其特征在于，

接收終端的實時追蹤指令，實時追蹤得到的結果返回至終端進行顯示，具體包括：

終端將實時追蹤指令的交互目標經由云端服務器的應用智能交互中間件發送至計算引擎，計算引擎將對交互目標計算得到的目標特征經由雙流智能交互中間件發送于前端監控設備，

前端監控設備將所接收的目標特征和檢測到的目標進行實時匹配，將實時匹配后的匹配結果經由雙流智能交互中間件、應用智能交互中間件發送于終端進行顯示。

3.一種數字視網膜體系結構及軟件架構的系統，其特征在于，包括：前端監控設備、云端服務器、終端，

前端監控設備，包括智能轉換器模塊，智能轉換器模塊用以對視頻進行輸入適配和系統調度后，進行預處理，進而通過智能運算，得到視頻流的特征流，對預處理后的視頻流進行壓縮，得到視頻濃縮流，將視頻濃縮流和特征流匹配后進行封裝后傳輸給云端服務器，智能轉換器模塊在智能運算中將與實時追蹤中的目標特征匹配的匹配結果發送至雙流智能交互中間件，并檢索結果通過雙流智能交互中間件、應用智能交互中間件發送至終端；

云端服務器，用以接收前端監控設備的視頻濃縮流、特征流和實時追蹤的匹配結果，并接收終端的離線檢索指令或/和實時追蹤指令，將離線檢索或/和實時追蹤得到的檢索結果返回至終端進行顯示；

終端，用以發送離線檢索指令或/和實時追蹤指令，并接收離線檢索的檢索結果或/和實時追蹤的匹配結果；

所述云端服務器包括雙流智能交互中間件模塊、應用智能交互中間件模塊、計算引擎模塊、檢索引擎模塊、數據庫模塊，

雙流智能交互中間件模塊，用以接收前端發送的視頻濃縮流和特征流和實時追蹤的匹配結果，并將所述視頻濃縮流和特征流存儲于數據庫模塊，將實時追蹤的匹配結果發送至應用智能交互中間件模塊，雙流智能交互中間件模塊接收計算引擎模塊傳送的目標特征，應用智能交互中間件模塊的交互目標，發送至前端監控設備進行實時匹配；

應用智能交互中間件模塊，用以接收所述終端的離線檢索指令和/或實時追蹤指令，將實時追蹤指令的交互目標通過計算引擎模塊計算轉換為目標特征后發送至雙流智能交互中間件模塊，將離線檢索指令的交互目標發送至計算引擎模塊，并接收計算引擎模塊的目標特征，將其發送至檢索引擎模塊，接收雙流智能交互中間件模塊返回的離線檢索的檢索結果或/和檢索引擎模塊返回的實時追蹤得到的匹配結果，將所述檢索結果和/或匹配結果發送至終端；

計算引擎模塊，用以接收離線檢索或/和實時追蹤的交互目標，并將交互目標轉換為目標特征，將離線檢索的目標特征和/或實時追蹤的目標特征發送至雙流智能交互中間件；

檢索引擎模塊，用以接收應用智能交互中間件模塊的目標特征，并根據數據庫模塊中檢索得到的目標IP調取數據庫模塊中的相關的檢索結果；

數據庫模塊，用以存儲所述視頻濃縮流和特征流。