[發明專利]多類型存儲調度推流方法、系統、數據更新方法

在審

• 申請號: 201810154113.5
• 申請日: 2018-02-22
• 公開（公告）號: CN108418877A
• 公開（公告）日: 2018-08-17
• 發明（設計）人: 尹少華;馬立凱;王祥偉
• 申請（專利權）人: 上海思華科技股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F9/44
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 施浩

本發明公開了一種多類型存儲調度推流方法、系統、數據更新方法，提高流服務性價比。其技術方案為：會話模塊接收用戶請求并將其URI及類型發送給文件查找模塊；文件查找模塊計算請求文件的絕對路徑，基于文件位置做出不同處理：若文件在第一類型存儲盤，則判斷用戶請求類型是否為服務，若為服務則更新本地LRU鏈表，將文件絕對路徑返回給會話模塊，若不為服務則直接流程結束；若文件不在第一類型存儲盤，則判斷文件是否在第二類型存儲盤，若是則判斷用戶請求類型為本地IO請求，否則判斷用戶請求類型為網絡IO請求，本地和網絡均將用戶請求發送至IO調度模塊，調用回源模塊讀取數據，回源模塊通過IO調度模塊返回給會話模塊。

技術領域

本發明涉及流服務器緩存推流的技術，尤其涉及基于對不同類型存儲的存儲、調度和推流的方法和系統。

背景技術

當前市場上不同類型的存儲性價比不同，比如SATA價格低，但是性能不是很好，比如SSD價格高，但是性能好；為了達到最高的性價比，設計一個新的存儲方案，使用SATA與SSD混插的模式，將熱度高的內容緩存到SSD，熱度相對低的內容緩存到SATA，這樣既能保證SATA盤的存儲空間能力，又能保證SSD的讀寫性能。

但是如何能基于SATA與SSD混插模式進行調度推流，是目前業界亟待解決的問題。

發明內容

以下給出一個或多個方面的簡要概述以提供對這些方面的基本理解。此概述不是所有構想到的方面的詳盡綜覽，并且既非旨在指認出所有方面的關鍵性或決定性要素亦非試圖界定任何或所有方面的范圍。其唯一的目的是要以簡化形式給出一個或多個方面的一些概念以為稍后給出的更加詳細的描述之序。

本發明的目的在于解決上述問題，提供一種多類型存儲調度推流方法、系統、數據更新方法，提高流服務性價比，在相同的存儲空間和相同價格要求下，比同一類型的存儲能支持更高的性能指標。

本發明的技術方案為：本發明揭示了一種多類型存儲調度推流系統，包括會話模塊、文件查找模塊、IO調度模塊、回源模塊，其中會話模塊用于接收用戶請求并將用戶請求的URI及類型發送給文件查找模塊；文件查找模塊用于根據用戶請求的URI及類型計算請求文件的絕對路徑，基于文件的位置做出不同的處理：若文件在第一類型存儲盤，則進一步判斷用戶請求類型是否為服務，若為服務類型則通過淘汰模塊更新本地LRU鏈表，將文件絕對路徑返回給會話模塊，若不為服務類型則直接流程結束；若文件不在第一類型存儲盤，則進一步判斷文件是否在第二類型存儲盤，若在第二類型存儲盤則判斷用戶請求類型為本地IO請求，若不在第二類型存儲盤則判斷用戶請求類型為網絡IO請求，本地IO請求和網絡IO請求均將用戶請求發送至IO調度模塊，IO調度模塊調用回源模塊讀取數據，回源模塊將讀取到的數據返回給IO調度模塊，再由IO調度模塊返回給會話模塊。

根據本發明的多類型存儲調度推流系統的一實施例，第一類型存儲盤為SSD盤，第二類型存儲盤為SATA盤。

根據本發明的多類型存儲調度推流系統的一實施例，淘汰模塊將新插入的數據放入第一隊列中，其中每個隊列按照LRU管理數據，當某一數據的訪問次數達到設定次數時，將該數據從當前隊列刪除并加入到優先級高一級的隊列的頭部，當某一數據在指定的時間里沒有被訪問時，將該數據從當前隊列刪除并加入到優先級低一級的隊列的頭部；當需要淘汰數據時，從最低一級隊列開始按照LRU淘汰，每個隊列淘汰數據時將淘汰的數據從緩存中刪除，將被淘汰的數據索引加入歷史隊列的頭部；如果某一數據在歷史隊列中被重新訪問則重新計算其優先級，移到目標隊列的頭部，其中歷史隊列按照LRU將淘汰數據進行索引。

本發明還揭示了一種多類型存儲調度推流方法，包括：

會話模塊接收用戶請求，將用戶請求的URI及類型發送給文件查找模塊；

文件查找模塊根據用戶請求的URI及類型計算請求文件的絕對路徑，基于文件的位置做出不同的處理：