[發明專利]數據處理方法、裝置、設備及存儲介質

在審

• 申請號: 202210271886.8
• 申請日: 2022-03-18
• 公開（公告）號: CN114661749A
• 公開（公告）日: 2022-06-24
• 發明（設計）人: 張海森;董明;黃杰
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06F16/242
• 分類號: G06F16/242;G06F16/2453
• 代理公司: 北京中博世達專利商標代理有限公司 11274
• 代理人: 申健

本申請公開了一種數據處理方法、裝置、設備及存儲介質，涉及數據庫技術領域，用于對SQL查詢語句自動判斷是否執行動態過濾，有助于降低執行動態過濾的人工成本，以及避免造成“負加速”。該方法包括：接收結構化查詢語言SQL查詢語句，并確定SQL查詢語句的執行信息；執行信息包括至少兩個表的多表連接信息、SQL查詢語句的查詢條件信息、SQL查詢語句的查詢字段信息中的至少一項；至少基于執行信息，預測第一時長和第二時長；其中，第一時長為對SQL查詢語句執行動態過濾時SQL查詢語句的執行時長，第二時長為未對SQL查詢語句執行動態過濾時SQL查詢語句的執行時長；在第一時長小于或等于第二時長的情況下，對SQL查詢語句執行動態過濾。

技術領域

本申請涉及數據庫技術領域，尤其涉及一種數據處理方法、裝置、設備及存儲介質。

背景技術

結構化查詢語言SQL(Structured Query Language)查詢語句需要查詢至少兩個表時，如果，至少兩個表中有兩個表具有關聯關系，通常會對該兩個表執行多表連接(join)操作。此外，在對該兩個表執行多表連接操作時，還可以啟用動態過濾，提前對多表連接中的大表進行過濾，以減少數據加載量，提升整體查詢性能。具體地，通常是由運維人員基于配置項手動開啟數據庫的動態過濾功能，并設置一個預設時長，當讀取多表連接中的小表的時長小于或等于預設時長時生成過濾條件，并基于過濾條件對多表連接中的大表進行動態過濾。

在上述方案中，由于需要運維人員手動開啟數據庫的動態過濾功能，并設置預設時長，導致人力成本較高，且對運維人員的要求比較高。此外，人工設置預設時長，準確性較低，當讀取小表的時長大于預設時長時，則無法生成過濾條件，也即，將無法執行動態過濾，此時，由于在預設時長后才開始讀取大表，導致對SQL查詢語句的執行時長造成了“負加速”。

發明內容

本申請實施例提供了一種數據處理方法、裝置、設備及存儲介質，用于對SQL查詢語句自動判斷是否執行動態過濾，有助于降低執行動態過濾的人工成本，以及避免造成“負加速”。

為達到上述目的，本申請實施例提供如下技術方案：

第一方面，提供了一種數據處理方法，用于計算機設備，包括：接收結構化查詢語言SQL查詢語句，并確定SQL查詢語句的執行信息；SQL查詢語句用于查詢數據庫中的至少兩個表，執行信息包括至少兩個表的多表連接信息、SQL查詢語句的查詢條件信息、SQL查詢語句的查詢字段信息中的至少一項；至少基于執行信息，預測第一時長和第二時長；其中，第一時長為對SQL查詢語句執行動態過濾時SQL查詢語句的執行時長，第二時長為未對SQL查詢語句執行動態過濾時SQL查詢語句的執行時長；在第一時長小于或等于第二時長的情況下，對SQL查詢語句執行動態過濾。

在該方案中，針對接收到的每個SQL查詢語句，確定第一時長和第二時長，并在第一時長小于或等于第二時長，對該SQL查詢語句執行動態過濾，一方面，實現了對SQL查詢語句自動判斷是否執行動態過濾，達到自適應執行動態過濾的目的，降低了執行動態過濾的人工成本，解決相關技術中存在的對運維人員要求高的問題。另一方面，由于僅在第一時長小于或等于第二時長的情況下對SQL查詢語句執行動態過濾，而在第一時長大于第二時長的情況下不對SQL查詢語句執行動態過濾，也即，選擇了執行時長最短的方案執行SQL查詢語句，因此，在是否執行動態過濾的判斷中選擇了最優解，從而避免了在執行動態過濾所節省的時長不足以彌補生成過濾條件所花費的時長的情況下執行動態過濾，進而避免了執行動態過濾導致查詢性能下降的問題。此外，由于不需要設置預設時長，還解決了相關技術中容易造成“負加速”問題。