[發明專利]熱點查詢數據的搜集方法和裝置在審
| 申請號: | 201611220545.9 | 申請日: | 2016-12-26 |
| 公開(公告)號: | CN108241691A | 公開(公告)日: | 2018-07-03 |
| 發明(設計)人: | 洪超 | 申請(專利權)人: | 北京國雙科技有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;G06F11/34 |
| 代理公司: | 北京康信知識產權代理有限責任公司 11240 | 代理人: | 韓建偉;張永明 |
| 地址: | 100086 北京市海淀區*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 熱點查詢數據 查詢 查詢數據 方法和裝置 記錄 搜集 結構化查詢語言 人工分析 統計結果 維度 解析 統計 | ||
1.一種熱點查詢數據的搜集方法,其特征在于,包括:
獲取基于結構化查詢語言進行查詢的查詢記錄;
從所述查詢記錄中解析得到查詢數據,其中,所述查詢數據至少包括查詢維度和查詢指標;
基于使用次數對所述查詢數據進行統計,并根據統計結果得到熱點查詢數據。
2.根據權利要求1所述的方法,其特征在于,獲取基于結構化查詢語言進行查詢的查詢記錄,包括:按照預設周期獲取基于結構化查詢語言進行查詢的查詢記錄。
3.根據權利要求1或2所述的方法,其特征在于,獲取基于結構化查詢語言進行查詢的查詢記錄,包括:
通過集群管理系統的應用程序編程接口,獲取基于集群中查詢引擎中的結構化查詢語言進行查詢的查詢記錄;
其中,所述集群管理系統至少包括cloudera manager,所述集群至少包括CDH集群,所述查詢引擎至少包括impala。
4.根據權利要求1所述的方法,其特征在于,從所述查詢記錄中解析得到查詢數據,包括:
基于結構化查詢語言解析工具,從所述查詢記錄中解析得到所述查詢數據;其中,所述結構化查詢語言解析工具至少包括jsqlparser。
5.根據權利要求1、2和4中任意一項所述的方法,其特征在于,從所述查詢記錄中解析得到查詢數據之后,包括:
將所述查詢數據存儲在數據庫中。
6.根據權利要求1所述的方法,其特征在于,所述查詢數據還包括查詢時間,基于使用次數對所述查詢數據進行統計,根據統計結果得到熱點查詢數據,包括:
基于使用次數和所述查詢時間對所述查詢數據進行統計,根據統計結果得到不同時間段的熱點查詢數據。
7.一種熱點查詢數據的搜集裝置,其特征在于,包括:
獲取模塊,用于獲取基于結構化查詢語言進行查詢的查詢記錄;
解析模塊,用于從所述查詢記錄中解析得到查詢數據,其中,所述查詢數據至少包括查詢維度和查詢指標;
統計模塊,用于基于使用次數對所述查詢數據進行統計,并根據統計結果得到熱點查詢數據。
8.根據權利要求7所述的裝置,其特征在于,所述獲取模塊包括:第一獲取單元,用于按照預設周期獲取基于結構化查詢語言進行查詢的查詢記錄。
9.根據權利要求7或8所述的裝置,其特征在于,所述獲取模塊包括:第二獲取單元,用于通過集群管理系統的應用程序編程接口,獲取基于集群中查詢引擎中的結構化查詢語言進行查詢的查詢記錄;
其中,所述集群管理系統至少包括cloudera manager,所述集群至少包括CDH集群,所述查詢引擎至少包括impala。
10.根據權利要求7所述的裝置,其特征在于,所述解析模塊包括:解析單元,用于基于結構化查詢語言解析工具,從所述查詢記錄中解析得到所述查詢數據;其中,所述結構化查詢語言解析工具至少包括jsqlparser。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京國雙科技有限公司,未經北京國雙科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611220545.9/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:頁面資源獲取方法、裝置和客戶端設備
- 下一篇:數據的查詢方法及裝置





