[發明專利]分布式的級聯裂變查詢方法及裝置

在審

• 申請號: 201610252466.X
• 申請日: 2016-04-21
• 公開（公告）號: CN107305568A
• 公開（公告）日: 2017-10-31
• 發明（設計）人: 郭瑞;郭祥
• 申請（專利權）人: 北京智能管家科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京路浩知識產權代理有限公司11002
• 代理人: 李相雨

1.一種分布式的級聯裂變查詢方法，其特征在于，包括：

在預設的分布式系統開發框架中創建用于放置裂變詞的裂變詞文件以及用于放置裂變模式的裂變模式文件；

其中，所述裂變詞為用于將語句劃分成裂變模式的關鍵詞，所述裂變模式為根據所述語句包含的所述關鍵詞的詞性以及包含的其他詞語的詞性將所述語句進行劃分所得的模式；

根據所述裂變詞文件中的裂變詞以及所述裂變模式文件中的裂變模式進行迭代裂變搜索，以確定裂變詞集合和裂變模集合；

根據所述裂變詞集合和裂變模集合對待查詢語句進行裂變處理，并根據處理結果獲取并返回查詢結果。

2.根據權利要求1所述的方法，其特征在于，所述根據所述裂變詞文件中的裂變詞以及所述裂變模式文件中的裂變模式進行迭代裂變搜索，以確定裂變詞集合和裂變模集合，包括：

根據所述裂變詞文件中的裂變詞以及對預設數量的語料進行標注所獲取的標注結果挖掘新的裂變模式，并將所述新的裂變模式放入所述裂變模式文件中；

根據所述裂變模式文件中的所述裂變模式以及所述語料，挖掘新的裂變詞，并將所述新的裂變詞放入所述裂變詞文件中；

交替重復上述挖掘新的裂變模式以及挖掘新的裂變詞的步驟，直至不再出現新的裂變模式或新的裂變詞，并將最終所得的裂變詞文件和裂變模式文件分別作為裂變詞集合和裂變模集合。

3.根據權利要求1所述的方法，其特征在于，所述根據所述裂變詞文件中的裂變詞以及所述裂變模式文件中的裂變模式進行迭代裂變搜索之前，所述方法還包括：

在所述分布式系統開發框架中對預設數量的語料進行標注，以獲取標注結果；

相應地，所述根據所述裂變詞集合和裂變模集合對待查詢語句進行裂變處理，并根據處理結果獲取并返回查詢結果，包括：

根據所述標注結果、所述裂變詞集合和裂變模集合對待查詢語句進行裂變處理，并根據處理結果獲取并返回查詢結果。

4.根據權利要求3所述的方法，其特征在于，所述分布式系統開發框架包括但不限于分布式系統基礎框架hadoop。

5.根據權利要求4所述的方法，其特征在于，所述在所述分布式系統開發框架中對預設數量的語料進行標注，包括：

利用hadoop的map/reduce調用分詞程序對所述語料中的語句進行分詞并按照詞性進行標注。

6.一種分布式的級聯裂變查詢裝置，其特征在于，包括：

文件創建單元，用于在預設的分布式系統開發框架中創建用于放置裂變詞的裂變詞文件以及用于放置裂變模式的裂變模式文件；

其中，所述裂變詞為用于將語句劃分成裂變模式的關鍵詞，所述裂變模式為根據所述語句包含的所述關鍵詞的詞性以及包含的其他詞語的詞性將所述語句進行劃分所得的模式；

集合確定單元，用于根據所述裂變詞文件中的裂變詞以及所述裂變模式文件中的裂變模式進行迭代裂變搜索，以確定裂變詞集合和裂變模集合；

裂變查詢單元，用于根據所述裂變詞集合和裂變模集合對待查詢語句進行裂變處理，并根據處理結果獲取并返回查詢結果。

7.根據權利要求6所述的裝置，其特征在于，所述集合確定單元進一步用于：

根據所述裂變詞文件中的裂變詞以及對預設數量的語料進行標注所獲取的標注結果挖掘新的裂變模式，并將所述新的裂變模式放入所述裂變模式文件中；

根據所述裂變模式文件中的所述裂變模式以及所述語料，挖掘新 的裂變詞，并將所述新的裂變詞放入所述裂變詞文件中；

交替重復上述挖掘新的裂變模式以及挖掘新的裂變詞的步驟，直至不再出現新的裂變模式或新的裂變詞，并將最終所得的裂變詞文件和裂變模式文件分別作為裂變詞集合和裂變模集合。

8.根據權利要求6所述的裝置，其特征在于，所述裝置還包括：

標注單元，用于在所述分布式系統開發框架中對預設數量的語料進行標注，以獲取標注結果；

相應地，所述裂變查詢單元進一步用于根據所述標注結果、所述裂變詞集合和裂變模集合對待查詢語句進行裂變處理，并根據處理結果獲取并返回查詢結果。

9.根據權利要求8所述的裝置，其特征在于，所述分布式系統開發框架包括但不限于分布式系統基礎框架hadoop。

10.根據權利要求9所述的裝置，其特征在于，所述標注單元進一步用于利用hadoop的map/reduce調用分詞程序對所述語料中的語句進行分詞并按照詞性進行標注。