[發明專利]通用文本解析架構及基于所述架構解析文本的方法和裝置

有效

• 申請號: 201611249460.3
• 申請日: 2016-12-29
• 公開（公告）號: CN108255802B
• 公開（公告）日: 2021-08-24
• 發明（設計）人: 石鵬;姜珂
• 申請（專利權）人: 北京國雙科技有限公司
• 主分類號: G06F40/211
• 分類號: G06F40/211;G06F40/253;G06F40/284
• 代理公司: 北京鼎佳達知識產權代理事務所(普通合伙) 11348
• 代理人: 王偉鋒;劉鐵生

1.一種基于通用文本解析架構解析文本的方法，其特征在于，所述方法包括：

獲取待解析的文本；

利用預處理層中的至少一個預處理組件對所述文本進行預處理，并將預處理結果緩存至語料倉庫層中；

利用維度業務邏輯層調用信息搜索算法層中至少一個封裝的算法，實現對所述語料倉庫層中緩存的所述預處理結果的搜索，所述封裝的算法為基于非業務邏輯的公共算法，且所述預處理組件和/或所述封裝的算法具有熱插拔性；

通過待搜索維度的業務邏輯對搜索結果進行處理，獲得文本解析結果；

所述方法還包括：

基于所述文本解析結果計算第一評估值以及第二評估值；其中，所述第一評估值用于評估所述維度業務邏輯層獲得的文本解析結果與對應維度的算法的匹配度；所述第二評估值用于評估所述文本解析結果的邏輯準確度，且所述第二評估值根據預先設置的后驗規則計算而得；

根據所述第一評估值以及所述第二評估值，輸出文本解析結果。

2.根據權利要求1所述的方法，其特征在于，若基于所述通用文本解析架構開發有至少兩個完整的文本解析程序，則所述根據所述第一評估值以及所述第二評估值，輸出文本解析結果包括：

若對于同一個維度存在至少兩種算法，則輸出當前算法對應的文本解析結果、第一評估值以及第二評估值，以及輸出同一緯度的其他算法對應的文本解析結果、第一評估值以及第二評估值。

3.根據權利要求1所述的方法，其特征在于，若基于所述通用文本解析架構開發有至少兩個完整的文本解析程序，則所述根據所述第一評估值以及所述第二評估值，輸出文本解析結果包括：

若對于同一個維度存在至少兩種算法，則在輸出文本解析結果時，分別將當前算法對應的文本解析結果的第一評估值以及第二評估值與同一緯度的其他算法對應的文本解析結果的第一評估值以及第二評估值進行比較，確定并輸出可靠性最高的文本解析結果。

4.根據權利要求1至3中任一項所述的方法，其特征在于，所述將預處理結果緩存至語料倉庫層中包括：

將所述預處理結果以樹形結構緩存至所述語料倉庫層中。

5.一種基于通用文本解析架構解析文本的裝置，其特征在于，所述裝置包括：

獲取單元，用于獲取待解析的文本；

預處理單元，用于利用預處理層中的至少一個預處理組件對所述獲取單元獲取的所述文本進行預處理；

緩存單元，用于將所述預處理單元獲得的預處理結果緩存至語料倉庫層中；

搜索單元，用于利用維度業務邏輯層調用信息搜索算法層中至少一個封裝的算法，實現對所述語料倉庫層中緩存的所述預處理結果的搜索，所述封裝的算法為基于非業務邏輯的公共算法，且所述預處理組件和/或所述封裝的算法具有熱插拔性；

邏輯處理單元，用于通過待搜索維度的業務邏輯對所述搜索單元的搜索結果進行處理，獲得文本解析結果；

所述裝置還包括：

計算單元，用于基于所述文本解析結果計算第一評估值以及第二評估值；其中，所述第一評估值用于評估所述維度業務邏輯層獲得的文本解析結果與對應維度的算法的匹配度；所述第二評估值用于評估所述文本解析結果的邏輯準確度，且所述第二評估值根據預先設置的后驗規則計算而得；

輸出單元，用于根據所述第一評估值以及所述第二評估值，輸出文本解析結果。

6.根據權利要求5所述的裝置，其特征在于，所述輸出單元用于當基于所述通用文本解析架構開發有至少兩個完整的文本解析程序時，若對于同一個維度存在至少兩種算法，則輸出當前算法對應的文本解析結果、第一評估值以及第二評估值，以及輸出同一緯度的其他算法對應的文本解析結果、第一評估值以及第二評估值。

7.根據權利要求5所述的裝置，其特征在于，所述輸出單元用于基于所述通用文本解析架構開發有至少兩個完整的文本解析程序時，若對于同一個維度存在至少兩種算法，則在輸出文本解析結果時，分別將當前算法對應的文本解析結果的第一評估值以及第二評估值與同一緯度的其他算法對應的文本解析結果的第一評估值以及第二評估值進行比較，確定并輸出可靠性最高的文本解析結果。