[發明專利]詞典更新方法、裝置、設備和存儲介質

有效

• 申請號: 201911353606.2
• 申請日: 2019-12-25
• 公開（公告）號: CN111125257B
• 公開（公告）日: 2023-09-05
• 發明（設計）人: 王九碩;張丹;于琳琳;賈丹丹
• 申請（專利權）人: 新方正控股發展有限責任公司;北京北大方正電子有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/23
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 馬少華;臧建明

本發明實施例提供一種詞典更新方法、裝置、設備和存儲介質，該方法包括：對與目標更新任務對應的數據進行組裝，生成組裝數據，其中，目標更新任務為對目標詞典文件中各個詞典進行更新的任務，目標更新任務包括增量更新任務和/或全量更新任務；基于組裝數據對目標詞典文件中各個詞典進行更新，并生成各個詞典對應的更新狀態。根據本發明實施例的技術方案，能夠確保客戶端與服務器端詞典更新的時效性和一致性。

技術領域

本發明涉及數據處理技術領域，尤其涉及一種詞典更新方法、裝置、設備和存儲介質。

背景技術

隨著計算機技術的發展，計算機網絡上產生了大量的數據，對這些數據進行分析的過程中，需要對數據進行分詞處理，分詞處理需要大量的詞典，如何對詞典的更新進行處理成為了關注的焦點。

在一種技術方案中，實現了詞庫服務器與詞庫客戶端之間的同步，在詞庫中的詞典發生更新時，用戶將自定義的用戶詞典上傳到詞庫服務器上或從詞庫服務器下載更新的詞典。然而，在這種技術方案中，難以保證客戶端與服務器之間的詞典更新的時效性和一致性。

因此，如何在客戶端與服務器之間及時地并且一致性地更新詞典成為了亟待解決的技術難題。

發明內容

本發明實施例提供一種詞典更新方法、裝置、設備和存儲介質，用于解決如何在客戶端與服務器之間及時地并且一致性地更新詞典的問題。

本發明實施例第一方面，提供了一種詞典更新方法，包括：對與目標更新任務對應的數據進行組裝，生成組裝數據，其中，所述目標更新任務為對目標詞典文件中各個詞典進行更新的任務，所述目標更新任務包括增量更新任務和/或全量更新任務；基于所述組裝數據對所述目標詞典文件中各個詞典進行更新，并生成各個詞典對應的更新狀態。

在本發明的一些實施例中，基于上述方案，所述目標更新任務包括所述增量更新任務，所述基于所述組裝數據對所述目標詞典文件中各個詞典進行更新，包括：以第一預定時間段為周期，獲取所述組裝數據中與所述增量更新任務對應的增量數據，其中，所述增量數據包括在所述第一預定時間段內多個用戶對所述目標詞典文件中各個詞典進行更新的數據；將所述增量數據更新到所述目標詞典文件中的各個詞典中。

在本發明的一些實施例中，基于上述方案，所述目標更新任務包括所述全量更新任務，所述基于所述組裝數據對所述目標詞典文件中各個詞典進行更新，包括：以第二預定時間段為周期，獲取所述組裝數據中與所述全量更新任務對應的全量數據，其中，所述全量數據包括所述目標詞典文件中各個詞典的全部詞語；將所述全量數據更新到所述目標詞典文件中的各個詞典中，所述第二預定時間段大于所述第一預定時間段。

在本發明的一些實施例中，基于上述方案，所述方法還包括：響應于所述客戶端發送的更新狀態查詢請求，向所述客戶端返回所述目標詞典文件中各個詞典的所述更新狀態。

在本發明的一些實施例中，基于上述方案，所述詞典包括通用詞典、機構詞典以及個人詞典中的一種或多種。

在本發明的一些實施例中，基于上述方案，所述服務器端為分布式系統端。

本發明實施例的第二方面，提供了一種詞典更新方法，所述方法包括：從服務器端獲取所述客戶端中各個詞典的更新狀態，其中，所述更新狀態用于指示所述詞典在所述服務器端是否已更新；若所述更新狀態指示所述詞典在所述服務器端已更新，則從所述服務器端加載已更新的所述詞典，其中，所述服務器端配置有目標更新任務，所述目標更新任務為對目標詞典文件中各個詞典進行更新的任務，所述目標更新任務包括增量更新任務和/或全量更新任務。

在本發明的一些實施例中，基于上述方案，所述詞典包括個人詞典，所述方法還包括：響應于對所述個人詞典的更新任務，獲取所述個人詞典的所述更新狀態；根據所述更新狀態確定所述個人詞典是否已更新；若已更新，則重新加載所述個人詞典。