[發明專利]基于圖像識別的問答處理方法、裝置及系統

有效

• 申請號: 201410198155.0
• 申請日: 2014-05-12
• 公開（公告）號: CN105095272B
• 公開（公告）日: 2019-03-29
• 發明（設計）人: 阮征
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/53
• 分類號: G06F16/53;G06F16/332
• 代理公司: 北京億騰知識產權代理事務所(普通合伙) 11309
• 代理人: 戴燕

1.一種基于圖像識別的問答處理方法，其特征在于，所述方法包括：

接收用戶發送的包含提示信息的圖片；

對所述圖片進行圖像識別處理，得到所述圖片的提示信息文本；

對所述提示信息文本進行文本語義分析，提取得到所述提示信息文本中的關鍵詞；

從用戶信息庫中，查找得到所述用戶的用戶信息；根據日志信息，判斷所述用戶是否出現與所述提示信息文本相關的異常問題，如果是，根據所述關鍵詞和所述用戶信息，從知識數據庫中查詢得到與所述提示信息文本相關的第一知識信息；

利用所述用戶信息和所述第一知識信息，生成所述提示信息文本的答案并顯示。

2.根據權利要求1所述的方法，其特征在于，所述利用所述用戶信息和所述第一知識信息，生成所述提示信息文本的答案，具體包括：

根據預設的答案模板，組裝所述用戶信息和所述第一知識信息，生成所述提示信息文本的答案。

3.根據權利要求1所述的方法，其特征在于，所述接收用戶發送的包含提示信息的圖片，具體包括：

通過即時通訊工具、網頁或手機客戶端接收所述用戶發送的包含提示信息的圖片。

4.一種基于圖像識別的問答處理裝置，其特征在于，所述裝置包括：

接收單元，用于接收用戶發送的包含提示信息的圖片；

圖像識別單元，用于對所述接收單元接收的所述圖片進行圖像識別處理，得到所述圖片的提示信息文本；

語義識別單元，用于對所述圖像識別單元得到的所述提示信息文本進行文本語義分析，提取得到所述提示信息文本中的關鍵詞；

第一查詢單元，用于從用戶信息庫中，查找得到所述用戶的用戶信息；確認單元，用于根據日志信息，判斷所述用戶是否出現與所述圖像識別單元得到的所述提示信息文本相關的異常問題，如果是，還包括第二查詢單元，用于根據所述語義識別單元得到的所述關鍵詞和所述第一查詢單元得到的所述用戶信息，從知識數據庫中查詢得到與所述提示信息文本相關的第一知識信息；

答案生成單元，用于利用所述第一查詢單元得到的所述用戶信息和所述第二查詢單元得到的所述第一知識信息，生成所述提示信息文本的答案并顯示。

5.根據權利要求4所述的裝置，其特征在于，所述答案生成單元具體用于根據預設的答案模板，組裝所述用戶信息和所述第一知識信息，生成所述提示信息文本的答案。

6.根據權利要求4所述的裝置，其特征在于，所述接收單元通過即時通訊工具、網頁或手機客戶端接收所述用戶發送的包含提示信息的圖片。

7.一種基于圖像識別的問答系統，其特征在于，所述系統包括：交互平臺、圖像識別平臺、語義識別平臺、知識數據庫、用戶信息庫和后臺服務器；

所述交互平臺，用于與用戶進行交互；

所述圖像識別平臺，用于對圖片進行圖像識別處理，得到所述圖片中的文本；

所述語義識別平臺，用于對文本進行文本語義分析，提取得到所述文本中的關鍵詞；

所述知識數據庫，用于存儲大量的知識數據信息；

所述用戶信息庫，用于存儲大量的用戶信息；

所述交互平臺接收所述用戶發送的包含提示信息的第一圖片；

所述圖像識別平臺對所述交互平臺接收的所述第一圖片進行圖像識別處理，得到所述第一圖片的提示信息文本；

所述后臺服務器通過所述語義識別平臺對所述圖像識別平臺得到的所述提示信息文本進行文本語義分析，提取得到所述提示信息文本中的第一關鍵詞；

所述后臺服務器從所述用戶信息庫中，查找得到所述用戶的用戶信息；

所述后臺服務器根據日志信息，判斷所述用戶是否出現與所述提示信息文本相關的異常問題，如果是，根據所述第一關鍵詞和所述用戶信息，從所述知識數據庫中查詢得到與所述第一圖片的提示信息文本相關的第一知識信息；

所述后臺服務器利用所述用戶信息和所述第一知識信息，生成所述提示信息文本的答案并通過所述交互平臺顯示。