[發明專利]表格問答的數據處理方法、電子設備及可讀存儲介質

有效

• 申請號: 202210062848.1
• 申請日: 2022-01-20
• 公開（公告）號: CN114090760B
• 公開（公告）日: 2022-04-26
• 發明（設計）人: 楊旭強;羅雪峰;蔣宗亨
• 申請（專利權）人: 阿里巴巴達摩院（杭州）科技有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F16/242;G06F16/22
• 代理公司: 北京同鈞律師事務所 16037
• 代理人: 許懷遠

本申請提供一種表格問答的數據處理方法、電子設備及可讀存儲介質，本申請的方法，將數據表格所包含的表格數據存儲在ES的文檔數據中，數據表格的一行數據對應于一個文檔數據，文檔數據的字段名根據對應列的數據類型和對應列在同數據類型的列中出現的次序確定，字段類型根據字段名稱確定，不需要提前預置所有的字段名及其類型，即可實現動態數據表格的存儲，支持大數據量表格數據的存儲，支持數據表格結構的靈活變化。在表格問答時將輸入的問題信息轉化為結構化查詢語句，將結構化查詢語句轉化為DSL語句，通過在ES中執行DSL語句，即可實現從文檔數據中查詢得到問題信息的答案信息，實現實時檢索，保證表格問答的響應及時性。

技術領域

本申請涉及人工智能技術，尤其涉及一種表格問答的數據處理方法、電子設備及可讀存儲介質。

背景技術

表格問答是針對自然語言（Natural Language，簡稱NL）問題，基于自然語言技術根據數據表格的內容給出答案。在商品信息咨詢等表格問答場景中，表格數據通常在十萬甚至百萬的級別，表格數據的數據量非常大。

目前，通過將表格數據存儲在關系型數據庫中，在管理表格數據和問答時進行檢索均使用關系型數據庫所存儲的表格數據，對于復雜且數據量較大的場景，比如需要支持模糊查詢（LIKE）的場景的，很難做到實時響應。為了提高問答響應的及時性，可以將表格數據存儲在ElasticSearch（簡稱ES）中，基于ElasticSearch實現問答的檢索。

但是在ElasticSearch中存表格數據時，需要在ElasticSearch中預先設置所有數據表格中每一列在文檔（document）中的字段名和字段類型，數據表格增加新的列時，須在ES中指定新增列對應的字段名和字段類型，不利于數據表格的動態維護；隨著數據表格中列的數量的增加，ElasticSearch的document中字段的數量不斷增加，當存儲大數據量的表格數據時，基于ElasticSearch的檢索性能下降，導致表格問答的響應時間長、及時性差。

發明內容

本申請提供一種表格問答的數據處理方法、電子設備及可讀存儲介質。

一方面，本申請提供一種表格問答的數據處理方法，包括：

接收輸入的問題信息；

根據當前場景下所有數據表格的結構信息，將所述問題信息轉化為結構化查詢語句，所述結構化查詢語句用于從關系型數據庫中與所述數據表格對應的數據庫表中查詢得到所述問題信息的答案信息，所述數據表格所包含的列與對應的數據庫表所包含的字段一一對應；

根據每一所述數據表格所包含的列與ElasticSearch中存儲的文檔數據的字段的第一映射關系，將所述結構化查詢語句轉化為DSL語句，其中，所述文檔數據包括所有數據表格中所包含的數據，每一所述數據表格中的一行數據對應于所述文檔數據中的一個文檔數據，所述文檔數據包括第一字段和數據字段，所述第一字段用于存儲所述數據表格的標識，所述數據字段與所述數據表格的列一一對應，每一所述數據字段的字段名根據所述數據表格中對應列的數據類型和所述對應列在同數據類型的列中出現的次序確定；

通過在ElasticSearch中執行所述DSL語句，從所述文檔數據中查詢得到所述問題信息的答案信息；

輸出所述答案信息。

另一方面，本申請提供一種電子設備，包括：

處理器，以及與所述處理器通信連接的存儲器；

所述存儲器存儲計算機執行指令；

所述處理器執行所述存儲器存儲的計算機執行指令，以實現上述所述的表格問答的數據處理方法。

另一方面，本申請提供一種計算機可讀存儲介質，所述計算機可讀存儲介質中存儲有計算機執行指令，所述計算機執行指令被處理器執行時用于實現上述所述的表格問答的數據處理方法。