[發明專利]一種用于眾測任務發布的文本摘要與圖文檢索生成方法

在審

• 申請號: 202110664152.1
• 申請日: 2021-06-16
• 公開（公告）號: CN113392245A
• 公開（公告）日: 2021-09-14
• 發明（設計）人: 王崇駿;姚懿容;何強強;崔風麗;李寧
• 申請（專利權）人: 南京大學
• 主分類號: G06F16/532
• 分類號: G06F16/532;G06F16/583;G06F40/284;G06T5/50
• 代理公司: 南京瑞弘專利商標事務所(普通合伙) 32249
• 代理人: 陳建和

本發明公開了一種用于眾測任務發布的文本摘要與圖文檢索生成方法，采集真實眾測場景任務發布中提取的相關數據，對相關數據進行篩選整理與清洗；對給定的相關單個或多個任務文檔進行摘要生成，利用上階段獲得的任務相關文本摘要，收集相關圖片數據庫并檢索出合適的圖像；對檢索出的兩幅相關圖像進行二次融合加工，以生成的方式整合為一張圖片，提高圖片與任務的匹配度和信息量。本發明通過在眾測任務發布中對較為繁雜的任務文檔提取較為簡短的文本摘要，降低了眾測平臺方的工作量；同時使用圖文檢索與圖像融合技術，生成具有特色的任務圖片。

技術領域

本發明涉及自然語言處理與圖像檢索生成領域，主要應用于眾測任務發布的相關技術場景的文本摘要與圖文檢索生成方法。

背景技術

互聯網的快速更迭與發展為相關產品帶來了全新的迭代速度與交付需求，測試階段在管控產品質量與降低風險上有著不可替代的作用。然而公司測試人員的人力成本、效率與其設備有限性導致了測試過程的覆蓋率不能得到完全保證。這也成為了產品迭代速度大幅提高后的阻礙與挑戰。眾測作為全新的變革型的平臺，體現了不可忽視的優勢。眾測依托于眾測服務平臺，不受測試人手的制約；同時大量的測試人員利用碎片化時間進行產品測試，降低了測試成本；測試人員的數量大，擴展面廣泛，彌補了傳統測試中依賴于測試人員的經驗，從而提高產品的相應質量，也提升了相關的用戶體驗。

隨著深度學習的發展，對文本與圖像等模態的分析取得了很多優秀的成果。將機器學習和深度學習的優勢技術同眾測相關應用場景結合也煥發出不一樣的生機與活力。面向眾測中的任務發布場景，自然語言處理、跨模態檢索與圖像融合生成等技術的引入，使得整個任務發布更加智能與高效，在減輕發布方處理冗雜文檔與圖片篩選任務量的同時，提高了眾測平臺人員的交互性與使用興趣。

任務發布場景需要對任務發布方提供的單個或多個文檔中的復雜信息進行概括性全面的提取，這需要使用自然語言處理中的相關提取技術。過載的文本信息使得簡短的摘要處理顯得十分重要。傳統的抽取式摘要方法主要有圖方法、聚類等，基于神經網絡的抽取式摘要與生成式摘要方法也獲得了比較大的突破。除了對文檔進行簡短的摘要處理，任務發布場景也需要針對具體的任務提供相對應的圖片。任務相關的圖片通常和發布方以及具體任務相關，手動提供會增加較多的工作量，本發明在眾測場景中任務發布模塊，根據相應任務的文本摘要，使用跨模態的檢索技術與圖像融合相關技術，生成符合任務內容與特色的任務圖片。

隨著眾測平臺技術的快速發展，追求更加智能化和交互化的服務體驗也成為了全新的挑戰與方向。如何更高效與智能化的解決任務發布中的相關問題變得愈發重要。

發明內容

發明目的：本發明解決的技術問題是，針對眾測中相關任務發布的相關單個或多個任務文檔生成具有概括性的簡潔文本摘要，提供一種用于眾測任務發布的文本摘要與圖文檢索生成方法，本發明針對相關任務摘要描述使用相關的圖片檢索技術檢索適合的任務圖，并使用圖像融合生成技術對檢索到的圖像進行二次加工，獲得眾測任務的相關摘要與圖像，使眾測任務更具可視化和智能化。使用基于TextRank算法技術生成合理的任務文本摘要；使用圖文檢索技術在圖片數據庫中檢索相關任務圖片；使用圖像泊松融合技術對檢索出的圖片進行二次加工，生成最終完整的任務圖。具體包括對給定的相關單個或多個任務文檔生成語法準確內容簡潔且具有概括性的文本摘要以及使用任務文本摘要檢索適當的相關圖片，并使用圖像生成技術二次加工圖片，最終得到符合任務描述的圖片。。本發明通過在眾測任務發布中對較為繁雜的任務文檔提取較為簡短的文本摘要，降低了眾測平臺方的工作量；同時使用圖文檢索與圖像融合技術，生成具有特色的任務圖片，提高任務發布的效率并且增加與眾測平臺使用人員的交互性與瀏覽的趣味性。

技術方案：為實現上述目的，本發明采用的技術方案為：