[發明專利]一種以圖快速檢索景點的方法及導游系統

有效

• 申請號: 201611066278.4
• 申請日: 2016-11-28
• 公開（公告）號: CN106776849B
• 公開（公告）日: 2020-01-10
• 發明（設計）人: 錢學明;周澎
• 申請（專利權）人: 西安交通大學
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06F16/54;G06K9/46;G06K9/62
• 代理公司: 61200 西安通大專利代理有限責任公司
• 代理人: 劉強

本發明公開了一種以圖快速檢索景點的方法及導游系統，其通過在離線系統中對大規模帶有地理標簽的圖像數據庫進行處理，從圖像數據集中提取出主題相冊，并通過對主題相冊內容的進一步去噪，篩選，并添加文字信息最終生成離線景點數據集。并通過生成快速索引結構以提高景點檢索的速度。在在線系統中，通過構建查詢圖與景點數據之間的映射關系以及引入查詢圖相對于景點的相似度得分算法，并通過最終的打分排序獲得檢索結果。本發明構建了一個可以通過圖像信息快速檢索景點的方法，同時通過移動終端對景點信息的多角度展示(景點文字信息，景點相冊，景點在地圖上的位置標注，以及通過語音合成播報導游詞等)為游客提供了完善的自助導游服務。

技術領域

本發明屬于圖像檢索技術領域，涉及圖像檢索景點的方法，尤其是一種以圖快速檢索景點的方法，以及基于該方法的自助導游系統。

背景技術

隨著生活水平的提高，旅游成為了人們在閑暇時間放松自己的不二選擇。在2015年，我國共接待游客超過40億人次。手機的快速發展使得游客在旅游過程中可以拍攝大量的圖片并上傳到圖片分享網站與社交網絡。知名的圖片分享網站如Flickr，上傳的圖片總數達50億張。社交網絡中的圖片上傳量更為驚人，光Facebook一家就達到了600億。在我國，微博，微信，以及各種旅游應用都是游客上傳旅游圖片與分享旅游經歷的主要途徑。但是，雖然我們已經擁有如此數量巨大的帶標簽以及GPS位置信息的圖像數據庫，目前的大部分旅游應用僅僅是對這些圖像進行了存儲，而沒有有效的挖掘其中蘊含的大量信息。因此，對于如此大規模的圖像多媒體數據，如何有效地挖掘這些豐富的多媒體數據信息，并利用這些信息以幫助游客在旅游過程中獲取更加便捷的旅游體驗是很有必要的。

在景點檢索方面，目前主流的旅游應用仍然采用傳統的利用文字標簽進行檢索的方式。使用文本進行景點檢索時，會有一些不可避免的缺陷存在。文本檢索是一種利用關鍵詞檢索的形式，這就要求用戶對于檢索的目標要有一定的基本知識，若用戶對于要檢索的目標一無所知，則用戶無法選取合適的關鍵詞來檢索信息。文本檢索的另一個缺陷就是關鍵詞的重復使用率很高。對于很多單詞，也許很多景點都會使用到，利用這種關鍵詞進行檢索往往會得到大量的檢索結果，用戶不得不從這些結果中手工挑選自己想要檢索的目標，這種方式往往會費時費力，用戶體驗較差。同時由于圖像附帶的標簽與描述是由用戶添加上去的，人類思想的差異性難免使得這些標簽帶有很大的主觀因素，為我們提取景點的客觀屬性引入噪聲。另外，很多景點為了讓搜索引擎更多的搜索到自己，會為自身添加很多不相關的關鍵詞，使得用戶獲得的檢索準確率降低。而使用圖像信息來進行檢索可以有效的避免這些問題。所以，利用圖像進行景點檢索是非常有必要的，另一方面，網絡上的大規模圖像多媒體資源，也為自動的通過圖像內容進行景點檢索提供了有利的條件。

隨著科技的進步，人們智能手機和部分數碼相機拍照時帶有時間和GPS記錄功能，因此，我們可以通過網絡多媒體手段獲取大量的帶有地理位置標簽的景點圖像的。這就對使用圖像進行景點檢索提供了有利條件。

發明內容

本發明的目的在于克服上述現有技術的缺點，提供一種以圖快速檢索景點的方法及導游系統。

本發明的目的是通過以下技術方案來實現的：

這種以圖快速檢索景點的方法，包括以下步驟：

1)建立景點圖像數據集

2)圖像庫預處理

計算數據集圖像的平均亮度，分別去除亮度最高的1-3％的圖片以及亮度最低的1-3％的圖片；

去除不包含明確目標的圖像；

3)圖像視覺特征提取

對步驟2)處理后的景點圖像數據集中每張圖片采用SIFT特征描述子進行描述；所述SIFT特征是基于物體上的局部外觀的興趣點，與影像的大小和旋轉無關；

4)生成主題相冊