[發(fā)明專利]多媒體圖像系統(tǒng)的信息繼承和疊加方法

有效

• 申請?zhí)枺?/td>: 202011027136.3
• 申請日: 2020-09-25
• 公開（公告）號: CN112100407B
• 公開（公告）日: 2021-05-21
• 發(fā)明（設(shè)計）人: 朱杰
• 申請（專利權(quán)）人: 南京酷朗電子有限公司
• 主分類號: G06F16/41
• 分類號: G06F16/41;G06F16/44;G06F16/432;G06F16/483
• 代理公司: 暫無信息
• 代理人: 暫無信息

多媒體圖像系統(tǒng)的信息繼承和疊加方法，其特征在于：所述的多媒體圖像是在圖像上設(shè)置一個或多個信息點，并采用多媒體數(shù)據(jù)對各個信息點進行描述，然后將圖像與各個信息點對應(yīng)的多媒體數(shù)據(jù)合并存儲；多媒體圖像系統(tǒng)包括多媒體圖像基礎(chǔ)數(shù)據(jù)庫和用戶自制多媒體圖像；采用自動檢索處理方法，或、和，人工檢索處理方法進行處理；通過強化圖像的多媒體功能的層次性，利用信息繼承和疊加的技術(shù)手段，使得用戶可以通過多媒體圖像快速的構(gòu)建或發(fā)現(xiàn)自己需要的數(shù)據(jù)和信息。

技術(shù)領(lǐng)域

本發(fā)明涉及一種多媒體圖像系統(tǒng)的信息繼承和疊加方法，通過強化圖像的多媒體功能的層次性，利用信息繼承和疊加的技術(shù)手段，使得用戶可以通過多媒體圖像快速的構(gòu)建或發(fā)現(xiàn)自己需要的數(shù)據(jù)和信息，屬于多媒體圖像處理和應(yīng)用的技術(shù)領(lǐng)域。

背景技術(shù)

在現(xiàn)有技術(shù)中，有很多的“看圖識物”的自動識別系統(tǒng)和軟件，通常是基于深度學(xué)習(xí)圖像識別算法的應(yīng)用，可以根據(jù)用戶拍攝的圖像給出對圖像中景物的識別結(jié)果；但是，現(xiàn)有技術(shù)中識別的事物主要是通用特征比較明顯的與場景無關(guān)型的事物、如日常用品、植物、動物、標志性建筑等，而對于場景相關(guān)型的景物進行識別并給出與場景相關(guān)的特定信息則有一定的困難。

場景相關(guān)型的景物特點是與場景本身有較強的關(guān)聯(lián)性、但通用特征或標志并不顯著、或者重復(fù)性較高；例如，一個沒有明顯標志特征的景物、建筑、或者時效性很強的臨時搭建的場景或可移動景物等，很難通過用戶拍攝的照片圖像快速、及時的確定其準確的位置和相關(guān)信息；此時，若將相關(guān)圖像限定在當前場景范圍內(nèi)做交叉比對，則匹配成功的概率將大幅提升。

另一方面，在各個公共場景中、包含大量的景點或物品；如果要詳細描述各個具體景點或物品，通常要涉及方方面面、有很多具體的內(nèi)容。如果通過長篇大論的文字、或大量的多媒體數(shù)據(jù)對其進行描述，用戶很難找出其中的興趣點；如果對介紹內(nèi)容進行精簡、又不能滿足用戶的探索和求知的個性化需求。因此，怎樣引導(dǎo)用戶更全面、更立體了解場景，實現(xiàn)自助式的個性化游覽，是提升人機交互效果、激發(fā)用戶興趣所必須要解決的問題。

發(fā)明內(nèi)容

本發(fā)明的技術(shù)方案是通過強化圖像的多媒體功能的層次性，利用信息繼承和疊加的技術(shù)手段，使得用戶可以通過多媒體圖像快速的構(gòu)建或發(fā)現(xiàn)自己需要的數(shù)據(jù)和信息。

本發(fā)明的技術(shù)方案是：多媒體圖像系統(tǒng)的信息繼承和疊加方法，其特征在于：所述的多媒體圖像是在圖像上設(shè)置一個或多個信息點，并采用多媒體數(shù)據(jù)對各個信息點進行描述，然后將圖像與各個信息點對應(yīng)的多媒體數(shù)據(jù)合并存儲；所述的多媒體數(shù)據(jù)是文字、音頻、圖像、視頻，四種數(shù)據(jù)之中一種或多種的任意組合；其中，信息點是與圖像中特定的點位或局部區(qū)域的特征圖像相對應(yīng)的；當用戶瀏覽多媒體圖像時，首先看到的是圖像，然后選擇圖像中各個信息點對應(yīng)的局部區(qū)域位置，即能夠播放與該信息點對應(yīng)的多媒體數(shù)據(jù)；

所述的多媒體圖像系統(tǒng)包括多媒體圖像基礎(chǔ)數(shù)據(jù)庫和用戶自制多媒體圖像；采用自動檢索和處理方法，或/和，人工檢索和處理方法進行處理；

所述的自動檢索和處理方法，其中自動檢索是指提取用戶圖像中的景、物、人，與多媒體圖像基礎(chǔ)數(shù)據(jù)庫中的基礎(chǔ)圖像進行自動匹配操作、識別圖像特征，即自動查找是否有包含相同的景、物、人的基礎(chǔ)圖像；所述的自動檢索和處理方法至少包括以下步驟：

S101、收集基礎(chǔ)圖像、準備多媒體素材，然后將基礎(chǔ)圖像與多媒體素材相關(guān)聯(lián)、制作多媒體圖像基礎(chǔ)數(shù)據(jù)庫；

需要說明的是，應(yīng)根據(jù)基礎(chǔ)數(shù)據(jù)庫的建立目標有針對性的收集基礎(chǔ)圖像、準備多媒體素材；可以通過收集、整理、編輯、疊加、匯總等手段進行多媒體圖像基礎(chǔ)數(shù)據(jù)庫的制作、并持續(xù)進行維護和升級；基礎(chǔ)圖像應(yīng)做到細節(jié)清晰、構(gòu)圖合理，可以由專業(yè)攝像人員和編輯人員進行制作；

S102、通過圖像識別算法對用戶的普通圖像進行圖像分割、識別，提取若干個相對獨立的圖像局部區(qū)域；或者由用戶手工選取若干個圖像局部區(qū)域；然后將各個圖像局部區(qū)域分別與多媒體圖像基礎(chǔ)數(shù)據(jù)庫中的基礎(chǔ)圖像數(shù)據(jù)進行交叉比對，匹配圖像特征；