[發明專利]圖像處理裝置、成像裝置、圖像處理方法和計算機程序

有效

• 申請號: 200810095036.7
• 申請日: 2008-04-23
• 公開（公告）號: CN101295354A
• 公開（公告）日: 2008-10-29
• 發明（設計）人: 福島正剛;柏木繁
• 申請（專利權）人: 索尼株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00;G11B27/10;G06F17/30
• 代理公司: 北京東方億思知識產權代理有限責任公司
• 代理人: 董方源

技術領域

本發明涉及圖像處理裝置、成像裝置、圖像處理方法和計算機程序。更具體地說，本發明涉及顯示與從通過例如利用攝像機拍攝獲得的多段視頻圖像數據中選擇的圖像相對應的略縮圖(thumbnail)圖像列表，并且執行從與該列表中的略縮圖圖像中指定的一個相對應的位置開始回放視頻的過程的圖像處理裝置、成像裝置、圖像處理方法和計算機程序。?

背景技術

當今，諸如數碼相機或數碼攝像機之類的多種成像裝置以及諸如DVD播放機之類的多種圖像處理裝置具有例如在圖像顯示部件或監視器上顯示在存儲介質中存儲的圖像數據的列表的功能。?

例如，一些能夠播放視頻的成像裝置或DVD播放機具有顯示菜單的能力，在該菜單中排列出視頻的標題和章節，允許用戶從所顯示的菜單中選擇期望的內容，并且播放所選內容。此外，一些設備能夠執行所謂的索引顯示過程。索引顯示過程是這樣的過程：用縮小(略縮圖)的形式顯示代表通過例如利用成像裝置的一個拍攝過程(即，從拍攝的開始導結束)獲得的視頻的圖像。這使得可以利用按照縮小的形式在顯示器上顯示的圖像作為索引從該圖像的幀開始回放視頻。?

在顯示視頻數據的索引時，顯示從組成該視頻數據的所有幀中選擇的幀的縮小圖像。因此，為了使用戶容易地了解視頻數據的內容，必須從視頻數據選擇盡可能重要的幀作為索引用圖像。在例如日本專利No.3312105中描述了實現該目的的一種技術。根據該技術，利用對象字典在視頻圖像數據中進行搜索，其中在該對象字典中，注冊了要被搜索的對象的圖像，使得與該注冊圖像相似的圖像將作為索引用幀圖像被選擇。在對象字典中注冊要被搜索的對象的圖像是通過學習預先執行的。?

根據該技術，可以從通過一個記錄操作所獲得的一個單位的數據(該單位數據在下文中將被稱作“一段內容”)中選擇與特定的已注冊對象相對應的索引圖像，并且要求先前的對象圖像注冊。該技術存在這樣的問題：與未注冊的對象相對應的圖像不能被選作索引。例如，假設多個人在同一內容的不同時間段中出現。在該情形中，包括與特定注冊對象相對應的人的人臉的幀可以被選作索引，而僅包括其他人的幀作為索引被顯示。這種技術存在用戶期望作為索引圖像被顯示的人臉(例如，用戶的孩子的人臉)不能作為索引圖像被顯示。?

在諸如攝像機之類的在顯示視頻圖像的索引時顯示該視頻圖像中包括的人臉的圖像的應用(下文稱作“人臉索引”)中，將內容(即，視頻圖像)中所包括的所有人臉都作為索引顯示可能是不合理的。例如，當拍攝了出現許多人臉的場景(例如，合唱比賽、運動會等)時，太多的人臉的圖像將作為索引被顯示。顯示索引的最初目的是使得能夠快速了解內容的概要。當如上例所述太多的人臉被顯示為索引時，就不能實現該目的。?

發明內容

本發明解決了上述問題，以及與過去的方法和裝置相關聯的其他問題，并且提供了圖像處理裝置、成像裝置、圖像處理方法和計算機程序，用于在從視頻數據提取人臉圖像并將所提取的人臉數據作為索引顯示時，使得能夠在無需先注冊對象等的情況下提取并顯示人臉圖像作為索引，并且使得能夠即使在視頻數據中包括大量的人臉也能夠高效地選擇多個人人臉并且將所選人臉作為索引顯示。?

根據本發明一個實施例，提供了一種圖像處理裝置，包括：典型人臉提取單元，其被配置為在構成視頻圖像數據的一部分的圖像幀中檢測人臉圖像，并且從檢測出的人臉圖像中選擇將被用作索引信息的人臉圖像，其中，所述典型人臉提取單元被配置為基于在所述圖像幀中檢測出的每個人臉圖像的特征計算所述人臉圖像的分數，并且將分數較高的檢測出的人臉圖像選作索引用人臉圖像。?

根據本發明另一個實施例，提供了一種成像裝置，包括：成像部件；?以及典型人臉提取單元，其被配置為接受通過所述成像部件拍攝獲得的視頻圖像數據，在構成所接受的視頻圖像數據的一部分的圖像幀中檢測人臉圖像，并且從檢測出的人臉圖像中選擇將被用作索引信息的人臉圖像，其中，所述典型人臉提取單元被配置為基于在所述圖像幀中檢測出的每個人臉圖像的特征計算所述人臉圖像的分數，并且將分數較高的檢測出的人臉圖像選作索引用人臉圖像。?

根據本發明另一個實施例，提供了一種在包括典型人臉提取單元的圖像處理裝置中采用的圖像處理方法，該方法包括以下步驟：典型人臉提取單元在構成視頻圖像數據的一部分的圖像幀中檢測人臉圖像，并且從檢測出的人臉圖像中選擇將被用作索引信息的人臉圖像，其中，所述檢測和選擇步驟包括以下步驟：基于在所述圖像幀中檢測出的每個人臉圖像的特征計算所述人臉圖像的分數，并且將分數較高的檢測出的人臉圖像選作索引用人臉圖像。?