[發明專利]一種繪本識別方法、裝置及機器人

有效

• 申請號: 201911026013.5
• 申請日: 2019-10-25
• 公開（公告）號: CN111222397B
• 公開（公告）日: 2023-10-13
• 發明（設計）人: 顧景;李揚;王玥;劉傲;程駿;龐建新
• 申請（專利權）人: 深圳市優必選科技股份有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/75
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 劉永康

1.一種繪本識別方法，其特征在于，包括：

獲取繪本的封面圖像并發送至服務器；

若接收到所述服務器發送的內頁特征數據集以及音頻集，獲取所述繪本的內頁圖像，所述內頁特征數據集和所述音頻集，是所述服務器在接收到所述封面圖像后，對所述封面圖像進行繪本識別得到繪本標識，并根據得到的繪本標識在本地儲存中進行內頁特征數據集和音頻集調取得到的；

基于所述內頁特征數據集對所述內頁圖像進行頁碼識別，得到所述內頁圖像的頁碼；

從所述音頻集中查找所述頁碼對應的音頻，并輸出所述音頻。

2.如權利要求1所述的繪本識別方法，其特征在于，所述獲取所述繪本的內頁圖像，包括：

對所述繪本進行翻頁識別；

若所述繪本被翻頁，獲取翻頁后所述繪本的內頁圖像。

3.如權利要求2所述的繪本識別方法，其特征在于，所述對所述繪本進行翻頁識別，包括：

對所述繪本進行實時視頻采集，并對采集的視頻進行連續幀的圖像比對；

若連續兩幀圖像的差異度大于第一差異閾值，將所述繪本的狀態設置為第一狀態；

當所述繪本的狀態為第一狀態時，對所述視頻進行連續幀的圖像比對，并檢測所述視頻中最新一幀圖像的圖像質量；

若連續n幀圖像中，相鄰幀圖像的差異度均小于第二差異閾值，且所述圖像質量大于質量閾值，則將所述繪本的狀態更新為第二狀態，并判定所述繪本被翻頁，其中，n為大于2的正整數，所述第一差異閾值大于或等于所述第二差異閾值。

4.如權利要求1至3任意一項所述的繪本識別方法，其特征在于，所述內頁特征數據集中包含，對所述繪本內各張內頁的樣本圖像分別進行透視變換，并對各張內頁的樣本圖像以及透視變換得到的圖像進行特征點提取后，得到的多組樣本特征點數據，以及每組所述樣本特征點數據對應內頁的頁碼，其中，每組所述樣本特征點數據中包含多個樣本特征點，且每張內頁對應多組所述樣本特征點數據，

所述基于所述內頁特征數據集對所述內頁圖像進行頁碼識別，包括：

對所述內頁圖像進行特征點提取，得到所述內頁圖像對應的一組內頁特征點數據，并利用所述內頁特征點數據，對各組所述樣本特征點數據分別進行特征點匹配；

對所述樣本特征點數據中匹配成功的樣本特征點進行異常匹配點剔除，并統計異常匹配點剔除操作后，每組所述樣本特征點數據中匹配成功的樣本特征點數量；

根據匹配成功的樣本特征點數量，篩選出匹配成功的所述樣本特征點數據，并將匹配成功的所述樣本特征點數據對應的頁碼，作為所述內頁圖像的頁碼。

5.一種繪本識別方法，其特征在于，包括：

機器人獲取繪本的封面圖像并發送至服務器；

所述服務器對接收到的所述封面圖像進行繪本識別，得到所述封面圖像對應的繪本標識；

所述服務器在本地儲存中調取所述繪本標識對應的內頁特征數據集和音頻集，并將調取出的內頁特征數據集和音頻集發送至所述機器人；

若接收到所述內頁特征數據集和所述音頻集，所述機器人獲取所述繪本的內頁圖像；

所述機器人基于所述內頁特征數據集對所述內頁圖像進行頁碼識別，得到所述內頁圖像的頁碼；

所述機器人從所述音頻集中查找所述頁碼對應的音頻，并輸出所述音頻。

6.如權利要求5所述的繪本識別方法，其特征在于，所述服務器對接收到的所述封面圖像進行繪本識別，得到所述封面圖像對應的繪本標識，包括：

對所述封面圖像進行特征點提取，得到所述封面圖像對應的一組封面特征點數據；

利用所述封面特征點數據，對封面特征點數據集內的各組封面特征點數據進行特征點匹配，其中，所述封面特征點數據集內包含多組樣本特征點數據，以及每組所述樣本特征點數據對應封面的繪本標識，多組樣本特征點數據，是所述服務器對多個繪本封面的第一樣本圖像分別進行透視變換，并對各繪本封面的第一樣本圖像以及透視變換得到的第二樣本圖像進行特征點提取后得到的；

若存在匹配成功的封面特征點數據，將所述匹配成功的封面特征點數據對應的繪本標識，作為所述封面圖像的繪本標識。