[發明專利]注釋賦予方法、注釋賦予系統以及存儲有程序的記錄介質

在審

• 申請號: 201710544924.1
• 申請日: 2017-07-06
• 公開（公告）號: CN107689027A
• 公開（公告）日: 2018-02-13
• 發明（設計）人: 谷川徹;莊田幸惠;渕上哲司
• 申請（專利權）人: 松下電器（美國）知識產權公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06K9/00
• 代理公司: 北京市中咨律師事務所11247
• 代理人: 徐健,段承恩

技術領域

本公開涉及針對魚眼圖像的注釋賦予方法等。

背景技術

在用于進行機器學習的學習數據的構建等中，為了識別圖像數據而向圖像數據賦予標簽等注釋。例如，專利文獻1公開了對圖像數據進行標記(labeling)的技術。

現有技術文獻

專利文獻

專利文獻1：日本特開2013-161295號公報

發明內容

發明要解決的問題

注釋被賦予到圖像所含的人物、物等對象物。賦予注釋的圖像數據，有時使用經由魚眼透鏡拍攝到的圖像數據。由魚眼透鏡拍攝到的圖像成為同心圓狀的圖像。由此，對于由魚眼透鏡拍攝到的圖像內的對象物，會指向以從同心圓的中心開始的輻射方向為基準的方向，因此，會以各種各樣的朝向而存在。因此，在上述圖像上，劃定應賦予注釋的對象物的區域的處理會很費功夫。

于是，本公開提供使由魚眼透鏡拍攝到的圖像即魚眼圖像上的注釋賦予變得簡便的注釋賦予方法、注釋賦予系統以及程序。

用于解決問題的技術方案

本公開的一個方式的注釋賦予方法是對魚眼圖像的注釋賦予方法，包括：取得魚眼圖像，生成將魚眼圖像進行透視投影變換而得到的變換圖像，向處理者提示變換圖像，從處理者受理與向變換圖像賦予的注釋有關的注釋信息的輸入，將所輸入的注釋信息所含的變換圖像中的注釋的坐標信息變換為魚眼圖像中的坐標，記錄變換后的所述注釋信息來作為魚眼圖像中的注釋信息。

本公開的一個方式的注釋賦予系統是對魚眼圖像的注釋賦予系統，具備：取得部，其取得第一數據保存部所保存的魚眼圖像；圖像變換部，其生成將魚眼圖像進行透視投影變換而得到的變換圖像；提示部，其向處理者的裝置發送變換圖像；接受部，其從處理者的裝置接受與在處理者的裝置向變換圖像賦予的注釋有關的注釋信息；坐標變換部，其將注釋信息所含的變換圖像中的注釋的坐標信息變換為魚眼圖像中的坐標；以及記錄部，其將變換后的注釋信息作為魚眼圖像中的注釋信息記錄于第二數據保存部。

本公開的一個方式的記錄介質是記錄有程序的計算機能讀取的非暫時性記錄介質，所述程序在由計算機執行時，使所述計算機執行包含以下的方法：取得魚眼圖像，生成將魚眼圖像進行透視投影變換而得到的變換圖像，向處理者的裝置提示變換圖像，從處理者的裝置受理與向變換圖像賦予的注釋有關的注釋信息的輸入，將所輸入的注釋信息所含的變換圖像中的注釋的坐標信息變換為魚眼圖像中的坐標，記錄變換后的注釋信息來作為魚眼圖像中的注釋信息。

發明的效果

根據本公開的注釋賦予方法等，能夠使魚眼圖像上的注釋的賦予變得簡便。

附圖說明

圖1是示出由安裝于室內的頂棚的全方位攝像機拍攝到的室內拍攝圖像的一例的圖。

圖2是示出對圖1的拍攝圖像進行透視投影變換后的一例的變換圖像的圖。

圖3是示出圖1的拍攝圖像與圖2的變換圖像之間的對應關系的圖。

圖4是示出實施方式的注釋賦予系統100的概略結構的框圖。

圖5是示出實施方式的注釋賦予系統100的工作的流程的流程圖。

圖6是示出向由作為全方位攝像機的車載攝像頭拍攝到的停車場的魚眼圖像賦予的注釋的圖。

圖7是示出向對圖6的魚眼圖像進行透視投影變換后的全景圖像賦予的與圖6相同的注釋的圖。

圖8是示出注釋賦予系統100的變形例1的工作的流程的流程圖。

標號的說明

10注釋中繼裝置；11控制部(取得部、提示部、接受部、記錄部、通知部)；14圖像變換部；15坐標變換部；20服務器裝置；24變換前圖像數據存儲部(第一數據保存部)；26注釋數據存儲部(第二數據保存部)；30注釋賦予裝置(處理者的裝置)；100注釋賦予系統。

具體實施方式

發明人的見解

本公開的發明人們、也即是本發明人們，為了提高圖像中以人物為代表的對象物的識別以及檢測的精度，對使用深度學習(Deep Learning)等神經網絡的技術進行了研究。深度學習中的對象物的識別會需要大量的學習用圖像數據。并且，在學習用圖像數據中，要針對對象物賦予也即是注釋包含對象物的內容、位置、區域等的信息作為注釋信息。此外，通常在注釋中，對于在圖像上包圍對象物等的對象物的區域的設定，通過人向圖像輸入來實施該設定。