[發明專利]基于事件的圖像處理設備和方法

有效

• 申請號: 201310244056.7
• 申請日: 2013-06-19
• 公開（公告）號: CN103516946B
• 公開（公告）日: 2018-01-02
• 發明（設計）人: 李圭彬;柳賢錫;李俊行;樸根柱;申昌雨;禹周延
• 申請（專利權）人: 三星電子株式會社
• 主分類號: H04N5/232
• 分類號: H04N5/232;G06T7/20
• 代理公司: 北京銘碩知識產權代理有限公司11286
• 代理人: 韓明星,劉奕晴

1.一種圖像處理設備，包括：

傳感器，感測與多個像素中的一個像素的亮度的改變相關的預定事件的發生，并且響應于感測到的發生，輸出包括所述一個像素的位置信息的事件信號；

時間戳單元，通過將與事件信號相應的像素映射到從傳感器輸出事件信號的時間來產生時間戳信息，其中，與事件信號相應的像素是基于所述位置信息來確定的；

光流產生器，響應于由傳感器輸出事件信號，基于時間戳信息來產生光流。

2.如權利要求1所述的設備，其中，光流包括與事件信號相應的像素的速度矢量。

3.如權利要求1所述的設備，其中，光流產生器包括：

相鄰像素獲得單元，獲得與事件信號相應的像素的相鄰像素；

時間差計算單元，使用時間戳信息來計算與在與事件信號相應的像素和相鄰像素之間的時間差相關的信息；

距離差計算單元，計算與在與事件信號相應的像素和相鄰像素之間的距離差相關的信息；

光流計算單元，基于與時間差相關的信息和與距離差相關的信息來計算光流。

4.如權利要求3所述的設備，其中，當與事件信號相應的像素和相鄰像素之間的時間差超出預定時間范圍的窗口時，時間差計算單元計算出與時間差相關的信息是“0”。

5.如權利要求3所述的設備，其中，與距離差相關的信息包括與事件信號相應的像素和相鄰像素之間的像素距離的倒數。

6.如權利要求3所述的設備，其中，光流計算單元使用與時間差相關的信息和與距離差相關的信息來計算和與事件信號相應的像素相應的二維矢量A，并執行將二維矢量A除以二維矢量A的內積值的運算以計算光流。

7.如權利要求1所述的設備，還包括：

運算單元，基于光流執行針對用于用戶界面的信息的運算。

8.如權利要求7所述的設備，其中，用于用戶界面的信息包括第一速度、第二速度、第三速度和第四速度中的至少一個，

其中，與所述多個像素相應的對象在與布置傳感器的傳感器平面平行的平面上以第一速度沿著x軸方向移動；

對象在所述平面上以第二速度沿著y軸移動；

對象以第三速度沿著垂直于所述平面的方向移動；

對象以第四速度在所述平面上旋轉。

9.如權利要求8所述的設備，其中，運算單元包括：

平面速度運算單元，基于光流來執行關于第一速度和第二速度的運算；

光流中心運算單元，基于光流來執行關于光流的中心的運算；

z軸速度運算單元，基于光流和光流的中心來執行關于第三速度的運算；

角速度運算單元，基于光流和光流的中心來執行關于第四速度的運算。

10.如權利要求9所述的設備，其中，針對關于第一速度和第二速度的運算，平面速度運算單元執行關于光流的平均值的運算。

11.如權利要求9所述的設備，其中，針對關于光流的中心的運算，光流中心運算單元使用包括在光流中的像素的位置和像素的速度矢量的大小來執行關于光流的中心的運算。

12.如權利要求9所述的設備，其中，針對關于第三速度的運算，z軸速度運算單元使用光流的中心和與事件信號相應的像素的位置來產生與和事件信號相應的像素相應的第一矢量，并使用第一矢量與包括在光流中的與事件信號相應的像素的速度矢量來執行內積運算。

13.如權利要求9所述的設備，其中，針對關于第四速度的運算，角速度運算單元使用光流的中心和與事件信號相應的像素的位置來產生和與事件信號相應的像素相應的第一矢量，并使用第一矢量和包括在光流中的與事件信號相應的像素的速度矢量來執行向量積運算。

14.如權利要求1所述的設備，其中，時間戳信息包括與在所述多個像素中的每一個像素中發生預定事件的最近時間相關的信息。

15.如權利要求1所述的設備，其中，所述預定事件包括以下事件中的至少一個：

在單位時間段內所述一個像素的亮度增加大于或等于預定值的值的事件；

在單位時間段內所述一個像素的亮度減少大于或等于所述預定值的值的事件。

16.如權利要求1所述的設備，其中，傳感器異步輸出與所述多個像素中發生所述預定事件的像素的部分相應的事件信號。