[發(fā)明專利]用于識別眼睛和手的系統(tǒng)和方法

在審

• 申請?zhí)枺?/td>: 201880022110.4
• 申請日: 2018-03-28
• 公開（公告）號: CN110462629A
• 公開（公告）日: 2019-11-15
• 發(fā)明（設(shè)計）人: B.埃爾班納;P.希伯;T.阿爾特米勒
• 申請（專利權(quán)）人: 羅伯特·博世有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;B60K37/02;G06F3/01
• 代理公司: 72001 中國專利代理(香港)有限公司
• 代理人: 杜荔南;劉春元<國際申請>=PCT/EP

本發(fā)明涉及用于在圖像的序列中識別眼睛和手的、尤其是用于機動車（10）的系統(tǒng)（100）和方法（500、600），所述圖像的序列利用所述系統(tǒng)（100）的攝像機（110）來記錄，其中所述系統(tǒng)（100）包括計算機（150），所述計算機被設(shè)立用于交替地輸送第一部分序列給用于眼睛識別的、尤其是在所述計算機（150）中所設(shè)立的第一算法和輸送第二部分序列給用于手識別的、尤其是在所述計算機（150）中所設(shè)立的第二算法，其中所述第一部分序列包括能預(yù)給定的第一數(shù)目的彼此相繼的圖像并且所述第二部分序列包括能預(yù)給定的第二數(shù)目的彼此相繼的圖像，其中所述第一算法根據(jù)所述第一部分序列來識別所述第一部分序列的圖像是否包括眼睛的圖像，并且其中所述第二算法根據(jù)所述第二部分序列來識別所述第二部分序列的圖像是否包括手的圖像。

背景技術(shù)

從現(xiàn)有技術(shù)中已知用于檢測和探測使用者的眼睛和其他身體部分、尤其是手的系統(tǒng)，例如從等人的“Eye blinking detection to perform selection for aneye tracking System used in assistive technology”，（Design and Technology inElectronic Packaging (SIITME) 2016 IEEE 22nd International Symposium for, 第213-216頁, 2016）中或者從F. Weichert等人的“Analysis of the accuracy androbustness of the leap motion Controller（Sensors 2013, 13, 6380- 6393）中已知。在此，眼睛或手的檢測也可以包括用于姿態(tài)識別的對眼睛或手的移動的檢測。

眼睛和手的檢測和探測通過傳感器、尤其是攝像機來進行，所述傳感器與計算機、也稱為計算單元或處理器連接，用于處理來自傳感器的數(shù)據(jù)。在此，通常使用具有用于眼睛探測的第一傳感器的第一計算機和具有用于手探測的第二傳感器的第二計算機，因為眼睛和手的檢測和探測具有不同的技術(shù)前提條件，尤其是由于要檢測的眼睛和手的時間上強烈不同的移動。

發(fā)明內(nèi)容

本發(fā)明的優(yōu)點

在該背景下，本發(fā)明涉及一種用于在圖像的序列中識別眼睛和手的系統(tǒng)、尤其是用于機動車的系統(tǒng)以及所屬的方法，所述圖像的序列利用所述系統(tǒng)的攝像機來記錄。該系統(tǒng)包括計算機，該計算機被設(shè)立用于交替地輸送所述序列的第一部分序列給用于眼睛識別的第一算法和所述序列的第二部分序列給用于手識別的第二算法，其中該第一部分序列包括能預(yù)給定的第一數(shù)目的彼此相繼的圖像并且該第二部分序列包括能預(yù)給定的第二數(shù)目的彼此相繼的圖像。優(yōu)選地，第一和/或第二算法在此在計算機中被設(shè)立。換言之，該計算機尤其是被設(shè)立、例如編程用于執(zhí)行用于眼睛識別或手識別的第一和/或第二算法。第一算法在此被設(shè)立用于，根據(jù)第一部分序列來識別第一部分序列的圖像是否包括眼睛的圖像。第二算法被設(shè)立用于，根據(jù)第二部分序列來識別第二部分序列的圖像是否包括手的圖像。

尤其是通過第一或第二算法進行的眼睛或手的識別尤其是應(yīng)理解為：在由系統(tǒng)的攝像機所記錄的圖像中標識一個或多個眼睛本身或一個或多個手本身。該識別在此可以優(yōu)選地包括：將通過所識別的眼睛或所識別的手所執(zhí)行的移動識別為姿態(tài)。例如，用于眼睛識別的第一算法可以是基于上面提及的等人的文獻的或基于Smart Eye AB算法的圖像識別算法，并且用于手識別的第二算法可以是基于上面提及的F. Weichert等人的文獻的圖像識別算法。例如，所述眼睛的識別可以被用于狀態(tài)識別、例如確定該系統(tǒng)的使用者的疲勞度或視線方向，或者用于通過眼睛的位置和/或移動、也即通過眼睛的姿態(tài)來控制系統(tǒng)。例如，所述手的識別可以被用于控制系統(tǒng)、尤其是通過識別手的位置和/或移動、尤其是也即通過識別由手所實施的姿態(tài)來控制系統(tǒng)。尤其是，在此將所識別的眼睛姿態(tài)或手姿態(tài)與系統(tǒng)中所保存的預(yù)給定的姿態(tài)進行比較。