[發明專利]一種視頻流圖像幀的識別系統及其方法

有效

• 申請號: 201210480917.7
• 申請日: 2012-11-22
• 公開（公告）號: CN103226692A
• 公開（公告）日: 2013-07-31
• 發明（設計）人: 王磊;鄭偉龍;張文山;姚以鵬;陳曦
• 申請（專利權）人: 廣東科學中心
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/64
• 代理公司: 廣州市紅荔專利代理有限公司 44214
• 代理人: 李彥孚;吳偉文

1.一種視頻流圖像幀的識別系統，其特征在于包括匹配單元、聯想匹配單元、常規幀匹配庫、語句緩存區、一級緩沖區和二級緩沖區；其中，一級緩沖區和二級緩沖區與相連；匹配單元與聯想匹配單元、常規幀匹配庫、語句緩存區、一級緩沖區、二級緩沖區相連；同時聯想匹配單元與常規幀匹配庫、語句緩存區、一級緩沖區、二級緩沖區相連；具體的，一級緩沖區接收聯想手勢形成的數據包并將其分割轉存為連續的圖像幀，匹配單元從一級緩沖區內依次取出圖像幀存入二級緩沖區，并將二級緩沖區內存儲的圖像幀與常規幀匹配庫進行匹配，在匹配單元匹配成功后將二級緩沖區內存儲的圖像幀存入語句緩存區，并啟動聯想匹配單元進行雙線匹配識別。

2.根據權利要求1所述的視頻流圖像幀的識別系統，其特征在于所述的常規幀匹配庫將每種相同幀數構成的手語分類存儲，依次形成一幀匹配庫、二幀匹配庫、……N-1幀匹配庫和N幀匹配庫。

3.根據權利要求1所述的視頻流圖像幀的識別系統，其特征在于所述的匹配單元將一級緩沖區內的圖像幀從第一個圖像幀開始依次遞增存入二級緩沖區內，其中，當二級緩沖區內每存入新的一個圖像幀時，匹配單元將二級緩沖區內存儲的圖像幀與常規幀匹配庫進行匹配，匹配成功后將二級緩沖區內存儲的圖像幀存入語句緩存區。

4.根據權利要求1所述的視頻流圖像幀的識別系統，其特征在于在所述的匹配單元匹配成功后，根據聯想手勢需要的幀數和二級緩沖區內存儲的圖像幀聯想出三組詞幀值（依次設為M1、M2、M3），清空二級緩沖區；接著開始匹配過程，通過三組詞幀值依次讀取一級緩沖區內未匹配的圖像幀，將所讀取的圖像幀存入二級緩沖區并與常規幀匹配庫進行匹配，如匹配成功則將二級緩沖區內存儲的圖像幀送往語句緩存區進行待處理；反復執行上述匹配過程，直至三組詞幀值都不能匹配成功時，聯想匹配單元結束雙線匹配識別。

5.根據權利要求1所述的視頻流圖像幀的識別系統，其特征在于所述的匹配單元即時檢測語句緩存區內所存儲的圖像幀，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時，由匹配單元優化并輸出結果。

6.根據權利要求1所述的系統實現的視頻流圖像幀的識別方法，其特征在于包括以下步驟：

????1）匹配單元運行；

????2）對當前接收到的數據包分割成連續的圖像幀，將分割完成的連續圖像幀存儲在一級緩沖區中；

????3）將一級緩沖區內的連續圖像幀從還未進行匹配的第一幀開始依次遞增存入二級緩沖區，再與常規幀匹配庫進行匹配處理，如匹配成功則進行步驟5，如匹配不成功則進行步驟4；

????4）將匹配不成功的圖像幀加上其后面的一個圖像幀一起，與常規幀匹配庫進行再一次匹配；如匹配成功則進行步驟5，如匹配不成功則再一次進行步驟4；

????5）將匹配成功的圖像幀送往語句緩存區進行待處理，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時，進行步驟8；

????6）聯想匹配單元進行雙線匹配識別；

????7）根據聯想手勢需要的幀數和二級緩沖區內存儲的圖像幀聯想出三組詞幀值（依次設為M1、M2、M3），清空二級緩沖區；接著開始匹配過程，通過三組詞幀值依次讀取一級緩沖區內未匹配的圖像幀，將所讀取的圖像幀存入二級緩沖區并與常規幀匹配庫進行匹配，如匹配成功則將二級緩沖區內存儲的圖像幀送往語句緩存區進行待處理，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時則進行步驟8；反復執行上述的匹配過程，直至三組詞幀值都不能匹配成功時，聯想匹配單元結束雙線匹配識別，清空二級緩沖區，返回步驟3；

????8）對語句緩存區內所存儲的圖像幀進行優化排列處理；

????9）輸出結果。

7.根據權利要求6所述的視頻流圖像幀的識別方法，其特征在于所述的步驟7中包括如下匹配過程：

????7.1）將詞幀值M1發往一級緩存區，讀取一級緩沖區內未匹配的圖像幀，將所讀取的圖像幀存入二級緩沖區并與常規幀匹配庫進行匹配，如匹配不成功則進行步驟7.2，如匹配成功則將二級緩沖區內存儲的圖像幀送往語句緩存區進行待處理，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時則進行所述的步驟8，否則繼續進行步驟7.1；

????7.2）如不能匹配成功，則將詞幀值M2發往一級緩存區，讀取一級緩沖區內未匹配的圖像幀，將所讀取的圖像幀存入二級緩沖區并與常規幀匹配庫進行匹配，如匹配不成功則進行步驟7.3；如匹配成功則將二級緩沖區內存儲的圖像幀送往語句緩存區進行待處理，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時則進行所述的步驟8，否則進行步驟7.1；

????7.3）如不能匹配成功，則將詞幀值M3發往一級緩存區，讀取一級緩沖區內未匹配的圖像幀，將所讀取的圖像幀存入二級緩沖區并與常規幀匹配庫進行匹配，如匹配不成功則進行步驟7.4；如匹配成功則將二級緩沖區內存儲的圖像幀送往語句緩存區進行待處理，當語句緩存區內所存儲的圖像幀能夠形成完整的句式時則進行所述的步驟8，否則進行步驟7.1；

????7.4）聯想匹配單元結束雙線匹配識別。