[發明專利]基于AR的烹飪指導裝置及方法

在審

• 申請號: 201810149136.7
• 申請日: 2018-02-13
• 公開（公告）號: CN108304039A
• 公開（公告）日: 2018-07-20
• 發明（設計）人: 王守坤;郭會斌;韓皓;付方彬;賈宜訸;宋勇志
• 申請（專利權）人: 京東方科技集團股份有限公司;北京京東方顯示技術有限公司
• 主分類號: G06F1/16
• 分類號: G06F1/16;G06K9/00
• 代理公司: 北京正理專利代理有限公司 11257
• 代理人: 付生輝

1.一種基于AR的烹飪指導裝置，其特征在于，包括AR頭戴設備，所述AR頭戴設備包括攝像裝置、AR顯示屏、數據處理器和存儲器；

所述攝像裝置，用于拍攝以獲取包含食材的圖像；

所述數據處理器，用于將包含食材的圖像中含有的食材特征信息與存儲器中的食材特征信息進行匹配以得到現實場景中的食材種類，并從存儲器中獲取對應食材種類的菜譜；

所述AR顯示屏，用于以虛擬圖像顯示所述菜譜。

2.根據權利要求1所述的基于AR的烹飪指導裝置，其特征在于，

所述攝像裝置，還用于拍攝現實場景中包含廚具及調料瓶的圖像；

所述數據處理器，還用于以包含食材、廚具及調料瓶的圖像中不可移動物體為參照建立絕對坐標，以圖像中食材與廚具及調料瓶與廚具的相對位置為參照建立相對坐標，根據所述絕對坐標和所述相對坐標判斷出食材或調料瓶移動時根據菜譜驅動AR顯示屏以虛擬圖像顯示對應該移動的提示信息和/或虛擬路徑。

3.根據權利要求2所述的基于AR的烹飪指導裝置，其特征在于，該裝置還包括語音交互裝置，用于向所述數據處理器發送用戶以語音方式輸入的現實場景中的食材種類，并在所述數據處理器的驅動下播放菜譜和/或提示信息。

4.根據權利要求3所述的基于AR的烹飪指導裝置，其特征在于，所述數據處理器在將包含食材的圖像中含有的食材特征信息與存儲器中的食材特征信息進行匹配以得到現實場景中的食材種類后，驅動所述AR顯示顯示屏或驅動所述語音交互裝置播放食材種類，并響應于用戶通過AR頭戴設備的按鍵、空間觸控裝置或語音交互裝置的輸入確認食材種類。

5.根據權利要求3所述的基于AR的烹飪指導裝置，其特征在于，所述數據處理器，還用于在判斷存在多個對應食材種類的菜譜時僅顯示多個菜譜的名稱，響應于用戶通過AR頭戴設備的按鍵、空間觸控裝置或語音交互裝置的輸入驅動所述AR顯示顯示屏或驅動所述語音交互裝置播放用戶選擇的菜譜。

6.根據權利要求3所述的基于AR的烹飪指導裝置，其特征在于，該裝置還包括光學傳感器，用于感測水溫、油溫和食材溫度中的一種或幾種；

所述數據處理器，還用于根據光學傳感器的感測結果與菜譜中的溫度信息進行比對，驅動所述AR顯示屏顯示或驅動所述語音交互裝置播放對應溫度的提示信息。

7.根據權利要求1所述的基于AR的烹飪指導裝置，其特征在于，該裝置還包括氣味傳感器，用于感測已放入調料的氣味信息和/或食材的氣味信息；

所述數據處理器，還用于根據已放入調料的氣味信息獲取調料放入量并將調料放入量與菜譜中的調料信息進行比對和/或根據食材的氣味信息獲取食材的火候信息與菜譜中的火候信息進行比對，驅動所述AR顯示屏顯示或驅動所述語音交互裝置播放對應調料放入量和/或火候的提示信息。

8.根據權利要求1所述的基于AR的烹飪指導裝置，其特征在于，該裝置還包括云數據庫交互單元，用于實現所述存儲器與云數據庫的數據交互。

9.根據權利要求8所述的基于AR的烹飪指導裝置，其特征在于，所述云數據庫交互單元用于根據云數據庫中的菜譜更新所述存儲器中的菜譜和/或將所述存儲器中的菜譜在云數據庫中備份。

10.一種根據如權利要求1-9中任一項所述的基于AR的烹飪指導裝置的基于AR的烹飪指導方法，其特征在于，包括：

拍攝現實場景中包含食材的圖像；

將包含食材的圖像中含有的食材特征信息預先存儲的食材特征信息進行匹配以得到現實場景中的食材種類，并獲取對應食材種類的菜譜；

利用AR顯示屏以虛擬圖像顯示菜譜。