[發(fā)明專利]圖像處理裝置、遠(yuǎn)程臨場(chǎng)系統(tǒng)、圖像處理方法以及程序

在審

• 申請(qǐng)?zhí)枺?/td>: 202210271249.0
• 申請(qǐng)日: 2022-03-18
• 公開（公告）號(hào): CN115118894A
• 公開（公告）日: 2022-09-27
• 發(fā)明（設(shè)計(jì)）人: 木田祐介;中山貴裕
• 申請(qǐng)（專利權(quán)）人: 豐田自動(dòng)車株式會(huì)社
• 主分類號(hào): H04N5/265
• 分類號(hào): H04N5/265;H04N5/262;H04N5/272;H04N5/247
• 代理公司: 北京市中咨律師事務(wù)所 11247
• 代理人: 張潔;段承恩

本公開涉及圖像處理裝置、遠(yuǎn)程臨場(chǎng)系統(tǒng)、圖像處理方法以及圖像處理程序。本公開的一個(gè)實(shí)施方式涉及的圖像處理裝置(7)是處理在配置于第1據(jù)點(diǎn)(H1)的遠(yuǎn)程臨場(chǎng)機(jī)器人(2)的顯示部中顯示的圖像的圖像處理裝置，具備：背景圖像取得部(71)，其實(shí)時(shí)地取得拍攝顯示部的背面方向而得到的圖像信息；人物圖像取得部(72)，其實(shí)時(shí)地取得包含相對(duì)于第1據(jù)點(diǎn)(H1)為遠(yuǎn)程地點(diǎn)的第2據(jù)點(diǎn)(H2)的人物的圖像信息；提取部(73)，其從包含人物的圖像信息中提取映現(xiàn)出該人物的區(qū)域；以及合成部(74)，其將提取到的人物的圖像信息與顯示部的背面方向的圖像信息進(jìn)行合成。

技術(shù)領(lǐng)域

本公開涉及圖像處理裝置、遠(yuǎn)程臨場(chǎng)(telepresence，遙現(xiàn))系統(tǒng)、圖像處理方法以及圖像處理程序，例如涉及對(duì)顯示于遠(yuǎn)程臨場(chǎng)機(jī)器人的顯示部的圖像進(jìn)行處理的圖像處理裝置、遠(yuǎn)程臨場(chǎng)系統(tǒng)、圖像處理方法以及圖像處理程序。

背景技術(shù)

近年來(lái)，遠(yuǎn)程臨場(chǎng)技術(shù)正在普及，該技術(shù)用于使對(duì)話的一方的人物感覺(jué)相對(duì)于自己而位于遠(yuǎn)程地點(diǎn)的另一方的人物仿佛位于一方的人物所在之處一樣地實(shí)現(xiàn)對(duì)話。

例如日本特開2016-208416所公開的那樣，這種遠(yuǎn)程臨場(chǎng)技術(shù)在配置于第1據(jù)點(diǎn)(地點(diǎn))的遠(yuǎn)程臨場(chǎng)機(jī)器人的顯示部中顯示包含相對(duì)于第1據(jù)點(diǎn)為遠(yuǎn)程地點(diǎn)的第2據(jù)點(diǎn)的人物的圖像，實(shí)現(xiàn)了位于第2據(jù)點(diǎn)的人物仿佛位于第1據(jù)點(diǎn)的虛擬狀態(tài)。

發(fā)明內(nèi)容

本申請(qǐng)人發(fā)現(xiàn)了以下的問(wèn)題。日本特開2016-208416的遠(yuǎn)程臨場(chǎng)技術(shù)將除了第2據(jù)點(diǎn)的人物之外還映現(xiàn)出該人物的背景的圖像顯示于遠(yuǎn)程臨場(chǎng)機(jī)器人的顯示部。因此，具有在位于第2據(jù)點(diǎn)的人物仿佛位于第1據(jù)點(diǎn)的虛擬狀態(tài)下缺乏臨場(chǎng)感的問(wèn)題。

本公開是鑒于這種問(wèn)題點(diǎn)而做出的，實(shí)現(xiàn)能夠在位于第2據(jù)點(diǎn)的人物仿佛位于第1據(jù)點(diǎn)的虛擬狀態(tài)下提高臨場(chǎng)感的圖像處理裝置、遠(yuǎn)程臨場(chǎng)系統(tǒng)、圖像處理方法以及圖像處理程序。

本公開的一個(gè)技術(shù)方案的圖像處理裝置是處理在配置于第1據(jù)點(diǎn)的遠(yuǎn)程臨場(chǎng)機(jī)器人的顯示部中顯示的圖像的圖像處理裝置，具備：背景圖像取得部，其實(shí)時(shí)地取得拍攝所述顯示部的背面方向而得到的圖像信息；人物圖像取得部，其實(shí)時(shí)地取得包含相對(duì)于所述第1據(jù)點(diǎn)為遠(yuǎn)程地點(diǎn)的第2據(jù)點(diǎn)的人物的圖像信息；提取部，其從包含所述人物的圖像信息中提取映現(xiàn)出該人物的區(qū)域；以及合成部，其將所述提取到的人物的圖像信息與所述顯示部的背面方向的圖像信息進(jìn)行合成。

本公開的一個(gè)技術(shù)方案的遠(yuǎn)程臨場(chǎng)系統(tǒng)具備：上述的圖像處理裝置；人物拍攝部，其拍攝所述第2據(jù)點(diǎn)的包含人物的區(qū)域；遠(yuǎn)程臨場(chǎng)機(jī)器人，其設(shè)置有所述顯示部；以及背景拍攝部，其拍攝所述顯示部的背面方向。

上述的遠(yuǎn)程臨場(chǎng)系統(tǒng)優(yōu)選為，作為所述顯示部，具備第1顯示部和第2顯示部，所述第2顯示部相對(duì)于所述第1顯示部而朝向不同的方向顯示圖像。

上述的遠(yuǎn)程臨場(chǎng)系統(tǒng)優(yōu)選為，作為所述背景拍攝部，具備第1拍攝部和第2拍攝部，所述第1拍攝部拍攝所述第1顯示部的背面方向，所述第2拍攝部拍攝所述第2顯示部的背面方向。

上述的遠(yuǎn)程臨場(chǎng)系統(tǒng)優(yōu)選為，作為所述背景拍攝部，具備360度攝像頭(camera)。

本公開的一個(gè)技術(shù)方案的圖像處理方法是處理在配置于第1據(jù)點(diǎn)的遠(yuǎn)程臨場(chǎng)機(jī)器人的顯示部中顯示的圖像的圖像處理方法，包括：實(shí)時(shí)地取得拍攝所述顯示部的背面方向而得到的圖像信息的步驟；實(shí)時(shí)地取得包含相對(duì)于所述第1據(jù)點(diǎn)為遠(yuǎn)程地點(diǎn)的第2據(jù)點(diǎn)的人物的圖像信息的步驟；從包含所述人物的圖像信息中提取映現(xiàn)出該人物的區(qū)域的步驟；和將所述提取到的人物的圖像信息與所述顯示部的背面方向的圖像信息進(jìn)行合成的步驟。