[發(fā)明專利]圖像處理裝置、圖像處理方法、計(jì)算機(jī)程序以及圖像顯示系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201480054842.3
• 申請(qǐng)日: 2014-11-04
• 公開（公告）號(hào): CN105593924B
• 公開（公告）日: 2019-06-07
• 發(fā)明（設(shè)計(jì)）人: 山本祐輝;河本獻(xiàn)太;廣田洋一
• 申請(qǐng)（專利權(quán)）人: 索尼公司
• 主分類號(hào): G09G5/00
• 分類號(hào): G09G5/00;H04N5/64
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 田喜慶;吳孟秋

1.一種圖像處理裝置，包括：

接收單元，從外部裝置接收時(shí)間序列數(shù)據(jù)；

預(yù)測(cè)時(shí)間計(jì)算單元，計(jì)算從在所述外部裝置中生成先前接收的數(shù)據(jù)中的最近數(shù)據(jù)時(shí)的時(shí)間到在顯示下一個(gè)圖像時(shí)的時(shí)間的預(yù)測(cè)時(shí)間；

時(shí)間序列數(shù)據(jù)預(yù)測(cè)單元，預(yù)測(cè)所述預(yù)測(cè)時(shí)間的時(shí)間序列數(shù)據(jù)；

以及

繪圖處理單元，基于由所述預(yù)測(cè)單元預(yù)測(cè)的所述時(shí)間序列數(shù)據(jù)，渲染圖像，

其中所述外部裝置跟蹤觀察圖像的用戶的一部分身體或者全部身體的位置或姿勢(shì)，

所述接收單元從所述外部裝置接收姿勢(shì)信息，作為所述時(shí)間序列數(shù)據(jù)，

所述繪圖處理單元基于所述姿勢(shì)信息渲染跟隨所述用戶的一部分身體或者全部身體的運(yùn)動(dòng)的圖像，

所述預(yù)測(cè)時(shí)間計(jì)算單元基于從所述外部裝置發(fā)送所述姿勢(shì)信息時(shí)到顯示基于所述姿勢(shì)信息的圖像時(shí)的總延遲量，計(jì)算所述預(yù)測(cè)時(shí)間，并且

所述預(yù)測(cè)時(shí)間計(jì)算單元將所述總延遲量分成可測(cè)量的恒定延遲以及不可測(cè)量的變化延遲，以計(jì)算所述總延遲量，

所述總延遲量包括在從所述外部裝置傳輸所述姿勢(shì)信息時(shí)發(fā)生的傳輸延遲、在基于所述姿勢(shì)信息渲染所述圖像時(shí)發(fā)生的渲染延遲、以及在顯示所渲染的所述圖像時(shí)發(fā)生的顯示延遲。

2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

所述時(shí)間序列數(shù)據(jù)預(yù)測(cè)單元包括插在兩片時(shí)間序列數(shù)據(jù)之間的配置，并且外推在所述兩片時(shí)間序列數(shù)據(jù)之前的部分，以預(yù)測(cè)在所述預(yù)測(cè)時(shí)間前的時(shí)間序列數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的圖像處理裝置，進(jìn)一步包括向顯示裝置發(fā)送所渲染的所述圖像的發(fā)送單元。

4.根據(jù)權(quán)利要求1所述的圖像處理裝置，進(jìn)一步包括顯示所渲染的所述圖像的顯示單元。

5.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

所述變化延遲包括傳輸延遲的變化。

6.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，

所述接收單元從所述外部裝置接收表示所述用戶的一部分身體或者全部身體的位置或姿勢(shì)的四元數(shù)，作為所述時(shí)間序列數(shù)據(jù)。

7.根據(jù)權(quán)利要求6所述的圖像處理裝置，其中，

所述時(shí)間序列數(shù)據(jù)預(yù)測(cè)單元包括對(duì)兩個(gè)四元數(shù)執(zhí)行線性插值的配置，并且外推在所述兩個(gè)四元數(shù)之前的部分，以預(yù)測(cè)所述預(yù)測(cè)時(shí)間前的四元數(shù)。

8.根據(jù)權(quán)利要求6所述的圖像處理裝置，其中，

所述時(shí)間序列數(shù)據(jù)預(yù)測(cè)單元包括對(duì)兩個(gè)四元數(shù)執(zhí)行球面線性插值的配置，并且外推在所述兩個(gè)四元數(shù)之前的部分，以預(yù)測(cè)所述預(yù)測(cè)時(shí)間前的四元數(shù)。

9.一種圖像處理裝置，包括：

接收單元，從外部裝置接收時(shí)間序列數(shù)據(jù)；

預(yù)測(cè)時(shí)間計(jì)算單元，計(jì)算從在所述外部裝置中加入先前接收的數(shù)據(jù)中的最近數(shù)據(jù)時(shí)的時(shí)間到在顯示下一個(gè)圖像時(shí)的時(shí)間的預(yù)測(cè)時(shí)間；

時(shí)間序列數(shù)據(jù)預(yù)測(cè)單元，預(yù)測(cè)所述預(yù)測(cè)時(shí)間的時(shí)間序列數(shù)據(jù)；

以及

繪圖處理單元，基于由所述預(yù)測(cè)單元預(yù)測(cè)的所述時(shí)間序列數(shù)據(jù)，渲染圖像，

其中所述外部裝置跟蹤觀察圖像的用戶的一部分身體或者全部身體的位置或姿勢(shì)，

所述接收單元從所述外部裝置接收姿勢(shì)信息，作為所述時(shí)間序列數(shù)據(jù)，

所述繪圖處理單元基于所述姿勢(shì)信息渲染跟隨所述用戶的一部分身體或者全部身體的運(yùn)動(dòng)的圖像，

所述預(yù)測(cè)時(shí)間計(jì)算單元基于從所述外部裝置發(fā)送所述姿勢(shì)信息時(shí)到顯示基于所述姿勢(shì)信息的圖像時(shí)的總延遲量，計(jì)算所述預(yù)測(cè)時(shí)間，并且

所述預(yù)測(cè)時(shí)間計(jì)算單元將所述總延遲量分成可測(cè)量的恒定延遲以及不可測(cè)量的變化延遲，以計(jì)算所述總延遲量，

所述總延遲量包括在從所述外部裝置傳輸所述姿勢(shì)信息時(shí)發(fā)生的傳輸延遲、在基于所述姿勢(shì)信息渲染所述圖像時(shí)發(fā)生的渲染延遲、以及在顯示所渲染的所述圖像時(shí)發(fā)生的顯示延遲。