[發(fā)明專利]信息處理器、處理方法和程序

無效

• 申請?zhí)枺?/td>: 201080031774.0
• 申請日: 2010-06-30
• 公開（公告）號: CN102473068A
• 公開（公告）日: 2012-05-23
• 發(fā)明（設(shè)計）人: 松田晃一;福地正樹
• 申請（專利權(quán)）人: 索尼公司
• 主分類號: G06F3/048
• 分類號: G06F3/048;G06F3/033;G06T19/20
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 王萍;陳煒

技術(shù)領(lǐng)域

本發(fā)明涉及信息處理器、處理方法和程序。本發(fā)明更具體地涉及用于使用合并了真實(shí)世界的真實(shí)對象和電子顯示的混合現(xiàn)實(shí)(MR)技術(shù)來處理數(shù)據(jù)的信息處理器、處理方法和程序。

背景技術(shù)

例如，如果使用PC(個人計算機(jī))的用戶對數(shù)據(jù)進(jìn)行處理，則他或她對PC的顯示部(顯示器)上的顯示數(shù)據(jù)進(jìn)行處理。然而，僅僅在顯示部(即，有限的區(qū)域)上對數(shù)據(jù)進(jìn)行處理包含了以下問題：

(1)當(dāng)通過鼠標(biāo)進(jìn)行操作時，PC或其他設(shè)備的顯示部上出現(xiàn)的鼠標(biāo)光標(biāo)停止在顯示部的屏幕區(qū)域的邊緣處。這使得不可能使用鼠標(biāo)光標(biāo)將顯示部內(nèi)的對象或窗口移動到顯示部的屏幕區(qū)域外部的區(qū)域。

(2)如果由用戶所使用的窗口或其他對象填滿PC或其他設(shè)備的顯示部的屏幕區(qū)域，則很多窗口被顯示為彼此重疊。為了查看在下面的窗口，用戶例如必須選擇在下面的窗口以將其顯示在頂部或者將重疊的窗口改變?yōu)閳D標(biāo)。然而，前者的處理使得不可能查看已經(jīng)移動到其他窗口后面的窗口。另一方面，后者的處理使得不可能查看圖標(biāo)化的窗口的細(xì)節(jié)。

存在以上問題。要注意，可以執(zhí)行以下處理來使用比PC或其他設(shè)備的顯示部的尺寸更大的區(qū)域。

(a)準(zhǔn)備新的物理顯示器并且將該顯示器連接到由用戶操作的計算機(jī)，使得可以使用多個顯示器。

(b)在單個顯示部上設(shè)定虛擬桌面。

然而，前者(a)不僅需要增加顯示器的成本，還需要空間。另一方面，后者(b)需要用戶輸入命令或者操縱例如出現(xiàn)在托盤上的圖標(biāo)，以訪問顯示部上實(shí)際顯示的區(qū)域之外的區(qū)域。

本發(fā)明意圖例如通過使用基于混合現(xiàn)實(shí)(MR)的數(shù)據(jù)處理來解決這些問題。要注意，專利文獻(xiàn)1(日本專利公開第2008-304268號)和專利文獻(xiàn)2(日本專利公開第2008-304269號)是描述了混合現(xiàn)實(shí)的現(xiàn)有技術(shù)的示例。這些文獻(xiàn)描述了適于使用通過相機(jī)捕獲的圖像來制作真實(shí)世界的三維映射的處理。

現(xiàn)有技術(shù)文獻(xiàn)

專利文獻(xiàn)

專利文獻(xiàn)1：日本專利公開第2008-304268號

專利文獻(xiàn)2：日本專利公開第2008-304269號

發(fā)明內(nèi)容

技術(shù)問題

本發(fā)明的目的是提供信息處理器、信息處理方法和程序，其由于基于混合現(xiàn)實(shí)(MR)的數(shù)據(jù)處理，有效地使用了PC或其他設(shè)備的顯示部(顯示器)之外而非僅僅顯示部中的空間區(qū)域來用于數(shù)據(jù)處理。

技術(shù)方案

本發(fā)明的第一方式是一種信息處理器，其包括坐標(biāo)處理模塊、相機(jī)、三維信息分析部、第二顯示部和虛擬對象管理部。坐標(biāo)處理模塊確定第一顯示部上顯示的作為位置指示符的光標(biāo)的位置位于第一顯示部的區(qū)域內(nèi)部還是外部，并且如果光標(biāo)位于第一顯示部的區(qū)域外部，則向虛擬對象管理部輸出光標(biāo)位置信息。相機(jī)捕獲包括第一顯示部的真實(shí)對象的圖像。三維信息分析部分析相機(jī)捕獲圖像中所包括的真實(shí)對象的三維位置。第二顯示部顯示相機(jī)捕獲圖像。虛擬對象管理部生成不同于相機(jī)捕獲圖像中所包括的真實(shí)對象的虛擬對象，并且生成包括所生成的虛擬對象和該真實(shí)對象的合成圖像，以便在第二顯示部上顯示該合成圖像。虛擬對象管理部基于從坐標(biāo)處理模塊提供的光標(biāo)位置信息，計算光標(biāo)的三維位置，以便在第二顯示部上顯示其中將光標(biāo)作為虛擬對象設(shè)置在所計算的位置處的合成圖像。

此外，在根據(jù)本發(fā)明的信息處理器的實(shí)施例中，該信息處理器包括應(yīng)用執(zhí)行部，其適于處理通過位置指示符指定的指定對象。應(yīng)用執(zhí)行部確定指定對象位于第一顯示部的區(qū)域內(nèi)部還是外部，并且如果指定對象位于第一顯示部的區(qū)域外部，則向虛擬對象管理部輸出對象位置信息。虛擬對象管理部基于從坐標(biāo)處理模塊提供的對象位置信息，計算對象的三維坐標(biāo)，以便在第二顯示部上顯示其中將對象作為虛擬對象設(shè)置在所計算的位置處的合成圖像。

此外，在根據(jù)本發(fā)明的信息處理器的另一實(shí)施例中，如果基于從坐標(biāo)處理模塊提供的對象位置信息計算的對象的三維位置包括第一顯示部的顯示區(qū)域，則虛擬對象管理部在第二顯示部上顯示其中刪除了與第一顯示部的顯示區(qū)域重疊的對象區(qū)域圖像的合成圖像。

此外，在根據(jù)本發(fā)明的信息處理器的又一實(shí)施例中，該信息處理器還包括對象信息獲取部。對象信息獲取部獲取通過設(shè)置為虛擬對象的光標(biāo)所指定的真實(shí)對象的圖像數(shù)據(jù)，并且基于所獲取的圖像數(shù)據(jù)來檢索數(shù)據(jù)以便獲取對象信息。對象信息獲取部向第一顯示部輸出所獲取的對象信息作為顯示數(shù)據(jù)。