JPWO2019123770A1 - 情報処理装置、情報処理方法及びプログラム - Google Patents
情報処理装置、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JPWO2019123770A1 JPWO2019123770A1 JP2019560814A JP2019560814A JPWO2019123770A1 JP WO2019123770 A1 JPWO2019123770 A1 JP WO2019123770A1 JP 2019560814 A JP2019560814 A JP 2019560814A JP 2019560814 A JP2019560814 A JP 2019560814A JP WO2019123770 A1 JPWO2019123770 A1 JP WO2019123770A1
- Authority
- JP
- Japan
- Prior art keywords
- display
- virtual object
- information
- transition
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a three-dimensional [3D] space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0492—Change of orientation of the displayed image, e.g. upside-down, mirrored
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Optics & Photonics (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Position Input By Displaying (AREA)
Abstract
Description
情報処理装置が提供される。
情報処理方法が提供される。
1.表示装置の構成
2.情報処理装置の動作
2−1.処理の全体的な流れ
2−2.遷移表示制御
2−2−1.第1遷移表示制御
2−2−2.第2遷移表示制御
2−2−3.第3遷移表示制御
2−2−4.補足
3.情報処理装置の効果
4.まとめ
まず、図1〜図4を参照して、本開示の実施形態に係る表示装置1の構成について説明する。
続いて、図5〜図22を参照して、本実施形態に係る情報処理装置100の動作について説明する。
まず、図5を参照して、本実施形態に係る情報処理装置100が行う処理の全体的な流れについて説明する。
続いて、図6〜図22を参照して、本実施形態に係る情報処理装置100の制御部150が行う遷移表示制御に関する処理について説明する。遷移表示制御に関する処理は、例えば、図5に示される処理フローにおけるステップS600の処理と対応する。
まず、図7〜図13を参照して、本実施形態に係る情報処理装置100の制御部150が行う第1遷移表示制御について説明する。
続いて、図14〜図18を参照して、本実施形態に係る情報処理装置100の制御部150が行う第2遷移表示制御について説明する。
続いて、図19〜図21を参照して、本実施形態に係る情報処理装置100の制御部150が行う第3遷移表示制御について説明する。
上記では、図6を参照して、仮想オブジェクト70が遷移表示の開始直前及び遷移表示の終了直後の双方において表示領域50内に表示されないと判定される場合に、遷移表示制御が実行されない例について説明したが、制御部150は、そのような場合に遷移表示制御を実行してもよい。例えば、制御部150は、そのような場合に仮想オブジェクト70の重畳位置を位置姿勢情報の補正前の通常表示制御における重畳位置から補正後の通常表示制御における重畳位置へ徐々に変化させてもよい。
続いて、本実施形態に係る情報処理装置100の効果について説明する。
以上説明したように、本実施形態に係る情報処理装置100では、実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置姿勢情報に基づいて実空間に重畳するよう表示装置1を制御する制御部150を備える。また、制御部150は、位置姿勢情報が、第1の位置姿勢情報から当該第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、第1の位置姿勢情報に基づいて仮想オブジェクト70が表示される第1の表示状態から第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう表示装置1を制御する。それにより、ユーザによるAR技術の利用を円滑化することができる。
(1)
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
を備え、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理装置。
(2)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの重畳位置を徐々に変化させるよう前記表示装置を制御する、
前記(1)に記載の情報処理装置。
(3)
前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
前記(2)に記載の情報処理装置。
(4)
前記制御部は、前記遷移表示において、前記仮想オブジェクトが動的オブジェクトである場合、前記仮想オブジェクトが非動的オブジェクトである場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
前記(2)又は(3)に記載の情報処理装置。
(5)
前記制御部は、前記遷移表示において、前記移動体の位置と前記重畳位置とを結ぶ直線に沿った方向へ前記重畳位置を優先的に変化させるよう前記表示装置を制御する、
前記(2)〜(4)のいずれか一項に記載の情報処理装置。
(6)
前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において前記表示装置の表示領域内に表示されると判定される場合、前記遷移表示において、前記重畳位置を徐々に変化させるよう前記表示装置を制御する、
前記(2)〜(5)のいずれか一項に記載の情報処理装置。
(7)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの視認性を徐々に変化させるよう前記表示装置を制御する、
前記(1)〜(6)のいずれか一項に記載の情報処理装置。
(8)
前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記視認性の変化速度が大きくなるよう前記表示装置を制御する、
前記(7)に記載の情報処理装置。
(9)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの透明度を徐々に変化させることによって前記視認性を徐々に変化させるよう前記表示装置を制御する、
前記(7)又は(8)に記載の情報処理装置。
(10)
前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において表示領域内に表示されると判定される場合、前記遷移表示において、前記視認性を徐々に変化させるよう前記表示装置を制御する、
前記(7)〜(9)のいずれか一項に記載の情報処理装置。
(11)
前記制御部は、前記遷移表示において、前記仮想オブジェクトの表示状態を、前記第1の位置姿勢情報に基づく前記第1の表示状態から前記第2の位置姿勢情報に基づく前記第2の表示状態に瞬間的に変更するとともに前記遷移表示の実行を通知する通知オブジェクトを表示するよう前記表示装置を制御する、
前記(1)〜(10)のいずれか一項に記載の情報処理装置。
(12)
前記制御部は、前記遷移表示において、テキストオブジェクトを前記通知オブジェクトとして表示するよう前記表示装置を制御する、
前記(11)に記載の情報処理装置。
(13)
前記制御部は、前記仮想オブジェクトが前記遷移表示の開始直前において表示領域内に表示され、かつ、前記遷移表示の終了直後において当該表示領域内に表示されないと判定された場合、前記遷移表示において、前記通知オブジェクトを表示するよう前記表示装置を制御する、
前記(11)又は(12)に記載の情報処理装置。
(14)
前記制御部は、ユーザが前記仮想オブジェクトを視認しているか否かの判定結果に基づいて、前記遷移表示を実行するよう前記表示装置を制御する、
前記(1)〜(13)のいずれか一項に記載の情報処理装置。
(15)
前記制御部は、前記ユーザの視線の検出結果に基づいて、前記ユーザが前記仮想オブジェクトを視認しているか否かを判定する、
前記(14)に記載の情報処理装置。
(16)
前記制御部は、前記ユーザが前記仮想オブジェクトを視認していないと判定された場合に前記遷移表示を停止し、その後、前記ユーザが前記仮想オブジェクトを視認していると判定された場合に前記遷移表示を再開するよう前記表示装置を制御する、
前記(14)又は(15)に記載の情報処理装置。
(17)
前記表示装置は、ヘッドマウントディスプレイである、
前記(1)〜(16)のいずれか一項に記載の情報処理装置。
(18)
前記位置姿勢情報は、前記移動体の位置及び姿勢を検出する位置姿勢センサによって検出され、
前記補正部は、前記位置姿勢センサにより検出される前記位置姿勢情報の誤差が閾値以上である場合に、前記位置姿勢情報を補正する、
前記(1)〜(17)のいずれか一項に記載の情報処理装置。
(19)
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう情報処理装置によって表示装置を制御することと、
前記位置姿勢情報を補正することと、
を含み、
前記位置姿勢情報が第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理方法。
(20)
コンピュータを、
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
として機能させるためのプログラムであって、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
プログラム。
20 カメラ
30 位置姿勢センサ
50 表示領域
70 仮想オブジェクト
100 情報処理装置
110 通信部
120 記憶部
130 更新部
140 補正部
150 制御部
Claims (20)
- 実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
を備え、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの重畳位置を徐々に変化させるよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトが動的オブジェクトである場合、前記仮想オブジェクトが非動的オブジェクトである場合よりも、前記重畳位置の変化速度が大きくなるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置と前記重畳位置とを結ぶ直線に沿った方向へ前記重畳位置を優先的に変化させるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において前記表示装置の表示領域内に表示されると判定される場合、前記遷移表示において、前記重畳位置を徐々に変化させるよう前記表示装置を制御する、
請求項2に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの視認性を徐々に変化させるよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記移動体の位置又は姿勢の変化速度が第1の変化速度である場合、前記移動体の位置又は姿勢の変化速度が前記第1の変化速度よりも小さい第2の変化速度である場合よりも、前記視認性の変化速度が大きくなるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの透明度を徐々に変化させることによって前記視認性を徐々に変化させるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の終了直後において表示領域内に表示されると判定される場合、前記遷移表示において、前記視認性を徐々に変化させるよう前記表示装置を制御する、
請求項7に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、前記仮想オブジェクトの表示状態を、前記第1の位置姿勢情報に基づく前記第1の表示状態から前記第2の位置姿勢情報に基づく前記第2の表示状態に瞬間的に変更するとともに前記遷移表示の実行を通知する通知オブジェクトを表示するよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記遷移表示において、テキストオブジェクトを前記通知オブジェクトとして表示するよう前記表示装置を制御する、
請求項11に記載の情報処理装置。 - 前記制御部は、前記仮想オブジェクトが前記遷移表示の開始直前において表示領域内に表示され、かつ、前記遷移表示の終了直後において当該表示領域内に表示されないと判定された場合、前記遷移表示において、前記通知オブジェクトを表示するよう前記表示装置を制御する、
請求項11に記載の情報処理装置。 - 前記制御部は、ユーザが前記仮想オブジェクトを視認しているか否かの判定結果に基づいて、前記遷移表示を実行するよう前記表示装置を制御する、
請求項1に記載の情報処理装置。 - 前記制御部は、前記ユーザの視線の検出結果に基づいて、前記ユーザが前記仮想オブジェクトを視認しているか否かを判定する、
請求項14に記載の情報処理装置。 - 前記制御部は、前記ユーザが前記仮想オブジェクトを視認していないと判定された場合に前記遷移表示を停止し、その後、前記ユーザが前記仮想オブジェクトを視認していると判定された場合に前記遷移表示を再開するよう前記表示装置を制御する、
請求項14に記載の情報処理装置。 - 前記表示装置は、ヘッドマウントディスプレイである、
請求項1に記載の情報処理装置。 - 前記位置姿勢情報は、前記移動体の位置及び姿勢を検出する位置姿勢センサによって検出され、
前記補正部は、前記位置姿勢センサにより検出される前記位置姿勢情報の誤差が閾値以上である場合に、前記位置姿勢情報を補正する、
請求項1に記載の情報処理装置。 - 実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう情報処理装置によって表示装置を制御することと、
前記位置姿勢情報を補正することと、
を含み、
前記位置姿勢情報が第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
情報処理方法。 - コンピュータを、
実空間における設定位置と対応付けられた仮想オブジェクトを移動体の位置及び姿勢を示す位置姿勢情報に基づいて前記実空間に重畳するよう表示装置を制御する制御部と、
前記位置姿勢情報を補正する補正部と、
として機能させるためのプログラムであって、
前記制御部は、前記位置姿勢情報が、第1の位置姿勢情報から前記第1の位置姿勢情報に対して非連続的な第2の位置姿勢情報に補正される際に、前記第1の位置姿勢情報に基づいて前記仮想オブジェクトが表示される第1の表示状態から前記第2の位置姿勢情報に基づく第2の表示状態への状態遷移を示す遷移表示を行うよう前記表示装置を制御する、
プログラム。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017244026 | 2017-12-20 | ||
| JP2017244026 | 2017-12-20 | ||
| PCT/JP2018/037084 WO2019123770A1 (ja) | 2017-12-20 | 2018-10-03 | 情報処理装置、情報処理方法及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2019123770A1 true JPWO2019123770A1 (ja) | 2021-03-11 |
| JP7226332B2 JP7226332B2 (ja) | 2023-02-21 |
Family
ID=66992558
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019560814A Active JP7226332B2 (ja) | 2017-12-20 | 2018-10-03 | 情報処理装置、情報処理方法及びプログラム |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US11468868B2 (ja) |
| EP (1) | EP3731066A4 (ja) |
| JP (1) | JP7226332B2 (ja) |
| KR (1) | KR102477842B1 (ja) |
| CN (1) | CN111512272B (ja) |
| WO (1) | WO2019123770A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12196971B2 (en) | 2022-07-29 | 2025-01-14 | Fujifilm Corporation | Image processing device, glasses-type information display device, image processing method, and image processing program |
| US12481159B2 (en) | 2022-07-29 | 2025-11-25 | Fujifilm Corporation | Control device, glasses-type information display device, control method, and control program |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112702643B (zh) * | 2019-10-22 | 2023-07-21 | 上海哔哩哔哩科技有限公司 | 弹幕信息显示方法、装置、移动终端 |
| JP7533367B2 (ja) * | 2021-06-03 | 2024-08-14 | トヨタ自動車株式会社 | 車両、充電システム、および、車両の制御方法 |
| US12603024B2 (en) * | 2021-08-25 | 2026-04-14 | Ntt Docomo, Inc. | Display control device |
| US20250209679A1 (en) * | 2022-03-31 | 2025-06-26 | Sony Group Corporation | Image processing apparatus and image processing system |
| US20230384788A1 (en) * | 2022-05-31 | 2023-11-30 | Ricoh Company, Ltd. | Information processing device, information processing system, information processing method, and recording medium storing program |
| US20240046577A1 (en) | 2022-08-05 | 2024-02-08 | Samsung Electronics Co., Ltd. | Video See-Through Augmented Reality |
| JP7594573B2 (ja) * | 2022-11-21 | 2024-12-04 | ソフトバンク株式会社 | 情報処理装置、プログラム、システム、及び情報処理方法 |
| JP2024109150A (ja) * | 2023-02-01 | 2024-08-14 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム、および記憶媒体 |
| WO2025225848A1 (ko) * | 2024-04-26 | 2025-10-30 | 삼성전자주식회사 | 아이 캘리브레이션을 위한 웨어러블 장치, 방법, 및 비-일시적 컴퓨터 판독 가능 기록 매체 |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1188913A (ja) * | 1997-09-01 | 1999-03-30 | M R Syst Kenkyusho:Kk | 姿勢検出装置、姿勢検出方法、記憶媒体および複合現実感提示装置 |
| JP2003216552A (ja) * | 2002-01-23 | 2003-07-31 | Equos Research Co Ltd | 情報種別表示プログラム |
| WO2014188512A1 (ja) * | 2013-05-21 | 2014-11-27 | 三菱電機株式会社 | 音声認識装置、認識結果表示装置および表示方法 |
| WO2014203592A1 (ja) * | 2013-06-17 | 2014-12-24 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
| JP2015090635A (ja) * | 2013-11-07 | 2015-05-11 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
| JP2016018213A (ja) * | 2014-07-10 | 2016-02-01 | セイコーエプソン株式会社 | 直接幾何学的モデル化によるhmdのキャリブレーション |
| JP2017015485A (ja) * | 2015-06-30 | 2017-01-19 | 明伸興産株式会社 | 装着型ナビゲーションシステム |
| WO2017061388A1 (ja) * | 2015-10-09 | 2017-04-13 | ソニー株式会社 | 情報処理装置、位置および/または姿勢の推定方法、およびコンピュータプログラム |
| JP2017111723A (ja) * | 2015-12-18 | 2017-06-22 | 株式会社ブリリアントサービス | バイク用ヘッドマウントディスプレイ、バイク用ヘッドマウントディスプレイの制御方法およびバイク用ヘッドマウントディスプレイの制御プログラム。 |
| JP2017120558A (ja) * | 2015-12-28 | 2017-07-06 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| JP2017129904A (ja) * | 2016-01-18 | 2017-07-27 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
| WO2017134886A1 (ja) * | 2016-02-02 | 2017-08-10 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6522312B2 (en) | 1997-09-01 | 2003-02-18 | Canon Kabushiki Kaisha | Apparatus for presenting mixed reality shared among operators |
| ATE552478T1 (de) * | 2004-06-03 | 2012-04-15 | Making Virtual Solid L L C | Navigationsanzeigeverfahren und vorrichtung für unterwegs unter verwendung eines head-up-displays |
| JP2011203823A (ja) | 2010-03-24 | 2011-10-13 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
| WO2015060193A1 (ja) * | 2013-10-22 | 2015-04-30 | 日本精機株式会社 | 車両情報投影システム及び投影装置 |
| CN105980962B (zh) * | 2014-02-17 | 2019-07-23 | 索尼公司 | 信息处理设备和信息处理方法 |
| WO2015170520A1 (ja) * | 2014-05-09 | 2015-11-12 | ソニー株式会社 | 情報処理システムおよび情報処理方法 |
| GB2528699B (en) * | 2014-07-29 | 2017-05-03 | Sony Computer Entertainment Europe Ltd | Image processing |
| US9652047B2 (en) * | 2015-02-25 | 2017-05-16 | Daqri, Llc | Visual gestures for a head mounted device |
| US9852547B2 (en) * | 2015-03-23 | 2017-12-26 | International Business Machines Corporation | Path visualization for augmented reality display device based on received data and probabilistic analysis |
| JP6596883B2 (ja) * | 2015-03-31 | 2019-10-30 | ソニー株式会社 | ヘッドマウントディスプレイ及びヘッドマウントディスプレイの制御方法、並びにコンピューター・プログラム |
| CN106330200B (zh) | 2015-07-09 | 2019-09-10 | 华邦电子股份有限公司 | 执行于通量图形处理器的低密度奇偶校验解码方法 |
| US10586464B2 (en) * | 2015-07-29 | 2020-03-10 | Warren F. LeBlanc | Unmanned aerial vehicles |
| US10373392B2 (en) * | 2015-08-26 | 2019-08-06 | Microsoft Technology Licensing, Llc | Transitioning views of a virtual model |
-
2018
- 2018-10-03 CN CN201880080507.9A patent/CN111512272B/zh active Active
- 2018-10-03 JP JP2019560814A patent/JP7226332B2/ja active Active
- 2018-10-03 KR KR1020207016033A patent/KR102477842B1/ko active Active
- 2018-10-03 EP EP18891366.9A patent/EP3731066A4/en active Pending
- 2018-10-03 WO PCT/JP2018/037084 patent/WO2019123770A1/ja not_active Ceased
- 2018-10-03 US US16/770,731 patent/US11468868B2/en active Active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1188913A (ja) * | 1997-09-01 | 1999-03-30 | M R Syst Kenkyusho:Kk | 姿勢検出装置、姿勢検出方法、記憶媒体および複合現実感提示装置 |
| JP2003216552A (ja) * | 2002-01-23 | 2003-07-31 | Equos Research Co Ltd | 情報種別表示プログラム |
| WO2014188512A1 (ja) * | 2013-05-21 | 2014-11-27 | 三菱電機株式会社 | 音声認識装置、認識結果表示装置および表示方法 |
| WO2014203592A1 (ja) * | 2013-06-17 | 2014-12-24 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
| JP2015090635A (ja) * | 2013-11-07 | 2015-05-11 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
| JP2016018213A (ja) * | 2014-07-10 | 2016-02-01 | セイコーエプソン株式会社 | 直接幾何学的モデル化によるhmdのキャリブレーション |
| JP2017015485A (ja) * | 2015-06-30 | 2017-01-19 | 明伸興産株式会社 | 装着型ナビゲーションシステム |
| WO2017061388A1 (ja) * | 2015-10-09 | 2017-04-13 | ソニー株式会社 | 情報処理装置、位置および/または姿勢の推定方法、およびコンピュータプログラム |
| JP2017111723A (ja) * | 2015-12-18 | 2017-06-22 | 株式会社ブリリアントサービス | バイク用ヘッドマウントディスプレイ、バイク用ヘッドマウントディスプレイの制御方法およびバイク用ヘッドマウントディスプレイの制御プログラム。 |
| JP2017120558A (ja) * | 2015-12-28 | 2017-07-06 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
| JP2017129904A (ja) * | 2016-01-18 | 2017-07-27 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
| WO2017134886A1 (ja) * | 2016-02-02 | 2017-08-10 | ソニー株式会社 | 情報処理装置、情報処理方法、及び記録媒体 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12196971B2 (en) | 2022-07-29 | 2025-01-14 | Fujifilm Corporation | Image processing device, glasses-type information display device, image processing method, and image processing program |
| US12481159B2 (en) | 2022-07-29 | 2025-11-25 | Fujifilm Corporation | Control device, glasses-type information display device, control method, and control program |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20200098509A (ko) | 2020-08-20 |
| CN111512272B (zh) | 2024-09-20 |
| KR102477842B1 (ko) | 2022-12-16 |
| JP7226332B2 (ja) | 2023-02-21 |
| US11468868B2 (en) | 2022-10-11 |
| US20210166661A1 (en) | 2021-06-03 |
| EP3731066A1 (en) | 2020-10-28 |
| WO2019123770A1 (ja) | 2019-06-27 |
| CN111512272A (zh) | 2020-08-07 |
| EP3731066A4 (en) | 2021-01-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7226332B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
| US11796309B2 (en) | Information processing apparatus, information processing method, and recording medium | |
| US11609428B2 (en) | Information processing apparatus and information processing method | |
| US10108018B2 (en) | Image display apparatus for displaying an image captured by a mobile apparatus | |
| EP3379525B1 (en) | Image processing device and image generation method | |
| US9459692B1 (en) | Virtual reality headset with relative motion head tracker | |
| US20140160170A1 (en) | Provision of an Image Element on a Display Worn by a User | |
| WO2019142560A1 (ja) | 視線を誘導する情報処理装置 | |
| US12425732B2 (en) | Motion trajectory determination and time-lapse photography methods, device, and machine-readable storage medium | |
| JP2021060627A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| JP7320736B2 (ja) | 表示システム | |
| US10771707B2 (en) | Information processing device and information processing method | |
| JP2022084970A (ja) | 表示システム | |
| TW202403509A (zh) | 用於擴增實境裝置之平滑物件校正 | |
| EP4328715A1 (en) | Headset adjustment | |
| US9751607B1 (en) | Method and system for controlling rotatable device on marine vessel | |
| US12307609B2 (en) | Information processing apparatus and information processing method | |
| US20210018911A1 (en) | Display control system, display control device and display control method | |
| JPWO2020032189A1 (ja) | 表示システム | |
| US12039898B2 (en) | Image display system | |
| CN117693663A (zh) | 控制方法、头戴式显示设备、控制系统及存储介质 | |
| US11492115B2 (en) | Unmanned aerial vehicle display control system, display control device and display control method | |
| JP2019081480A (ja) | ヘッドアップディスプレイ装置 | |
| US12061737B2 (en) | Image processing apparatus, image processing method, and storage device | |
| CN108319295B (zh) | 避障控制方法、设备及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210823 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221101 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221220 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230110 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230123 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7226332 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |