JP7777190B2 - ヘッドマウントディスプレイ - Google Patents
ヘッドマウントディスプレイInfo
- Publication number
- JP7777190B2 JP7777190B2 JP2024094992A JP2024094992A JP7777190B2 JP 7777190 B2 JP7777190 B2 JP 7777190B2 JP 2024094992 A JP2024094992 A JP 2024094992A JP 2024094992 A JP2024094992 A JP 2024094992A JP 7777190 B2 JP7777190 B2 JP 7777190B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- content
- head
- hmd
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
- G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B2027/0192—Supplementary details
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0613—The adjustment depending on the type of the information to be displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2356/00—Detection of the display position w.r.t. other display screens
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
- Digital Computer Display Output (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Description
本発明は、ヘッドマウントディスプレイ（ＨＭＤ：Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ）に関する。
インターネットには、多彩な情報のコンテンツを提供するＷＥＢサーバが繋がれ、パソ
コン、スマートフォン等の情報機器から閲覧や観覧が可能である。閲覧や観覧にはＷＥＢ
ブラウザが用いられ、情報機器の基本動作プログラムの一部として搭載されている。情報
機器は手入力によるユーザインターフェースが一般的で、このため情報機器を用いてＷＥ
Ｂコンテンツの閲覧を行なっているときに、ユーザが別の作業を行なうことは難しい。
コン、スマートフォン等の情報機器から閲覧や観覧が可能である。閲覧や観覧にはＷＥＢ
ブラウザが用いられ、情報機器の基本動作プログラムの一部として搭載されている。情報
機器は手入力によるユーザインターフェースが一般的で、このため情報機器を用いてＷＥ
Ｂコンテンツの閲覧を行なっているときに、ユーザが別の作業を行なうことは難しい。
一方、グラフィックスや文字などの仮想物体（Ａｒｇｕｍｅｎｔ Ｒｅａｌｉｔｙ Ｏ
ｂｊｅｃｔ）の映像を現実空間に重ね合わせて表示させ、ユーザに視聴させるＨＭＤがあ
る。ユーザはＨＭＤを装着し、ゲームや設備機器の操作支援等のコンテンツを観覧してい
るときでも、自由に動かすことのできる手を用いて、ゲーム機器や設備機器を操作するこ
とができる。
ｂｊｅｃｔ）の映像を現実空間に重ね合わせて表示させ、ユーザに視聴させるＨＭＤがあ
る。ユーザはＨＭＤを装着し、ゲームや設備機器の操作支援等のコンテンツを観覧してい
るときでも、自由に動かすことのできる手を用いて、ゲーム機器や設備機器を操作するこ
とができる。
ＨＭＤの表示技術の一例として、特許文献１には、情報機器である携帯端末とＨＭＤを
連携させ、携帯端末の画面をＨＭＤの画面に表示する方法を開示している。
連携させ、携帯端末の画面をＨＭＤの画面に表示する方法を開示している。
ＨＭＤの画面は一般に携帯端末よりも表示領域が小さいので、単に携帯端末の画面をＨ
ＭＤの画面に表示しただけでは、ＨＭＤを装着した装着者の視認性が十分に確保できない
。一方、同一のコンテンツが携帯端末とＨＭＤとのそれぞれに表示されていても、ＨＭＤ
の装着者は主にＨＭＤの画面を見ているので、両方に同じコンテンツを表示させる必要は
ない。従って、表示領域が小さいＨＭＤの画面にどのコンテンツを表示させるか、又、視
認性をどのように確保するかについては更なる工夫の余地がある。
ＭＤの画面に表示しただけでは、ＨＭＤを装着した装着者の視認性が十分に確保できない
。一方、同一のコンテンツが携帯端末とＨＭＤとのそれぞれに表示されていても、ＨＭＤ
の装着者は主にＨＭＤの画面を見ているので、両方に同じコンテンツを表示させる必要は
ない。従って、表示領域が小さいＨＭＤの画面にどのコンテンツを表示させるか、又、視
認性をどのように確保するかについては更なる工夫の余地がある。
本発明は上記の点を鑑みてなされたものであり、ＨＭＤにコンテンツを効率よく、視認
性をより確保して表示する技術に関する。
性をより確保して表示する技術に関する。
上記課題を解決するために、本発明は特許請求の範囲に記載の構成を備える。その一例をあげるならば、ヘッドマウントディスプレイであって、ディスプレイと、前記ディスプレイに接続され、表示制御を行うプロセッサと、を備え、前記プロセッサは、コンテンツが一連の作業における工程と関連付けられたデータであるか否かを解析するコンテンツ解析部として機能し、前記コンテンツを前記一連の作業における工程と関連付けられたデータであると解析すると、前記コンテンツに含まれるテキストデータ及び画像データのうち、前記テキストデータのみを前記工程に基づいて前記ディスプレイにおける表示領域のうち、前記ヘッドマウントディスプレイの装着者が下向きに手元又は現実物体を見ながら作業をする場合に前記装着者の視野中央の視認性が確保できる上部領域に表示し、前記コンテンツを前記一連の作業における工程と関連付けられたデータではないと解析すると、前前記コンテンツの画像データを工程に代わるコンテンツの切れ目として扱い、前記コンテンツのテキストデータのうち前記切れ目までを一つのブロックとして前記ディスプレイに表示する、ことを特徴とする。
本発明によれば、ＨＭＤにコンテンツを効率よく、視認性をより確保して表示すること
ができる。上述した以外の目的、構成、効果については、以下の実施形態において明らか
にされる。
ができる。上述した以外の目的、構成、効果については、以下の実施形態において明らか
にされる。
以下、図面を参照しながら、本発明の実施形態について説明する。全図を通じて同一の
構成には同一の符号を付し、重複説明を省略する。
構成には同一の符号を付し、重複説明を省略する。
［第１実施形態］
図１は、本実施形態に係る情報機器及びＨＭＤ（ヘッドマウントディスプレイ）の連携
表示システムの構成を示す。
図１は、本実施形態に係る情報機器及びＨＭＤ（ヘッドマウントディスプレイ）の連携
表示システムの構成を示す。
図１にて、１はユーザ、２は情報機器、３はＨＭＤ、４はアクセスポイント、２ａ、３
ａ、４ａは通信信号、５はネットワーク、６はＷＥＢサーバである。
ａ、４ａは通信信号、５はネットワーク、６はＷＥＢサーバである。
ユーザ１は、ＳＣＥＮＥ１とＳＣＥＮＥ２の２つのシーンのいずれかでＷＥＢコンテン
ツを閲覧（ｂｒｏｗｓｉｎｇ）、観覧（ｖｉｅｗｉｎｇ）する。２つのシーンは任意のタ
イミングで移行可能である。以下の説明では、情報機器２でＷＥＢコンテンツを検索・受
信して表示画面を見ることを閲覧すると記し、ＨＭＤでＷＥＢコンテンツの仮想画面を見
ることを観覧すると記す。
ツを閲覧（ｂｒｏｗｓｉｎｇ）、観覧（ｖｉｅｗｉｎｇ）する。２つのシーンは任意のタ
イミングで移行可能である。以下の説明では、情報機器２でＷＥＢコンテンツを検索・受
信して表示画面を見ることを閲覧すると記し、ＨＭＤでＷＥＢコンテンツの仮想画面を見
ることを観覧すると記す。
ＳＣＥＮＥ１では、ユーザ１は情報機器２を用いてＷＥＢコンテンツの閲覧を行なう。
情報機器２は、通信信号２ａ、４ａ、アクセスポイント４を介してネットワーク５に接続
され、ネットワーク５に繋がるＷＥＢサーバ６のＷＥＢコンテンツを検索し、所望のＷＥ
Ｂコンテンツを受信して、情報機器２に表示して、ＷＥＢコンテンツをユーザ１が視聴す
る。
情報機器２は、通信信号２ａ、４ａ、アクセスポイント４を介してネットワーク５に接続
され、ネットワーク５に繋がるＷＥＢサーバ６のＷＥＢコンテンツを検索し、所望のＷＥ
Ｂコンテンツを受信して、情報機器２に表示して、ＷＥＢコンテンツをユーザ１が視聴す
る。
通信信号２ａ、４ａは、無線ＬＡＮであることが望ましく、これによりインターネット
で広く用いられるＴＣＰ／ＩＰやＨＴＴＰのプロトコルを活用して、ＷＥＢコンテンツの
閲覧が行える。
で広く用いられるＴＣＰ／ＩＰやＨＴＴＰのプロトコルを活用して、ＷＥＢコンテンツの
閲覧が行える。
またネットワーク５は、インターネットとイントラネットを統合して表したものであり
、インターネットとイントラネットの間に設けられるプロキシーサーバ等は、図示を省略
している。
、インターネットとイントラネットの間に設けられるプロキシーサーバ等は、図示を省略
している。
ユーザ１は、情報機器２にキーワードやＵＲＬを入力する等によりＷＥＢコンテンツの
検索や呼び出しを行なうが、これによりユーザの手は行動を制限される。そこで、ユーザ
１が、ＷＥＢコンテンツの閲覧中に手の動きを必要とする作業を行なおうとしたとき、Ｓ
ＣＥＮＥ１からＳＣＥＮＥ２に移行する。例えば、レシピなど料理の作り方を説明してい
るＷＥＢコンテンツを検索し、該ＷＥＢコンテンツを見ながら実際に料理を行う場合や、
家電製品の取り扱い説明書をインターネット上で検索し、該取り扱い説明書を見ながら家
電製品を取り扱う場合等がある。
検索や呼び出しを行なうが、これによりユーザの手は行動を制限される。そこで、ユーザ
１が、ＷＥＢコンテンツの閲覧中に手の動きを必要とする作業を行なおうとしたとき、Ｓ
ＣＥＮＥ１からＳＣＥＮＥ２に移行する。例えば、レシピなど料理の作り方を説明してい
るＷＥＢコンテンツを検索し、該ＷＥＢコンテンツを見ながら実際に料理を行う場合や、
家電製品の取り扱い説明書をインターネット上で検索し、該取り扱い説明書を見ながら家
電製品を取り扱う場合等がある。
ユーザ１は、情報機器２（「第１情報機器」に相当する）とＨＭＤ３（「第２情報機器
」に相当する）を無線通信接続し、ＷＥＢコンテンツを一時停止して、ＨＭＤ３を自身に
装着する。ＨＭＤ３を装着したシーンがＳＣＥＮＥ２である。
」に相当する）を無線通信接続し、ＷＥＢコンテンツを一時停止して、ＨＭＤ３を自身に
装着する。ＨＭＤ３を装着したシーンがＳＣＥＮＥ２である。
ＨＭＤ３は、例えば光学シースルー方式のＨＭＤ、あるいはビデオシースルー方式のＨ
ＭＤ３であって、以下の説明では、光学シースルー方式のＨＭＤ３の場合を説明する。
ＭＤ３であって、以下の説明では、光学シースルー方式のＨＭＤ３の場合を説明する。
ＨＭＤ３は、光学スクリーン越しに実景を見ながら、表示光学系で映し出す仮想画面を
同時に視認できる。仮想画面は、直前まで情報機器２で見ていたＷＥＢコンテンツの一部
、本実施形態ではテキストデータのみの映像である。
同時に視認できる。仮想画面は、直前まで情報機器２で見ていたＷＥＢコンテンツの一部
、本実施形態ではテキストデータのみの映像である。
ＨＭＤ３は、通信信号３ａ、４ａ、アクセスポイント４を介してネットワーク５に接続
され、ＷＥＢサーバ６からＷＥＢコンテンツを受信することができる。情報機器２経由で
ＷＥＢコンテンツを受信してもよい。
され、ＷＥＢサーバ６からＷＥＢコンテンツを受信することができる。情報機器２経由で
ＷＥＢコンテンツを受信してもよい。
また、通信信号２ａ、３ａは、情報機器２とＨＭＤ３とを無線通信接続して送受信させ
る信号である。このときの通信信号２ａ、３ａは、無線ＬＡＮ信号であっても良く、もし
くはＢｌｕｅｔｏｏｔｈ（登録商標）信号であっても良い。Ｂｌｕｅｔｏｏｔｈ（登録商
標）信号は、情報機器２とＨＭＤ３を１対１で通信し、情報機器２とＨＭＤ３とのペアリ
ングを一連のプロトコルで実施できる。連携表示システム１０は、情報機器２とＨＭＤ３
を通信接続して表示制御するシステムである。
る信号である。このときの通信信号２ａ、３ａは、無線ＬＡＮ信号であっても良く、もし
くはＢｌｕｅｔｏｏｔｈ（登録商標）信号であっても良い。Ｂｌｕｅｔｏｏｔｈ（登録商
標）信号は、情報機器２とＨＭＤ３を１対１で通信し、情報機器２とＨＭＤ３とのペアリ
ングを一連のプロトコルで実施できる。連携表示システム１０は、情報機器２とＨＭＤ３
を通信接続して表示制御するシステムである。
情報機器２はＨＭＤ３に、直前まで見ていたＷＥＢコンテンツのＵＲＬや視聴の経過時
間などのデータを送信し、ＨＭＤ３は受信したこれらのデータに対応するＷＥＢコンテン
ツをネットワーク５から受信して、表示光学系に映し出し、継続したＷＥＢコンテンツの
観覧を可能とさせる。
間などのデータを送信し、ＨＭＤ３は受信したこれらのデータに対応するＷＥＢコンテン
ツをネットワーク５から受信して、表示光学系に映し出し、継続したＷＥＢコンテンツの
観覧を可能とさせる。
（情報機器）
図２及び図３を参照して、情報機器２の例を説明する。図２は情報機器２の外観の正面
図であり、図３は情報機器のハードウェア構成図である。
図２及び図３を参照して、情報機器２の例を説明する。図２は情報機器２の外観の正面
図であり、図３は情報機器のハードウェア構成図である。
図２にて、２ｂはホームボタン、２ｃは環境光及び近接センサ、２ｄは受話口、２ｅは
インカメラ、２ｆは通知ランプ、２ｇはタッチパネル付ディスプレイ（「第１ディスプレ
イ」に相当する）の表示領域（仮想画面ともいう）である。この他、図示はされていない
が、情報機器２の側面には音量ボタンや電源ボタン、底面にはスピーカ、マイク、電源及
び／又は通信コネクタ、イヤホンジャック、裏面にはアウトカメラ、指紋センサ等がある
。なお、配置場所は図２の通りでなくてもよい。
インカメラ、２ｆは通知ランプ、２ｇはタッチパネル付ディスプレイ（「第１ディスプレ
イ」に相当する）の表示領域（仮想画面ともいう）である。この他、図示はされていない
が、情報機器２の側面には音量ボタンや電源ボタン、底面にはスピーカ、マイク、電源及
び／又は通信コネクタ、イヤホンジャック、裏面にはアウトカメラ、指紋センサ等がある
。なお、配置場所は図２の通りでなくてもよい。
図３にて、２０１はカメラ（インとアウトの少なくとも２つのカメラがある）、２０２
は環境光センサ、近接センサ、ＧＰＳセンサ、ジャイロセンサ、地磁気センサ、加速度セ
ンサ等のセンサ群、２０３はグラフィックス処理器、２０４（図２の２ｇ）はタッチパネ
ル付ディスプレイ、２０５はマイクとスピーカ、２０６は無線通信器（「第１通信器」に
相当する）、２０７はＣＰＵ（「第１プロセッサ」に相当する）、２０８はＲＡＭ、２０
９はＦｌａｓｈ ＲＯＭ（ＦＲＯＭ）、２１２は外部インタフェース（Ｉ／Ｆ）、２１３
は内部バスである。
は環境光センサ、近接センサ、ＧＰＳセンサ、ジャイロセンサ、地磁気センサ、加速度セ
ンサ等のセンサ群、２０３はグラフィックス処理器、２０４（図２の２ｇ）はタッチパネ
ル付ディスプレイ、２０５はマイクとスピーカ、２０６は無線通信器（「第１通信器」に
相当する）、２０７はＣＰＵ（「第１プロセッサ」に相当する）、２０８はＲＡＭ、２０
９はＦｌａｓｈ ＲＯＭ（ＦＲＯＭ）、２１２は外部インタフェース（Ｉ／Ｆ）、２１３
は内部バスである。
ＦＲＯＭ２０９は、情報機器２の基本動作プログラム２１０とＨＭＤ連携アプリ２１１
（情報機器にインストールされている）のプログラムを含み、これらのプログラムはＣＰ
Ｕ２０７がＲＡＭ２０８に展開して実行する。更にＦＲＯＭ２０９は、処理プログラムを
実行する過程及び結果で発生するデータを格納することができる。
（情報機器にインストールされている）のプログラムを含み、これらのプログラムはＣＰ
Ｕ２０７がＲＡＭ２０８に展開して実行する。更にＦＲＯＭ２０９は、処理プログラムを
実行する過程及び結果で発生するデータを格納することができる。
無線通信器２０６は、４Ｇなどのモバイル通信、無線ＬＡＮ通信、Ｂｌｕｅｔｏｏｔｈ
（登録商標）通信などの複数の通信機能を含む。
（登録商標）通信などの複数の通信機能を含む。
タッチパネル付ディスプレイ２０４は、グラフィックス処理器２０３で描画する画像を
ディスプレイ部へ映し出すと共に、タッチパネルではユーザの入力操作を受け付ける。デ
ィスプレイに表示したキーボードの画面を使ってユーザはＵＲＬ等を入力し、ＷＥＢコン
テンツを閲覧する。
ディスプレイ部へ映し出すと共に、タッチパネルではユーザの入力操作を受け付ける。デ
ィスプレイに表示したキーボードの画面を使ってユーザはＵＲＬ等を入力し、ＷＥＢコン
テンツを閲覧する。
（ＨＭＤ）
図４及び図５を参照して、ＨＭＤ３の例について説明する。図４はＨＭＤ３の外観図で
あり、図５はＨＭＤのハードウェア構成図である。
図４及び図５を参照して、ＨＭＤ３の例について説明する。図４はＨＭＤ３の外観図で
あり、図５はＨＭＤのハードウェア構成図である。
図４にて、３０はカメラ、３１は測距デバイス、３２ａ、３２ｂは投影光学系、３３は
レンズやスクリーン等の表示光学系、３４はノーズパッド、３５はプロセッサ、３６はス
ピーカ、３７はマイク、３８ａ、３８ｂ、３８ｃはフレーム筐体である。
レンズやスクリーン等の表示光学系、３４はノーズパッド、３５はプロセッサ、３６はス
ピーカ、３７はマイク、３８ａ、３８ｂ、３８ｃはフレーム筐体である。
ユーザ１は、フレーム筐体３８ａ、３８ｂとノーズパッド３４で、ＨＭＤ３を自身の顔
部に装着する。
部に装着する。
カメラ３０は、ユーザの視線前方を撮影するように取り付けられており、測距デバイス
３１は、カメラ３０の撮影画像（「前方画像」に相当する）が捉える現実空間の現実物体
との距離を測定する。
３１は、カメラ３０の撮影画像（「前方画像」に相当する）が捉える現実空間の現実物体
との距離を測定する。
測距デバイス３１は、現実物体の輪郭等の特徴点に対してステレオカメラのような方式
で距離を算出するものでもよいし、ＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）方式のよう
に２次元的に光線を照射して距離を計測するものでもよく、撮影画像に対応して、現実物
体との距離を測定できるものであれば良い。測距デバイス３１は、測距デバイス３１及び
距離算出器３５１（図５参照）を含んで構成される。
で距離を算出するものでもよいし、ＴＯＦ（Ｔｉｍｅ ｏｆ Ｆｌｉｇｈｔ）方式のよう
に２次元的に光線を照射して距離を計測するものでもよく、撮影画像に対応して、現実物
体との距離を測定できるものであれば良い。測距デバイス３１は、測距デバイス３１及び
距離算出器３５１（図５参照）を含んで構成される。
投影光学系３２ａ、３２ｂと表示光学系３３で、ＨＭＤ３の表示部（「第２ディスプレ
イ」に相当する）を構成する。投影光学系３２ａ、３２ｂは、仮想物体の映像を、左目で
確認する画像と右目で確認する画像として、表示光学系３３に投影して表示する。ユーザ
１は、前方の風景や現実物体を、表示光学系３３を透過して見ることができ、投影光学系
３２ａ、３２ｂから投影する仮想物体の映像は、表示光学系３３を介して、現実空間の現
実物体と区別しやすい任意の位置に表示させることができる。なお、測距デバイス３１は
なくてもよい。この場合、仮想画面は、現実空間のプリセットした位置に表示する。
イ」に相当する）を構成する。投影光学系３２ａ、３２ｂは、仮想物体の映像を、左目で
確認する画像と右目で確認する画像として、表示光学系３３に投影して表示する。ユーザ
１は、前方の風景や現実物体を、表示光学系３３を透過して見ることができ、投影光学系
３２ａ、３２ｂから投影する仮想物体の映像は、表示光学系３３を介して、現実空間の現
実物体と区別しやすい任意の位置に表示させることができる。なお、測距デバイス３１は
なくてもよい。この場合、仮想画面は、現実空間のプリセットした位置に表示する。
プロセッサ３５（「第２プロセッサ」に相当する）は、カメラ３０で撮影した現実空間
の画像、測距デバイス３１で取得した現実物体などの現実空間の位置データを取り込み、
内部のメモリやＣＰＵに供給する。また、ジャイロ、方位、位置、接触センサ等、更には
視線検出センサのセンサ群を内蔵する。
の画像、測距デバイス３１で取得した現実物体などの現実空間の位置データを取り込み、
内部のメモリやＣＰＵに供給する。また、ジャイロ、方位、位置、接触センサ等、更には
視線検出センサのセンサ群を内蔵する。
更にプロセッサ３５は、投影光学系３２ａ、３２ｂで投影する画像やスピーカ３６に出
力する音を作成する。プロセッサ３５、カメラ３０、測距デバイス３１、スピーカ３６、
マイク３７は、フレーム筐体３８ａ、３８ｂ、３８ｃに配置される。なお、配置場所は図
４の通りでなくてもよい。
力する音を作成する。プロセッサ３５、カメラ３０、測距デバイス３１、スピーカ３６、
マイク３７は、フレーム筐体３８ａ、３８ｂ、３８ｃに配置される。なお、配置場所は図
４の通りでなくてもよい。
図５にて、図４と同一のものには同一の番号を付している。３５０は内部バス、３５１
は距離算出器、３５２はセンサ群、３５４は無線通信器、３５５はＣＰＵ、３５６はＲＡ
Ｍ、３５７は画像ＲＡＭ、３５８はＦＲＯＭである。
は距離算出器、３５２はセンサ群、３５４は無線通信器、３５５はＣＰＵ、３５６はＲＡ
Ｍ、３５７は画像ＲＡＭ、３５８はＦＲＯＭである。
投影光学系３２は、図４の投影光学系３２ａ、３２ｂに対応する。投影光学系３２は、
３２ａ、３２ｂのように左目の画像と右目の画像を独立に表示光学系３３に投影させる。
他に、ひとつのプロジェクタでインタリーブした左目の画像と右目の画像を投影し、シャ
ッタ光学系で、左目の画像と右目の画像をそれぞれの目に透過させるものであっても良い
。更には、ホログラフィックレンズを用いた光学系でも良い。
３２ａ、３２ｂのように左目の画像と右目の画像を独立に表示光学系３３に投影させる。
他に、ひとつのプロジェクタでインタリーブした左目の画像と右目の画像を投影し、シャ
ッタ光学系で、左目の画像と右目の画像をそれぞれの目に透過させるものであっても良い
。更には、ホログラフィックレンズを用いた光学系でも良い。
無線通信器３５４（「第２通信器」に相当する）は、ＨＭＤ３を無線ＬＡＮ上のアクセ
スポイント４を介してネットワーク５に接続する。またＢｌｕｅｔｏｏｔｈ（登録商標）
通信などで、情報機器２と１対１通信を行う。
スポイント４を介してネットワーク５に接続する。またＢｌｕｅｔｏｏｔｈ（登録商標）
通信などで、情報機器２と１対１通信を行う。
ＦＲＯＭ３５８には、処理プログラムとして、基本動作プログラム５８０、ＨＭＤ連携
アプリのプログラム５８１が含まれる。これらの処理プログラムは、ＣＰＵ３５５がＲＡ
Ｍ３５６に展開して実行する。更にＦＲＯＭ３５８は、処理プログラムを実行する過程及
び結果で発生するデータを格納することができる。
アプリのプログラム５８１が含まれる。これらの処理プログラムは、ＣＰＵ３５５がＲＡ
Ｍ３５６に展開して実行する。更にＦＲＯＭ３５８は、処理プログラムを実行する過程及
び結果で発生するデータを格納することができる。
また投影光学系３２に送出する画像データは、画像ＲＡＭ３５７に格納し、画像ＲＡＭ
３５７から読み出す。
３５７から読み出す。
図６は、連携表示システム１０のプログラム機能ブロック図である。情報機器２のＣＰ
Ｕ２０７は、ＨＭＤ連携アプリ２１１をＲＡＭ２０８にロードして実行することにより、
表示制御部４０１、コンテンツ解析部４０２、及び通信制御部４０３を構成する。ＨＭＤ
３のＣＰＵ３５５は、ＨＭＤ連携アプリ３５８をＲＡＭ３５６にロードして実行すること
により、表示制御部５０１、コンテンツ解析部５０２、通信制御部５０３及び視線検出部
５０４を構成する。各部の機能は、図９、図１０のフローチャートを参照して後述する。
Ｕ２０７は、ＨＭＤ連携アプリ２１１をＲＡＭ２０８にロードして実行することにより、
表示制御部４０１、コンテンツ解析部４０２、及び通信制御部４０３を構成する。ＨＭＤ
３のＣＰＵ３５５は、ＨＭＤ連携アプリ３５８をＲＡＭ３５６にロードして実行すること
により、表示制御部５０１、コンテンツ解析部５０２、通信制御部５０３及び視線検出部
５０４を構成する。各部の機能は、図９、図１０のフローチャートを参照して後述する。
図７、図８は、連携表示システム１０による表示切替例を示す図である。
図７、図８の表示状態Ａ（全コンテンツ表示状態）において、情報機器２とＨＭＤ３と
を通信接続してテキストデータを情報機器２からＨＭＤ３へ転送すると表示状態Ｂ１（図
７参照）又は表示状態Ｂ２（図８参照）に遷移する。また連携終了の指示を情報機器２又
はＨＭＤ３から入力すると、表示状態Ｂ１又は表示状態Ｂ２から表示状態Ａへと遷移する
。
を通信接続してテキストデータを情報機器２からＨＭＤ３へ転送すると表示状態Ｂ１（図
７参照）又は表示状態Ｂ２（図８参照）に遷移する。また連携終了の指示を情報機器２又
はＨＭＤ３から入力すると、表示状態Ｂ１又は表示状態Ｂ２から表示状態Ａへと遷移する
。
表示状態Ａ、即ち情報機器のみでコンテンツを表示している場合の表示状態では、テキ
ストデータ及び画像Ａを含むコンテンツを表示している。タッチパネル付ディスプレイ２
０４の画面２ｇの右端には、表示画面を前後方向に移動させるためのスクロールバー２ｇ
１が配置されている。
ストデータ及び画像Ａを含むコンテンツを表示している。タッチパネル付ディスプレイ２
０４の画面２ｇの右端には、表示画面を前後方向に移動させるためのスクロールバー２ｇ
１が配置されている。
表示状態Ｂ１では、情報機器２で画像Ａのみが表示され、ＨＭＤ３でテキストデータの
みが表示される。表示状態Ｂ１における画像Ａの表示サイズは、表示状態Ａにおける画像
Ａの表示サイズよりも拡大されている。ＨＭＤ３で表示するものは“ＡＲ”として称する
ことがあるが、現実の物体や位置にＨＭＤ３で表示する仮想オブジェクト（図７の例では
テキストデータに相当する）が紐付けされていなくてもよい。
みが表示される。表示状態Ｂ１における画像Ａの表示サイズは、表示状態Ａにおける画像
Ａの表示サイズよりも拡大されている。ＨＭＤ３で表示するものは“ＡＲ”として称する
ことがあるが、現実の物体や位置にＨＭＤ３で表示する仮想オブジェクト（図７の例では
テキストデータに相当する）が紐付けされていなくてもよい。
表示状態Ｂ１では、テキストデータがＨＭＤ３の表示領域（仮想画面）において左に寄
せて表示される。これにより、ＨＭＤ３の装着者（ユーザ１）の視野中央の視認性を確保
する。
せて表示される。これにより、ＨＭＤ３の装着者（ユーザ１）の視野中央の視認性を確保
する。
また表示状態Ｂ２に示すように、テキストデータがＨＭＤ３の仮想画面の上部に寄せて
表示されてもよい。これにより、ＨＭＤ３の装着者の視野中央の視認性を確保する。特に
、ＨＭＤ３の装着者が下向きに手元又は現実物体を見ながら作業をする場合、例えば料理
をする際には、ＨＭＤ３の仮想画面上部にのみ仮想オブジェクトを表示することで、作業
中の視認性が確保される。なお、作業状態によって、仮想オブジェクトを表示する位置を
下部や左右いずれかに設定してもよい。表示位置は装着者が任意で決めてもよいし、ＨＭ
Ｄ３が自動で設定してもよい。ＨＭＤ３が自動で設定する場合、アウトカメラで装着者の
手が動く範囲を検出し、ＨＭＤ３の表示領域内で装着者の手が動く範囲と重複しない箇所
へ表示させる。
表示されてもよい。これにより、ＨＭＤ３の装着者の視野中央の視認性を確保する。特に
、ＨＭＤ３の装着者が下向きに手元又は現実物体を見ながら作業をする場合、例えば料理
をする際には、ＨＭＤ３の仮想画面上部にのみ仮想オブジェクトを表示することで、作業
中の視認性が確保される。なお、作業状態によって、仮想オブジェクトを表示する位置を
下部や左右いずれかに設定してもよい。表示位置は装着者が任意で決めてもよいし、ＨＭ
Ｄ３が自動で設定してもよい。ＨＭＤ３が自動で設定する場合、アウトカメラで装着者の
手が動く範囲を検出し、ＨＭＤ３の表示領域内で装着者の手が動く範囲と重複しない箇所
へ表示させる。
ＨＭＤ３の表示制御部５０１は、表示状態Ｂ１、Ｂ２のそれぞれにおいて、テキストデ
ータの文字数が多く、仮想画面に収まりきらない場合に、仮想画面をスクロールさせる矢
印形状の仮想オブジェクトＭをＨＭＤ３の仮想画面にテキストデータと共に表示する。矢
印選択領域Ｍ１は、仮想オブジェクトＭを内包する閉領域により構成される。矢印選択領
域Ｍ１は、視線が矢印を選択したと判断する領域である。
ータの文字数が多く、仮想画面に収まりきらない場合に、仮想画面をスクロールさせる矢
印形状の仮想オブジェクトＭをＨＭＤ３の仮想画面にテキストデータと共に表示する。矢
印選択領域Ｍ１は、仮想オブジェクトＭを内包する閉領域により構成される。矢印選択領
域Ｍ１は、視線が矢印を選択したと判断する領域である。
視線検出部５０４は、インカメラでＨＭＤ３の装着者の顔を撮像し、その顔画像から視
線方向を検出する。そして、装着者の視線が矢印選択領域Ｍ１に来たことを検出すると、
表示制御部５０１は、矢印の方向にＨＭＤ３の表示可能な領域を遷移させる。ＨＭＤ３は
、画面をスクロールさせたことを情報機器２に通知する。情報機器２は、スクロールされ
た新たに表示されたテキストデータに関連づいた画像が、画像Ａとは異なる画像Ｂである
場合は、画像Ａから画像Ｂへと表示を切り替える。
線方向を検出する。そして、装着者の視線が矢印選択領域Ｍ１に来たことを検出すると、
表示制御部５０１は、矢印の方向にＨＭＤ３の表示可能な領域を遷移させる。ＨＭＤ３は
、画面をスクロールさせたことを情報機器２に通知する。情報機器２は、スクロールされ
た新たに表示されたテキストデータに関連づいた画像が、画像Ａとは異なる画像Ｂである
場合は、画像Ａから画像Ｂへと表示を切り替える。
図９、図１０は、連携表示システムの処理の流れを説明する。Ｓ１００でアプリを起動
する。以下の処理は、情報機器２及びＨＭＤ３の主電源が投入され、情報機器２及びＨＭ
Ｄ３の各々の機器においてＨＭＤ連携アプリが起動し、ペアリングが完了している状態か
ら開始する。
する。以下の処理は、情報機器２及びＨＭＤ３の主電源が投入され、情報機器２及びＨＭ
Ｄ３の各々の機器においてＨＭＤ連携アプリが起動し、ペアリングが完了している状態か
ら開始する。
図９は、情報機器２側でコンテンツを解析する処理を示すフローチャートである。
情報機器２において、テキストデータ及び画像Ａが表示されている状態（表示状態Ａ）
において、ユーザが、情報機器２上でＨＭＤ３での閲覧モードに切り替える操作を行なう
（Ｓ１０１）。
において、ユーザが、情報機器２上でＨＭＤ３での閲覧モードに切り替える操作を行なう
（Ｓ１０１）。
情報機器２の通信制御部４０３は、ＨＭＤが接続されているか確認する（Ｓ１０２）。
情報機器２のコンテンツ解析部４０２は、表示コンテンツからテキストのみを抽出し、
テキストデータを生成する（Ｓ１０３）。
テキストデータを生成する（Ｓ１０３）。
コンテンツ解析部４０２は、通信制御部４０３に生成したテキストデータを出力する。
通信制御部４０３は無線通信器２０６からＨＭＤ３へテキストデータを送信する（Ｓ１０
４）。
通信制御部４０３は無線通信器２０６からＨＭＤ３へテキストデータを送信する（Ｓ１０
４）。
ＨＭＤ３の通信制御部５０３は無線通信器３５４を介してテキストデータを受信し、受
信完了信号を情報機器２へ送信する（Ｓ１０５）。
信完了信号を情報機器２へ送信する（Ｓ１０５）。
ＨＭＤ３の表示制御部５０１は、受信したテキストデータをＨＭＤ表示用にフォント、
サイズ、色などの調整を行い（Ｓ１０６）、投影光学系３２及び表示光学系３３を用いて
ＨＭＤ３でテキストを表示する（Ｓ１０７）。
サイズ、色などの調整を行い（Ｓ１０６）、投影光学系３２及び表示光学系３３を用いて
ＨＭＤ３でテキストを表示する（Ｓ１０７）。
表示制御部５０１は、無線通信器３５４から表示部分のテキストを情報機器２へ送信す
る（Ｓ１０８）。
る（Ｓ１０８）。
コンテンツ解析部４０２は、ＨＭＤ３で表示しているテキストと対応する画像を決定し
、表示制御部４０１が情報機器２のタッチパネル付ディスプレイ２０４で拡大表示する（
Ｓ１０９）。
、表示制御部４０１が情報機器２のタッチパネル付ディスプレイ２０４で拡大表示する（
Ｓ１０９）。
テキストをすべて表示していなければ（Ｓ１１０／ＮＯ）、表示制御部５０１は、ＨＭ
Ｄ３でテキストの表示を継続する（Ｓ１０７）。
Ｄ３でテキストの表示を継続する（Ｓ１０７）。
テキストをすべて表示しているが（Ｓ１１０／ＹＥＳ）、ＨＭＤ３でテキストの表示を
継続する場合は（Ｓ１１１／ＮＯ）、表示制御部５０１は、ＨＭＤ３でテキストの表示を
継続する（Ｓ１０７）。
継続する場合は（Ｓ１１１／ＮＯ）、表示制御部５０１は、ＨＭＤ３でテキストの表示を
継続する（Ｓ１０７）。
ＨＭＤ３でテキストの表示を終了する場合は（Ｓ１１１／ＹＥＳ）、ＨＭＤ３における
表示終了信号を情報機器２に送信する（Ｓ１１２）。
表示終了信号を情報機器２に送信する（Ｓ１１２）。
情報機器２の表示制御部４０１は、表示終了信号を受信すると情報機器２の表示を元に
戻す（Ｓ１１３）。
戻す（Ｓ１１３）。
図１０は、ＨＭＤ３側でコンテンツを解析する処理を示すフローチャートである。図９
と同一のステップには同一の符号を付し、重複説明を省略する。
と同一のステップには同一の符号を付し、重複説明を省略する。
情報機器２とＨＭＤ３とが接続されているかを確認すると（Ｓ１０２）、情報機器２か
らＨＭＤ３へコンテンツデータ（テキストデータ及び画像データ）を送信する（Ｓ２０１
）。
らＨＭＤ３へコンテンツデータ（テキストデータ及び画像データ）を送信する（Ｓ２０１
）。
ＨＭＤ３がコンテンツデータを受信し、通信制御部５０３から受信完了信号を情報機器
２へ送信する（Ｓ２０２）。
２へ送信する（Ｓ２０２）。
ＨＭＤ３のコンテンツ解析部５０２は、受信したコンテンツデータからテキスト部分を
抽出し、テキストデータを生成し（Ｓ２０３）、ＨＭＤ３でテキストデータを表示するた
めの処理（Ｓ１０６）、及び表示を行う（Ｓ１０７）。その後は、図９と同様、情報機器
２で画像の拡大表示を行う。
抽出し、テキストデータを生成し（Ｓ２０３）、ＨＭＤ３でテキストデータを表示するた
めの処理（Ｓ１０６）、及び表示を行う（Ｓ１０７）。その後は、図９と同様、情報機器
２で画像の拡大表示を行う。
上記において、ＨＭＤ３のコンテンツ解析部５０２及び情報機器２のコンテンツ解析部
４０２が、テキストと画像とを選別する方法は、各種ありうる。例えば、Ｗｅｂサイトや
ｅＰＵＢ形式の電子書籍データの場合、ＨＴＭＬ、ＸＭＬ、ＸＨＴＭＬのソースを解析し
、表示するテキストと画像ファイルを切り分けしてもよい。そして表示しているテキスト
（コメントなど、情報機器２上でも表示していないテキストは除外する）のみ抽出してテ
キストデータを生成してもよい。
４０２が、テキストと画像とを選別する方法は、各種ありうる。例えば、Ｗｅｂサイトや
ｅＰＵＢ形式の電子書籍データの場合、ＨＴＭＬ、ＸＭＬ、ＸＨＴＭＬのソースを解析し
、表示するテキストと画像ファイルを切り分けしてもよい。そして表示しているテキスト
（コメントなど、情報機器２上でも表示していないテキストは除外する）のみ抽出してテ
キストデータを生成してもよい。
一方、画像は、画像のタグに画像を格納しているディレクトリ情報があるので、直接該
当アドレスを呼び出して情報機器２上で画像を表示してもよい。
当アドレスを呼び出して情報機器２上で画像を表示してもよい。
また、ＰＤＦデータの場合は、ＯＣＲなどで書き出せる部分をテキストデータとして抽
出してもよい。
出してもよい。
更に、情報機器２で画像だけを表示させる方法として、例えば、情報機器２でサイト閲
覧をしている場合、その画像を表示させる際にＵＲＬ（サーバ上の画像ファイルの格納場
所）を読み込んでいるので、そのアドレスを表示させればよい。
覧をしている場合、その画像を表示させる際にＵＲＬ（サーバ上の画像ファイルの格納場
所）を読み込んでいるので、そのアドレスを表示させればよい。
一方、画像がない場合は、表示させていたコンテンツをそのまま表示しておいてもよい
。この場合は、上記のテキスト及び画像を含むコンテンツを用いた処理の例外ケースとし
て位置づけられる。
。この場合は、上記のテキスト及び画像を含むコンテンツを用いた処理の例外ケースとし
て位置づけられる。
上記実施形態によれば、テキスト及び画像を含むコンテンツを情報機器２とＨＭＤ３と
を連携させて表示させる場合に、ＨＭＤ３にはテキストデータだけを表示し、情報機器２
には画像を拡大して表示できる。これにより、ユーザはＨＭＤ３を装着した状態でテキス
ト情報を視認しつつ、画像はＨＭＤ３に表示されないのでＨＭＤ３を装着中の視認性を向
上させることができる。更に、情報機器２では画像が拡大表示されるので、画像を視認し
たい場合は情報機器２を見ることで実像として拡大画像を視認し、画像の視認性が向上す
る。
を連携させて表示させる場合に、ＨＭＤ３にはテキストデータだけを表示し、情報機器２
には画像を拡大して表示できる。これにより、ユーザはＨＭＤ３を装着した状態でテキス
ト情報を視認しつつ、画像はＨＭＤ３に表示されないのでＨＭＤ３を装着中の視認性を向
上させることができる。更に、情報機器２では画像が拡大表示されるので、画像を視認し
たい場合は情報機器２を見ることで実像として拡大画像を視認し、画像の視認性が向上す
る。
[第２実施形態]
第２実施形態は、第１実施形態とコンテンツが異なる。第２実施形態では、作業の工程
（手順）ごとにテキスト及び画像が関係付けられたコンテンツを連携表示させる点で、第
１実施形態と異なる。
第２実施形態は、第１実施形態とコンテンツが異なる。第２実施形態では、作業の工程
（手順）ごとにテキスト及び画像が関係付けられたコンテンツを連携表示させる点で、第
１実施形態と異なる。
図１１は、第２実施形態で用いるコンテンツ例を示す図である。図１２は、第２実施形
態におけるＨＭＤの表示例を示す図である。図１３は、第１実施形態で用いるコンテンツ
例を示す図である。図１４は、第２実施形態におけるＨＭＤ３の表示例を示す図である。
態におけるＨＭＤの表示例を示す図である。図１３は、第１実施形態で用いるコンテンツ
例を示す図である。図１４は、第２実施形態におけるＨＭＤ３の表示例を示す図である。
図１１のコンテンツ１は、図や写真などの画像と、テキストが１対１で対応しているコ
ンテンツである。例えば、料理のレシピ、裁縫や園芸、ストレッチや筋トレなどのトレー
ニング、着物の着付けや帯の結び方などの作業が伴うコンテンツがある。テキストに関連
付けられた画像は、静止画だけでなく動画が掲載されているコンテンツでもよい。これら
のコンテンツは、Ｉｍａｇｅ １とＩｍａｇｅ １に対応した説明文、たとえば料理のレ
シピでは材料の下ごしらえの写真がＩｍａｇｅ １にあり、テキストは下ごしらえの方法
がＩｍａｇｅ １の右横に並べて記載される。そして次工程のＩｍａｇｅ ２とＩｍａｇ
ｅ ２に対応した説明文がＩｍａｇｅ １及びそれに対応する説明文の下にそれぞれ表示
されている。
ンテンツである。例えば、料理のレシピ、裁縫や園芸、ストレッチや筋トレなどのトレー
ニング、着物の着付けや帯の結び方などの作業が伴うコンテンツがある。テキストに関連
付けられた画像は、静止画だけでなく動画が掲載されているコンテンツでもよい。これら
のコンテンツは、Ｉｍａｇｅ １とＩｍａｇｅ １に対応した説明文、たとえば料理のレ
シピでは材料の下ごしらえの写真がＩｍａｇｅ １にあり、テキストは下ごしらえの方法
がＩｍａｇｅ １の右横に並べて記載される。そして次工程のＩｍａｇｅ ２とＩｍａｇ
ｅ ２に対応した説明文がＩｍａｇｅ １及びそれに対応する説明文の下にそれぞれ表示
されている。
ＨＭＤ３のコンテンツ解析部５０２及び情報機器２のコンテンツ解析部４０２が工程に
沿って表示されたコンテンツである、と認識する基準として、例えば以下の基準の少なく
とも一つ、又は任意の組み合わせが用いられてもよい。
（基準１）テキスト及び画像がフレーム又はテーブルへパラグラフごとに配置されている
。
（基準２）テキストの頭に、順番を示す数字又はアルファベットなどが記載されている。
（基準３）画像のキャプション（サイトの場合、＜ＡＬＴ＞タグでもよい）に、順番を示
す数字又はアルファベットなどが記載されている。
（基準４）タイトルのテキストに、「手順」「レシピ」「やり方」「方法」など、作業手
順を意味する言葉が入っている。
沿って表示されたコンテンツである、と認識する基準として、例えば以下の基準の少なく
とも一つ、又は任意の組み合わせが用いられてもよい。
（基準１）テキスト及び画像がフレーム又はテーブルへパラグラフごとに配置されている
。
（基準２）テキストの頭に、順番を示す数字又はアルファベットなどが記載されている。
（基準３）画像のキャプション（サイトの場合、＜ＡＬＴ＞タグでもよい）に、順番を示
す数字又はアルファベットなどが記載されている。
（基準４）タイトルのテキストに、「手順」「レシピ」「やり方」「方法」など、作業手
順を意味する言葉が入っている。
ＨＭＤ３のコンテンツ解析部５０２及び情報機器２のコンテンツ解析部４０２は、コン
テンツが、フレーム、テーブル、又はパラグラフのいずれか一つ、又は任意の組みあわせ
を用いて工程ごとにわかれていると判断すると、表示状態Ａから表示状態Ｂ１又は表示状
態Ｂ２へ切り替える。その場合、図１２に示すように、ＨＭＤ３には一つのステップに含
まれるコンテンツのうちのテキストのみを抽出して表示する。テキストのＡＲの近くに矢
印選択領域Ｍ１を表示する。そして、視線検出部５０４が、ユーザの視線が矢印選択領域
Ｍ１へ所定の時間滞留したことを検出すると、コンテンツ解析部５０２に検出結果を出力
し、コンテンツ解析部５０２が表示制御部５０１へ次の手順（工程）のコンテンツを表示
するように構成してもよい。図１１の例では「step2. Boil the potatoes.」が、図１２
に示すＨＭＤ３の画面に更新表示される。
テンツが、フレーム、テーブル、又はパラグラフのいずれか一つ、又は任意の組みあわせ
を用いて工程ごとにわかれていると判断すると、表示状態Ａから表示状態Ｂ１又は表示状
態Ｂ２へ切り替える。その場合、図１２に示すように、ＨＭＤ３には一つのステップに含
まれるコンテンツのうちのテキストのみを抽出して表示する。テキストのＡＲの近くに矢
印選択領域Ｍ１を表示する。そして、視線検出部５０４が、ユーザの視線が矢印選択領域
Ｍ１へ所定の時間滞留したことを検出すると、コンテンツ解析部５０２に検出結果を出力
し、コンテンツ解析部５０２が表示制御部５０１へ次の手順（工程）のコンテンツを表示
するように構成してもよい。図１１の例では「step2. Boil the potatoes.」が、図１２
に示すＨＭＤ３の画面に更新表示される。
一方、図１３のコンテンツ２は、ＨＭＤ３のコンテンツ解析部５０２及び情報機器２の
コンテンツ解析部４０２が、工程ごとにわかれていないと判断したコンテンツ例である。
コンテンツ解析部４０２が、工程ごとにわかれていないと判断したコンテンツ例である。
コンテンツ２は、図や写真などの画像と、テキストが１対１で対応しないもの、例えば
ニュース、コラム、ブログ等、”読む”だけのコンテンツである。
ニュース、コラム、ブログ等、”読む”だけのコンテンツである。
コンテンツ２は、記事やコラムなどのタイトル文に続いて、図や写真などの画像（以下
、＜Ｆｉｇ．＞とする）とテキストが１対１で配置されてはおらず、テキストの途中に＜
Ｆｉｇ．＞が挿入される体裁のコンテンツは、ユーザが“読む”ことをメインとするコン
テンツである。この場合、＜Ｆｉｇ．＞が挿入される場所に規則性はなく、コンテンツの
内容にあわせて執筆者が適宜挿入している。＜Ｆｉｇ．＞は１つ挿入される場合もあれば
、複数挿入される場合もある。
、＜Ｆｉｇ．＞とする）とテキストが１対１で配置されてはおらず、テキストの途中に＜
Ｆｉｇ．＞が挿入される体裁のコンテンツは、ユーザが“読む”ことをメインとするコン
テンツである。この場合、＜Ｆｉｇ．＞が挿入される場所に規則性はなく、コンテンツの
内容にあわせて執筆者が適宜挿入している。＜Ｆｉｇ．＞は１つ挿入される場合もあれば
、複数挿入される場合もある。
ＨＭＤ３のコンテンツ解析部５０２及び情報機器２のコンテンツ解析部４０２は、手順
が示されている（工程ごとにわかれている）コンテンツと認識できなかった場合、ニュー
ス記事やコラム、ブログ等の、読むためのコンテンツであると判断する。
が示されている（工程ごとにわかれている）コンテンツと認識できなかった場合、ニュー
ス記事やコラム、ブログ等の、読むためのコンテンツであると判断する。
コンテンツ内に挿入されている図は、ＷＥＢサイト（ニュース、ブログ等）であれば、
画像挿入タグの記述位置に従って表示する。又は、画像が格納されているＵＲＬなどのリ
ンク先を読み込み、表示する。
画像挿入タグの記述位置に従って表示する。又は、画像が格納されているＵＲＬなどのリ
ンク先を読み込み、表示する。
ＷｏｒｄファイルやＰＤＦファイルを表示する場合も上記と同様、工程が認識できれば
工程ごとに、工程が認識できなければ第１実施形態のように、画像とテキストとを分離し
て表示し、テキストが表示された画面のスクロールに合わせて画像を更新表示してもよい
。一方、第２実施形態では、画像を工程に代わるコンテンツの切れ目の判断指標として用
い、例えば「The Maxell Group・・・(hereafter referred to as "We").」までを一つ
のブロック（コンテンツの部分データからなる）と判断し、ＨＭＤ３に表示する。その際
、ＨＭＤ３の表示領域内に一つのブロックが表示しきれない場合は、図１４に示すように
、テキストのＡＲの近くに矢印選択領域Ｍ１を表示する。そして、視線検出部５０４が、
ユーザの視線が矢印選択領域Ｍ１へ所定の時間滞留したことを検出すると、コンテンツ解
析部５０２に検出結果を出力し、コンテンツ解析部５０２が表示制御部５０１へ次のブロ
ックのコンテンツを表示するように構成してもよい。
工程ごとに、工程が認識できなければ第１実施形態のように、画像とテキストとを分離し
て表示し、テキストが表示された画面のスクロールに合わせて画像を更新表示してもよい
。一方、第２実施形態では、画像を工程に代わるコンテンツの切れ目の判断指標として用
い、例えば「The Maxell Group・・・(hereafter referred to as "We").」までを一つ
のブロック（コンテンツの部分データからなる）と判断し、ＨＭＤ３に表示する。その際
、ＨＭＤ３の表示領域内に一つのブロックが表示しきれない場合は、図１４に示すように
、テキストのＡＲの近くに矢印選択領域Ｍ１を表示する。そして、視線検出部５０４が、
ユーザの視線が矢印選択領域Ｍ１へ所定の時間滞留したことを検出すると、コンテンツ解
析部５０２に検出結果を出力し、コンテンツ解析部５０２が表示制御部５０１へ次のブロ
ックのコンテンツを表示するように構成してもよい。
図１３のように、工程に関連付けられていないコンテンツを連携表示させることで、歯
磨きや洗濯物をたたむなどの軽微な作業や、思考作業の伴わない作業のため、ニュースや
コラムなど気楽に読めるコンテンツを見ながらやりたいが、手は動かさなくてはいけない
ので情報機器２が持てない場合や、近くに情報機器２などを置いて画面を見ながらやると
、いちいち作業の手を止めなくてはならない場合に、ＨＭＤ３でテキスト部分（コンテン
ツのメイン部分）を表示することにより、ユーザは作業の手を止めずにコンテンツを読む
ことができるといったメリットがある。
磨きや洗濯物をたたむなどの軽微な作業や、思考作業の伴わない作業のため、ニュースや
コラムなど気楽に読めるコンテンツを見ながらやりたいが、手は動かさなくてはいけない
ので情報機器２が持てない場合や、近くに情報機器２などを置いて画面を見ながらやると
、いちいち作業の手を止めなくてはならない場合に、ＨＭＤ３でテキスト部分（コンテン
ツのメイン部分）を表示することにより、ユーザは作業の手を止めずにコンテンツを読む
ことができるといったメリットがある。
これに対し、工程ごとにコンテンツを表示する第２実施形態を用いると、例えば料理を
する場面では、レシピを見ながら調理したいという要望に対して、該当レシピのページを
開いた状態の書籍を置くスペースがキッチンにない、書籍をいちいち見に行くのがわずら
わしい、スマホやタブレットでレシピを見たいが、指でディスプレイをタップしてスクロ
ールするので非衛生的、情報機器２でレシピを見たいが、一定時間が経過すると画面がロ
ックされる（ディスプレイが非表示になる）ので、見たいときに見られない場合にも、Ｈ
ＭＤ３を装着し、ＨＭＤ３でレシピのテキスト部分を表示することにより、ユーザは場所
を選ばず、また、手を汚さずにレシピを確認できる。
する場面では、レシピを見ながら調理したいという要望に対して、該当レシピのページを
開いた状態の書籍を置くスペースがキッチンにない、書籍をいちいち見に行くのがわずら
わしい、スマホやタブレットでレシピを見たいが、指でディスプレイをタップしてスクロ
ールするので非衛生的、情報機器２でレシピを見たいが、一定時間が経過すると画面がロ
ックされる（ディスプレイが非表示になる）ので、見たいときに見られない場合にも、Ｈ
ＭＤ３を装着し、ＨＭＤ３でレシピのテキスト部分を表示することにより、ユーザは場所
を選ばず、また、手を汚さずにレシピを確認できる。
また、情報機器２で画像を全画面（拡大）表示して、出来上がり状態を確認できる。
更にテキストでの解説も読みたいが、画像を拡大表示させたいときに、情報機器２単体
だとテキストと同時に確認ができない課題があるので、その対策としてもよい。
だとテキストと同時に確認ができない課題があるので、その対策としてもよい。
また、次の手順（工程）やコンテンツや次のブロックのコンテンツを更新表示させる方
法として、矢印選択領域Ｍ１を表示させてユーザの視線が矢印選択領域Ｍ１へ所定の時間
滞留させることにより、例えば作業中のように、両手がふさがっている状況でも、コンテ
ンツを更新表示することができる。
法として、矢印選択領域Ｍ１を表示させてユーザの視線が矢印選択領域Ｍ１へ所定の時間
滞留させることにより、例えば作業中のように、両手がふさがっている状況でも、コンテ
ンツを更新表示することができる。
本発明は上記実施形態に限定されるものではなく、ある実施形態の構成の一部を他の実
施形態に置き換えることが可能である。また、ある実施形態の構成に、他の実施形態の構
成を加えることも可能である。これらは全て本発明の範疇に属するものであり、更に文中
や図中に現れる数値やメッセージ等もあくまで一例であり、異なるものを用いても本発明
の効果を損なうものでない。
施形態に置き換えることが可能である。また、ある実施形態の構成に、他の実施形態の構
成を加えることも可能である。これらは全て本発明の範疇に属するものであり、更に文中
や図中に現れる数値やメッセージ等もあくまで一例であり、異なるものを用いても本発明
の効果を損なうものでない。
また、発明の機能等は、それらの一部又は全部を、例えば集積回路で設計する等により
ハードウェアで実装しても良い。また、マイクロプロセッサユニット、ＣＰＵ等が動作プ
ログラムを解釈して実行することによりソフトウェアで実装しても良い。また、ソフトウ
ェアの実装範囲を限定するものでなく、ハードウェアとソフトウェアを併用しても良い。
ハードウェアで実装しても良い。また、マイクロプロセッサユニット、ＣＰＵ等が動作プ
ログラムを解釈して実行することによりソフトウェアで実装しても良い。また、ソフトウ
ェアの実装範囲を限定するものでなく、ハードウェアとソフトウェアを併用しても良い。
例えば画像（静止画、動画）を表示するのは、ユーザが最初に見ていた情報機器２でも
よいが、テレビやモニタなど情報機器２とは別の表示機器へコンテンツを送信し、表示さ
せてもよい。
よいが、テレビやモニタなど情報機器２とは別の表示機器へコンテンツを送信し、表示さ
せてもよい。
またＨＭＤ３のカメラで装着者の視野を含む前方風景を撮像して生成し、コンテンツ解
析部５０２が前方画像の被写体の状態を解析し、被写体の状態が次の工程に含まれると判
定すると表示制御部５０１に対して通知し、表示制御部５０１が仮想画面に表示されてい
るテキストデータを、次の工程に関連付けられたテキストデータに更新表示してもよい。
析部５０２が前方画像の被写体の状態を解析し、被写体の状態が次の工程に含まれると判
定すると表示制御部５０１に対して通知し、表示制御部５０１が仮想画面に表示されてい
るテキストデータを、次の工程に関連付けられたテキストデータに更新表示してもよい。
１ ：ユーザ
２ａ ：通信信号
２ｇ ：画面
２ｇ１ ：スクロールバー
３ ：ＨＭＤ
３ａ、４ａ ：通信信号
４ ：アクセスポイント
５ ：ネットワーク
６ ：ＷＥＢサーバ
１０ ：連携表示システム
３０ ：カメラ
３１ ：測距デバイス
３２、３２ａ、３２ｂ ：投影光学系
３３ ：表示光学系
３４ ：ノーズパッド
３５ ：プロセッサ
３６ ：スピーカ
３７ ：マイク
３８ａ、３８ｂ、３８ｃ ：フレーム筐体
２０３ ：グラフィックス処理器
２０４ ：タッチパネル付ディスプレイ
２０６、３５４ ：無線通信器
２０７、３５５ ：ＣＰＵ
２０８、３５６ ：ＲＡＭ
２１０、５８０ ：基本動作プログラム
２１１、３５８ ：ＨＭＤ連携アプリ
３５１ ：距離算出器
３５７ ：画像ＲＡＭ
４０１、５０１ ：表示制御部
４０２、５０２ ：コンテンツ解析部
４０３、５０３ ：通信制御部
５０４ ：視線検出部
５８１ ：プログラム
Ｍ ：仮想オブジェクト
Ｍ１ ：矢印選択領域
２ａ ：通信信号
２ｇ ：画面
２ｇ１ ：スクロールバー
３ ：ＨＭＤ
３ａ、４ａ ：通信信号
４ ：アクセスポイント
５ ：ネットワーク
６ ：ＷＥＢサーバ
１０ ：連携表示システム
３０ ：カメラ
３１ ：測距デバイス
３２、３２ａ、３２ｂ ：投影光学系
３３ ：表示光学系
３４ ：ノーズパッド
３５ ：プロセッサ
３６ ：スピーカ
３７ ：マイク
３８ａ、３８ｂ、３８ｃ ：フレーム筐体
２０３ ：グラフィックス処理器
２０４ ：タッチパネル付ディスプレイ
２０６、３５４ ：無線通信器
２０７、３５５ ：ＣＰＵ
２０８、３５６ ：ＲＡＭ
２１０、５８０ ：基本動作プログラム
２１１、３５８ ：ＨＭＤ連携アプリ
３５１ ：距離算出器
３５７ ：画像ＲＡＭ
４０１、５０１ ：表示制御部
４０２、５０２ ：コンテンツ解析部
４０３、５０３ ：通信制御部
５０４ ：視線検出部
５８１ ：プログラム
Ｍ ：仮想オブジェクト
Ｍ１ ：矢印選択領域
Claims (7)
- ヘッドマウントディスプレイであって、
ディスプレイと、
前記ディスプレイに接続され、表示制御を行うプロセッサと、
を備え、
前記プロセッサは、
コンテンツが一連の作業における工程と関連付けられたデータであるか否かを解析するコンテンツ解析部として機能し、
前記コンテンツを前記一連の作業における工程と関連付けられたデータであると解析すると、前記コンテンツに含まれるテキストデータ及び画像データのうち、前記テキストデータのみを前記工程に基づいて前記ディスプレイにおける表示領域のうち、前記ヘッドマウントディスプレイの装着者が下向きに手元又は現実物体を見ながら作業をする場合に前記装着者の視野中央の視認性が確保できる上部領域に表示し、
前記コンテンツを前記一連の作業における工程と関連付けられたデータではないと解析すると、前記コンテンツの画像データを工程に代わるコンテンツの切れ目として扱い、前記コンテンツのテキストデータのうち前記切れ目までを一つのブロックとして前記ディスプレイに表示する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項１に記載のヘッドマウントディスプレイにおいて、
前記装着者の視野を含む前方風景を撮像して前方画像を生成するカメラを更に備え、
前記プロセッサは、前記前方画像の被写体の状態が前記コンテンツにおける次の工程の画像に該当すると判定すると、前記ディスプレイに表示されているテキストデータを、次の工程に関連付けられたテキストデータに更新表示する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項２に記載のヘッドマウントディスプレイにおいて、
前記プロセッサは、前記判定した工程に関連付けられたテキストデータの文字数が、前記ディスプレイの表示領域内に収まらない場合は、表示できていないテキストデータを表示させる仮想オブジェクトを前記ディスプレイに表示する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項１から請求項３のいずれか１項に記載のヘッドマウントディスプレイであって、
情報機器と無線通信接続を行う無線通信器を更に備え、
前記コンテンツは、前記無線通信器により前記情報機器から受信する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項１から請求項３のいずれか１項に記載のヘッドマウントディスプレイであって、
情報機器と無線通信接続を行う無線通信器を更に備え、
前記ディスプレイに表示した部分のテキストデータを前記無線通信器により前記情報機器に送信する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項１に記載のヘッドマウントディスプレイにおいて、
前記装着者の視線を検出する視線検出器を更に備え、
前記プロセッサは、前記ディスプレイの表示領域に次の工程のコンテンツを表示させる
ための仮想現実オブジェクトを表示し、
前記視線検出器が検出した前記装着者の視線が前記次の工程のコンテンツを表示させる
ための仮想現実オブジェクトを含む予め定められた閉領域に所定の時間滞留したことを検
出すると、表示中の工程を基準としてその次の工程のコンテンツに表示を更新する、
ことを特徴とするヘッドマウントディスプレイ。 - 請求項１に記載のヘッドマウントディスプレイにおいて、
前記装着者の視線を検出する視線検出器を更に備え、
前記プロセッサは、前記ディスプレイにおける表示領域に前記一つのブロックが表示しきれない場合、前記表示領域に選択領域を表示し、
前記視線検出器により前記装着者の視線が前記選択領域に所定の時間滞留したことを検出すると、前記プロセッサは、前記一つのブロックの次のブロックのテキストデータを表示する、
ことを特徴とするヘッドマウントディスプレイ。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024094992A JP7777190B2 (ja) | 2019-09-30 | 2024-06-12 | ヘッドマウントディスプレイ |
| JP2025195054A JP2026015502A (ja) | 2019-09-30 | 2025-11-14 | ヘッドマウントディスプレイ |
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2019/038623 WO2021064823A1 (ja) | 2019-09-30 | 2019-09-30 | 連携表示システム及びヘッドマウントディスプレイ |
| JP2021550776A JP7331120B2 (ja) | 2019-09-30 | 2019-09-30 | 連携表示システム |
| JP2023096977A JP7505088B2 (ja) | 2019-09-30 | 2023-06-13 | 連携表示システム |
| JP2024094992A JP7777190B2 (ja) | 2019-09-30 | 2024-06-12 | ヘッドマウントディスプレイ |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023096977A Division JP7505088B2 (ja) | 2019-09-30 | 2023-06-13 | 連携表示システム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2025195054A Division JP2026015502A (ja) | 2019-09-30 | 2025-11-14 | ヘッドマウントディスプレイ |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024114720A JP2024114720A (ja) | 2024-08-23 |
| JP7777190B2 true JP7777190B2 (ja) | 2025-11-27 |
Family
ID=75337816
Family Applications (4)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021550776A Active JP7331120B2 (ja) | 2019-09-30 | 2019-09-30 | 連携表示システム |
| JP2023096977A Active JP7505088B2 (ja) | 2019-09-30 | 2023-06-13 | 連携表示システム |
| JP2024094992A Active JP7777190B2 (ja) | 2019-09-30 | 2024-06-12 | ヘッドマウントディスプレイ |
| JP2025195054A Pending JP2026015502A (ja) | 2019-09-30 | 2025-11-14 | ヘッドマウントディスプレイ |
Family Applications Before (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021550776A Active JP7331120B2 (ja) | 2019-09-30 | 2019-09-30 | 連携表示システム |
| JP2023096977A Active JP7505088B2 (ja) | 2019-09-30 | 2023-06-13 | 連携表示システム |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2025195054A Pending JP2026015502A (ja) | 2019-09-30 | 2025-11-14 | ヘッドマウントディスプレイ |
Country Status (4)
| Country | Link |
|---|---|
| US (3) | US11852811B2 (ja) |
| JP (4) | JP7331120B2 (ja) |
| CN (1) | CN114503070A (ja) |
| WO (1) | WO2021064823A1 (ja) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116391170A (zh) * | 2020-10-28 | 2023-07-04 | 三星电子株式会社 | 电子装置、显示装置及其控制方法 |
| US12277359B2 (en) | 2021-07-01 | 2025-04-15 | Maxell, Ltd. | Information processing apparatus, photographed image transfer and display system, and photographed image transfer and display method |
| CN119604927A (zh) * | 2022-08-09 | 2025-03-11 | 麦克赛尔株式会社 | 协同显示系统以及协同显示方法 |
| WO2025253922A1 (ja) * | 2024-06-06 | 2025-12-11 | ソニーグループ株式会社 | 表示制御装置、表示制御方法、およびプログラム |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011118683A (ja) | 2009-12-03 | 2011-06-16 | Toshiba Tec Corp | 調理補助端末及びプログラム |
| WO2013190766A1 (ja) | 2012-06-18 | 2013-12-27 | ソニー株式会社 | 画像表示装置、画像表示プログラム及び画像表示方法 |
| US20150095063A1 (en) | 2013-09-30 | 2015-04-02 | John Sherman | Facilitating user input via arm-mounted peripheral device interfacing with head-mounted display device |
| US20150153571A1 (en) | 2013-12-01 | 2015-06-04 | Apx Labs, Llc | Systems and methods for providing task-based instructions |
| JP2016212599A (ja) | 2015-05-07 | 2016-12-15 | パナソニックＩｐマネジメント株式会社 | 表示制御方法、ヘッドマウントディスプレイ、およびプログラム |
| JP2019016322A (ja) | 2017-07-11 | 2019-01-31 | リンナイ株式会社 | 調理支援装置 |
| JP2019079469A (ja) | 2017-10-27 | 2019-05-23 | オリンパス株式会社 | 作業支援装置、作業支援方法、作業支援プログラム及び頭部搭載型表示装置 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4229997B2 (ja) | 1997-10-07 | 2009-02-25 | 雅信 鯨田 | 一部又は人物連動型の複数連携型表示システム |
| JP2002079711A (ja) * | 2000-09-06 | 2002-03-19 | Ishida Co Ltd | 商品情報印刷システムおよび商品情報印刷方法 |
| JP2006262034A (ja) * | 2005-03-17 | 2006-09-28 | Hitachi Ltd | 放送受信端末および情報処理装置 |
| JP5681850B2 (ja) | 2010-03-09 | 2015-03-11 | レノボ・イノベーションズ・リミテッド（香港） | ヘッドマウントディスプレイを外部表示装置として使用する携帯端末 |
| JP5983053B2 (ja) * | 2012-06-01 | 2016-08-31 | コニカミノルタ株式会社 | ガイダンス表示システム、ガイダンス表示装置、ガイダンス表示方法、およびガイダンス表示プログラム |
| JP6107276B2 (ja) | 2013-03-22 | 2017-04-05 | セイコーエプソン株式会社 | 頭部装着型表示装置および頭部装着型表示装置の制御方法 |
| KR20150126193A (ko) * | 2014-05-02 | 2015-11-11 | 삼성전자주식회사 | 복수의 디스플레이를 이용한 컨텐츠 출력 방법 및 그 장치 |
| US20160217108A1 (en) * | 2015-01-23 | 2016-07-28 | Kobo Incorporated | Bifurcated presentation of e-content on an e-reading device |
| JP2019082982A (ja) * | 2018-04-12 | 2019-05-30 | クックパッド株式会社 | 調理支援装置、調理情報生成装置、調理支援システム、調理支援方法、及びプログラム |
| JP6568269B2 (ja) * | 2018-07-19 | 2019-08-28 | 京セラ株式会社 | 電子機器、プログラムおよび制御方法 |
-
2019
- 2019-09-30 WO PCT/JP2019/038623 patent/WO2021064823A1/ja not_active Ceased
- 2019-09-30 US US17/623,640 patent/US11852811B2/en active Active
- 2019-09-30 CN CN201980100599.7A patent/CN114503070A/zh active Pending
- 2019-09-30 JP JP2021550776A patent/JP7331120B2/ja active Active
-
2023
- 2023-06-13 JP JP2023096977A patent/JP7505088B2/ja active Active
- 2023-11-14 US US18/389,256 patent/US12235444B2/en active Active
-
2024
- 2024-06-12 JP JP2024094992A patent/JP7777190B2/ja active Active
-
2025
- 2025-01-22 US US19/033,646 patent/US20250164787A1/en active Pending
- 2025-11-14 JP JP2025195054A patent/JP2026015502A/ja active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011118683A (ja) | 2009-12-03 | 2011-06-16 | Toshiba Tec Corp | 調理補助端末及びプログラム |
| WO2013190766A1 (ja) | 2012-06-18 | 2013-12-27 | ソニー株式会社 | 画像表示装置、画像表示プログラム及び画像表示方法 |
| US20150095063A1 (en) | 2013-09-30 | 2015-04-02 | John Sherman | Facilitating user input via arm-mounted peripheral device interfacing with head-mounted display device |
| US20150153571A1 (en) | 2013-12-01 | 2015-06-04 | Apx Labs, Llc | Systems and methods for providing task-based instructions |
| JP2016212599A (ja) | 2015-05-07 | 2016-12-15 | パナソニックＩｐマネジメント株式会社 | 表示制御方法、ヘッドマウントディスプレイ、およびプログラム |
| JP2019016322A (ja) | 2017-07-11 | 2019-01-31 | リンナイ株式会社 | 調理支援装置 |
| JP2019079469A (ja) | 2017-10-27 | 2019-05-23 | オリンパス株式会社 | 作業支援装置、作業支援方法、作業支援プログラム及び頭部搭載型表示装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7331120B2 (ja) | 2023-08-22 |
| US20250164787A1 (en) | 2025-05-22 |
| US20220252880A1 (en) | 2022-08-11 |
| JP2026015502A (ja) | 2026-01-29 |
| US12235444B2 (en) | 2025-02-25 |
| US11852811B2 (en) | 2023-12-26 |
| JPWO2021064823A1 (ja) | 2021-04-08 |
| JP7505088B2 (ja) | 2024-06-24 |
| US20240077722A1 (en) | 2024-03-07 |
| JP2023147291A (ja) | 2023-10-12 |
| JP2024114720A (ja) | 2024-08-23 |
| WO2021064823A1 (ja) | 2021-04-08 |
| CN114503070A (zh) | 2022-05-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7777190B2 (ja) | ヘッドマウントディスプレイ | |
| US12449968B2 (en) | Method and system for displaying virtual prop in real environment image, and storage medium | |
| CN104662492B (zh) | 用于修改自动滚动的内容的滚动的信息处理装置、显示控制方法及程序 | |
| JP6131540B2 (ja) | タブレット端末、操作受付方法および操作受付プログラム | |
| US9152253B2 (en) | Remote control method, remote control apparatus, and display apparatus | |
| EP2972559B1 (en) | Methods and apparatus for displaying images on a head mounted display | |
| CN107479691B (zh) | 一种交互方法及其智能眼镜和存储装置 | |
| US20160370970A1 (en) | Three-dimensional user interface for head-mountable display | |
| JP2019040333A (ja) | 情報処理装置、情報処理方法、コンピュータプログラム及び表示制御用の時系列データ | |
| US20240414286A1 (en) | Information device and camera image sharing system | |
| JP2013168910A (ja) | ヘッドマウントディスプレイ、ヘッドマウントディスプレイ制御プログラム及びヘッドマウントディスプレイの制御方法 | |
| CN107924234B (zh) | 透视眼镜的辅助物品选择 | |
| CN111970456A (zh) | 拍摄控制方法、装置、设备及存储介质 | |
| JP2024512200A (ja) | 視線に基づくメディア表示装置の制御 | |
| CN116540905A (zh) | 一种虚拟现实设备及焦点操作方法 | |
| JP7642872B2 (ja) | ヘッドマウントディスプレイ装置 | |
| US9693016B2 (en) | Data processing method, data processing apparatus and electronic device | |
| CN115942022B (zh) | 信息预览方法、相关设备及存储介质 | |
| JP2014106769A (ja) | 電子機器及び制御プログラム並びに表示制御方法 | |
| JP5716057B2 (ja) | 表示装置、表示方法、プログラム | |
| CN113835810A (zh) | 信息显示方法和电子设备 | |
| JP6586137B2 (ja) | 情報処理システム、サーバ装置、及びプログラム | |
| WO2025259436A1 (en) | Methods of facilitating multiview display of content items in a three-dimensional environment | |
| WO2024034011A1 (ja) | 連係表示システム及び連係表示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240612 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250520 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20250630 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250910 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250924 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20251015 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251114 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7777190 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |