JP2019507902A - 深度平面間の低減された切り替えを伴う多深度平面ディスプレイシステム - Google Patents

Abstract

多深度平面ディスプレイシステムの深度平面間の切り替え低減のための方法およびシステムが開示される。ディスプレイシステムは、異なる波面発散を用いて仮想コンテンツを複数の深度平面上に提供するように構成される拡張現実ディスプレイシステムであり得る。システムは、ユーザの眼の各々の視線に基づいて、凝視点を監視し、各凝視点は、ユーザの視野内の３次元場所である。ユーザに提示されるべき仮想オブジェクトの場所情報が得られ、各仮想オブジェクトは、深度平面に関連付けられる。いくつかの実施形態では、仮想オブジェクトが提示されるべき深度平面は、ユーザの眼の凝視点に基づいて修正される。ユーザが、２つの異なる深度平面上の仮想オブジェクト間でその凝視点を切り替えている場合、ディスプレイシステムは、両オブジェクトが同一深度平面上に設置されるように、オブジェクトのうちの１つの提示を修正するように構成され得る。

Description

（関連出願の引用）
本願は、米国特許法§１１９（ｅ）に基づき、米国仮出願第６２／２９４，１４７号（２０１６年２月１１日出願、名称「ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ ＵＴＩＬＩＺＩＮＧ ＶＩＥＷＥＲ ＲＥＦＬＥＣＴＩＯＮＳ」）、米国仮出願第６２／３６６，５３３号（２０１６年７月２５日出願、名称「ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ ＵＴＩＬＩＺＩＮＧ ＲＥＦＬＥＣＴＩＯＮＳ」）、米国仮出願第６２／４４０，３３６号（２０１６年１２月２９日出願、名称「ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ ＵＴＩＬＩＺＩＮＧ ＲＥＦＬＥＣＴＩＯＮＳ」）、米国仮出願第６２／４４５，６３０号（２０１７年１月１２日出願、名称「ＡＵＧＭＥＮＴＥＤ ＲＥＡＬＩＴＹ ＳＹＳＴＥＭＳ ＡＮＤ ＭＥＴＨＯＤＳ ＵＴＩＬＩＺＩＮＧ ＲＥＦＬＥＣＴＩＯＮＳ」）、米国仮出願第６２／３６６，５９９号（２０１６年７月２５日出願、名称「ＩＭＡＧＩＮＧ ＭＯＤＩＦＩＣＡＴＩＯＮ，ＤＩＳＰＬＡＹ ＡＮＤ ＶＩＳＵＡＬＩＺＡＴＩＯＮ ＵＳＩＮＧ ＡＵＧＭＥＮＴＥＤ ＡＮＤ ＶＩＲＴＵＡＬ ＲＥＡＬＩＴＹ ＥＹＥＷＥＡＲ」）、米国仮出願第６２／３９６，０７１号（２０１６年７月１６日出願、名称「ＩＭＡＧＩＮＧ ＭＯＤＩＦＩＣＡＴＩＯＮ，ＤＩＳＰＬＡＹ ＡＮＤ ＶＩＳＵＡＬＩＺＡＴＩＯＮ ＵＳＩＮＧ ＡＵＧＭＥＮＴＥＤ ＡＮＤ ＶＩＲＴＵＡＬ ＲＥＡＬＩＴＹ ＥＹＥＷＥＡＲ」）、および米国仮出願第６２／４４０，３３２号（２０１６年１２月２９日出願、名称「ＩＭＡＧＩＮＧ ＭＯＤＩＦＩＣＡＴＩＯＮ，ＤＩＳＰＬＡＹ ＡＮＤ ＶＩＳＵＡＬＩＺＡＴＩＯＮ ＵＳＩＮＧ ＡＵＧＭＥＮＴＥＤ ＡＮＤ ＶＩＲＴＵＡＬ ＲＥＡＬＩＴＹ ＥＹＥＷＥＡＲ」）の優先権に対する利益を主張し、上記出願の各々は、あらゆる目的のために参照により本明細書に引用される。

加えて、本願は、以下の特許出願の各々の全体を参照により引用する：米国特許出願第１４／５５５，５８５号（２０１４年１１月２７日出願）、米国特許出願第１４／６９０，４０１号（２０１５年４月１８日出願）、米国特許出願第１４／２１２，９６１号（２０１４年３月１４日出願）、および米国特許出願第１４／３３１，２１８号（２０１４年７月１４日出願）。

（分野）
本開示は、拡張現実結像および可視化システムを含むディスプレイシステムに関する。

現代のコンピューティングおよびディスプレイ技術は、いわゆる「仮想現実」または「拡張現実」体験のためのシステムの開発を促進しており、デジタル的に再現された画像またはその一部が、現実であるように見える、もしくはそのように知覚され得る様式でユーザに提示される。仮想現実または「ＶＲ」シナリオは、典型的には、他の実際の実世界の視覚的入力に対する透明性を伴わずに、デジタルまたは仮想画像情報の提示を伴い、拡張現実または「ＡＲ」シナリオは、典型的には、ユーザの周囲の実際の世界の可視化に対する拡張としてのデジタルまたは仮想画像情報の提示を伴う。複合現実または「ＭＲ」シナリオは、一種のＡＲシナリオであり、典型的には、自然世界の中に統合され、それに応答する、仮想オブジェクトを伴う。例えば、ＭＲシナリオは、実世界内のオブジェクトによってブロックされて見えるか、または別様にそれと相互作用するように知覚されるＡＲ画像コンテンツを含み得る。

図１を参照すると、拡張現実場面１０が、描写されている。ＡＲ技術のユーザは、背景における人々、木々、建物を特徴とする実世界公園状設定２０と、コンクリートプラットフォーム３０とを見る。ユーザは、実世界プラットフォーム３０上に立っているロボット像４０、および、マルハナバチの擬人化のように見える飛んでいる漫画のようなアバタキャラクタ５０等の「仮想コンテンツ」も「見ている」と知覚する。これらの要素５０、４０は、実世界には存在しないという点で、「仮想」である。ヒトの視知覚系は、複雑であり、他の仮想または実世界画像要素間における仮想画像要素の快適で、自然のような感覚で、かつ豊かな提示を促進するＡＲ技術の生成は、困難である。

本明細書に開示されるシステムおよび方法は、ＡＲまたはＶＲ技術に関連する種々の課題に対処する。

いくつかの非限定的実施形態は、１つ以上のプロセッサと、１つ以上のプロセッサによって実行されると、１つ以上のプロセッサに動作を行わせる命令を記憶している１つ以上のコンピュータ記憶媒体とを備えているシステムを含む。動作は、ユーザの眼の凝視点を決定することであって、凝視点は、ユーザの視野内の３次元場所である、ことと、ユーザに提示すべき第１の仮想オブジェクトに関連付けられた場所情報を得ることであって、第１の仮想オブジェクトは、関連付けられたユーザからの深度を有する、ことと、第１の仮想オブジェクトの１つ以上の深度キューを調節し、第１の仮想オブジェクトの深度キューと凝視点のための深度キューとの間の差異を低減させることと、ディスプレイデバイスを介して、調節された１つ以上の深度キューを用いて、第１の仮想オブジェクトのユーザへの提示を生じさせることとを含む。

いくつかの他の実施形態では、ディスプレイシステムが、提供される。ディスプレイシステムは、仮想オブジェクトをユーザに提示するように構成されているディスプレイデバイスであって、各仮想オブジェクトは、複数の深度平面の１つ以上の深度平面上にある、ディスプレイデバイスと、１つ以上のプロセッサと、ディスプレイシステムによって実行されると、ディスプレイシステムに、動作を行わせる、命令を記憶している１つ以上のコンピュータ記憶媒体とを備えている。動作は、ユーザの眼移動に関連付けられた情報を監視することと、監視される情報に基づいて、ユーザの眼の凝視点を決定することであって、各凝視点は、経時的に追跡されたユーザの眼によって凝視されている３次元場所を示す、ことと、決定された凝視点に基づいて、少なくとも１つの仮想オブジェクトが、決定された凝視点が閾値メトリックを上回って含まれる深度平面領域に対応する同一深度平面上に表示されるように、少なくとも１つの仮想オブジェクトを調節することとを含む。決定された凝視点は、少なくとも１つの仮想オブジェクトを調節する前に、閾値メトリックを上回って深度平面領域内にあるように決定される。

方法の実施形態が、説明される。方法は、１つ以上のプロセッサを備えているシステムによって行われる。方法は、ユーザの眼の凝視点を決定することであって、凝視点は、ユーザの視野内の３次元場所である、ことと、ユーザに提示すべき第１の仮想オブジェクトに関連付けられた場所情報を得ることであって、第１の仮想オブジェクトは、関連付けられたユーザからの深度を有する、ことと、第１の仮想オブジェクトの１つ以上の深度キューを調節し、第１の仮想オブジェクトの深度キューと凝視点のための深度キューとの間の差異を低減させることと、ディスプレイデバイスを介して、調節された１つ以上の深度キューを用いて、第１の仮想オブジェクトのユーザへの提示を生じさせることとを含む。

図１は、ＡＲデバイスを通した拡張現実（ＡＲ）のユーザのビューを図示する。

図２は、ウェアラブルディスプレイシステムの例を図示する。

図３は、ユーザのための３次元画像をシミュレートするための従来のディスプレイシステムを図示する。

図４は、複数の深度平面を使用して３次元画像をシミュレートするためのアプローチの側面を図示する。

図５Ａ−５Ｃは、曲率半径と焦点半径との間の関係を図示する。

図６は、画像情報をユーザに出力するための導波管スタックの例を図示する。

図７は、導波管によって出力された出射ビームの例を図示する。

図８は、スタックされた導波管アセンブリの例を図示し、各深度平面は、複数の異なる原色を使用して形成される画像を含む。

図９Ａは、それぞれ、内部結合光学要素を含む、スタックされた導波管の組の断面側面図の例を図示する。

図９Ｂは、図９Ａの複数のスタックされた導波管の例の斜視図を図示する。

図９Ｃは、図９Ａおよび９Ｂの複数のスタックされた導波管の例の見下げ平面図を図示する。

図１０Ａは、ディスプレイシステムによって提示されるコンテンツを視認するユーザの表現の例を図示する。

図１０Ｂは、コンテンツを視認するユーザの表現の別の例を図示する。

図１１は、ディスプレイシステムのユーザの視野の表現を図示する。

図１２は、仮想オブジェクトに関連付けられた知覚される深度平面を調節するための例示的プロセスのフローチャートを図示する。

図１３は、仮想オブジェクトに関連付けられた知覚される深度平面を調節するための別の例示的プロセスのフローチャートを図示する。

図１４は、仮想オブジェクトに関連付けられた遠近調節キューおよび両眼キューを調節するための例示的プロセスのフローチャートを図示する。

拡張現実ディスプレイシステムは、仮想コンテンツをユーザ（または視認者）に提示し得、仮想コンテンツは、ユーザの視野内の空間内の３次元場所に位置するように見える。仮想コンテンツは、仮想オブジェクトとも称され得、それは、ディスプレイシステムによってユーザに提示され得る画像、グラフィック、および他の視覚的コンテンツを含み得る。ディスプレイシステムは、ユーザの視点から、各仮想オブジェクトが３次元場所に関連付けられ得るように、異なる仮想オブジェクトをユーザから異なる深度または距離において提示し得る。３次元場所は、水平軸上の位置、垂直軸上の位置、およびユーザから離れる深度軸上の位置に対応し得る。ユーザが、近傍の仮想オブジェクトの視認から、例えば、より遠い仮想オブジェクトの視認に、またはその逆に切り替えるとき、両眼離反運動および／または遠近調節における変化が、生じ得る。以下により詳細に説明されるように、両眼離反運動は、ユーザの眼の方向性移動に関し、遠近調節は、眼の水晶体および瞳孔（光を眼の網膜上に集中させる役割を果たし得る）における変化に関する。

いくつかの実施形態では、ユーザが異なる仮想オブジェクトまたは仮想オブジェクトと実オブジェクトとの組み合わせを視認するとき、ユーザの視覚系が遠近調節を変化させ、および／または両眼離反運動を変化させる範囲を限定するように仮想オブジェクトの提示を調節するための技法が、提供される。例えば、仮想オブジェクトの提示は、仮想オブジェクトのための１つ以上の深度キューと他の仮想オブジェクトまたは実オブジェクトのための対応する深度キューとの間の差異が低減させられるように調節され得る。例えば、仮想オブジェクトのための１つ以上の深度キューは、ユーザが見ている他の仮想オブジェクトまたは実オブジェクトのための対応する深度キューに類似するように調節され得る。深度キューは、遠近調節キューおよび／または両眼キューを含み得る。説明されるであろうように、仮想オブジェクトの遠近調節キューを調節することは、ディスプレイシステムによってユーザに出力されている光の波面発散を調節することを含み得、両眼キューを調節することは、ユーザの各眼に提供されている仮想オブジェクトのビューを調節する（例えば、両眼視差を調節する）ことを含み得る。仮想オブジェクトのビューを調節することは、仮想オブジェクトの両眼分離提示を調節することを含む。いくつかの実施形態では、ユーザは、異なる深度で提示されている２つの仮想オブジェクトの視認間で切り替え、切り替え後、各仮想オブジェクトのためにその遠近調節応答を変化させる必要なく、仮想オブジェクトの各々を快適に視認し得る。

本明細書に説明される技法を利用して、仮想コンテンツの知覚される提示品質は、改良され得る。例えば、異なる深度平面間でコンテンツを切り替えることによって生じるフリッカ等の知覚可能視覚的アーチファクトは、特に、ある拡張現実ディスプレイシステム、例えば、本明細書でさらに説明されるような可変焦点ディスプレイシステムが利用されるとき、低減させられ得る。別の例として、仮想オブジェクトと別の仮想または実オブジェクトとの間の凝視の高速切り替えは、ユーザがそれらのオブジェクト間で遠近調節を変化させる必要性を低減させることによって促進され得る。例えば、遠近調節における変化は、ユーザの眼が焦点を合わせるので、ある知覚可能時間量を要し得、この知覚可能時間量は、例えば、ユーザが２つのオブジェクト間でその注意を繰り返し切り替えるので、情報を吸収するユーザの能力を減速させることによって、ユーザ体験を損なわせ得る。この減速は、例えば、迅速ユーザ反応が競合プレーの基礎であるゲーム等の状況では、望ましくないこともある。他の状況の例は、マルチタスクおよび／または高レベルの注意を要求する高速環境、例えば、手術室を含む。

可変焦点ディスプレイシステムに関して、そのようなシステムは、仮想コンテンツを個別的な深度平面に提示し得、全ての仮想コンテンツは、ユーザに提示される各フレームに対して同一深度平面に提示される（例えば、一度に１つのみの深度平面が活性であるか、または画像情報を出力する）ことを理解されたい。説明されるであろうように、可変焦点ディスプレイシステムは、ユーザが凝視している３次元凝視点を決定し得、凝視点に基づいて、全ての仮想コンテンツを提示すべき深度平面を選択し得る。凝視点を決定する例として、ディスプレイシステムは、ユーザの眼の向きおよび／または形状を監視し、眼の各々の決定された視線が交差する３次元場所を決定し得る。ディスプレイシステムは、ユーザが特定の３次元場所に提示されている特定の仮想オブジェクト視認していることを決定し得、ディスプレイシステムは、全ての仮想コンテンツをその３次元場所に対応する深度平面に提示し得る。このように、ディスプレイシステムは、特定の仮想オブジェクト、随意に、他の仮想コンテンツが、ユーザに焦点が合うことを確実にし得る。仮想コンテンツを次に選択された深度平面に提示するとき、知覚可能フリッカは、例として、ディスプレイシステムが仮想コンテンツを次に選択された深度平面に提示し、再び、前の深度平面に戻るように切り替えるとき導入され得る。例えば、ユーザが、次の凝視点を凝視するようにその眼を修正すると、ディスプレイシステムは、次の深度平面を選択し、仮想コンテンツを次の提示されるフレームにおいて提示し得る。凝視点を決定することにおける誤差、および／または、深度平面間の界面近傍の凝視点は、深度平面間を行ったり来たりする望ましくない切り替え、および／または、ランダムな切り替えを生じさせ得る。図１１に関して以下に説明されるであろうように、各深度平面は、ユーザからの特定の範囲の深度を包含し得、それによって、深度平面は、ユーザの眼が凝視している３次元場所に従って選択され得る。

仮想コンテンツを個別的な深度平面に提示するために、ディスプレイシステムは、異なる深度平面に対応する異なる波面発散を伴う光を出力するように構成される１つ以上の導波管を含み得る。異なる波面発散を使用して、異なる遠近調節キューが、ユーザに提供され得、ディスプレイシステムは、第１の仮想オブジェクトがユーザの視野内の第１の深度に位置しているように見えるようにする一方、第２の仮想オブジェクトがユーザの視野内の第２の深度に位置しているように見えるようにし得る（異なる波面発散を有する光を使用して）。加えて、ディスプレイシステムは、異なる画像をユーザの各眼に提示し得る。例えば、ディスプレイシステムは、仮想オブジェクトの若干異なるビューを各眼に提示する両眼ディスプレイであり得、各ビューは、所与の深度平面における各それぞれの眼による仮想オブジェクトのビューに対応する。すなわち、ディスプレイシステムは、深度が、部分的に、両眼視差を通して表され得るように、仮想オブジェクトの両眼分離提示を眼に提供し得る。したがって、仮想オブジェクトは、出力波面発散と各眼に提供される異なる仮想オブジェクトのビューとに基づいて、異なる深度に存在するようにユーザによって知覚され得る。

可変焦点ディスプレイシステムは、上で説明されるように、したがって、各フレームに対して、特定の波面発散（特定の深度平面に対応する）を使用して、全ての仮想コンテンツを提示し得る。ユーザが、その凝視点を修正すると、異なる波面発散を有する光が、選択され、他の仮想コンテンツを他の深度平面上に提示し得る。異なる深度平面上の２つのオブジェクト間で凝視点を切り替えているユーザは、深度平面間で高速かつ反復切り替えを生じさせ得、それは、異なる深度平面が異なる時間に活性になるので、フリッカとしてユーザによって知覚され得ることを理解されたい。加えて、本明細書に記載されるように、その眼の遠近調節が変化するので、ユーザによるコンテンツの視認に一時的遅延が存在し得る。

本明細書に説明される技法は、有利には、深度平面切り替え、および／または、ユーザの遠近調節におけるディスプレイシステム開始変化によって生じるフリッカ、および／または、コンテンツを視認することにおける遅延の発生を低減させるために利用され得る。ディスプレイシステムが種々の仮想オブジェクトが３次元空間内に設置され得る場所を示すマップまたはデータベースへのアクセスを有し得ることを理解されたい。いくつかの実施形態では、ディスプレイシステムは、ユーザが、第１の仮想オブジェクトを視認することと、第１の仮想オブジェクトと異なる深度平面に位置する（例えば、より遠いまたはより近い）（１）第２の仮想オブジェクトまたは（２）実世界オブジェクトのいずれかを視認することとの間で切り替えていることを決定し得る。そして、ディスプレイシステムは、オブジェクトが同一深度平面に提示されるようにし得る。例えば、ディスプレイシステムは、ユーザが第１の仮想オブジェクトまたは第２の仮想オブジェクトを凝視しているかどうかにかかわらず、同一または類似波面発散を用いて、第１の仮想オブジェクトおよび第２の仮想オブジェクトが出力されるようにし得る（例えば、同一導波管を介して提示される）。加えて、ディスプレイシステムは、実世界オブジェクトの深度に関連付けられた波面発散を用いて、第１の仮想オブジェクトが出力されるようにし得る。いくつかの他の実施形態では、ディスプレイシステムは、仮想コンテンツを出力する前に、まず、ユーザが凝視している深度平面を決定し、ディスプレイシステムのマップによって示されている深度平面を修正し得る。

いくつかの実施形態では、ディスプレイシステムは、各眼に提供される仮想オブジェクトのビューを保持しながら（例えば、調節しない）、仮想オブジェクトが、別の仮想オブジェクトまたは実オブジェクトと同一波面発散を用いて（同一深度平面に対応する）提示されるように、出力波面発散を調節することによって、ユーザの遠近調節応答における切り替えを低減させ得る。理論によって限定されるわけではないが、仮想オブジェクトのビューは、修正されないので、３次元空間内で知覚される場所は、両眼キュー（例えば、両眼視差）に基づいて保存され得る。その結果、知覚される３次元場所は、遠近調節における変化を回避しながら、維持され得る。しかしながら、説明されるであろうように、各眼に提示される仮想オブジェクトの同一ビューを保持しながら、仮想オブジェクトの波面発散を修正することは、修正される波面発散に関連付けられた知覚される深度と、両眼視差に関連付けられた知覚される深度との間の不整合に起因して、負の生理学的応答（例えば、頭痛、眼精疲労、疲労等）をもたらし得る。特定の波面発散に関連付けられた知覚される深度（例えば、ジオプタ単位）と両眼視差に関連付けられた知覚される深度（例えば、ジオプタ単位）とが、ディスプレイシステムによって決定され得、これらの２つの値間の不整合が、遠近調節・両眼離反運動不整合を決定するために計算され得る。いくつかの実施形態では、ディスプレイシステムは、不整合が閾値（例えば、０．３３ジオプタ）を上回る場合、追加のアクションを行い得る（出力波面発散の修正に加え）。例として、ディスプレイシステムは、波面発散に関連付けられた深度平面に対応するように、両眼視差を調節し得、例えば、各眼に提供される仮想オブジェクトのビューを修正し得る。

随意に、ディスプレイシステムは、仮想オブジェクトの波面発散を修正せずに、仮想オブジェクトの両眼視差を調節し得る。すなわち、ユーザが仮想オブジェクトに対して遠近調節する頻度を制限するように波面発散を調節するディスプレイシステムとは対照的に、ディスプレイシステムは、仮想オブジェクトが他のオブジェクトと同一または類似深度平面にあるように知覚されるように、両眼視差を調節し得る。

可変焦点ディスプレイシステムが、上記部分に説明されたが、多焦点ディスプレイシステム等の本明細書で参照される他のディスプレイシステムも、利用され得る。多焦点ディスプレイシステムは、コンテンツが、ユーザに提示される各フレームに対して、同時に複数の深度平面上に表示されるように、複数の異なる深度平面に関連付けられた波面発散を伴う光を同時に出力し得る。多焦点ディスプレイシステムは、仮想オブジェクトを同一フレームにおいて異なる深度平面に提示し得るので、多焦点ディスプレイシステムは、ユーザがそのビューを異なる仮想オブジェクトに切り替えるとき、ある視覚的アーチファクト（例えば、フリッカ）を導入することを回避し得る。しかしながら、仮想オブジェクトが提示されるべき深度平面を調節すること等、本明細書に説明される技法を利用して、遠近調節を変化させる必要性は、上での説明に一致して低減させられ得る。

ディスプレイシステムは、拡張現実ディスプレイシステムまたは仮想現実ディスプレイシステムの一部であり得ることを理解されたい。一例として、ディスプレイシステムは、透過性であり得、画像、ビデオ、相互作用等の形態で仮想コンテンツをユーザに提供しながら、ユーザが実世界を視認することを可能にし得る。別の例として、ディスプレイシステムは、ユーザの実世界のビューをブロックし得、仮想現実画像、ビデオ、相互作用等が、ユーザに提示され得る。

本明細書に説明される種々の実施形態が、有利には、種々の状況に提供され得ることも理解されたい。例として、本明細書に開示される技法およびシステムは、ヘルスケア状況に適用され得、仮想オブジェクトは、実オブジェクトと併せて視認され得る。例えば、外科医は、ディスプレイシステムを装着しながら、現実の患者に手術を行い得る。ディスプレイシステムは、有利には、心拍数情報等、医療情報を外科医に提示し得る。ディスプレイシステムは、外科医がその責務を果たしながら、外科医が患者と医療情報との間で遠近調節を切り替える必要性を回避し得るように、医療情報が患者に最も近い深度平面上に提示されるようにし得る。別の例として、ユーザは、ディスプレイシステムを装着しながら、レースカーの運転ゲームをプレーし得る。ディスプレイシステムは、ユーザの車の内部および車の外部（例えば、道路、競合者の車）等、仮想コンテンツを提示し得る。ディスプレイシステムは、車の外部または競合者の車と同一深度平面上に提示されるべきスピードメータ等の特定の仮想コンテンツ（例えば、車のフロントガラスを通した視野）を調節し得る。このように、ユーザは、車のダッシュボードを見て、スピードメータを視認する度に、スピードメータへの遠近調節を変化させる必要性を回避しながら、容易かつ迅速に、そのスピードを視認し得る。加えて、フリッカは、ユーザがスピードメータを視認するときに排除され得、それは、そうでなければ、ゲームのプレーに悪影響を及ぼし得る。

ここで、図を参照する。

図２は、ウェアラブルディスプレイシステム６０の例を図示する。ディスプレイシステム６０は、ディスプレイ７０と、そのディスプレイ７０の機能をサポートするための種々の機械的および電子モジュールならびにシステムとを含む。ディスプレイ７０は、フレーム８０に結合され得、フレーム８０は、ディスプレイシステムユーザまたは視認者９０によって装着可能であり、ディスプレイ７０をユーザ９０の眼の正面に位置付けるように構成される。ディスプレイ７０は、いくつかの実施形態におけるアイウェアと見なされ得る。いくつかの実施形態では、スピーカ１００が、フレーム８０に結合され、ユーザ９０の外耳道に隣接して位置付けられるように構成される（いくつかの実施形態では、示されない別のスピーカが、随意に、ユーザの他方の外耳道に隣接して位置付けられ、ステレオ／成形可能音制御を提供し得る）。ディスプレイシステムは、１つ以上のマイクロホン１１０または他のデバイスも含み、音を検出し得る。いくつかの実施形態では、マイクロホンは、ユーザが、入力またはコマンドをシステム６０に提供することを可能にするように構成され（例えば、音声メニューコマンドの選択、自然言語質問等）、および／または、他の人物（例えば、類似ディスプレイシステムの他のユーザ）とのオーディオ通信を可能にし得る。マイクロホンは、周辺センサとしてさらに構成され、オーディオデータ（例えば、ユーザおよび／または環境からの音）を収集し得る。いくつかの実施形態では、ディスプレイシステムは、周辺センサ１２０ａも含み得、周辺センサ１２０ａは、フレーム８０と別個であり、ユーザ９０の身体（例えば、ユーザ９０の頭部、胴体、四肢等上）に取り付けられ得る。周辺センサ１２０ａは、いくつかの実施形態では、ユーザ９０の生理学的状態を特徴付けるデータを取得するように構成され得る。例えば、センサ１２０ａは、電極であり得る。

図２を継続して参照すると、ディスプレイ７０は、有線導線または無線接続性等の通信リンク１３０によって、ローカルデータ処理モジュール１４０に動作可能に結合され、ローカルデータ処理モジュール１４０は、フレーム８０を固定して取り付けられる、ユーザによって装着されるヘルメットまたは帽子を固定して取り付けられる構成、ヘッドホン内に埋設される構成、または別様にユーザ９０に除去可能に取り付けられる構成（例えば、リュック式構成、ベルト結合式構成において）等、種々の構成で搭載され得る。同様に、センサ１２０ａは、通信リンク１２０ｂ、例えば、有線導線または無線接続性によって、ローカルデータ処理モジュール１４０に動作可能に結合され得る。ローカル処理およびデータモジュール１４０は、ハードウェアプロセッサと不揮発性メモリ（例えば、フラッシュメモリまたはハードディスクドライブ）等のデジタルメモリとを備え得、両方は、データの処理、キャッシュ、および記憶を補助するために利用され得る。随意に、ローカル処理およびデータモジュール１４０は、１つ以上の中央処理ユニット（ＣＰＵ）、グラフィック処理ユニット（ＧＰＵ）、専用処理ハードウェア等を含み得る。データは、ａ）センサ（画像捕捉デバイス（カメラ等）、マイクロホン、慣性測定ユニット、加速度計、コンパス、ＧＰＳユニット、無線デバイス、ジャイロスコープ、および／または本明細書に開示される他のセンサ（例えば、フレーム８０に動作可能に結合されるか、または別様にユーザ９０に取り付けられ得る））から捕捉されたデータ、および／または、ｂ）可能性として処理または読み出し後のディスプレイ７０への移動のために、遠隔処理モジュール１５０および／または遠隔データリポジトリ１６０（仮想コンテンツに関連するデータを含む）を使用して取得および／または処理されたデータを含む。ローカル処理およびデータモジュール１４０は、有線または無線通信リンクを介して等、通信リンク１７０、１８０によって、遠隔処理モジュール１５０および遠隔データリポジトリ１６０に動作可能に結合され得、それによって、これらの遠隔モジュール１５０、１６０は、互いに動作可能に結合され、ローカル処理およびデータモジュール１４０に対するリソースとして利用可能である。いくつかの実施形態では、ローカル処理およびデータモジュール１４０は、画像捕捉デバイス、マイクロホン、慣性測定ユニット、加速度計、コンパス、ＧＰＳユニット、無線デバイス、および／またはジャイロスコープのうちの１つ以上のものを含み得る。いくつかの他の実施形態では、これらのセンサのうちの１つ以上のものは、フレーム８０に取り付けられ得るか、または有線もしくは無線通信経路によってローカル処理およびデータモジュール１４０と通信する独立構造であり得る。

図２を継続して参照すると、いくつかの実施形態では、遠隔処理モジュール１５０は、例えば、１つ以上の中央処理ユニット（ＣＰＵ）、グラフィック処理ユニット（ＧＰＵ）、専用処理ハードウェア等を含む、データおよび／または画像情報を分析ならびに処理するように構成される１つ以上のプロセッサを備え得る。いくつかの実施形態では、遠隔データリポジトリ１６０は、インターネットまたは「クラウド」リソース構成における他のネットワーキング構成を通して利用可能であり得るデジタルデータ記憶設備を備え得る。いくつかの実施形態では、遠隔データリポジトリ１６０は、１つ以上の遠隔サーバを含み得、それらは、情報、例えば、拡張現実コンテンツをローカル処理およびデータモジュール１４０および／または遠隔処理モジュール１５０に生成するための情報を提供する。いくつかの実施形態では、全てのデータが、記憶され、全ての計算は、ローカル処理およびデータモジュール内で行われ、遠隔モジュールからの完全に自律的使用を可能にする。随意に、ＣＰＵ、ＧＰＵ等を含む、外部システム（例えば、１つ以上のプロセッサのシステム、１つ以上のコンピュータ）は、処理の少なくとも一部を行い（例えば、画像情報を生成する、データを処理する）、例えば、無線または有線接続を介して、情報をモジュール１４０、１５０、１６０に提供し、そこから情報を受信し得る。

ここで図３を参照すると、「３次元」または「３−Ｄ」としての画像の知覚は、視認者の各眼への画像の若干異なる提示を提供することによって達成され得る。図３は、ユーザのための３次元画像をシミュレートするための従来のディスプレイシステムを図示する。２つの異なる画像１９０、２００（各眼２１０、２２０のために１つ）が、両眼キューを提供するためにユーザに出力され、ユーザの視覚系は、それを解釈し、深度の知覚を導出する。画像１９０、２００は、視認者の視線と平行な光学軸またはｚ−軸に沿って距離２３０だけ眼２１０、２２０から間隔を置かれる。画像１９０、２００は、平坦であり、眼２１０、２２０は、単一の遠近調節された状態をとることによって、画像上に焦点を合わせ得る。そのような３−Ｄディスプレイシステムは、ヒト視覚系に頼って画像１９０、２００を組み合わせ、組み合わせられた画像に対する深度および／または規模の知覚を提供する。

しかしながら、ヒト視覚系は、より複雑であり、深度の現実的知覚を提供することは、より困難であることを理解されたい。例えば、従来の「３−Ｄ」ディスプレイシステムの多くの視認者は、そのようなシステムが不快であることを見出すか、または深度の感覚を全く知覚しないこともある。理論によって限定されるわけではないが、オブジェクトの視認者は、両眼離反運動および遠近調節の組み合わせに起因して、オブジェクトを「３次元」として知覚し得ると考えられる。互いに対する２つの眼の両眼離反運動の移動（例えば、瞳孔が、眼の視線を収束させ、オブジェクトを凝視させるための互いに向かって、またはそこから離れるように移動する、眼の回転）は、眼の水晶体および瞳孔の焦点合わせ（または「遠近調節」）と密接に関連付けられる。通常条件下では、異なる距離における１つのオブジェクトから別のオブジェクトに焦点を変化させるために眼の水晶体の焦点を変化させること、または眼を遠近調節することは、「遠近調節−両眼離反運動反射」ならびに瞳孔拡張または収縮として知られる関係下、同じ距離までの両眼離反運動における整合変化を自動的に生じさせるであろう。同様に、両眼離反運動における変化は、正常条件下では、水晶体形状および瞳孔サイズの遠近調節における整合変化を誘起するであろう。本明細書に記載されるように、多くの立体視または「３−Ｄ」ディスプレイシステムは、３次元視点がヒト視覚系によって知覚されるように、各眼への若干異なる提示（したがって、若干異なる画像）を使用して、場面を表示する。しかしながら、そのようなシステムは、とりわけ、単に、場面の異なる提示を提供するが、眼は、全画像情報を単一の遠近調節された状態において視認し、「遠近調節−両眼離反運動反射」に対抗して機能するので、多くの視認者にとって不快である。遠近調節と両眼離反運動との間のより優れた整合を提供するディスプレイシステムは、３次元画像のより現実的かつ快適なシミュレーションを形成し得る。

図４は、複数の深度平面を使用して３次元画像をシミュレートするためのアプローチの側面を図示する。図４を参照すると、ｚ−軸上の眼２１０、２２０からの種々の距離におけるオブジェクトは、それらのオブジェクトが焦点が合うように、眼２１０、２２０によって遠近調節される。眼２１０、２２０は、特定の遠近調節された状態をとり、ｚ−軸に沿って異なる距離におけるオブジェクトに焦点を合わせる。その結果、特定の遠近調節された状態は、関連付けられた焦点距離を有する深度平面２４０のうちの特定の１つに関連付けられていると言え、特定の深度平面におけるオブジェクトまたはオブジェクトの一部は、眼がその深度平面のための遠近調節された状態にあるとき焦点が合う。いくつかの実施形態では、３次元画像は、眼２１０、２２０の各々のための画像の異なる提示を提供することによってシミュレートされ得、深度平面の各々に対応する画像の異なる提示を提供することによってもシミュレートされ得る。例証を明確にするために、別個であるように示されるが、眼２１０、２２０の視野は、例えば、ｚ−軸に沿った距離が増加するにつれて重複し得ることを理解されたい。加えて、例証を容易にするために、平坦として示されるが、深度平面の輪郭は、深度平面内の全ての特徴が特定の遠近調節された状態における眼で焦点が合うように、物理的空間内で湾曲され得ることを理解されたい。

オブジェクトと眼２１０または２２０との間の距離は、その眼によって視認されるようなそのオブジェクトからの光の発散の量も変化させ得る。図５Ａ−５Ｃは、距離と光線の発散との間の関係を図示する。オブジェクトと眼２１０との間の距離は、減少する距離Ｒ１、Ｒ２、およびＲ３の順序で表される。図５Ａ−５Ｃに示されるように、光線は、オブジェクトまでの距離が減少するにつれてより発散する。距離が増加するにつれて、光線は、よりコリメートされる。換言すると、点（オブジェクトまたはオブジェクトの一部）によって生成される光場は、点がユーザの眼から離れている距離の関数である球状波面曲率を有すると言え得る。曲率は、オブジェクトと眼２１０との間の距離の減少に伴って増加する。その結果、異なる深度平面では、光線の発散度も、異なり、発散度は、深度平面と視認者の眼２１０との間の距離の減少に伴って増加する。単眼２１０のみが、例証を明確にするために、図５Ａ−５Ｃおよび本明細書の種々の他の図に図示されるが、眼２１０に関する議論は、視認者の両眼２１０および２２０に適用され得ることを理解されたい。

理論によって限定されるわけではないが、ヒトの眼は、典型的には、有限数の深度平面を解釈し、深度知覚を提供することができると考えられる。その結果、知覚された深度の高度に真実味のあるシミュレーションが、眼にこれらの限定数の深度平面の各々に対応する画像の異なる提示を提供することによって達成され得る。異なる提示は、視認者の眼によって別個に焦点を合わせられ、それによって、異なる深度平面上に位置する場面のための異なる画像特徴に焦点を合わせるために要求される眼の遠近調節に基づいて、および／または、焦点がずれている異なる深度平面上の異なる画像特徴を観察することに基づいて、ユーザに深度キューを提供することに役立ち得る。

図６は、画像情報をユーザに出力するための導波管スタックの例を図示する。ディスプレイシステム２５０は、複数の導波管２７０、２８０、２９０、３００、３１０を使用して３次元知覚を眼／脳に提供するために利用され得る導波管のスタックまたはスタックされた導波管アセンブリ２６０を含む。いくつかの実施形態では、ディスプレイシステム２５０は、図２のシステム６０であり、図６は、そのシステム６０のいくつかの部分をより詳細に概略的に示す。例えば、導波管アセンブリ２６０は、図２のディスプレイ７０の一部であり得る。ディスプレイシステム２５０は、いくつかの実施形態では、明視野ディスプレイと見なされ得ることを理解されたい。

図６を継続して参照すると、導波管アセンブリ２６０は、複数の特徴３２０、３３０、３４０、３５０を導波管間に含み得る。いくつかの実施形態では、特徴３２０、３３０、３４０、３５０は、１つ以上のレンズであり得る。導波管２７０、２８０、２９０、３００、３１０および／または複数のレンズ３２０、３３０、３４０、３５０は、種々のレベルの波面曲率または光線発散を用いて画像情報を眼に送信するように構成され得る。各導波管レベルは、特定の深度平面に関連付けられ得、その深度平面に対応する画像情報を出力するように構成され得る。画像投入デバイス３６０、３７０、３８０、３９０、４００は、導波管のための光源として機能し得、画像情報を導波管２７０、２８０、２９０、３００、３１０の中に投入するために利用され得、各々は、本明細書に説明されるように、眼２１０に向かう出力のために、各それぞれの導波管を通る入射光を分配するように構成され得る。光は、画像投入デバイス３６０、３７０、３８０、３９０、４００の出力表面４１０、４２０、４３０、４４０、４５０から出射し、導波管２７０、２８０、２９０、３００、３１０の対応する入力表面４６０、４７０、４８０、４９０、５００の中に投入される。いくつかの実施形態では、入力表面４６０、４７０、４８０、４９０、５００の各々は、対応する導波管の縁であり得るか、または対応する導波管の主要表面の一部（すなわち、世界５１０または視認者の眼２１０に直接面する導波管表面のうちの１つ）であり得る。いくつかの実施形態では、光の単一ビーム（例えば、コリメートされたビーム）が、各導波管の中に投入され、クローン化されたコリメートビームの全体場を出力し得、クローン化されたコリメートビームは、特定の導波管に関連付けられた深度平面に対応する特定の角度（および発散量）において眼２１０の方に向かわせられる。いくつかの実施形態では、画像投入デバイス３６０、３７０、３８０、３９０、４００のうちの単一のものが、複数（例えば、３つ）の導波管２７０、２８０、２９０、３００、３１０に関連付けられ、それらの中に光を投入し得る。

いくつかの実施形態では、画像投入デバイス３６０、３７０、３８０、３９０、４００は、各々が対応する導波管２７０、２８０、２９０、３００、３１０の中への投入のために画像情報を生成する個別的なディスプレイである。いくつかの他の実施形態では、画像投入デバイス３６０、３７０、３８０、３９０、４００は、例えば、画像情報を１つ以上の光学導管（光ファイバケーブル等）を介して画像投入デバイス３６０、３７０、３８０、３９０、４００の各々に送り得る単一の多重化されたディスプレイの出力端である。画像投入デバイス３６０、３７０、３８０、３９０、４００によって提供される画像情報は、異なる波長または色（例えば、本明細書に議論されるように、異なる原色）の光を含み得ることを理解されたい。

いくつかの実施形態では、導波管２７０、２８０、２９０、３００、３１０の中に投入される光は、光プロジェクタシステム５２０によって提供され、それは、光モジュール５３０を備え、それは、発光ダイオード（ＬＥＤ）等の光エミッタを含み得る。光モジュール５３０からの光は、ビームスプリッタ５５０を介して、光変調器５４０、例えば、空間光変調器に向かわせられ、それによって修正され得る。光変調器５４０は、導波管２７０、２８０、２９０、３００、３１０の中に投入される光の知覚される強度を変化させるように構成され得る。空間光変調器の例は、液晶ディスプレイ（ＬＣＤ）を含み、シリコン上液晶（ＬＣＯＳ）ディスプレイを含む。

いくつかの実施形態では、ディスプレイシステム２５０は、光を種々のパターン（例えば、ラスタ走査、螺旋走査、リサジューパターン等）で１つ以上の導波管２７０、２８０、２９０、３００、３１０の中に、最終的には、視認者の眼２１０に投影するように構成される１つ以上の走査ファイバを備えている走査ファイバディスプレイであり得る。いくつかの実施形態では、図示される画像投入デバイス３６０、３７０、３８０、３９０、４００は、光を１つまたは複数の導波管２７０、２８０、２９０、３００、３１０の中に投入するように構成される単一走査ファイバまたは走査ファイバの束を図式的に表し得る。いくつかの他の実施形態では、図示される画像投入デバイス３６０、３７０、３８０、３９０、４００は、複数の走査ファイバまたは走査ファイバの複数の束を図式的に表し得、各々は、光を導波管２７０、２８０、２９０、３００、３１０のうちの関連付けられた１つの中に投入するように構成される。１つ以上の光ファイバは、光を光モジュール５３０から１つ以上の導波管２７０、２８０、２９０、３００、３１０に伝送するように構成され得ることを理解されたい。１つ以上の介在光学構造が、走査ファイバまたは複数のファイバと、１つ以上の導波管２７０、２８０、２９０、３００、３１０との間に提供され、例えば、走査ファイバから出射する光を１つ以上の導波管２７０、２８０、２９０、３００、３１０の中に向け直し得ることを理解されたい。

コントローラ５６０は、画像投入デバイス３６０、３７０、３８０、３９０、４００、光源５３０、および光モジュール５４０の動作を含むスタックされた導波管アセンブリ２６０のうちの１つ以上のものの動作を制御する。いくつかの実施形態では、コントローラ５６０は、ローカルデータ処理モジュール１４０の一部である。コントローラ５６０は、例えば、本明細書に開示される種々のスキームのいずれかに従って、導波管２７０、２８０、２９０、３００、３１０への画像情報のタイミングおよびプロビジョニングを調整するプログラミング（例えば、非一過性媒体内の命令）を含む。いくつかの実施形態では、コントローラは、単一一体型デバイスまたは有線もしくは無線通信チャネルによって接続される分散型システムであり得る。コントローラ５６０は、いくつかの実施形態では、処理モジュール１４０または１５０（図２）の一部であり得る。

図６を継続して参照すると、導波管２７０、２８０、２９０、３００、３１０は、全内部反射（ＴＩＲ）によって各それぞれの導波管内で光を伝搬するように構成され得る。導波管２７０、２８０、２９０、３００、３１０の各々は、主要な上部および底部表面ならびにそれらの主要上部表面と底部表面との間に延びている縁を伴う平面であるか、または別の形状（例えば、湾曲）を有し得る。図示される構成では、導波管２７０、２８０、２９０、３００、３１０の各々は、各それぞれの導波管内で伝搬する光を導波管から向け直し、画像情報を眼２１０に出力することによって、光を導波管から外へ抽出するように構成される外部結合光学要素５７０、５８０、５９０、６００、６１０を含み得る。抽出された光は、外部結合光とも称され得、外部結合光学要素は、光抽出光学要素とも称され得る。抽出された光のビームは、導波管内を伝搬する光が光抽出光学要素に衝突する場所において導波管によって出力され得る。外部結合光学要素５７０、５８０、５９０、６００、６１０は、例えば、本明細書にさらに議論されるような回折光学特徴を含む格子であり得る。説明の容易性および図面の明確性のために、導波管２７０、２８０、２９０、３００、３１０の底部主要表面に配置されて図示されるが、いくつかの実施形態では、外部結合光学要素５７０、５８０、５９０、６００、６１０は、本明細書にさらに議論されるように、上部および／または底部主要表面に配置され得、ならびに／もしくは導波管２７０、２８０、２９０、３００、３１０の体積内に直接配置され得る。いくつかの実施形態では、外部結合光学要素５７０、５８０、５９０、６００、６１０は、透明基板に取り付けられ、導波管２７０、２８０、２９０、３００、３１０を形成する材料の層内に形成され得る。いくつかの他の実施形態では、導波管２７０、２８０、２９０、３００、３１０は、材料のモノリシック部品であり得、外部結合光学要素５７０、５８０、５９０、６００、６１０は、材料のその部品の表面上および／またはその内部に形成され得る。

図６を継続して参照すると、本明細書に議論されるように、各導波管２７０、２８０、２９０、３００、３１０は、光を出力し、特定の深度平面に対応する画像を形成するように構成される。例えば、眼の最近傍の導波管２７０は、眼２１０にコリメートされた光（そのような導波管２７０の中に投入された）を送達するように構成され得る。コリメートされた光は、光学無限遠焦点面を表し得る。次の上方の導波管２８０は、眼２１０に到達し得る前に、第１のレンズ３５０（例えば、負のレンズ）を通過するコリメートされた光を送出するように構成され得る。そのような第１のレンズ３５０は、眼／脳が、その次の上方の導波管２８０から生じる光を光学無限遠から眼２１０に向かって内側により近い第１の焦点面から生じるように解釈するように、若干の凸面波面曲率を生成するように構成され得る。同様に、第３の上方の導波管２９０は、眼２１０に到達する前に、その出力光を第１の３５０および第２の３４０レンズの両方を通過させる。第１の３５０および第２の３４０レンズの組み合わせられた屈折力は、眼／脳が、第３の導波管２９０から生じる光が次の上方の導波管２８０からの光よりも光学無限遠から人物に向かって内側にさらにより近い第２の焦点面から生じるように解釈するように、別の漸増量の波面曲率を生成するように構成され得る。

他の導波管層３００、３１０およびレンズ３３０、３２０も同様に構成され、スタック内の最高導波管３１０は、人物に最も近い焦点面を表す集約焦点力のために、その出力をそれと眼との間のレンズの全てを通して送出する。スタックされた導波管アセンブリ２６０の他側の世界５１０から生じる光を視認／解釈するとき、レンズ３２０、３３０、３４０、３５０のスタックを補償するために、補償レンズ層６２０が、スタックの上部に配置され、下方のレンズスタック３２０、３３０、３４０、３５０の集約力を補償し得る。そのような構成は、利用可能な導波管／レンズ対と同じ数の知覚される焦点面を提供する。導波管の外部結合光学要素およびレンズの焦点合わせ側面の両方は、静的であり得る（すなわち、動的または電気活性ではない）。いくつかの代替実施形態では、一方または両方は、電気活性特徴を使用して動的であり得る。

いくつかの実施形態では、導波管２７０、２８０、２９０、３００、３１０のうちの２つ以上のものは、同一の関連付けられた深度平面を有し得る。例えば、複数の導波管２７０、２８０、２９０、３００、３１０が、同一深度平面に設定される画像を出力するように構成され得るか、または導波管２７０、２８０、２９０、３００、３１０の複数の一部が、各深度平面に対して１つの組で、同一の複数の深度平面に設定される画像を出力するように構成され得る。これは、それらの深度平面において拡張された視野を提供するようにタイル化された画像を形成する利点を提供し得る。

図６を継続して参照すると、外部結合光学要素５７０、５８０、５９０、６００、６１０は、導波管に関連付けられた特定の深度平面のために、光をそれらのそれぞれの導波管から向け直し、この光を適切な量の発散またはコリメーションを伴って出力するように構成され得る。その結果、異なる関連付けられた深度平面を有する導波管は、外部結合光学要素５７０、５８０、５９０、６００、６１０の異なる構成を有し得、それらは、関連付けられた深度平面に応じて、異なる量の発散を伴う光を出力する。いくつかの実施形態では、光抽出光学要素５７０、５８０、５９０、６００、６１０は、体積または表面特徴であり得、それらは、特定の角度において光を出力するように構成され得る。例えば、光抽出光学要素５７０、５８０、５９０、６００、６１０は、体積ホログラム、表面ホログラム、および／または回折格子であり得る。いくつかの実施形態では、特徴３２０、３３０、３４０、３５０は、レンズではないこともある。むしろ、それらは、単に、スペーサ（例えば、クラッディング層および／または空隙を形成するための構造）であり得る。

いくつかの実施形態では、外部結合光学要素５７０、５８０、５９０、６００、６１０は、回折パターンまたは「回折光学要素」（また、本明細書では、「ＤＯＥ」とも称される）を形成する、回折特徴である。好ましくは、ＤＯＥは、ビームの光の一部のみがＤＯＥの交差点ごとに眼２１０に向かって偏向させられる一方、残りがＴＩＲを介して導波管を通して移動し続けるように、十分に低回折効率を有する。画像情報を搬送する光は、したがって、様々な場所において導波管から出射するいくつかの関連出射ビームに分割され、その結果は、導波管内で跳ね返るこの特定のコリメートされたビームに対して、眼２１０に向かって非常に均一なパターンの出射放出である。

いくつかの実施形態では、１つ以上のＤＯＥは、能動的に回折する「オン」状態と有意に回折しない「オフ」状態との間で切り替え可能であり得る。例えば、切り替え可能なＤＯＥは、ポリマー分散液晶の層を備え得、その中で微小液滴は、ホスト媒体中に回折パターンを備え、微小液滴の屈折率は、ホスト材料の屈折率に実質的に合致するように切り替えられ得るか（その場合、パターンは、入射光を著しく回折させない）、または微小液滴は、ホスト媒体のそれに合致しない屈折率に切り替えられ得る（その場合、パターンは、入射光を能動的に回折する）。

いくつかの実施形態では、カメラアセンブリ６３０（例えば、可視光および赤外線光カメラを含む、デジタルカメラ）が、眼２１０および／または眼２１０の周囲の組織の画像を捕捉し、例えば、ユーザ入力を検出するために、および／またはユーザの生理学的状態を監視するために提供され得る。本明細書で使用されるように、カメラは、任意の画像捕捉デバイスであり得る。いくつかの実施形態では、カメラアセンブリ６３０は、画像捕捉デバイスと、光（例えば、赤外線光）を眼に投影するための光源とを含み得、次いで、光は、眼によって反射され、画像捕捉デバイスによって検出され得る。いくつかの実施形態では、カメラアセンブリ６３０は、フレーム８０（図２）に取り付けられ得、カメラアセンブリ６３０からの画像情報を処理し得る処理モジュール１４０および／または１５０と電気通信し得る。いくつかの実施形態では、１つのカメラアセンブリ６３０が、各眼のために利用され、各眼を別個に監視し得る。

いくつかの実施形態では、内向きのカメラは、ユーザの眼の遠近調節応答または遠近調節状態を検出し、ユーザにその遠近調節応答を変化させることを要求せずに、ディスプレイコンテンツをユーザに表示するようにも構成され得る。随意に、内向きのカメラは、ユーザの眼の各々の遠近調節応答または遠近調節状態を検出するように構成され得る。表示されるコンテンツは、アラート、メニューアイテム、または他のコンテンツを含み得、それらは、その眼が焦点を合わせられている深度に関係なく、ユーザに明確に見えることが有益であり得る。いくつかの実施形態では、ディスプレイシステム８０は、ユーザの眼内の水晶体の形状変化を検出し、ユーザの眼が焦点を合わせられている対象を決定するように構成され得、順に、ディスプレイシステム８０は、対応する適切な深度キューを用いて（例えば、特定の深度平面のための適切な分解能、詳細、色飽和、コントラスト等を用いて）、表示される画像を適切な深度平面上にレンダリングし得る。

ここで図７を参照すると、導波管によって出力された出射ビームの例が、示される。１つの導波管が図示されるが、導波管アセンブリ２６０（図６）内の他の導波管も同様に機能し得、導波管アセンブリ２６０は、複数の導波管を含むことを理解されたい。光６４０が、導波管２７０の入力表面４６０において導波管２７０の中に投入され、ＴＩＲによって導波管２７０内を伝搬する。光６４０がＤＯＥ５７０上に衝突する点では、光の一部は、導波管から出射ビーム６５０として出射する。出射ビーム６５０は、略平行として図示されるが、本明細書に議論されるように、それらは、導波管２７０に関連付けられた深度平面に応じて、ある角度（例えば、発散出射ビームを形成する）において眼２１０に伝搬するように向け直され得る。略平行出射ビームは、眼２１０からの遠距離（例えば、光学無限遠）における深度平面に設定されるように見える画像を形成するように光を外部結合する外部結合光学要素を伴う導波管を示し得ることを理解されたい。他の導波管または他の外部結合光学要素の組は、より発散する出射ビームパターンを出力し得、それは、眼２１０がより近い距離に遠近調節し、網膜に焦点を合わせることを要求し、光学無限遠より眼２１０に近い距離からの光として脳によって解釈されるであろう。

いくつかの実施形態では、フルカラー画像が、原色、例えば、３つ以上の原色の各々に画像をオーバーレイすることによって、各深度平面において形成され得る。図８は、スタックされた導波管アセンブリの例を図示し、各深度平面は、複数の異なる原色を使用して形成される画像を含む。図示される実施形態は、深度平面２４０ａ−２４０ｆを示すが、より多いまたはより少ない深度も、検討される。各深度平面は、第１の色Ｇの第１の画像、第２の色Ｒの第２の画像、および第３の色Ｂの第３の画像を含むそれに関連付けられた３つ以上の原色画像を有し得る。異なる深度平面は、文字Ｇ、Ｒ、およびＢに続くジオプタに関する異なる数字によって図に示される。単なる例として、これらの文字の各々に続く数字は、ジオプタ（１／ｍ）、すなわち、視認者からの深度平面の逆距離を示し、図中の各ボックスは、個々の原色画像を表す。いくつかの実施形態では、異なる波長の光の眼の焦点合わせにおける差異を考慮するために、異なる原色に対する深度平面の正確な場所は、変動し得る。例えば、所与の深度平面に関する異なる原色画像は、ユーザからの異なる距離に対応する深度平面上に設置され得る。そのような配置は、視力およびユーザ快適性を増加させ得、および／または色収差を減少させ得る。

いくつかの実施形態では、各原色の光は、単一専用導波管によって出力され得、その結果、各深度平面は、それに関連付けられた複数の導波管を有し得る。そのような実施形態では、文字Ｇ、Ｒ、またはＢを含む図中の各ボックスは、個々の導波管を表すものと理解され得、３つの導波管は、深度平面毎に提供され得、３つの原色画像が、深度平面毎に提供される。各深度平面に関連付けられた導波管は、この図面では、説明を容易にするために互いに隣接して示されるが、物理的デバイスでは、導波管は全て、レベル毎に１つの導波管を伴うスタックで配置され得ることを理解されたい。いくつかの他の実施形態では、複数の原色が、例えば、単一導波管のみが深度平面毎に提供され得るように、同一導波管によって出力され得る。

図８を継続して参照すると、いくつかの実施形態では、Ｇは、緑色であり、Ｒは、赤色であり、Ｂは、青色である。いくつかの他の実施形態では、マゼンタ色およびシアン色を含む光の他の波長に関連付けられた他の色も、赤色、緑色、もしくは青色のうちの１つ以上のものに加えて使用され得るか、またはそれらに取って代わり得る。

本開示全体を通した所与の光の色の言及は、その所与の色として視認者によって知覚される、光の波長の範囲内の１つ以上の波長の光を包含するものと理解されると理解されたい。例えば、赤色光は、約６２０〜７８０ｎｍの範囲内である１つ以上の波長の光を含み得、緑色光は、約４９２〜５７７ｎｍの範囲内である１つ以上の波長の光を含み得、青色光は、約４３５〜４９３ｎｍの範囲内である１つ以上の波長の光を含み得る。

いくつかの実施形態では、光源５３０（図６）は、視認者の視覚的知覚範囲外の１つ以上の波長、例えば、赤外線および／または紫外線波長の光を放出するように構成され得る。加えて、ディスプレイ２５０の導波管の内部結合、外部結合、および他の光向け直し構造は、例えば、結像および／またはユーザ刺激用途のために、この光をディスプレイからユーザの眼２１０に向かわせるように、および放出するように構成され得る。

ここで図９Ａを参照すると、いくつかの実施形態では、導波管に衝突する光は、その光を導波管の中に内部結合するために向け直される必要があり得る。内部結合光学要素が、光をその対応する導波管の中に向け直し、内部結合するために使用され得る。図９Ａは、各々が内部結合光学要素を含む複数または組６６０のスタックされた導波管の例の断面側面図を図示する。導波管の各々は、１つ以上の異なる波長または１つ以上の異なる波長範囲の光を出力するように構成され得る。スタック６６０は、スタック２６０（図６）に対応し得、スタック６６０の図示される導波管は、複数の導波管２７０、２８０、２９０、３００、３１０の一部に対応し得るが、画像投入デバイス３６０、３７０、３８０、３９０、４００のうちの１つ以上のものからの光が、光が内部結合のために向け直されることを要求する位置から導波管の中に投入されることを理解されたい。

図示されるスタックされた導波管の組６６０は、導波管６７０、６８０、および６９０を含む。各導波管は、関連付けられた内部結合光学要素（導波管上の光入力エリアとも称され得る）を含み、例えば、内部結合光学要素７００は、導波管６７０の主要表面（例えば、上側主要表面）上に配置され、内部結合光学要素７１０は、導波管６８０の主要表面（例えば、上側主要表面）上に配置され、内部結合光学要素７２０は、導波管６９０の主要表面（例えば、上側主要表面）上に配置される。いくつかの実施形態では、内部結合光学要素７００、７１０、７２０のうちの１つ以上のものは、それぞれの導波管６７０、６８０、６９０の底部主要表面上に配置され得る（特に、１つ以上の内部結合光学要素は、反射性偏向光学要素である場合）。図示されるように、内部結合光学要素７００、７１０、７２０は、それらのそれぞれの導波管６７０、６８０、６９０の上側主要表面（または次の下側導波管の上部）上に配置され得、特に、それらの内部結合光学要素は、透過性偏向光学要素である。いくつかの実施形態では、内部結合光学要素７００、７１０、７２０は、それぞれの導波管６７０、６８０、６９０の本体内に配置され得る。いくつかの実施形態では、本明細書に議論されるように、内部結合光学要素７００、７１０、７２０は、他の光の波長を透過するが、１つ以上の光の波長を選択的に向け直すような波長選択的である。それらのそれぞれの導波管６７０、６８０、６９０の片側または角に図示されるが、内部結合光学要素７００、７１０、７２０は、いくつかの実施形態では、それらのそれぞれの導波管６７０、６８０、６９０の他のエリア内に配置され得ることを理解されたい。

図示されるように、内部結合光学要素７００、７１０、７２０は、互いから側方にオフセットされ得る。いくつかの実施形態では、各内部結合光学要素は、その光が別の内部結合光学要素を通過せずに、光を受信するようにオフセットされ得る。例えば、各内部結合光学要素７００、７１０、７２０は、図６に示されるように、光を異なる画像投入デバイス３６０、３７０、３８０、３９０、および４００から受信するように構成され得、光を内部結合光学要素７００、７１０、７２０の他のものから実質的に受信しないように、他の内部結合光学要素７００、７１０、７２０から分離され得る（例えば、側方に間隔を置かれる）。

各導波管は、関連付けられた光分配要素も含み、例えば、光分配要素７３０は、導波管６７０の主要表面（例えば、上部主要表面）上に配置され、光分配要素７４０は、導波管６８０の主要表面（例えば、上部主要表面）上に配置され、光分配要素７５０は、導波管６９０の主要表面（例えば、上部主要表面）上に配置される。いくつかの他の実施形態では、光分配要素７３０、７４０、７５０は、それぞれ、関連付けられた導波管６７０、６８０、６９０の底部主要表面上に配置され得る。いくつかの他の実施形態では、光分配要素７３０、７４０、７５０は、それぞれ、関連付けられた導波管６７０、６８０、６９０の上部および底部両方の主要表面上に配置され得るか、または光分配要素７３０、７４０、７５０は、それぞれ、異なる関連付けられた導波管６７０、６８０、６９０内の上部および底部主要表面の異なるもの上に配置され得る。

導波管６７０、６８０、６９０は、例えば、材料のガス、液体および／または固体層によって間隔を置かれ、分離され得る。例えば、図示されるように、層７６０ａは、導波管６７０と６８０とを分離し得、層７６０ｂは、導波管６８０と６９０とを分離し得る。いくつかの実施形態では、層７６０ａおよび７６０ｂは、低屈折率材料（すなわち、導波管６７０、６８０、６９０の直接隣接するものを形成する材料より低い屈折率を有する材料）から形成される。好ましくは、層７６０ａ、７６０ｂを形成する材料の屈折率は、導波管６７０、６８０、６９０を形成する材料の屈折率を０．０５もしくはそれを上回り、または０．１０もしくはそれを下回る。有利には、より低い屈折率層７６０ａ、７６０ｂは、導波管６７０、６８０、６９０を通して光の全内部反射（ＴＩＲ）（例えば、各導波管の上部および底部主要表面間のＴＩＲ）を促進するクラッディング層として機能し得る。いくつかの実施形態では、層７６０ａ、７６０ｂは、空気から形成される。図示されないが、導波管の図示される組６６０の上部および底部は、直近クラッディング層を含み得ることを理解されたい。

好ましくは、製造および他の考慮点を容易にするために、導波管６７０、６８０、６９０を形成する材料は、類似または同一であり、層７６０ａ、７６０ｂを形成する材料は、類似または同一である。いくつかの実施形態では、導波管６７０、６８０、６９０を形成する材料は、１つ以上の導波管間で異なり得、および／または層７６０ａ、７６０ｂを形成する材料は、依然として、前述の種々の屈折率関係を保持しながら、異なり得る。

図９Ａを継続して参照すると、光線７７０、７８０、７９０が、導波管の組６６０に入射する。光線７７０、７８０、７９０は、１つ以上の画像投入デバイス３６０、３７０、３８０、３９０、４００（図６）によって導波管６７０、６８０、６９０の中に投入され得ることを理解されたい。

いくつかの実施形態では、光線７７０、７８０、７９０は、異なる色に対応し得る、異なる性質、例えば、異なる波長または異なる波長範囲を有する。内部結合光学要素７００、７１０、７２０の各々は、光が、ＴＩＲによって、導波管６７０、６８０、６９０のうちの各々の１つを通して伝搬するように、入射光を偏向させる。いくつかの実施形態では、内部結合光学要素７００、７１０、７２０の各々は、他の波長を下層導波管および関連付けられた内部結合光学要素に透過させながら、１つ以上の特定の光の波長を選択的に偏向させる。

例えば、内部結合光学要素７００は、異なる第２および第３の波長または波長範囲を有する光線７８０および７９０を透過させながら、第１の波長または波長範囲を有する光線７７０を選択的に偏向させるように構成され得る。透過された光線７８０は、第２の波長または波長範囲の光を選択的に偏向させるように構成される内部結合光学要素７１０に衝突し、それによって偏向させられる。光線７９０は、第３の波長または波長範囲の光を選択的に偏向させるように構成される、内部結合光学要素７２０によって偏向させられる。

図９Ａを継続して参照すると、偏向させられた光線７７０、７８０、７９０は、対応する導波管６７０、６８０、６９０を通して伝搬するように偏向させられる。すなわち、各導波管の内部結合光学要素７００、７１０、７２０は、光をその対応する導波管６７０、６８０、６９０の中に偏向させ、光を対応する導波管の中に内部結合する。光線７７０、７８０、７９０は、光にＴＩＲによってそれぞれの導波管６７０、６８０、６９０を通して伝搬させる角度で偏向させられる。光線７７０、７８０、７９０は、導波管の対応する光分配要素７３０、７４０、７５０に衝突するまで、ＴＩＲによってそれぞれの導波管６７０、６８０、６９０を通して伝搬する。

ここで図９Ｂを参照すると、図９Ａの複数のスタックされた導波管の例の斜視図が、図示される。前述のように、内部結合される光線７７０、７８０、７９０は、それぞれ、内部結合光学要素７００、７１０、７２０によって偏向させられ、次いで、それぞれ、導波管６７０、６８０、６９０内でＴＩＲによって伝搬する。光線７７０、７８０、７９０は、次いで、それぞれ、光分配要素７３０、７４０、７５０に衝突する。光分配要素７３０、７４０、７５０は、それぞれ、外部結合光学要素８００、８１０、８２０に向かって伝搬するように、光線７７０、７８０、７９０を偏向させる。

いくつかの実施形態では、光分配要素７３０、７４０、７５０は、直交瞳エクスパンダ（ＯＰＥ）である。いくつかの実施形態では、ＯＰＥは、光を外部結合光学要素８００、８１０、８２０に偏向させ、または分配し、いくつかの実施形態では、光が外部結合光学要素に伝搬するにつれて、この光のビームまたはスポットサイズを増加させ得る。いくつかの実施形態では、光分配要素７３０、７４０、７５０は、省略され得、内部結合光学要素７００、７１０、７２０は、光を直接外部結合光学要素８００、８１０、８２０に偏向させるように構成され得る。例えば、図９Ａを参照すると、光分配要素７３０、７４０、７５０は、それぞれ、外部結合光学要素８００、８１０、８２０と置換され得る。いくつかの実施形態では、外部結合光学要素８００、８１０、８２０は、光を視認者の眼２１０（図７）に向かわせる射出瞳（ＥＰ）または射出瞳エクスパンダ（ＥＰＥ）である。ＯＰＥは、少なくとも１つの軸においてアイボックスの寸法を増加させるように構成され得、ＥＰＥは、ＯＰＥの軸と交差する、例えば、直交する軸においてアイボックスを増加させ得ることを理解されたい。例えば、各ＯＰＥは、光の残りの部分が導波管を辿って伝搬し続けることを可能にしながら、ＯＰＥに衝突する光の一部を同一導波管のＥＰＥに向け直すように構成され得る。再びＯＰＥに衝突すると、残りの光の別の部分は、ＥＰＥに向け直され、その部分の残りの部分は、導波管等を辿ってさらに伝搬し続ける。同様に、ＥＰＥに衝突すると、衝突光の一部は、導波管からユーザの方に向かわせられ、その光の残りの部分は、ＥＰに再び衝突するまで、導波管を通して伝搬し続け、その時点で、衝突する光の別の部分は、導波管から向かわせられる等。その結果、内部結合された光の単一ビームは、その光の一部がＯＰＥまたはＥＰＥによって向け直される度に、「複製」され、それによって、図６に示されるように、クローン化された光のビーム野を形成し得る。いくつかの実施形態では、ＯＰＥおよび／またはＥＰＥは、光のビームのサイズを修正するように構成され得る。

故に、図９Ａおよび９Ｂを参照すると、いくつかの実施形態では、導波管の組６６０は、各原色のために、導波管６７０、６８０、６９０と、内部結合光学要素７００、７１０、７２０と、光分配要素（例えば、ＯＰＥ）７３０、７４０、７５０と、外部結合光学要素（例えば、ＥＰ）８００、８１０、８２０とを含む。導波管６７０、６８０、６９０は、各導波管の間に空隙／クラッディング層を伴ってスタックされ得る。内部結合光学要素７００、７１０、７２０は、（異なる波長の光を受信する異なる内部結合光学要素を用いて）入射光をその導波管の中に向け直し、または偏向させる。光は、次いで、それぞれの導波６７０、６８０、６９０内にＴＩＲをもたらすであろう角度で伝搬する。示される例では、光線７７０（例えば、青色光）は、前述の様式において、第１の内部結合光学要素７００によって偏光され、次いで、導波管を辿って跳ね返り続け、光分配要素（例えば、ＯＰＥ）７３０、次いで、外部結合光学要素（例えば、ＥＰ）８００と相互作用する。光線７８０および７９０（例えば、それぞれ、緑色および赤色光）は、導波管６７０を通過し、光線７８０は、内部結合光学要素７１０上に入射し、それによって偏向させられる。光線７８０は、次いで、ＴＩＲを介して、導波管６８０を辿って跳ね返り、その光分配要素（例えば、ＯＰＥ）７４０、次いで、外部結合光学要素（例えば、ＥＰ）８１０に進むであろう。最後に、光線７９０（例えば、赤色光）は、導波管６９０を通過し、導波管６９０の光内部結合光学要素７２０に衝突する。光内部結合光学要素７２０は、光線が、ＴＩＲによって、光分配要素（例えば、ＯＰＥ）７５０、次いで、外部結合光学要素（例えば、ＥＰ）８２０に伝搬するように、光線７９０を偏向させる。外部結合光学要素８２０は、次いで、最後に、光線７９０を視認者に外部結合し、視認者は、他の導波管６７０、６８０からの外部結合した光も受信する。

図９Ｃは、図９Ａおよび９Ｂの複数のスタックされた導波管の例の見下げ平面図を図示する。図示されるように、導波管６７０、６８０、６９０は、各導波管の関連付けられた光分配要素７３０、７４０、７５０および関連付けられた外部結合光学要素８００、８１０、８２０とともに、垂直に整列させられ得る。しかしながら、本明細書に議論されるように、内部結合光学要素７００、７１０、７２０は、垂直に整列させられない。むしろ、内部結合光学要素は、好ましくは、非重複する（例えば、見下げ図に見られるように、側方に間隔を置かれる）。本明細書でさらに議論されるように、この非重複空間配置は、１対１ベースで異なるリソースから異なる導波管の中への光の投入を促進し、それによって、特定の光源が特定の導波管に固有に結合されることを可能にする。いくつかの実施形態では、非重複の空間的に分離される内部結合光学要素を含む配置は、シフトされた瞳システムと称され得、これらの配置内の内部結合光学要素は、サブ瞳に対応し得る。

本明細書に説明されるように、種々の実施形態による、ディスプレイシステム（例えば、図２のディスプレイシステム８０等の拡張現実ディスプレイシステム）は、仮想オブジェクトが提示されるべき深度を調節し得る。上で説明されるように、第１の深度において提示されるべき仮想オブジェクトは、第２の仮想オブジェクトが提示されるべき、または実オブジェクトが存在する第２の深度に対応するように調節され得る。異なる深度は、ディスプレイシステムが仮想オブジェクトを設置するように構成される異なる深度平面に対応し得ることを理解されたい。いくつかの実施形態では、ディスプレイシステムのユーザは、したがって、遠近調節を変化させる必要なく、および／または２つのオブジェクトが異なる深度平面上にあることを知覚せずに、第１の仮想オブジェクトおよび第２の仮想または実オブジェクトの視認間を切り替え得る。深度を調節することは、遠近調節キューを調節すること（例えば、波面発散を調節すること）および両眼キューを調節すること（例えば、ユーザの各眼に提供されている仮想オブジェクトの各々のビューを調節すること）の一方または両方を含み得る。

ディスプレイシステムは、ユーザの３次元凝視点を決定することに基づいて、仮想オブジェクトと実オブジェクトとの間でユーザが焦点を切り替えていることを決定し得る。例えば、ディスプレイシステムは、決定された凝視点に提示されている仮想オブジェクト間でユーザが凝視点を切り替えていることを決定し得る。凝視点は、（１）ｘ−軸（例えば、側方軸）、（２）ｙ−軸（例えば、垂直軸）、および（３）ｚ−軸（例えば、点の深度、例えば、ユーザからの深度）に沿った空間内の点の場所を示し得る。いくつかの実施形態では、ディスプレイシステムは、カメラ（例えば、図６のセンサ６３０）等のセンサを利用し、ユーザの眼（例えば、各眼の瞳孔および／または角膜等）を監視し、各眼の視線を決定し得る。各眼の視線は、眼の水晶体を通して中心窩から延びているベクトルであると理解され得る。ディスプレイシステムは、眼に関連付けられたベクトルが交差する場所を外挿するように構成され得、この交差点は、眼の凝視点であると理解され得る。換言すると、凝視点は、ユーザの両眼が近づきつつある３次元空間内の場所であり得る。いくつかの実施形態では、ディスプレイシステムは、例えば、高速移動中のユーザの眼のわずかな移動（例えば、断続性運動、微小断続性運動）をフィルタ処理し得、眼が３次元空間内の場所を凝視していることを決定すると、凝視点を更新し得る。例えば、ディスプレイシステムは、閾値持続時間未満において点を凝視している眼の移動を無視し、および／または不随意眼移動（例えば、瞬目）を無視するように構成され得る。

ここで図１０Ａを参照すると、例は、ディスプレイシステム（例えば、ディスプレイシステム８０、図２）によって提示されるユーザが視認するコンテンツ（例えば、ユーザの視野１００４を表すディスプレイ錐台内に含まれるコンテンツ）の表現を図示する。表現は、ユーザの眼１００２を含み、コンテンツは、第１の仮想オブジェクト１００６（例えば、書籍）と、第２の仮想オブジェクト１００８（例えば、木）とを含む。例として、ユーザは、第１の仮想オブジェクト１００６（例えば、書籍またはテキストの表現が、ユーザに提示されるように見え得る）に説明されている木について読んでおり、ユーザが、第１の仮想オブジェクト１００６を読むにつれて、木の異なる表現が、提示され得る。加えて、書籍１００６は、随意に、実世界オブジェクト（例えば、実際の書籍）であり得、ユーザが書籍１００６を読むにつれて、ディスプレイシステムは、書籍１００６に説明される木に対応する異なる木をユーザに提示し得る。第１の仮想オブジェクト１００６または第１の実世界オブジェクトと第２の仮想オブジェクト１００８とは、以降、それぞれ、第１のオブジェクトおよび第２のオブジェクトと称されるであろう。

図示されるように、第１のオブジェクト１００６および第２のオブジェクト１００８は、ディスプレイシステムが仮想コンテンツを提示するように構成される深度平面であり得る異なる深度平面に関連付けられ得る。いくつかの実施形態では、第２のオブジェクト１００８の知覚される深度は、第１のオブジェクト１００６の知覚される深度基づいて調節されるか、またはその逆である。例として、ユーザが、第１のオブジェクト１００６を凝視していると決定される場合、仮想コンテンツは、深度平面Ｂに提示され得る。代替として、ユーザが第２のオブジェクト１００８を凝視していると決定される場合、仮想コンテンツは、深度平面Ｃに提示され得る。上で説明されるように、ディスプレイシステム（例えば、可変焦点ディスプレイシステム）は、ユーザに提示される各フレームに対して、全ての仮想コンテンツを同一深度平面に提示し得る。例えば、ディスプレイシステムは、各フレームに対して、同一導波管（例えば、導波管２７０、２８０、２９０、３００、３１０のうちの１つ、図６）を介して、全ての仮想コンテンツを出力し得る。図１１に関して以下に説明されるであろうように、各深度平面は、ユーザからのある範囲の深度に関連付けられ得る。ディスプレイシステムは、したがって、ユーザの３次元凝視点を決定し、凝視点に関連付けられた深度に基づいて、深度平面を選択し得る。例えば、深度範囲１００９は、深度平面Ｃに関連付けられ、それによって、深度範囲１００９内に含まれる深度に提示される仮想オブジェクトに対して、ユーザによって凝視されると、仮想オブジェクトが深度平面Ｃに提示される。図１０Ａは、４つの例示的深度平面（例えば、深度平面Ａ−Ｄ）を図示するが、他の深度平面の数が、利用され得る（例えば、２、３、または４以上の深度平面）。

図１０Ａ−１０Ｂの例証は、平面境界を有するように深度平面を図示するが、深度平面のサイズおよび形状は、図示されるものと異なり得ることを理解されたい。例えば、本明細書に説明される深度平面は、湾曲され得る。

図１０Ａおよび１０１０Ａに表される例示的シナリオを継続して参照すると、ユーザは、第１のオブジェクト１００６を視認する。例えば、ユーザは、その眼１００２をその第１のオブジェクト１００６に固定し得る。ディスプレイシステムは、眼１００２の凝視点を決定し、凝視点が第１のオブジェクト１００６の場所に対応することを決定し得る。第１のオブジェクト１００６を視認後、ユーザは、次いで、表現１０１０Ｂに示されるように、第２のオブジェクト１００８を凝視し得る。この例では、ディスプレイシステムは、仮想コンテンツ、例えば、第１のオブジェクト１００６を第２のオブジェクト１００８に関連付けられた異なる深度平面に提示し続け得る。

上で説明されるように、第１のオブジェクト１００６は、随意に、実世界オブジェクトであり得る。このシナリオでは、ディスプレイシステムは、ユーザが深度平面Ｂ（例えば、この例では、第１のオブジェクト１００６によって表され得る実世界オブジェクトに対応する）に関連付けられた３次元空間内の場所を凝視していることを決定し得る。ディスプレイシステムは、仮想コンテンツを第２のオブジェクト１００８として深度Ｃに関連付けられた深度平面に提示し得る（例えば、第２のオブジェクト１００８は、深度平面Ｃに提示され得る）。

両オブジェクトが、仮想オブジェクトである場合、ユーザが第１のオブジェクト１００６と第２のオブジェクト１００４との間で凝視点を交互させるにつれて、ディスプレイシステムは、典型的には、第１のオブジェクト１００６または第２のオブジェクト１００８が凝視されているかどうかに応じて、仮想コンテンツが提示される深度平面を変化させることが要求され得る。同様に、ユーザの眼１００２は、コンテンツが深度平面Ｂと深度平面Ｃとの間で切り替わるにつれて、遠近調節を変化させることが要求される。本明細書に記載されるように、いくつかの状況では、深度平面間の切り替えは、ユーザの遠近調節応答が異なる深度平面に調節するにつれて、コンテンツを知覚することにおいて、望ましくなく、フリッカおよび／または一時的遅延を生じさせ得る。

有利には、いくつかの実施形態では、ディスプレイシステムは、仮想オブジェクトが提示される深度平面を修正し得、本修正は、深度平面間のディスプレイシステムの切り替えおよび／またはユーザの遠近調節応答の切り替えを低減させ得る。図１０Ｂは、コンテンツを視認するユーザの表現の別の例を図示する。図示されるように、第２のオブジェクト１００８は、第１のオブジェクト１００６と同一深度平面に関連付けられるように調節されている。例えば、第１のオブジェクト１００６および第２のオブジェクト１００８は両方とも、深度平面Ｂに関連付けられ、またはその上に設置される。いくつかの実施形態では、光が、ユーザに出力され、第１のオブジェクト１００６または第２のオブジェクト１００８のいずれかに関する画像情報を提供するとき、波面発散は、同一となるであろう。したがって、ユーザの眼１００２は、仮想オブジェクト１００６、１００８間で焦点を切り替えるとき、遠近調節を変化させることを要求されることを回避し得る。

第２のオブジェクト１００８に関連付けられた深度平面が、第１のオブジェクト１００６に対応するように調節されている間、ディスプレイシステムは、ユーザの各々の眼１００２に提示される第２のオブジェクト１００８のビュー（例えば、両眼分離提示および立体視から決定されるような知覚される深度）を維持し得る（例えば、調節しない）。例えば、図１０Ａに図示されるように、第２のオブジェクト１００８（例えば、木）は、第１のオブジェクト１００６より深度が遠くに位置付けられる。第２のオブジェクト１００８は、第２のオブジェクト１００８を表す光の波面発散が修正されるように調節され得る（例えば、遠近調節キューが調節される）。しかしながら、第２のオブジェクト１００８は、依然として、両眼視差を介して、第１のオブジェクト１００６からの深度においてより遠くに位置するように知覚され得る（例えば、両眼キューは、維持され得る）。本明細書で使用されるように、遠近調節キューを調節することは、仮想オブジェクトのユーザのビューを形成するための画像情報を提供する光の波面発散を変化させることを伴い、両眼キューを調節することは、視認者の片眼または両眼に提示される仮想オブジェクトのビューを変化させることを伴うことを理解されたい。両眼キューを保持しながら、遠近調節キューを調節することは、両眼視差が第１の深度をユーザに示す一方、波面発散が第２の深度をユーザに示すように、遠近調節−両眼離反運動不整合をもたらし得る。この不整合が、閾値（例えば、０．３３ジオプタ以上、０．５ジオプタ以上）を超える場合、負の生理学的応答が、ユーザによって遭遇され得る（例えば、頭痛）。

随意に、ディスプレイシステムは、不整合が閾値を超えることを決定し得、さらに、第２のオブジェクト１００８および／または第１のオブジェクト１００６に対する両眼キューを調節し得る。例として、ディスプレイシステムによってユーザの各眼に提供されている第２のオブジェクト１００８のビューは、深度平面Ｂと同一または類似深度に見えるであろうような第２のオブジェクト１００８のビューに対応するように調節され得る（両眼キューが調節され得る）。すなわち、第２のオブジェクト１００８は、第１のオブジェクト１００６とユーザから同一または類似深度に位置するように知覚されるであろう。これは、知覚可能修正を第２のオブジェクト１００８の３次元場所内に導入し得るが、負の生理学的応答における低減は、有利となり得る。随意に、第２のオブジェクト１００８の知覚されるサイズは、第２のオブジェクト１００８が移動したように見える知覚される距離に従って調節され得る。例えば、図１０Ａに図示されるように、第２のオブジェクト１００８は、最初に、第１のオブジェクト１００６からより遠くにあるように提示された（例えば、少なくとも部分的に、両眼視差に基づいて）。したがって、第２のオブジェクト１００８がユーザのより近くに位置するように知覚されるように、両眼キューが調節される場合、ディスプレイシステムは、類似サイズであるように知覚されるように、第２の仮想オブジェクト１００８をスケーリングし得る。例えば、ディスプレイシステムは、ユーザの視野１００４の同一量（例えば、体積および／または面積）を占めるように、第２の仮想オブジェクト１００８をスケーリングし得る。別の例として、ディスプレイシステムは、ユーザの眼の角度分解能に合致するように、第２の仮想オブジェクト１００８をスケーリングし得る。例えば、テキストのフォントサイズは、ユーザからより遠くに移動させられた書籍に対して増加させられることができる。

随意に、ディスプレイシステムは、不整合が閾値を超えることを決定し得、不整合が閾値未満またはそれと等しくなるように、第２のオブジェクト１００８の両眼キューを調節し得る。すなわち、第１の仮想オブジェクト１００６と同一深度に対応するように両眼キュー（例えば、各眼に提供されているオブジェクト１００８のビュー）を修正することとは対照的に、ディスプレイシステムは、不整合が単に閾値未満であるように、両眼キューを修正し得る。これは、第２のオブジェクト１００８が、ユーザに深度がより近くあるように知覚されるが、第１のオブジェクト１００６と同一深度であるように突然知覚されないという効果を有し得る。

ディスプレイシステムは、随意に、閾値メトリックを上回って、例えば、閾値回数を上回って、閾値頻度を上回る頻度で、および／または閾値持続時間を上回って、第１のオブジェクト１００６と第２のオブジェクト１００８との間でユーザが切り替えていることを決定すると、第２のオブジェクト１００８の深度を調節し得る。例えば、ユーザが、第１のオブジェクト１００６を定期的に凝視し、第２のオブジェクト１００８を稀に凝視するか、または散発的に凝視する場合、ディスプレイシステムは、第２のオブジェクト１００８に関連付けられた深度平面を調節しないことを決定し得る。一方、例として、ユーザが、数秒または数分の長さにわたって、第１のオブジェクト１００６と第２のオブジェクト１００８との間で前後に凝視する場合、ディスプレイシステムは、第１および第２のオブジェクトを共通深度に設置し得る。

その共通深度は、種々の基準に基づいて選択され得る。例えば、第１のオブジェクト１００６が、実オブジェクト（例えば、書籍）であり、第２のオブジェクト１００８が、仮想オブジェクトである場合、ディスプレイシステムは、随意に、第２のオブジェクト１００８に関連付けられた深度平面を調節し得る（例えば、調節された深度平面は、深度平面Ｂであり得る）。いくつかの実施形態では、第１のオブジェクト１００６および第２のオブジェクト１００８は両方とも、仮想オブジェクトであり得、両オブジェクトを設置すべき深度平面に関する決定が、ユーザが主に凝視している深度平面に基づいて行われ得る。例えば、決定は、ユーザが各仮想オブジェクトを凝視する時間量に基づき得る。例えば、ユーザが、第１のオブジェクト１００６の凝視により多くの時間量を費やす場合、ディスプレイシステムは、第２のオブジェクトが深度平面Ｂ上に設置されるように、第２のオブジェクト１００８に関連付けられた深度平面を調節し得る。いくつかの実施形態では、ディスプレイシステムは、ユーザの選好を示す情報を取得し得る。例えば、ユーザは、第２のオブジェクト１００８を主要仮想オブジェクトであると見なすことを示し得、したがって、第１のオブジェクト１００６に関連付けられた深度平面が、これが第２のオブジェクト１００８の深度平面に対応するように調節され得る。随意に、特定のタイプの仮想オブジェクトが、深度調節のために利用可能ではないものとして識別され得る。例として、テキストまたは細かい詳細を含む仮想オブジェクトは、その現在の深度平面を維持し得る一方、他の仮想オブジェクトが、調節される。

随意に、深度キューを調節することに加え、ディスプレイシステムは、例えば、第２の仮想オブジェクト１００８が場所内でシフトされるように、第２の仮想オブジェクト１００８の場所を調節し得る。いくつかの実施形態では、ユーザは、第２の仮想オブジェクト１００８が位置すべき場所を示し得る。例えば、外科医であるユーザは、医療情報の形態における仮想コンテンツが患者に対して特定の場所に表示されることを好み得る。外科医は、手のジェスチャ、音声入力、トーテム等の入力を使用して、この特定の場所を示し得る。例えば、ディスプレイシステムは、手のジェスチャを特定の場所を示すこととして認識し得、ディスプレイシステムは、特定の場所にあるように知覚されるように、第２の仮想オブジェクト１００８の場所を調節し得る。

図１１は、ディスプレイシステムのユーザの視野１１００の表現を図示し、種々の深度平面の調整をさらに図示する。視野１１００は、第１の深度平面１１０２および第２の深度平面１１０４の表現を含む。図示されるように、深度の範囲（例えば、各深度平面に関連付けられた体積）が、各深度平面に対応するように図示される。例えば、深度平面２の近位範囲は、深度１１０６Ａから深度１１０６Ｂまで延びている。範囲１１０６Ａ−１１０６Ｂ内の深度に提示されるべき仮想オブジェクトは、深度平面２（また、参照番号１１０４として識別される）に提示され得る。例として、仮想オブジェクトは、深度平面２に関連付けられた導波管を介して出力され得る。加えて、範囲１１０６Ａ−１１０６Ｂ内の深度に提示されるべき任意の仮想オブジェクトの波面発散は、同一であり、したがって、深度平面２に関連付けられ得る。図１０Ａに関して上で説明されるように、深度平面のサイズおよび形状は、図１１に図示されるものと異なり得る。例えば、深度平面を定義する体積は、湾曲形状を有し得る。

上で説明されるように、ディスプレイシステムは、ユーザの凝視点を決定し得る。凝視点が、範囲１１０６Ａ−１１０６Ｂ内にある場合、ディスプレイシステムは、深度平面２に関連付けられた波面発散を用いて、仮想コンテンツを提示し得る。ユーザが、次いで、深度平面１に関連付けられた範囲内にある場所を凝視する場合、ディスプレイシステムは、深度平面１に関連付けられた波面発散を用いて、コンテンツを提示する。上で説明されるように、ディスプレイシステムは、ユーザに提示されている任意のフレームに対して、単一深度平面が利用されるように、可変焦点ディスプレイシステムであり得る。例えば、１つの導波管が、利用され、各フレームに対して、全ての仮想コンテンツを出力し得る。

いくつかの実施形態では、本明細書に説明されるように、ディスプレイシステムは、特定の仮想オブジェクトを提示すべき深度平面を調節し得る。このように、ディスプレイシステムは、仮想コンテンツを提示するために選択された深度平面が修正される必要がある範囲を限定し得る。例として、第１のオブジェクトは、深度平面１体積１１０８に提示され得、第２のオブジェクトは、深度平面２体積１１０９に提示され得る。ここで説明される技法を利用しない場合、ユーザが、第１のオブジェクトを凝視しているとき、ディスプレイシステムは、第１のオブジェクトおよび第２のオブジェクトを深度平面２ １１０４上に提示し得る（例えば、深度平面２ １１０４に関連付けられた同一導波管を介して）。続いて、ユーザが、第２のオブジェクトに凝視点を切り替えると、ディスプレイは、深度平面１ １１０２を介して、第１のオブジェクトおよび第２のオブジェクトを提示し得る。対照的に、いくつかの実施形態では、ユーザが、第１のオブジェクトと第２のオブジェクトとの間で凝視点を変化させるとき、両オブジェクトは、同一深度平面上に設置され得る。すなわち、第１のオブジェクトまたは第２のオブジェクトのいずれかに関連付けられた深度平面は、深度平面２ １１０４または深度平面１ １１０２のいずれかが両オブジェクトに関連付けられ得るように、調節され得る。

図１２は、仮想オブジェクトに関連付けられた深度平面を調節するための例示的プロセス１２００のフローチャートを図示する。便宜上、プロセス１２００は、ディスプレイシステム（例えば、ウェアラブルディスプレイシステム６０）によって行われるように説明され、それは、処理ハードウェアおよびソフトウェアを含み得、随意に、情報を１つ以上のコンピュータまたは他の処理の外部システムに提供し、例えば、処理を外部システムにオフロードし、情報を外部システムから受信し得る。

ブロック１２０２では、ディスプレイシステムは、ユーザの眼の３次元凝視点を監視する。上で説明されるように、ディスプレイシステムは、ユーザの眼に関連付けられた情報（例えば、眼の向き）を監視するためのセンサを含み得る。センサの非包括的リストは、赤外線センサ、紫外線センサ、および可視波長光センサを含む。センサは、随意に、赤外線、紫外線、可視光、および／または偏光光をユーザの眼上に出力し、ユーザの眼からの出力された光の反射を決定し得る。例として、赤外線光は、赤外線光エミッタおよび赤外線光センサによって出力され得る。光エミッタを含み得る、センサは、図６の結像デバイス６３０に対応し得ることを理解されたい。

ディスプレイシステムは、センサを利用して、各眼に関連付けられた視線（例えば、眼の水晶体を通して中心窩から延びているようなユーザの眼から延びているベクトル）と、各眼の視線の交差点とを決定することによって、ユーザの凝視を追跡し得る。例えば、ディスプレイシステムは、赤外線光をユーザの眼上に出力し得、眼からの反射（例えば、角膜反射）が、監視され得る。眼の瞳孔中心と（例えば、ディスプレイシステムは、例えば、赤外線結像を通して、瞳孔の重心を決定し得る）眼からの反射との間のベクトルが、眼の視線を決定するために使用され得る。視線の交差点は、したがって、３次元凝視点として割り当てられ得る。随意に、ディスプレイシステムは、凝視点を決定するとき、ディスプレイシステムに関連付けられた向き情報（例えば、３次元空間内のディスプレイシステムの向きを説明する情報）を利用し得る。

ディスプレイシステムは、ユーザが視認しているオブジェクトを追跡するために決定された凝視点を監視し得る。例えば、ディスプレイシステムは、第１の仮想オブジェクトが提示される３次元場所に対応する決定された３次元凝視点に基づいて、ユーザが第１の仮想オブジェクトを視認していることを決定し得る。加えて、ディスプレイシステムは、ユーザが仮想オブジェクトに対応しない場所を凝視していることを決定し得、実世界オブジェクトが凝視点に位置する可能性が高いことを決定し得る。

ブロック１２０４では、ディスプレイシステムは、ユーザへの提示のための仮想オブジェクトに関連付けられた場所情報を得る。ユーザへの提示のための仮想オブジェクトのレンダリングに先立って（例えば、上で説明されるように、導波管の出力を介して）、ディスプレイシステムは、仮想オブジェクトに関連付けられた３次元場所情報を取得し得る。例えば、上で説明されるように、仮想オブジェクトは、コンテンツが実世界内に位置するように現れるように、ユーザに提示され得る（例えば、コンテンツは、ユーザの視野内の異なる深度平面に配置され得る）。ディスプレイシステムは、周囲環境内の任意の仮想コンテンツの意図される場所を含むこの周囲環境の３次元マップを含み得るか、またはそこへのアクセスを有し得ることを理解されたい。このマップを参照すると、ディスプレイシステムは、ユーザの視野内の仮想コンテンツの３次元場所（例えば、図１０Ａ−１０Ｂに図示されるように、ディスプレイ錐台内の場所）を規定する情報にアクセスし、それを提供し得る。

上で説明されるように、仮想オブジェクトに関する場所情報は、３次元場所を含み得る。３次元場所に基づいて、仮想オブジェクトは、ユーザが、仮想オブジェクトを凝視する場合、特定の深度平面が、ユーザが凝視を切り替えるまで、各フレームに対して、全ての仮想コンテンツを提示するために利用され得るように、特定の深度平面に関連付けられ得る（例えば、図１１に図示および説明されるように）。

ブロック１２０６では、ディスプレイシステムは、仮想オブジェクトに関連付けられた深度平面を調節する。図１０Ａ−１０Ｂに関して上で説明されるように、ディスプレイシステムは、ユーザが、閾値メトリックを上回って、例えば、閾値回数を上回って、または閾値頻度を上回る頻度で、２つ以上の凝視点間で切り替えていることを決定し得る。例えば、ユーザは、３０秒、１分、数分毎に１回等、第１の凝視点と第２の凝視点との間で切り替え得る。第１の凝視点および第２の凝視点が、例えば、図１１に図示されるように、異なる深度平面に関連付けられる場合であり、凝視点が、異なる深度平面体積内に位置する場合、ディスプレイシステムは、ユーザが凝視点間で切り替える度に、異なる深度平面に関するコンテンツを提示することが要求され得る（例えば、本明細書に説明される技法を利用しない場合）。

ディスプレイシステムは、したがって、仮想オブジェクトに関連付けられた深度平面を調節し得る。本明細書に説明されるように、これは、仮想オブジェクトをユーザが同様に凝視している別のオブジェクト（例えば、仮想オブジェクト、実世界オブジェクト）の深度平面に関連付けることを含み得る。すなわち、仮想オブジェクトに関連付けられた遠近調節キュー（例えば、波面発散）が、異なる深度平面に対応するように調節され得る。ディスプレイシステムは、得られる場所情報を利用して、仮想オブジェクトの３次元場所を決定し得、場所情報を調節された深度平面で更新し得る。上で説明されるように、ディスプレイシステムは、仮想オブジェクトを選択し、仮想オブジェクトが凝視されている頻度に従って調節し得る。例えば、ユーザが、第２の仮想オブジェクトより多く第１の仮想オブジェクトを凝視している場合、ディスプレイシステムは、第１の仮想オブジェクトがすでに提示されている深度平面上に提示されるように、第２の仮想オブジェクトを調節し得る。

加えて、いくつかの実施形態では、ディスプレイシステムは、調節されるべき仮想オブジェクトの指示を取得し得る。例として、ユーザは、他の仮想オブジェクトが調節され、特定の仮想オブジェクトがその関連付けられた深度平面に留まるように、特定の仮想オブジェクトが所与の調節に対する選好が与えられるべきことを示し得る。別の例として、移動している（例えば、閾値比率より高速で移動している）仮想オブジェクトが、例えば、非凝視オブジェクトによって生じる注意散漫を減少させるための所与の選好であり得る。随意に、ディスプレイシステムは、調節されるべきではない仮想オブジェクトの指示を取得し得る。さらに、ディスプレイシステムは、随意に、調節が行われてもそれらが同一深度平面に提示されるように、ユーザにリンクされ、焦点が合ったままである、仮想オブジェクトの指示を取得し得る。例えば、ディスプレイシステムは、５つの仮想オブジェクトを提示し得、５つの仮想オブジェクトのうちの２つが焦点が合ったままであることを確実にし得る（例えば、２つの仮想オブジェクトは、同一深度平面に提示され得る）。

ブロック１２０８では、ディスプレイシステムは、調節されたコンテンツをユーザに提示する。例えば、調節された仮想オブジェクトは、調節された波面発散を用いて、ユーザに出力され得る。すなわち、ユーザが、仮想オブジェクトを凝視する場合、仮想オブジェクトは、そのオリジナル深度平面（周囲環境のディスプレイシステムのマップによって示されるように）ではなく、調節された深度平面に対応する波面発散を用いて、ユーザに出力され得る。波面発散の調節の例は、異なる導波管が異なる量の波面発散を伴う光を出力する、仮想オブジェクトが表示されるべき特定の導波管を調節することである。

図１３は、仮想オブジェクトに関連付けられた深度平面を調節するための別の例示的プロセス１３００のフローチャートを図示する。便宜上、プロセス１３００は、ディスプレイシステム（例えば、ウェアラブルディスプレイシステム６０）によって行われるように説明され得、それは、処理ハードウェアおよびソフトウェアを含み得、随意に、情報を１つ以上のコンピュータまたは他の処理の外部システムに提供し、例えば、処理を外部システムにオフロードし、情報を外部システムから受信し得る。

ブロック１３０２では、ディスプレイシステムは、３次元凝視点を監視し、ブロック１３０４では、ディスプレイシステムは、提示されるコンテンツに関連付けられた場所情報を得る（それぞれ、ブロック１２０２、１２０４（図１２）に類似する）。ブロック１３０６では、ディスプレイシステムは、仮想オブジェクトに関連付けられた深度平面を調節する。図１２（例えば、ブロック１２０６）に関して上で説明されるように、ディスプレイシステムは、仮想オブジェクトと異なる深度平面を関連付け、それによって、仮想オブジェクトに関連付けられた遠近調節キューを調節し得る。対照的に、ブロック１３０６では、ディスプレイシステムは、両眼キューを調節し、仮想オブジェクトの知覚される深度を調節し得る。すなわち、ディスプレイシステムは、ユーザの各眼に提供される仮想オブジェクトのビューを調節し得、そのような調節は、両眼分離提示を通した仮想コンテンツの両眼視差の調節を伴い得る。このように、仮想オブジェクトは、他の仮想コンテンツと同一もしくは類似深度または仮想オブジェクトのオリジナル深度と異なる深度に提示されるように現れることができる。ディスプレイシステムは、次いで、図１２に関してブロック１２０８のために上で説明されるように、ブロック１３０８において、調節されたコンテンツをユーザに提示する。

図１４は、仮想オブジェクトに関連付けられた遠近調節キューおよび両眼キューを調節するための例示的プロセスのフローチャートを図示する。便宜上、プロセス１３００は、ディスプレイシステム（例えば、ウェアラブルディスプレイシステム６０）によって行われるように説明され得、それは、処理ハードウェアおよびソフトウェアを含み得、随意に、情報を１つ以上のコンピュータまたは他の処理の外部システムに提供し、例えば、処理を外部システムにオフロードし、情報を外部システムから受信し得る。

ブロック１４０２では、ディスプレイシステムは、ブロック１２０２、１２０４（図１２）に関して前述のように、調節されるべき仮想オブジェクトの指示を得る。上で説明されるように、特定の仮想オブジェクトまたは１つ以上の仮想オブジェクトの提示は、関連付けられた深度平面に対して調節され得る。

ブロック１４０４では、仮想オブジェクトに関連付けられた遠近調節キューが、調節される。本明細書に説明されるように、仮想オブジェクトに関連付けられた深度平面が、ディスプレイシステムのマップによって示される深度平面に対して調節され得る。いくつかの実施形態では、仮想オブジェクトの波面発散が、ユーザが同様に凝視している１つ以上の他の仮想オブジェクトと同一であるように調節され得る。深度平面を調節することは、波面発散を調節するので、両眼視差を利用することによって、仮想オブジェクトは、ユーザによって、同一の調節されていない３次元場所にあるように知覚され得る。例えば、ディスプレイシステムは、例えば、同一両眼分離提示を維持することによって、仮想オブジェクトの波面発散を調節せずに提示されるであろうものと同一仮想オブジェクトのビューをユーザの各眼に提示し得る。したがって、出力光の波面発散が調節される場合でも、ユーザは、空間内の同一３次元場所において仮想オブジェクトを知覚するであろう（例えば、両眼視差に起因して）。上で説明されるように、両眼キュー（例えば、ユーザに提供される仮想オブジェクトのビュー）ではなく、波面発散を調節することは、知覚可能不整合をユーザに導入し得る。

有利には、いくつかの実施形態では、ディスプレイシステムは、ブロック１４０６において、それらの両眼キューが上記の遠近調節キューにおける変化に一致するように、仮想オブジェクトに関連付けられた両眼キューを調節する。両眼離反運動と遠近調節との間の不整合を低減させるために、例えば、ディスプレイシステムは、ユーザの各眼に提示される仮想オブジェクトのビューを調節し得る。例えば、深度がユーザのより近くにあるように知覚されるように、仮想オブジェクトに関連付けられた遠近調節キューが調節される場合、ディスプレイシステムは、同様に、そのより近い深度に対応するように両眼キューを調節し得る。図１０Ａ−１０Ｂに関して上で説明されるように、ディスプレイシステムは、閾値メトリックを上回って、例えば、閾値回数を上回って、または閾値頻度を上回ってユーザが２つ以上の凝視点間で切り替えていることの決定後、両眼キューの調節を実装し得る。

ブロック１４０８では、調節された仮想コンテンツが、ユーザに提示される。遠近調節キューおよび両眼キューの両方が調節されているので、仮想コンテンツは、更新された深度に対応する３次元空間内の新しい場所に位置するように知覚されるであろう。仮想コンテンツは、新しい場所において知覚されるであろうため、随意に、ディスプレイシステムは、新しい場所に対応するように仮想コンテンツに関連付けられた場所情報を更新し得る。

本明細書に説明される、ならびに／または図に描写されるプロセス、方法、およびアルゴリズムの各々は、具体的かつ特定のコンピュータ命令を実行するように構成される１つ以上の物理的コンピューティングシステム、ハードウェアコンピュータプロセッサ、特定用途向け回路、および／もしくは電子ハードウェアによって実行されるコードモジュールにおいて具現化され、それによって完全もしくは部分的に自動化され得ることを理解されたい。例えば、コンピューティングシステムは、具体的コンピュータ命令でプログラムされた汎用コンピュータ（例えば、サーバ）または専用コンピュータ、専用回路等を含むことができる。コードモジュールは、実行可能プログラムにコンパイルおよびリンクされ、動的リンクライブラリ内にインストールされ得るか、または解釈されるプログラミング言語において書き込まれ得る。いくつかの実装では、特定の動作および方法が、所与の機能に特定の回路によって実施され得る。

さらに、本開示の機能性のある実装は、十分に数学的、コンピュータ的、または技術的に複雑であるので、（適切な特殊化された実行可能命令を利用する）特定用途向けハードウェアまたは１つ以上の物理的コンピューティングデバイスは、例えば、関与する計算の量もしくは複雑性に起因して、または結果を実質的にリアルタイムで提供するために、機能性を実施する必要があり得る。例えば、ビデオは、多くのフレームを含み、各フレームは、数百万のピクセルを有し得、具体的にプログラムされたコンピュータハードウェアは、商業的に妥当な時間量において所望の画像処理タスクまたは用途を提供するようにビデオデータを処理する必要がある。

コードモジュールまたは任意のタイプのデータは、ハードドライブ、ソリッドステートメモリ、無作為アクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、光学ディスク、揮発性もしくは不揮発性記憶装置、同一物の組み合わせ、および／または同等物を含む物理的コンピュータ記憶装置等の任意のタイプの非一過性コンピュータ読み取り可能な媒体上に記憶され得る。いくつかの実施形態では、非一過性コンピュータ読み取り可能な媒体は、ローカル処理およびデータモジュール（１４０）、遠隔処理モジュール（１５０）、および遠隔データリポジトリ（１６０）のうちの１つ以上のものの一部であり得る。方法およびモジュール（またはデータ）は、無線ベースおよび有線／ケーブルベースの媒体を含む、種々のコンピュータ読み取り可能な伝送媒体上で生成されたデータ信号としても（例えば、搬送波または他のアナログもしくはデジタル伝搬信号の一部として）伝送され得、種々の形態（例えば、単一もしくは多重化アナログ信号の一部として、または複数の個別的なデジタルパケットもしくはフレームとして）をとり得る。開示されるプロセスまたはプロセスステップの結果は、任意のタイプの非一過性有形コンピュータ記憶装置内に持続的もしくは別様に記憶され得るか、またはコンピュータ読み取り可能な伝送媒体を介して通信され得る。

本明細書に説明される、および／または添付される図に描写されるフロー図における任意のプロセス、ブロック、状態、ステップ、もしくは機能性は、プロセスにおいて具体的機能（例えば、論理もしくは算術）またはステップを実装するための１つ以上の実行可能命令を含むコードモジュール、セグメント、またはコードの一部を潜在的に表すものとして理解されたい。種々のプロセス、ブロック、状態、ステップ、または機能性は、組み合わせられ、再配置され、追加され、削除され、修正され、または別様に本明細書に提供される例証的例から変更され得る。いくつかの実施形態では、追加のまたは異なるコンピューティングシステムもしくはコードモジュールが、本明細書に説明される機能性のいくつかまたは全てを実施し得る。本明細書に説明される方法およびプロセスは、任意の特定のシーケンスに限定されず、それに関連するブロック、ステップ、または状態は、適切な他のシーケンスで、例えば、連続して、並行して、またはある他の様式で実施されることもできる。タスクまたはイベントが、開示される例示的実施形態に追加され、またはそれから除去され得る。さらに、本明細書に説明される実装における種々のシステムコンポーネントの分離は、例証を目的とし、全ての実施形態においてそのような分離を要求するものとして理解されるべきではない。説明されるプログラムコンポーネント、方法、およびシステムは、概して、単一のコンピュータ製品において一緒に統合され、または複数のコンピュータ製品にパッケージ化され得ることを理解されたい。

前述の明細書では、本発明は、その具体的実施形態を参照して説明された。しかしながら、種々の修正および変更が、本発明のより広義の精神および範囲から逸脱することなくそこに行われ得ることが明白であろう。明細書および図面は、故に、限定的意味ではなく、例証と見なされるべきである。

実際、本開示のシステムおよび方法の各々は、いくつかの革新的側面を有し、それらのうちのいかなるものも、本明細書に開示される望ましい属性に単独で関与せず、またはそのために要求されないことを理解されたい。上で説明される種々の特徴およびプロセスは、互いに独立して使用され得るか、または種々の方法で組み合わせられ得る。全ての可能な組み合わせおよび副次的組み合わせが、本開示の範囲内に該当することが意図される。

別個の実施形態の文脈において本明細書に説明されるある特徴はまた、単一の実施形態における組み合わせにおいて実装され得る。逆に、単一の実施形態の文脈において説明される種々の特徴も、複数の実施形態において別個に、または任意の好適な副次的組み合わせにおいて実装され得る。さらに、特徴がある組み合わせにおいて作用するものとして上で説明され、さらに、そのようなものとして最初に請求され得るが、請求される組み合わせからの１つ以上の特徴は、いくつかの場合では、組み合わせから削除され得、請求される組み合わせは、副次的組み合わせまたは副次的組み合わせの変動を対象とし得る。いかなる単一の特徴または特徴のグループも、あらゆる実施形態に必要もしくは必須ではない。

とりわけ、「〜できる（ｃａｎ）」、「〜し得る（ｃｏｕｌｄ）」、「〜し得る（ｍｉｇｈｔ）」、「〜し得る（ｍａｙ）」、「例えば（ｅ．ｇ．）」等、本明細書で使用される条件文は、別様に具体的に記載されない限り、または使用されるような文脈内で別様に理解されない限り、概して、ある実施形態がある特徴、要素、および／またはステップを含む一方、他の実施形態がそれらを含まないことを伝えることが意図されることを理解されたい。したがって、そのような条件文は、概して、特徴、要素、および／もしくはステップが、１つ以上の実施形態に対していかようにも要求されること、または１つ以上の実施形態が、著者の入力または促しの有無を問わず、これらの特徴、要素、および／もしくはステップが任意の特定の実施形態において含まれるか、もしくは実施されるべきかどうかを決定するための論理を必然的に含むことを示唆することを意図されない。用語「〜を備えている」、「〜を含む」、「〜を有する」、および同等物は、同義語であり、非限定的方式で包括的に使用され、追加の要素、特徴、行為、動作等を除外しない。また、用語「または」は、その包括的意味において使用され（およびその排他的意味において使用されず）、したがって、例えば、要素のリストを接続するために使用されると、用語「または」は、リスト内の要素のうちの１つ、いくつか、または全てを意味する。加えて、本願および添付される請求項で使用されるような冠詞「ａ」、「ａｎ」、および「ｔｈｅ」は、別様に規定されない限り、「１つ以上の」または「少なくとも１つ」を意味するように解釈されるべきである。同様に、動作は、特定の順序で図面に描写され得るが、それは、望ましい結果を達成するために、そのような動作が示される特定の順序で、もしくは連続的順序で実施される、または全ての図示される動作が実施される必要はないと認識されるべきである。さらに、図面は、フローチャートの形態で１つ以上の例示的プロセスを図式的に描写し得る。しかしながら、描写されない他の動作も、図式的に図示される例示的方法およびプロセス内に組み込まれることができる。例えば、１つ以上の追加の動作が、図示される動作のいずれかの前に、その後に、それと同時に、またはその間に実施されることができる。加えて、動作は、他の実装において再配置される、または再順序付けられ得る。ある状況では、マルチタスクおよび並列処理が、有利であり得る。さらに、上で説明される実施形態における種々のシステムコンポーネントの分離は、全ての実施形態におけるそのような分離を要求するものとして理解されるべきではなく、説明されるプログラムコンポーネントおよびシステムは、概して、単一のソフトウェア製品においてともに統合されるか、または複数のソフトウェア製品にパッケージ化され得ることを理解されたい。加えて、他の実装も、以下の請求項の範囲内である。いくつかの場合では、請求項に列挙されるアクションは、異なる順序で実施され、依然として、望ましい結果を達成することができる。

故に、請求項は、本明細書に示される実装に限定されることを意図されず、本明細書に開示される本開示、原理、および新規の特徴と一貫する最も広い範囲を与えられるべきである。

Claims (20)

1. １つ以上のプロセッサと命令を記憶している１つ以上のコンピュータ記憶媒体とを備えているシステムであって、前記命令は、前記１つ以上のプロセッサによって実行されると、
   ユーザの眼の凝視点を決定することであって、前記凝視点は、前記ユーザの視野内の３次元場所である、ことと、
   前記ユーザに提示すべき第１の仮想オブジェクトに関連付けられた場所情報を得ることであって、前記第１の仮想オブジェクトは、関連付けられた前記ユーザからの深度を有する、ことと、
   前記第１の仮想オブジェクトの１つ以上の深度キューを調節し、前記第１の仮想オブジェクトの深度キューと前記凝視点のための深度キューとの間の差異を低減させることと、
   ディスプレイデバイスを介して、前記調節された１つ以上の深度キューを用いて、前記第１の仮想オブジェクトの前記ユーザへの提示を生じさせることと
   を含む動作を前記１つ以上のプロセッサに行わせる、システム。
2. 前記深度キューは、サイズ、遠近調節キュー、および／または両眼キューを備えている、請求項１に記載のシステム。
3. １つ以上の深度キューを調節することは、前記調節された１つ以上の深度キューに対応する深度平面を前記凝視点の深度平面と合致させることを含む、請求項１に記載のシステム。
4. 前記動作は、前記ユーザが、閾値頻度を上回る頻度で、前記第１の仮想オブジェクトと第２のオブジェクトとの間で凝視点を交互させていることを決定することをさらに含み、
   前記凝視点は、前記第２のオブジェクトの３次元場所と一致し、前記第２のオブジェクトは、仮想オブジェクトまたは実世界オブジェクトである、請求項３に記載のシステム。
5. 前記動作は、ユーザ選好の指示に基づいて、または、前記第１の仮想オブジェクトが第１の仮想オブジェクトに関連付けられた深度と異なる深度を有する第２のオブジェクトよりも少なく凝視されていることの決定に基づいて、前記第１の仮想オブジェクトのための１つ以上の深度キューが調節されるべきことを識別することをさらに含み、前記第２のオブジェクトは、仮想オブジェクトまたは実世界オブジェクトである、請求項１に記載のシステム。
6. 前記１つ以上の深度キューを調節することは、遠近調節キューを調節することを含み、前記動作は、
   前記調節された遠近調節キューを用いた前記第１の仮想オブジェクトの提示に関連付けられた遠近調節・両眼離反運動不整合を決定することと、
   閾値を超える前記遠近調節・両眼離反運動不整合に応答して、両眼キューを調節することと
   をさらに含む、請求項１に記載のシステム。
7. 前記ディスプレイデバイスをさらに備え、前記ディスプレイデバイスは、複数のスタックされた導波管を備え、
   前記複数のスタックされた導波管は、ディスプレイエリアを形成し、前記ディスプレイエリアを通して周囲環境のビューを提供し、前記複数の導波管のうちの少なくともいくつかの導波管は、他の導波管と異なる波面発散を伴う光を出力するように構成され、各導波管は、深度平面に関連付けられている、請求項１に記載のシステム。
8. １つ以上の深度キューを調節することは、前記第１の仮想オブジェクトを形成するための光を出力する導波管を変えることを含む、請求項７に記載のシステム。
9. ディスプレイシステムであって、前記ディスプレイシステムは、
   仮想オブジェクトをユーザに提示するように構成されているディスプレイデバイスであって、各仮想オブジェクトは、複数の深度平面の１つ以上の深度平面上にある、ディスプレイデバイスと、
   １つ以上のプロセッサと、
   命令を記憶している１つ以上のコンピュータ記憶媒体と
   を備え、
   前記命令は、前記ディスプレイシステムによって実行されると、
   前記ユーザの眼移動に関連付けられた情報を監視することと、
   前記監視される情報に基づいて、前記ユーザの眼の凝視点を決定することであって、各凝視点は、前記ユーザの眼によって凝視されている３次元場所を示し、経時的に追跡される、ことと、
   前記決定された凝視点に基づいて、少なくとも１つの仮想オブジェクトを調節することと
   を含む動作を前記ディスプレイシステムに行わせ、
   前記少なくとも１つの仮想オブジェクトは、前記決定された凝視点が含まれる深度平面領域に対応する同一深度平面上に表示され、前記決定された凝視点は、閾値メトリックを上回って前記深度平面領域内に含まれるように決定されている、ディスプレイシステム。
10. 前記ユーザが閾値メトリックを上回って凝視している凝視点は、特定の仮想オブジェクトの場所に対応している、請求項９に記載のディスプレイシステム。
11. 前記動作は、少なくとも１つの仮想オブジェクトが前記特定のオブジェクトより少なく凝視されていることの決定に基づいて、前記少なくとも１つの仮想オブジェクトが調節されるべきことを識別することをさらに含む、請求項１０に記載のディスプレイシステム。
12. 前記ユーザが閾値メトリックを上回って凝視している前記凝視点は、実世界オブジェクトの場所に対応している、請求項９に記載のディスプレイシステム。
13. 前記少なくとも１つの仮想オブジェクトを調節することは、遠近調節キューおよび両眼キューの一方または両方を調節することを含む、請求項９に記載のディスプレイシステム。
14. 前記遠近調節キューは、調節されており、前記動作は、
    前記調節された遠近調節キューを用いた前記少なくとも１つの仮想オブジェクトの提示に関連付けられた遠近調節・両眼離反運動不整合を決定することと、
    閾値を超える前記遠近調節・両眼離反運動不整合に応答して、両眼キューを調節することと
    をさらに含む、請求項１３に記載のディスプレイシステム。
15. 閾値メトリックは、閾値時間量または閾値頻度を備えている、請求項９に記載のディスプレイシステム。
16. 方法であって、前記方法は、
    １つ以上のプロセッサを備えているシステムによって、
    ユーザの眼の凝視点を決定することであって、前記凝視点は、前記ユーザの視野内の３次元場所である、ことと、
    前記ユーザに提示すべき第１の仮想オブジェクトに関連付けられた場所情報を得ることであって、前記第１の仮想オブジェクトは、関連付けられた前記ユーザからの深度を有する、ことと、
    前記第１の仮想オブジェクトの１つ以上の深度キューを調節し、前記第１の仮想オブジェクトの深度キューと前記凝視点のための深度キューとの間の差異を低減させることと、
    ディスプレイデバイスを介して、前記調節された１つ以上の深度キューを用いて、前記第１の仮想オブジェクトの前記ユーザへの提示を生じさせることと
    を含む、方法。
17. １つ以上の深度キューを調節することは、前記調節された１つ以上の深度キューに対応する深度平面を前記凝視点の深度平面と合致させることを含む、請求項１５に記載の方法。
18. 前記ユーザが、閾値頻度を上回る頻度で、前記第１の仮想オブジェクトと第２のオブジェクトとの間で凝視点を交互させていることを決定することであって、前記第２のオブジェクトは、仮想オブジェクトまたは実世界オブジェクトである、ことと、
    前記１つ以上の深度キューを調節することと
    をさらに含む、請求項１５に記載の方法。
19. 前記１つ以上の深度キューを調節することは、遠近調節キューを調節することを含み、前記動作は、
    前記調節された遠近調節キューを用いた前記第１の仮想オブジェクトの提示に関連付けられた遠近調節・両眼離反運動不整合を決定することと、
    閾値を超える前記遠近調節・両眼離反運動不整合に応答して、両眼キューを調節することと
    をさらに含む、請求項１５に記載の方法。
20. 前記ディスプレイデバイスは、複数のスタックされた導波管を備え、
    前記複数のスタックされた導波管は、ディスプレイエリアを形成し、前記ディスプレイエリアを通して周囲環境のビューを提供し、前記複数の導波管のうちの少なくともいくつかの導波管は、他の導波管と異なる波面発散を伴う光を出力するように構成され、各導波管は、深度平面に関連付けられており、
    １つ以上の深度キューを調節することは、前記第１の仮想オブジェクトを形成するための光を出力する導波管を変えることを含む、請求項１５に記載の方法。