JP7497733B2 - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP7497733B2
JP7497733B2 JP2021553512A JP2021553512A JP7497733B2 JP 7497733 B2 JP7497733 B2 JP 7497733B2 JP 2021553512 A JP2021553512 A JP 2021553512A JP 2021553512 A JP2021553512 A JP 2021553512A JP 7497733 B2 JP7497733 B2 JP 7497733B2
Authority
JP
Japan
Prior art keywords
image
display
viewpoint
virtual image
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021553512A
Other languages
English (en)
Other versions
JPWO2021085287A1 (ja
Inventor
諭司 三谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2021085287A1 publication Critical patent/JPWO2021085287A1/ja
Application granted granted Critical
Publication of JP7497733B2 publication Critical patent/JP7497733B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/322Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using varifocal lenses or mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/393Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the volume being generated by a moving, e.g. vibrating or rotating, surface
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. three-dimensional [3D] slide viewers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. three-dimensional [3D] slide viewers
    • G02B30/35Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. three-dimensional [3D] slide viewers using reflective optical elements in the optical path between the images and the observer
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a three-dimensional [3D] volume, e.g. voxels
    • G02B30/54Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a three-dimensional [3D] volume, e.g. voxels the three-dimensional [3D] volume being generated by moving a two-dimensional [2D] surface, e.g. by vibrating or rotating the 2D surface
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/50Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a three-dimensional [3D] volume, e.g. voxels
    • G02B30/56Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a three-dimensional [3D] volume, e.g. voxels by projecting aerial or floating images
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/18Diffraction gratings
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/32Holograms used as optical elements
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • G03B21/60Projection screens characterised by the nature of the surface
    • G03B21/602Lenticular screens
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • G03B21/60Projection screens characterised by the nature of the surface
    • G03B21/62Translucent screens
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • G03B35/20Stereoscopic photography by simultaneous viewing using two or more projectors
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • G03B35/24Stereoscopic photography by simultaneous viewing using apertured or refractive resolving means on screens or between screen and eye
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/346Image reproducers using prisms or semi-transparent mirrors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/363Image reproducers using image projection screens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/388Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of two-dimensional [2D] image planes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249Holobject properties
    • G03H2001/2284Superimposing the holobject with other visual information

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)

Description

本技術は、立体表示に適用可能な画像表示装置に関する。
従来、多方向から観察可能な立体表示を行う技術が開発されている。例えば特許文献1には、多角錐型のミラーを用いて立体映像を表示する立体像表示装置について記載されている。この立体像表示装置では、多角錐型のミラーがその頂点側を底面としてフラットパネルディスプレイ上に配置される。フラットパネルディスプレイには、ミラーの各面に対応して同じ物体を異なる位置から見たコマ映像が表示される。これにより、多角錐型のミラーには、物体を全周にわたる各視点から見た鏡像が表示され、物体の立体視が可能となる(特許文献1の明細書段落[0034][0077][0081][0084]図10等)。
特開2008-224748号公報
特許文献1に記載の方法では、視点の移動に伴う視差(運動視差)を向上するために多角錐型のミラーの面数を増やす必要がある。この場合、面数が増えることで各鏡像のサイズが小さくなる。また多角錐型のミラーの面数を減らすと鏡像のサイズは大きくなるが、運動視差が低下する。このため、立体表示される物体の実在感が損なわれる可能性がある。
以上のような事情に鑑み、本技術の目的は、実在感の高い立体表示を実現することが可能な画像表示装置を提供することにある。
上記目的を達成するため、本技術の一形態に係る画像表示装置は、1以上の虚像スクリーンと、表示部と、表示制御部とを具備する。
前記1以上の虚像スクリーンは、所定の軸の周囲の少なくとも一部を覆うように配置され、投射された画像の虚像を前記所定の軸を基準として表示し、透明である。
前記表示部は、表示対象を互いに異なる方向から見た画像となる複数の視点画像を互いに異なる方向に向けて表示し、前記1以上の虚像スクリーンの各々に前記表示された複数の視点画像を投射する1以上の表示面を有する。
前記表示制御部は、前記虚像スクリーンの周囲の観察点から前記虚像スクリーンを介して前記表示面を見込む第1の方向に対して、前記観察点から前記所定の軸に向かう第2の方向から見える前記表示対象の虚像となる前記視点画像を表示する。
この画像表示装置では、所定の軸の周囲の少なくとも一部を覆うように透明な1以上の虚像スクリーンが配置される。また表示対象の複数の視点画像を異なる方向に向けて表示する1以上の表示面が設けられる。各虚像スクリーンには複数の視点画像が投射される。この時、ある観察点から虚像スクリーンを介して表示面を見込む方向には、その観察点から所定の軸を見たときに見える表示対象の虚像となる視点画像が表示される。これにより、実在感の高い立体表示を実現することが可能となる。
前記複数の視点画像は、前記表示対象を所定の角度ピッチでずらした方向からみた画像であってもよい。この場合、前記表示制御部は、前記観察点の移動に応じて、前記観察点から見て前記表示対象の虚像が前記所定の角度ピッチで切り替わるように前記視点画像を表示してもよい。
前記虚像スクリーンは、前記表示面から投射された前記視点画像を反射して前記視点画像の虚像を表示してもよい。この場合、前記表示制御部は、前記第2の方向から見た前記表示対象の画像を鏡面反転させた前記視点画像を前記第1の方向に表示してもよい。
前記虚像スクリーンは、前記表示面から投射された前記視点画像を透過して前記視点画像の虚像を表示してもよい。この場合、前記表示制御部は、前記第2の方向から見た前記表示対象の前記視点画像を前記第1の方向に表示してもよい。
前記1以上の虚像スクリーンは、複数の虚像スクリーンを含み、前記所定の軸を基準として多面スクリーンを構成してもよい。
前記虚像スクリーンは、回折光学素子又はハーフミラーのいずれか一方であってもよい。
前記虚像スクリーンは、反射型のホログラフィック光学素子又は透過型のホログラフィック光学素子のいずれか一方であってもよい。
前記1以上の虚像スクリーンは、前記所定の軸の全周を覆うように配置されてもよい。
前記1以上の表示面は、前記1以上の虚像スクリーンにより表示される虚像を遮らないように配置されてもよい。
前記1以上の表示面は、複数の表示面を含み、前記所定の軸を基準として多面ディスプレイを構成してもよい。
前記複数の視点画像の虚像は、互いの虚像面の中心線が重なるように表示されてもよい。
前記複数の視点画像の虚像は、互いの虚像面の一部が重なるように表示されてもよい。
が接するように表示されてもよい。
前記虚像スクリーン及び前記表示面の少なくとも一方は、曲面形状であってもよい。
前記表示面は、異方性拡散スクリーンの画像表示面であってもよい。この場合、前記表示部は、互いに異なる方向から前記異方性拡散スクリーンに画像を投射する複数の投射部を有してもよい。
前記表示面は、直視型の立体表示ディスプレイの画像表示面であってもよい。
前記立体表示ディスプレイは、レンチキュラレンズ方式、レンズアレイ方式、及び視差バリア方式のいずれか1つの方式により前記複数の視点画像を表示してもよい。
本技術の第1の実施形態に係る画像表示装置の基本構成を示す模式図である。 視点画像の一例を示す模式図である。 画像表示装置による立体表示について説明するための模式図である。 画像表示装置の具体的な構成例を示す模式図である。 図4に示す画像表示装置の側面図である。 図4に示す画像表示装置の上面図である。 反射型の虚像スクリーンに投射される視点画像の表示方法について説明するための模式図である。 観察方向に応じて表示される視点画像の一例を示す模式図である。 比較例として示す虚像表示装置の模式図である。 第2の実施形態に係る画像表示装置の構成例を示す模式図である。 図10に示す画像表示装置の断面図である。 図10に示す画像表示装置の上面図である。 分割投射の一例を示す模式図である。 画像表示装置における虚像の表示位置の例を示す模式図である。 画像表示装置の他の構成例を示す模式図である。 第3の実施形態に係る画像表示装置の構成例を示す模式図である。 図16に示す画像表示装置の側面図である。 図16に示す画像表示装置の上面図である。 第4の実施形態に係る画像表示装置の構成例を示す模式図である。 透過型の虚像スクリーンに投射される視点画像の表示方法について説明するための模式図である。 レンズ機能を有する透過型の虚像スクリーンにより表示される虚像の一例を示す模式図である。 画像表示装置の他の構成例を示す模式図である。 第5の実施形態に係る画像表示装置の構成例を示す模式図である。 画像表示装置の他の構成例を示す模式図である。 第6の実施形態に係る画像表示装置の構成例を示す模式図である。
以下、本技術に係る実施形態を、図面を参照しながら説明する。
<第1の実施形態>
[画像表示装置の基本構成]
図1は、本技術の第1の実施形態に係る画像表示装置の基本構成を示す模式図である。図1A及び図1Bは、画像表示装置100の側面図及び上面図である。画像表示装置100は、装置の周りにいるユーザに向けて表示対象の虚像1を立体的に表示する装置である。例えば画像表示装置100には、様々な視点2から表示対象を見た画像(虚像1)が視点2の位置に応じて表示される。従ってユーザの視点2が移動すると、移動後の視点2からみた表示対象を表す虚像1を観察することが可能である。これにより、あたかも実際の空間に表示対象が存在しているかのような立体表示が可能となる。図1には、虚像1が形成される虚像面3が点線の領域により模式的に図示されている。
画像表示装置100は、複数の虚像スクリーン10と、多視点映像源11と、映像制御部12とを有する。画像表示装置100では、多視点映像源11により表示された表示対象の画像が、虚像スクリーン10により虚像1として表示される。また多視点映像源11に表示される画像は、映像制御部12により制御される。本開示において、画像には、静止画像及び動画像(映像)が含まれる。以下では、画像表示装置100が配置される面の方向を水平方向、それに垂直な方向を垂直方向として説明を行う。
複数の虚像スクリーン10は、中心軸Oの周囲の少なくとも一部を覆うように配置される。ここで中心軸Oは、例えば虚像1を表示する際の基準となる軸である。中心軸Oは、典型的には垂直方向と平行に設定される。本実施形態では、中心軸Oの周囲を部分的に囲むように、複数の虚像スクリーン10が配置される。なお、複数の虚像スクリーン10が中心軸Oの全周を覆うように配置される構成(図10等参照)でも本技術は適用可能である。本実施形態では、中心軸Oは、所定の軸に相当する。
虚像スクリーン10は、各虚像スクリーン10に投射された画像の虚像1を中心軸Oを基準として表示する。また虚像スクリーン10は、透明である。後述するように、各虚像スクリーン10には、多視点映像源11により表示された実像である視点画像4が投射される。この視点画像4の虚像1が中心軸Oを基準に表示される。従って虚像スクリーン10は、多視点映像源11が表示した視点画像4の虚像1を、中心軸Oを基準に背景に重畳して表示する。
本実施形態では、虚像スクリーン10として、ホログラフィック光学素子(HOE:Holographic Optical Element)が用いられる。HOEは、ホログラム技術を用いた光学素子であり、予め記録された干渉縞により光を回折することで、光の進行方向の制御(光路制御)を実現する。例えば所定の入射角度で入射した光を所定の出射角度で出射するように構成されたHOEが虚像スクリーン10として用いられる。これにより、HOE(虚像スクリーン10)に入射する光を、所望の方向に向けて出射することが可能となる。なおHOEは虚像1の位置を制御するために、平面ミラー・曲面ミラーの特性を持っていてもよい。
また本実施形態では、虚像スクリーン10として、反射型のホログラフィック光学素子(反射型HOE)が用いられる。反射型HOEは、特定の角度範囲で入射した光を回折反射し、その他の角度範囲の光を透過するように構成される。例えば、反射型HOEに対して特定の角度範囲で入射した光は、その入射角度に応じた出射角度で入射した面から出射される。また特定の角度範囲以外の入射角度で入射した光は、干渉縞による回折をほとんど受けることなく、反射型HOEを透過する。これにより、透明な虚像スクリーン10を構成され、虚像スクリーン10越しに背景に重畳された虚像を表示することが可能となる。このように、虚像スクリーン10は、表示対象の虚像1を背景に重畳して表示するコンバイナーとして機能する。
虚像スクリーン10は、例えば素子内部に干渉縞が記録された体積型のHOEを用いて構成される。また、素子表面の凹凸等により干渉縞が記録されたレリーフ型(エンボス型)のHOE等が虚像スクリーン10として用いられてもよい。これらのHOEは、回折光学素子(DOE:Diffractive Optical Element)の一例である。このように、虚像スクリーン10は、回折光学素子を用いて構成される。なお、干渉縞を記録して光を回折するHOEの他に、所定のパターンの回折格子等を用いて光を回折するタイプの回折光学素子等が用いられてもよい
虚像スクリーン10の具体的な構成は限定されない。例えば虚像スクリーン10としてハーフミラーが用いられてもよい。ハーフミラーを用いた場合でも、視点画像4の虚像1を背景に重畳して表示することが可能である。なお、ハーフミラーでの反射は正反射となる。このため、図1に示すようにハーフミラー(虚像スクリーン10)が垂直に配置される構成では、虚像1の視聴範囲は、ハーフミラーを斜め上方から見込む範囲となる。この他、虚像を表示可能な任意の光学素子が虚像スクリーン10として用いられてよい。
図1A及び図1Bに示すように、虚像スクリーン10は、平面視が矩形状の平板形状であり、互いに反対側の面となる表面13と裏面14とを有する。各虚像スクリーン10は、中心軸Oに各々の裏面14を向けて、所定の角度で互いに隣接して配置される。各虚像スクリーン10は、中心軸Oに向けられた裏面14側に虚像1を表示する。また各虚像スクリーン10は、中心軸O(垂直方向)と平行に配置される。なお、各虚像スクリーン10が中心軸Oに対して傾斜して配置されてもよい。図1Bでは3つの虚像スクリーン10a~10cが、左側からこの順番で隣接して配置される。
このように、画像表示装置100では、複数の虚像スクリーン10により、中心軸Oを基準として多面スクリーンが構成される。この多面スクリーンの内側(中心軸O側)に視点画像4の虚像1が表示される。本実施形態では、多面スクリーンは、中心軸Oを中心とする円筒面に内設する多角面(例えば正多角柱を構成する多角面)を含むスクリーンとなる。このように、虚像スクリーン10を中心軸Oを囲むように配置することで、中心軸Oを基準とする各方位から虚像1を観察することが可能となる。虚像スクリーン10の具体的な構成については、後に詳しく説明する。
多視点映像源11は、複数の多視点ディスプレイ20を有する。多視点ディスプレイ20は、平面視が矩形状の平板形状であり、視点画像4を表示する表示面21を有する。多視点ディスプレイ20では、表示面21を見る方向に応じて表示される視点画像4が変化する。各多視点ディスプレイ20は、対応する虚像スクリーン10の表面13に、各々の表示面21を向けて、所定の角度で互いに隣接して配置される。このように、画像表示装置100では、複数の多視点ディスプレイ20により、中心軸Oを基準として多面ディスプレイが構成される。図1Bでは3つの虚像スクリーン10a~10cに向けて、多視点ディスプレイ20a~20cがそれぞれ配置される。
また画像表示装置100では、虚像スクリーン10及び多視点ディスプレイ20のペアにより、虚像1を表示する表示ユニットが構成されるとも言える。図1Aには、虚像スクリーン10及び多視点ディスプレイ20からなる表示ユニットを側面から見た側面図が示されている。このような表示ユニットを中心軸Oの周りに回転移動させて、複数の表示ユニットを配置することで、画像表示装置が構成される。
図1Aに示すように、多視点ディスプレイ20は、虚像スクリーン10の正面から下方にずれた位置に配置される。すなわち表示面21(多視点ディスプレイ20)は、複数の虚像スクリーン10により表示される虚像を遮らないように配置される。これにより、例えば虚像1の表示範囲等を広げることが可能となる。従って画像表示装置100は、複数の虚像スクリーン10からなる多面スクリーンの外側に、虚像1の光路を避けて、複数の多視点ディスプレイ20からなる多面ディスプレイが配置された構成となる。本実施形態では、多視点映像源11は、表示部に相当する。
虚像スクリーン10を介して表示される虚像1は、対応する多視点ディスプレイ20の表示面21に表示された画像(視点画像4)によって構成される。つまり、虚像1を観察しているユーザは、虚像スクリーン10を介して表示面21を見ていると言える。以下では、ユーザが虚像スクリーン10を介して多視点ディスプレイ20を見込む方向を、実像観察方向と記載する。またユーザの視点2から中心軸Oに向かう方向を虚像観察方向と記載する。例えば虚像観察方向に向けられた視点2では、その視点2に対応する実像観察方向に対して表示される視点画像4が虚像1として観察される。
ここで、多視点ディスプレイ20の表示面21に表示される視点画像4について説明する。図2は、視点画像4の一例を示す模式図である。本開示において、視点画像4とは、表示対象5を互いに異なる方向から見た状態を虚像として表示することが可能な画像である。従って、視点画像4は、表示対象5を見たままの画像である必要はない。
上記したように本実施形態では、反射型の虚像スクリーン10が用いられる。すなわち、虚像スクリーン10は、表示面21から投射された視点画像4を反射して視点画像4の虚像1を表示する。従って、虚像1として表示される画像は、表示面21に表示された視点画像4の左右が反転した画像(鏡像反転画像)となる。この場合、後述する映像制御部12は、実像観察方向から見た表示対象5の画像を鏡面反転させた視点画像4を虚像観察方向に表示する。これにより、表示対象5の虚像1の左右を反転させることなく、適正に表示することが可能となる。
図2Aには、自身の左手にスティックを持ったキャラクター(表示対象5)を左側、正面、及び右側から撮影した撮影画像6a~6cが図示されている。また図2Bには、図2Aの撮影画像6a~6cを表示する視点画像4a~4cが図示されている。図2Aに示すように、撮影画像6は、キャラクターをそのまま撮影した画像である。これらを反射して虚像として表示する視点画像4は、撮影画像6を左右反転した鏡面反転画像となる。従って、視点画像4a~4cは、表示対象5であるキャラクターが自身の右手にスティックを持っている画像となる。
視点画像4は、例えば、静止した表示対象5を、撮影距離を変更せずに撮影方向(撮影方位)を変更して撮影した画像に基づいて生成される。この時、撮影方向を変更する角度ピッチは、典型的には一定の角度に設定される。なお表示対象5は、実空間に存在する物体でもよいし、コンピュータグラフィックス等を用いて生成された3Dモデル等でもよい。また虚像1として表示される際の歪み等を補正するために変形された画像等が視点画像4として用いられてもよい。なお、後述するように、透過型の虚像スクリーンが用いられる場合には、表示対象5を見たままの画像が視点画像4として用いられる。
図1に戻り、多視点ディスプレイ20の表示面21には、見る方向に応じて複数の視点画像4が切り替えて表示される。すなわち、表示面21は、表示対象5を互いに異なる方向から見た画像となる複数の視点画像4を互いに異なる方向に向けて表示する。図1Bには、表示面21から各視点画像4が表示される方向(以下、表示方向7と記載する)が黒い矢印を用いて模式的に図示されている。表示方向7は、例えば各視点画像4の中心を表示する光が出射される方向である。従って表示方向7が向けられた点から表示面21を直視した場合、その表示方向7に向けて出射された像光により構成される画像が観察される。表示面21は、これらの表示方向7ごとに、図2に示すような視点画像4を切り替えて表示するように構成される。
画像表示装置100では、複数の表示面21により、複数の虚像スクリーン10の各々に、各表示面21に表示された複数の視点画像4が投射される。具体的には、1つの虚像スクリーン10に対して、表示ユニットにおけるペアとなる1つの表示面21から、複数の視点画像4が投射される。なお、1つの虚像スクリーン10に対して複数の表示面21から視点画像4が投射される場合や、複数の虚像スクリーン10に対して1つの表示面21から視点画像4が投射されるといった構成もあり得る。
このように、虚像スクリーン10に対して複数の視点画像4が投射される。この結果、虚像スクリーン10には、虚像スクリーン10を見る方向(視点2の位置)に応じて、複数の視点画像4の虚像1が切り替わるように表示されることになる。
映像制御部12は、多視点映像源11の各多視点ディスプレイ20(表示面21)に表示される視点画像4の表示を制御する。具体的には、表示方向ごとに表示される視点画像4の画像データ(映像データ)を生成して、各表示面21に表示させる。映像制御部12は、例えばPCやサーバ装置等のコンピュータを用いて構成される。映像制御部12の動作については後述する。
図1に示すように、本実施形態では、各視点画像4の虚像1が形成される虚像面3が、中心軸Oを中心として、互いに重なるように、虚像スクリーン10及び多視点ディスプレイ20が構成される。これにより、表示対象5の虚像1の位置が見る方向によってずれるといった事態を回避することが可能である。なお、虚像1は必ずしも中心で重なる必要はない。例えば多視点ディスプレイ20を虚像スクリーン10に近づけると、虚像面3も虚像スクリーン10に近づく。この場合、ユーザから虚像1がつながって見えていれば視点画像4による立体表示が可能である。従って、虚像1がつながるような範囲で、多視点ディスプレイ20と虚像スクリーン10との距離を近づけることで、ディスプレイのサイズを小型化することができる。
図3は、画像表示装置100による立体表示について説明するための模式図である。以下では図3を参照して、立体表示を行うための視点画像4の表示方法について説明する。ここでは、中心軸Oに視点2を向けたユーザにより、2つの虚像スクリーン10a及び10bを介して虚像1が観察されるものとする。例えば図3に示すように、ユーザが観察する虚像1は、多視点ディスプレイ20a及び20bに表示された視点画像4の虚像1a及び1bが合成された像となる。
ユーザが互いに隣接する2つの虚像スクリーン10a及び10bを介して表示物体を見ようとした場合、ユーザは、それぞれの虚像スクリーン10a及び10bで反射された2つの多視点ディスプレイ20a及び20bの表示面21を異なる角度で見ることになる。つまりユーザが虚像スクリーン10を介して各表示面21を見る角度、すなわち、ユーザが各表示面21を見込む方向は、互いに異なる。
図3には、多視点ディスプレイ20a及び20bに向けられる実像観察方向8a及び8bが白抜きの矢印により模式的に図示されている。またユーザの視点2から中心軸Oに向けられる虚像観察方向9が黒塗りの矢印により模式的に図示されている。本実施形態では、実像観察方向8は、第1の方向に相当し、虚像観察方向9は、第2の方向に相当する。
画像表示装置100では、映像制御部12により、虚像スクリーン10の周囲のユーザの視点2から虚像スクリーン10を介して表示面21を見込む実像観察方向8に対して、ユーザの視点2から中心軸Oに向かう虚像観察方向9から見た表示対象5の虚像となる視点画像4が表示される。すなわち、ある視点2から表示面21を見込む実像観察方向8に向けて表示される視点画像4は、その視点2から観察されるべき表示対象5の状態を虚像1として表示する画像となる。
例えば映像制御部12は、ユーザが各表示面21a及び21bを見込む実像観察方向8a及び8bに対して、ユーザの視点2(虚像観察方向9)から見える表示対象5を表示する視点画像4を、各表示面21a及び21bに表示する。なお各表示面21a及び21bには、虚像1として表示される表示対象5の中心軸が合うように視点画像4がそれぞれ表示される。これにより、虚像スクリーン10の境界越しに虚像1を観察する場合であっても、ユーザの視点2から見える表示対象5の画像を虚像として適正に表示することができる。
また、ユーザの視点2で観察される虚像1が単一の虚像スクリーン10を介して表示される場合にも、対応する表示面21に向けられた実像観察方向8に対して、その視点2(虚像観察方向9)から見える表示対象5の虚像となる視点画像4が表示される。これにより、各虚像スクリーン10ごとに、表示対象5を多方位から観察することが可能となる。この結果、画像表示装置100では、ユーザの視点2の位置に係らず、多視点映像源11が表示する角度ピッチに応じた角度分解能で表示対象5の各視点映像を表示することが可能となる。
本実施形態では、複数の視点画像4として、表示対象5を所定の角度ピッチでずらした方向からみた画像が用いられる。また、映像制御部12は、ユーザの視点2の移動に応じて、その視点2から見て表示対象5の虚像が所定の角度ピッチで切り替わるように視点画像4を表示する。これにより、ユーザが移動した場合に、一定の角度で切り替わる視点画像4を表示することが可能となり、自然な立体表示を実現することが可能となる。
所定の角度ピッチを設定する方法は限定されない。例えば中心軸Oから虚像スクリーン10(多視点ディスプレイ20)の両端を水平に結ぶ直線がなす角度(多角面の中心角)を整数で割った角度となるように角度ピッチが設定される。これにより、隣接する虚像スクリーン10の境界でもスムーズに視点画像4を切り替えることが可能となる。また角度ピッチは、多視点ディスプレイ20で表示可能な視点画像4の数に合わせて設定されてもよい。
このように、画像表示装置100では、虚像スクリーン10に対して、多視点映像源11の表示面21に表示された複数の視点画像4が投射される。これにより、各虚像スクリーン10ごとに、視点画像4の虚像を切り替えて表示することが可能となる。また画像表示装置100は、虚像スクリーン10と多視点ディスプレイ20とを含む表示ユニットを中心軸Oの周りに複数配置して構成される。このように配置することで、虚像スクリーン10を多方位から視聴したときに、虚像1が形成される虚像面3をある一定の範囲にとどめるとともに、途切れなく虚像1を観察することが可能となる。これにより、ユーザの移動に伴って認識される運動視差を大幅に向上することが可能となる。
またHOEの虚像スクリーン10(コンバイナー)を用いることで、例えばハーフミラーを用いたペッパーズゴースト方式の虚像表示等に比べて、透明性や輝度を十分に向上することが可能である。また、虚像スクリーン10を垂直方向に立てて配置することが可能である。このため、スクリーンの水平幅を一定に保つことが可能となり、広い表示範囲に虚像1を表示することが可能となる。これにより、サイズが大きく明るい虚像1を、透明性の高いスクリーン越しに背景に重畳して表示することが可能となる。これにより、実在感の高い立体表示を実現することが可能となる。
図4は、画像表示装置100の具体的な構成例を示す模式図である。図5及び図6は、図4に示す画像表示装置100の側面図及び上面図である。本実施形態では、多視点映像源11の多視点ディスプレイ20として、マルチプロジェクタ方式のディスプレイが用いられる。多視点映像源11は、複数の実像スクリーン25と、複数のプロジェクタ26とを有する。図4に示す例では、各実像スクリーン25ごとに、複数のプロジェクタ26が設けられプロジェクタアレイが構成される。この実像スクリーン25及びプロジェクタアレイが、上記した多視点ディスプレイ20として機能する。
実像スクリーン25は、透過型の異方性拡散スクリーンであり、各プロジェクタ26から画像が投射される投射面27と、投射面とは反対側の画像表示面28とを有する。この画像表示面28が、上記した表示面21となる。複数の実像スクリーン25は、対応する虚像スクリーン10に画像表示面28(表示面21)向けて配置される。また実像スクリーン25は、水平方向と垂直方向とで拡散度の異なる異方性の拡散特性を有する。例えば水平方向の拡散度が垂直方向よりも小さく設定され、水平方向に対して狭い拡散特性を持つように構成される。これにより、水平方向に拡散する光の角度範囲を狭めることが可能となり、複数の視点画像4を所望の方位に向けて出射することが可能となる。また垂直方向に拡散する光の角度範囲を広げることが可能となる。これにより、垂直方向に対しては、虚像スクリーン10に対する入射角度を広げることなく視点画像4を投射することが可能となる。なお、実像スクリーン25を反射型にして、装置の内側にプロジェクタ26を並べることも可能である(図10等参照)。
実像スクリーン25は、例えばマイクロレンズアレイ等により水平及び垂直方向の拡散度を偏らせたレンズ拡散板等により構成される。また異方性の拡散特性を記録した透過型のHOEが実像スクリーン25として用いられてもよい。HOEを使用した場合は、入射・反射角の関係を制御することが可能となる。このため、虚像スクリーン10に対する入射角を保ったまま、プロジェクタ26の実像スクリーン25に対する投射角を小さくすることができる。これにより、多視点映像源11全体のサイズを小さくすることが可能である。またHOEでは拡散特性を制御しやすいため、より画質の良い視点画像4を表示することが可能である。
複数のプロジェクタ26は、実像スクリーン25の投射面27に視点画像4を構成する画像を投射する。具体的には、図6に示すように、複数のプロジェクタ26は、互いに異なる方向から実像スクリーン25に画像を投射する。例えばプロジェクタ26の発光点29が実像スクリーン25の中心に対して円周上になるように各プロジェクタが配置される。もしくは、複数の発光点29が円周状に並ぶように一体化されたプロジェクタモジュールが用いられてもよい。なお図5に示すように、各プロジェクタ26は、実像スクリーン25の斜め下方から画像を投射する。この投射角度は、例えば虚像スクリーン10に対する表示面21の投射角度に合わせて設定される。これらのプロジェクタ26により、実像スクリーン25の投射面27に画像を投射され、表示面21に視点画像4が表示される。
例えば実像スクリーン25(表示面21)に表示される画像の各画素を構成する画素光は、投射面27に入射した方向に応じて出射される。この特性を利用して、複数のプロジェクタ26の各々が投射する画像の一部(典型的には短冊状の画像)を合成することで、表示方向ごとに複数の視点画像4を表示することが可能となる。図4には、投射面27側から見た複数の視点画像4が模式的に図示されている。
マルチプロジェクタ方式では、複数のプロジェクタ26が実像スクリーン25に画像を投射する角度ピッチが、多視点映像源11が表示できる視点画像4の角度ピッチ(視点ピッチ)となる。この角度ピッチを、両眼の視差角度より小さくすることで、ユーザの両目にそれぞれ異なる視点画像4を表示して両眼視差を与えることが可能となり、表示対象の立体感を再現することが可能となる。なお、角度ピッチが荒い場合であっても、ユーザの視点位置の移動に応じて、視点画像4を切り替えて表示することで、表示対象5に運動視差を与え立体的に見せることが可能である。また実像スクリーン25の水平方向の拡散角度は、プロジェクタ26の角度ピッチと同等にすることが望ましい。これにより、異なる方向に向けて表示するべき視点画像4が同時に観察されるクロストーク等を回避することが可能となる。
また複数のプロジェクタ26が実像スクリーン25に画像を投射する全体の投射角度の範囲が、実像スクリーン25で表示できる視点画像の視域(視聴可能角)となる。このため、例えば表示対象5を見切れることなく表示するためには、できるだけ大きい角度で画像を投射することが望ましい。例えば各プロジェクタ26の投射画角を大きくすることで全体の投射角度を広げることが可能である。
プロジェクタ26の光源としては、レーザ光源を用いることが望ましい。これにより、波長幅の狭い色光を用いて視点画像4を表示することが可能となり、HOE(虚像スクリーン10や実像スクリーン25)での回折効率が向上し表示輝度を高めることが可能となる。またHOEでの色分散による画像のぼけや色ずれ等を回避することが可能となる。また例えば、プロジェクタ26の光源として、LED光源が用いられてもよい。この場合、波長フィルタ等を用いて色光の波長幅を制限することで、色むらの少ない画像表示を安価に実現することが可能となる。この他、プロジェクタ26の具体的な構成は限定されない。
図7は、反射型の虚像スクリーン10に投射される視点画像の表示方法について説明するための模式図である。図7では、ユーザが、互いに隣接する虚像スクリーン10a及び10bの境界を通る虚像観察方向9に沿って虚像を観察しているものとする。また、中心軸Oから境界に向かう方向(図7における虚像観察方向9の逆方向)を表示対象5を表示する際の起点となる起点方向とする。起点方向は、例えば表示対象5の正面が向けられる方向である。図7では、画像表示装置100の上面から見て、中心軸Oを基準に右回りに回転する方向を方位角の正方向とする
表示対象5の起点方向(例えば表示対象5(虚像)の正面を観察する方向)を中心軸Oを基準とする方位角で表す。ここでは、起点方向の方位角をθ0度とする。従って図7では、虚像観察方向9が方位角θ0となる視点2から虚像1が観察されている。このとき、ユーザの視点2から見て左側の実像スクリーン25aの中心を見込む角度をθi1とする。またユーザの視点2から見て右側の実像スクリーン25bの中心を見込む角度をθi2とする。
ここでは、説明を簡単にするために、θi1及びθi2を、水平面内での角度として説明する。例えば、θi1(θi2)は、虚像スクリーン10a(虚像スクリーン10b)を介して実像スクリーン25a(実像スクリーン25b)の中心に向かう光路を水平面に射影した直線が、実像スクリーン25a(実像スクリーン25b)の法線となす角度である。これらの角度は、各実像スクリーン25a及び25bを見込む方向(実像観察方向8a及び8b)を表す角度と言える。
例えば、ユーザの視点2がΔθだけ移動して、虚像観察方向9の方位角が(θ0+Δθ)になったとする。すなわち視点2はΔθだけ、中心軸Oを基準に右回りに回転したものとする。この場合、実像スクリーン25aを見込む角度θi1は、(θi1-α(θ)×Δθ)となる。ここでα(θ)は、正の係数である。この場合、θi1は、視点2がΔθだけ移動することで減少する。これは、上面から見た実像スクリーン25aを見込む方向が左回りに回転することを意味する。また実像スクリーン25bを見込む角度θi2は、(θi2+β(θ)×Δθ)となる。ここでβ(θ)は、正の係数である。この場合、θi1は、視点2がΔθだけ移動することで増加する。これは、上面から見た実像スクリーン25bを見込む方向が左回りに回転することを意味する。
このようにΔθだけ変化した角度で実像スクリーン25の表示面21を見込んだ時に、各表示面21でθ0+Δθ度の表示対象5の視点画像4を表示することで、ユーザにそこから見た表示対象5の虚像を見せることが可能となる。
なお、α(θ)は、視点2から見て左側の実像スクリーン25aを見込む角度θi1の変化量にかかる係数であり、β(θ)は、視点2から見て右側の実像スクリーン25bを見込む角度θi2の変化量にかかる係数である。これらの係数は、射影角度変換やレンズ効果、HOEの回折収差等の影響(角度のずれ等)を補正するパラメータであり、方位角θ0を基準とする視点2の方位角θの関数として表される。このような係数を用いて変化量を補正することで、表示対象5の虚像1を正しく表示させることが可能となる。
図8は、観察方向に応じて表示される視点画像の一例を示す模式図である。図8の中央の図に示すように、起点方向に沿って虚像1を観察する視点2では、左手にスティックを持ったキャラクター(表示対象5)を正面から見た画像が表示される。この時、各実像スクリーン25a及び25bでは、視点画像4a及び4bとして、実像観察方向8a及び8bに向けて右手にスティックを持ったキャラクターが表示される。なお図8には、各実像スクリーン25a及び25bを正面側から実像観察方向8a及び8bに沿って見た場合に観察される視点画像4a及び4bが図示されている。
例えば、図8の中央の図に示す状態から、ユーザが右回りに移動して右側からキャラクターの虚像1を観察する場合、各実像スクリーン25a及び25bには、左周りに回転したキャラクターが映った視点画像4a及び4bが表示される。同様に、ユーザが左回りに移動して左側からキャラクターの虚像1を観察する場合、各実像スクリーン25a及び25bには、右周りに回転したキャラクターを映った視点画像4a及び4bが表示される。
このように、中心軸Oを基準にユーザが移動して表示対象5の虚像を観察する場合、実像スクリーン25の表示面21にはユーザの移動とは逆向きに回転した表示対象5が表示される。これにより、ユーザの移動に合わせて、表示対象5を適正に表示することが可能となる。
以上、本実施形態に係る画像表示装置100では、中心軸Oの周囲の少なくとも一部を覆うように透明な複数の虚像スクリーン10が配置される。また表示対象5の複数の視点画像4を異なる方向に向けて表示する複数の表示面21が設けられる。各虚像スクリーン10には複数の視点画像4が投射される。この時、ある視点2から虚像スクリーン10を介して表示面21を見込む方向(実像観察方向8)には、その視点2から中心軸Oを見たときに見える表示対象5の虚像1となる視点画像4が表示される。これにより、実在感の高い立体表示を実現することが可能となる。
虚像を利用して物体を表示する方法として、ハーフミラーを水平に対して傾けて、物体の虚像を表示するペッパーズゴーストと呼ばれる方法が知られている。例えば1つのハーフミラーを介してスクリーンの奥に物体があるように虚像を表示する場合、ユーザの移動等に応じて物体の見える向きが変わるような視点映像を表現することが困難であり、物体の実在感が損なわれる可能性がある。またハーフミラーを多面化して物体の立体表示を行う方法が考えられる。この場合、隣り合う面を横切るさいに、映像の切り替わりが激しく、実在感が損なわれる恐れがある。また、ハーフミラーを用いる方法では、面数を増やすことで反射面のサイズが小さくなり映像サイズが小さくなる可能性がある。
図9は、比較例として示す虚像表示装置90の模式図である。図9では、HOE91を用いて虚像1を表示する虚像表示装置90が模式的に図示されている。この虚像表示装置90では、多角柱状に配置されたHOE91に対して、一方向から対象92を見た画像が投射される。このため、ユーザの視線がHOE91の境界を横切る際に、対象92の画像が急激に変化するため、立体表示の実在感を損ねる可能性がある。
本実施形態では、複数の虚像スクリーン10の各々に対して、表示対象5の視点画像が投射される。これにより、虚像スクリーン10ごとに、表示対象5を多方向から見た視点画像が表示される。また複数の虚像スクリーン10は中心軸を囲うように配置される。
これにより、虚像表示による表示対象5の視点画像4を細かい間隔(角度ピッチ)で表示することが可能となる。この結果、表示対象5の向きが突然切り替わるといった不自然な表示が抑制され、実在感の高い立体表示を行うことが可能となる。
またユーザの視点2が虚像スクリーン10を介して表示面21を見込む方向(虚像観察方向9)に向けて、その視点2から見える表示対象が表示されるように、視点画像4が表示される。すなわち、ユーザから見た各々の虚像面3の観察方向の違いに応じて、その方向から見た表示対象の視点画像4が形成されるように表示面21の表示が制御される。これにより、視点2の位置に係らず、その視点で観察されるべき表示対象5の虚像1を適正に表示することが可能となる。
また本実施形態では、虚像スクリーン10としてHOEが用いられる。これにより虚像スクリーン10を垂直方向に立てて配置するといったことが可能である。この結果、映像サイズを小さくすることなく、虚像スクリーン10の境界を横切る場合も含めて表示対象5の視点画像4の再現性を高めることが可能となり、実在感のある立体表示を実現することが可能となる。
<第2の実施形態>
本技術に係る第2の実施形態の画像表示装置について説明する。これ以降の説明では、上記の実施形態で説明した画像表示装置100における構成及び作用と同様な部分については、その説明を省略又は簡略化する。
図10は、第2の実施形態に係る画像表示装置の構成例を示す模式図である。図10Aは、画像表示装置200の斜視図であり、図10Bは、画像表示装置200の内部構成の一例を示す模式図である。図11及び図12は、図10に示す画像表示装置200の断面図及び上面図である。画像表示装置200は、複数の虚像スクリーン210と、多視点映像源211とを有し、表示対象5を全方位から見た虚像1を表示可能な全方位ディスプレイとして機能する。
図10Aに示すように、複数の虚像スクリーン210は、中心軸Oの全周を覆うように配置される。これらの虚像スクリーン210により、中心軸Oを基準として多角柱状の多面スクリーンが構成される。また虚像スクリーン210は、反射型のホログラフィック光学素子(HOE)である。従って、画像表示装置200では、多面スクリーンの外側から投射された表示対象5の視点画像4の虚像1が多面スクリーンの内側に表示される。なおHOEは虚像1の位置を制御するために、平面ミラー・曲面ミラーの特性を持っていてもよい。
多視点映像源211は、複数の実像スクリーン230と、各実像スクリーン230に互いに異なる方向から画像を投射する複数のプロジェクタ231とを有する。本実施形態では、実像スクリーン230と複数のプロジェクタ231とにより、多視点ディスプレイが構成される。
本実施形態では、実像スクリーン230は、反射型の異方性拡散スクリーンである。従って、実像スクリーン230では、各プロジェクタ231から画像が投射される面が、視点画像4が表示される表示面221(画像表示面)となる。複数の実像スクリーン230は、対応する虚像スクリーン210に表示面221を向けて配置される。これらの実像スクリーン230により、中心軸Oを基準として多角柱状の多面ディスプレイが構成される。
実像スクリーン230は、水平方向と垂直方向とで拡散度の異なる異方性の拡散特性を有し、例えば、透過型のレンズ拡散板に反射板を取り付けて構成される。また異方性の拡散特性を記録した反射型のHOEが実像スクリーン230として用いられてもよい。HOEを使用することで、多視点映像源211全体のサイズを小さくすることや、画質の良い視点画像4を表示することが可能である。
複数のプロジェクタ231は、中心軸Oの周りに配置された複数の実像スクリーン230(多面ディスプレイ)の内側から、各表示面221に向けて画像を投射する。プロジェクタ231の光源としては、レーザ光源やLED光源が用いられる。LED光源を用いる場合には、波長フィルタ等を用いて色光の波長幅が制限されてもよい。
以下では、プロジェクタ231から実像スクリーン230に画像を投射するための構成について説明する。図10Bには、画像表示装置200の内部構成の一例として、反射型の虚像スクリーン210と反射型の実像スクリーン230とを含む表示ユニットが模式的に図示されている。この表示ユニットでは、実像スクリーン230の内側に、複数のプロジェクタ231からなるプロジェクタアレイが設けられる。例えばプロジェクタ231のサイズが十分に小さい場合や、装置サイズが大きい場合等には、図10Bに示すように、実像スクリーン230に対して各プロジェクタ231から画像を直接投射する構成を用いることが可能である。
図11には、中心軸Oを含む断面で画像表示装置200を切断した断面図が模式的に図示されている。図12には、図11に示す構成に対応する上面図が模式的に図示されている。図11及び図12では、図10Bとは異なる方法で実像スクリーン230に画像が投射される。ここでは、プロジェクタ231は装置の外周に沿って外側上方に向けて配置される。プロジェクタ231から投射された画像の光は、図示しないミラーを介して反射され、プロジェクタ231が配置された側とは反対側に配置された実像スクリーン230に入射する。すなわち、各実像スクリーン230には、中心軸Oを挟んで反対側の発光点29(ミラー)から画像が投射される。これにより、投射距離を増大させて、投射される画像のサイズを大きくすることが可能である。
また投射される画像のサイズを大きくすることで、例えば1つのプロジェクタ231から複数の実像スクリーン230に対して画像を投射することが可能となる。図12に示す例では、1つのプロジェクタ231から、2つ又は3つの実像スクリーン230に対して画像が投射される。これにより、プロジェクタ231の数を減らすことが可能となり装置のコストを抑えることができる。
図12では、各プロジェクタ231は、それぞれの発光点29が装置の外周となる円周に沿って並ぶように配置される。あるいは、複数の発光点が外周に沿って並ぶように一体型のプロジェクタモジュールが構成されてもよい。このようにプロジェクタ231を配置することで、各実像スクリーン230に入射するプロジェクタ231の光線角度の対称性を保つことができる。これにより、各実像スクリーン230には、各プロジェクタ231から対象に画像が投射されるため、複数の視点画像4を異なる表示方向に向けて適正に表示することが可能となる。
複数のプロジェクタ231が実像スクリーン230に画像を投射する角度ピッチが、多視点映像源211が表示できる視点画像4の角度ピッチ(視点ピッチ)となる。例えば角度ピッチを十分に小さくすることで、両眼視差を与える立体表示等が可能となる。また複数のプロジェクタ231が実像スクリーン230に画像を投射する全体の投射角度の範囲が、実像スクリーン230で表示できる視点画像の視域(視聴可能角)となる。このため、各プロジェクタ231の投射画角を大きくすることで表示対象5を見切れることなく表示することが可能となる。
また1つのプロジェクタ231から出射される光を分割して投射する分割投射を行う構成が用いられてもよい。分割投射により、1つのプロジェクタ231から複数の発光点29を作り出すことが可能である。
図13は、分割投射の一例を示す模式図である。図13に示す例では、プロジェクタ231が投射する画像を分割する3つの分割ミラー235a~235cが用いられる。例えばプロジェクタ231から投射された画像は、各分割ミラー235a~235cにより分割され、分割画像として3方向に分かれて拡大しながら投射される。この場合、各分割ミラー235a~235cは、分割画像を投射する発光点と見做すことが可能である。なお分割ミラー235の数は限定されない。分割ミラー235を用いることで、プロジェクタ231の数を減らすことが可能となり、装置のコストを抑制することが可能である。
図14は、画像表示装置200における虚像1の表示位置の例を示す模式図である。図14A~図14Cには、多面の多視点映像源211により表示される視点画像4の虚像1の表示位置の一例が模式的に図示されている。例えば図14Aに示すように、複数の視点画像4の虚像1は、互いの虚像面3の中心線が重なるように表示される。ここで、虚像面3の中心線とは、垂直方向(中心軸O)に平行な中心線である。典型的には、各虚像面3の中心線は、中心軸Oと一致するように表示される。これにより、表示対象5の位置をずらすことなく、中心軸Oの全周にわたって高品質な立体表示を行うことが可能となる。
図14Bに示す例では、複数の視点画像4の虚像1は、互いの虚像面3の一部が重なるように表示される。虚像1は必ずしも中心を合わせる必要はなく、一部が重なっている状態でもよい。その場合、多視点映像源211(実像スクリーン230)を虚像スクリーン210に近づけることができるので、装置の小型化が可能となる。なお、画像表示装置200では、虚像面3の前後に表示対象5の像が観察されるように、虚像1を表示させることが可能である。従って、虚像面3が中心軸Oで重なっていない場合であっても、虚像1を奥側に表示することで、中心軸Oを基準とした虚像表示が可能である。
図14Cに示す例では、複数の視点画像4の虚像1は、互いの虚像面3が接するように表示される。これにより、実像スクリーン230と虚像スクリーン210との距離を十分に短くすることが可能となり、例えば側面の段差が小さい略筒型の画像表示装置等を実現することが可能である。
図15は、画像表示装置の他の構成例を示す模式図である。図15に示す画像表示装置201では、反射型の実像スクリーンに代えて透過型の実像スクリーン240が用いられる。図15A及び図15Bは、透過型の実像スクリーン240を搭載した画像表示装置201の断面図及び上面図である。図15Aに示す例では、実像スクリーン240よりも外側にプロジェクタ231が配置され、各プロジェクタ231から直接に画像が投射される。また図15Bに示すように、実像スクリーン240の外側にプロジェクタ231を設けることで、プロジェクタ231の配置の自由度が向上し、1つのプロジェクタ231から複数の実像スクリーン240に画像投射するといった構成を容易に実現することが可能である。
<第3の実施形態>
図16は、第3の実施形態に係る画像表示装置の構成例を示す模式図である。図16Aは、画像表示装置300の斜視図であり、図16Bは、画像表示装置300の内部構成の一例を示す模式図である。図17及び図18は、図16に示す画像表示装置300の側面図及び上面図である。本実施形態では、直視型の立体表示ディスプレイ340を用いて、全方位ディスプレイが構成される。
画像表示装置300は、複数の虚像スクリーン310と、複数の立体表示ディスプレイ340で構成された多視点映像源311とを有する。各虚像スクリーン310は、例えば図10等を参照して説明した画像表示装置200の虚像スクリーン210と同様に構成される。すなわち虚像スクリーン310は、反射型のHOEであり、中心軸Oの全周を覆うように配置される。
立体表示ディスプレイ340は、専用のメガネ等を用いることなく立体像を表示可能な直視型のディスプレイである。立体表示ディスプレイ340は、立体像を表示する画像表示面341を有する。直視型の立体表示ディスプレイは、一般に、複数の表示方向にむけて複数の視点画像4を表示することで立体像を表示する。従って、本実施形態では、直視型の立体表示ディスプレイ340の画像表示面341が、視点画像4を表示する表示面となる。各立体表示ディスプレイ340は、対応する虚像スクリーン310に画像表示面341を向けて配置される。図16~図18に示すように、画像表示装置300は、図10等に示す画像表示装置200の実像スクリーン230を、立体表示ディスプレイ340で置き換えた構成であると言える。
立体表示ディスプレイ340は、レンチキュラレンズ方式、レンズアレイ方式、及び視差バリア方式のいずれか1つの方式により複数の視点画像4を表示する。レンチキュラレンズ方式は、水平方向に光を分散させるレンチキュラレンズを用いて、互いに異なる方向に画像を表示させる方式である。レンチキュラレンズ方式を用いることで、視差バリア方式等と比べ、明るい視点画像4を表示することが可能である。レンズアレイ方式は、マイクロレンズアレイを用いて垂直及び水平方向に光を分散させて視点画像4を表示する方式である。レンズアレイ方式を用いることで、垂直方向の多視点化が可能となり、実在感の高い表現が可能となる。視差バリア方式は、各画素の光を選択的に遮るパララックスバリア等を用いて視点画像4を表示する方式であり、他の方式に比べて広い視野角を実現することが可能である。
これらの方式では、LCD(Liquid Crystal Display)等のフラットパネルディスプレイにより、視点画像4の元となる画像が表示される。ディスプレイのバックライトに用いられる光源は、レーザ光源であることが望ましい。なおLED光源を利用したバックライトが用いられる場合には、波長フィルタ等を用いて波長幅を狭くすることで、虚像スクリーン310(HOE)での色分散による画像のボケや色ずれを軽減することが可能である。この他、裸眼立体表示が可能な任意の方式が用いられてよい。なお、立体表示ディスプレイ340では、必ずしも立体視が可能な角度ピッチで視点画像4を表示する必要はない。例えばこれらの方式を使って、両眼視差が生じないレベルの視点画像を表示する多視点表示ディスプレイが用いられてもよい。
図17及び図18に示すように、画像表示装置300は、多角柱型の多面スクリーン(虚像スクリーン310)と、その周りに配置された多角柱型の多面ディスプレイ(立体表示装置)とで構成される。このように、多視点映像源311として、直視型の立体表示ディスプレイ340を用いることで、全体の装置サイズを小さくすることができる。
<第4の実施形態>
図19は、第4の実施形態に係る画像表示装置の構成例を示す模式図である。図19の左側及び右側の図は、画像表示装置400の断面図及び上面図である。画像表示装置400では、虚像スクリーン410として、透過型のホログラフィック光学素子(透過型HOE)が用いられる。
透過型HOEは、特定の角度範囲で入射した光を回折透過し、その他の角度範囲の光を透過するように構成される。例えば、透過型HOEに対して特定の角度範囲で入射した光は、HOE本体を透過し、その入射角度に応じた出射角度で入射した面とは反対側の面から出射される。また特定の角度範囲以外の入射角度で入射した光は、干渉縞による回折をほとんど受けることなく、透過型HOEを透過する。
図19に示すように、複数の虚像スクリーン410は、中心軸Oの全周を覆うように配置され、多角柱状の多面スクリーンを構成する。図19では、虚像スクリーン410の裏面414に斜め下方から視点画像4が投射される。裏面414に投射された視点画像4を構成する光は、虚像スクリーン410の表面413に向けて水平方向に沿って出射される。この結果、虚像スクリーン410を観察するユーザは、表面413に向けて出射された光の光路を裏面414側に延長した延長線上に、視点画像4の虚像1を観察することになる。なお画像表示装置400、各視点画像4の虚像1を形成する虚像面3が中心軸Oで交わるように構成されている。
このように、虚像スクリーン410は、画像を透過して虚像として表示する透過型のミラー(透過型ミラーHOE)であると言える。図19に示す例では、透過型の平面ミラーとして構成された虚像スクリーン410が用いられる。なおHOEにレンズ機能を持たせた透過型の曲面ミラーとして虚像スクリーン410を構成することも可能である(図22参照)。
虚像スクリーン410は、単一の透過型HOEを用いて構成される。あるいは、2つの反射型HOEを接合して虚像スクリーン410が構成されてもよい。この場合、2度の回折反射により透過を実現することが可能である。虚像スクリーン410を透過型にすることで、例えば多視点映像源411を虚像スクリーン410よりも装置の内側に入れることが可能となり、装置の小型化を図ることが可能となる。なお、虚像スクリーン410は中心軸Oの周囲の一部を覆うように配置されてもよい。
多視点映像源411は、複数の多視点ディスプレイ420を有する。多視点ディスプレイ420は、中心軸Oの全周を覆うように配置され、多角柱状の多面ディスプレイを構成する。また上記したように虚像スクリーン410は透過型である。従って、多視点ディスプレイ420は、例えば虚像スクリーン410の裏面414に対して斜め下方から視点画像4を投射する必要がある。このため、画像表示装置400では、多視点ディスプレイ420は、虚像スクリーン410よりも中心軸Oに近い位置に配置される。多視点ディスプレイ420としては、上記の実施形態で説明したマルチプロジェクタ方式の実像スクリーンや、直視型の立体表示ディスプレイを用いることが可能である。
図19の左側の図に示すように、透過型の虚像スクリーン410を用いた場合、映像源である多視点ディスプレイ420と虚像スクリーン410との距離が近くなってくるので、虚像1を中心軸Oに重ねるように表示することが難しい場合があり得る。このような場合であっても、各方向から見た虚像1がつながる様に表示することで、表示対象5を多視点表示するといったことが可能である。
図20は、透過型の虚像スクリーン410に投射される視点画像4の表示方法について説明するための模式図である。図20には、ユーザが虚像スクリーン410を介して多視点ディスプレイ420を見込む方向(実像観察方向8)、及びユーザの視点2から中心軸に向かう方向が、白抜き及び黒塗りの矢印を用いて模式的に図示されている。図20では、ユーザが、互いに隣接する虚像スクリーン410a及び410bの境界を通る虚像観察方向9に沿って虚像を観察しているものとする。また、中心軸Oから境界に向かう方向(図20における虚像観察方向9の逆方向)を表示対象5を表示する際の起点となる起点方向とする。
本実施形態では、透過型の虚像スクリーン410が用いられる。すなわち、虚像スクリーン410は、表示面421から投射された視点画像4を透過して視点画像4の虚像1を表示する。従って、表示面421に表示された視点画像4が、そのまま虚像1として表示される画像となる。この場合、図示しない映像制御部により、実像観察方向8から見た表示対象5の視点画像4を虚像観察方向9に表示する。これにより、表示対象5の虚像1を適正に表示することが可能となる。
表示対象5の起点方向(例えば表示対象5(虚像)の正面を観察する方向)を中心軸Oを基準とする方位角で表す。ここでは、起点方向の方位角をθ0度とする。従って図20では、虚像観察方向9が方位角θ0となる視点2から虚像1が観察されている。このとき、ユーザの視点2から見て左側の多視点ディスプレイ420aの中心を見込む角度をθi1とする。またユーザの視点2から見て右側の多視点ディスプレイ420bの中心を見込む角度をθi2とする。
ここでは、説明を簡単にするために、θi1及びθi2を、水平面内での角度として説明する。例えば、θi1(θi2)は、虚像スクリーン410a(虚像スクリーン410b)を介して多視点ディスプレイ420a(多視点ディスプレイ420b)の中心に向かう光路を水平面に射影した直線が、多視点ディスプレイ420a(多視点ディスプレイ420b)の法線となす角度である。これらの角度は、各多視点ディスプレイ420a及び420bを見込む方向(実像観察方向8a及び8b)を表す角度と言える。
ここで、ユーザの視点2がΔθだけ移動して、虚像観察方向9の方位角が(θ0+Δθ)になったとする。すなわち視点2はΔθだけ、中心軸Oを基準に右回りに回転したものとする。この場合、多視点ディスプレイ420aを見込む角度θi1は、(θi1-α'(θ)×Δθ)となる。ここでα'(θ)は、正の係数である。この場合、θi1は、視点2がΔθだけ移動することで減少する。これは、上面から見た多視点ディスプレイ420aを見込む方向が右回りに回転することを意味する。また多視点ディスプレイ420bを見込む角度θi2は、(θi2+β'(θ)×Δθ)となる。ここでβ'(θ)は、正の係数である。この場合、θi2は、視点2がΔθだけ移動することで増加する。これは、上面から見た多視点ディスプレイ420bを見込む方向が右回りに回転することを意味する。
このようにΔθだけ変化した角度で多視点ディスプレイ420の表示面421を見込んだ時に、各表示面421でθ0+Δθ度の表示対象5の視点画像4を表示することで、ユーザにそこから見た表示対象5の虚像を見せることが可能となる。また透過型の虚像スクリーン410を用いる場合、見込む方向が回転する方向は、図7を参照して説明した反射型の虚像スクリーン410を用いる場合とは逆になる。
なお、α'(θ)及びβ'(θ)は、各多視点ディスプレイを見込む角度(θi1及びθi2)の変化量にかかる係数であり、射影角度変換やレンズ効果、HOEの回折収差等の影響(角度のずれ等)を補正するパラメータである。特に以下で説明するレンズ機能を持たせる場合には、光の進行方向が大きく変わり、収差も発生することが考えられる。これらの影響を低減するように係数を設定して変化量を補正することで、表示対象5の虚像1を正しく表示させることが可能となる。
図21は、レンズ機能を有する透過型の虚像スクリーン410により表示される虚像の一例を示す模式図である。図21では、虚像スクリーン410を介して虚像1が観察されているものとする。例えば虚像スクリーン410にレンズ機能を加えることで、虚像1の表示位置及び虚像1のサイズが変化する。この時、レンズの中心に向けられた視点2では、虚像を表示する光路の向き等に変化はない。
一方でレンズの端から虚像1を観察する場合、レンズ機能が加わることで、虚像1を見る方向(荒い点線の矢印)が変化する。なお、多視点ディスプレイ420を見込む方向(細かい点線の矢印)は、レンズ機能を加えても変化しない。このように、レンズ機能の追加に伴い、虚像1を表示する光の光路が変化し、かつ各種の収差が発生する場合がある。このような角度の変化や収差による変形等が抑制されるように、視点画像4が適宜補正される。
図22は、画像表示装置の他の構成例を示す模式図である。図22Aに示す画像表示装置401は、図19に示す画像表示装置400において、虚像スクリーン410にレンズ機能を持たせた構成を示す。この構成では、虚像1の表示位置を虚像スクリーン410から遠い位置にすることで、中心軸Oで重なるように虚像1を表示させることが可能である。このように、レンズ機能を用いて、虚像1の表示位置を適宜調整することが可能である。
図22Bに示す画像表示装置402では、虚像スクリーン410で構成される多面スクリーンと、多視点ディスプレイ420で構成される多面ディスプレイとが同一の円筒に内設するように構成される。また虚像スクリーン410には、中心軸O挟んで反対側に配置された多視点ディスプレイ420から視点画像4が投射される。このように、反対側から画像を投射する構成とすることで、投射距離を広げることが可能となる。また、段差のない筒型の画像表示装置400を実現することが可能である。
<第5の実施形態>
図23は、第5の実施形態に係る画像表示装置の構成例を示す模式図である。本実施形態に係る画像表示装置500は、曲面形状の虚像スクリーン510を用いて構成される。
画像表示装置500は、円筒形状の虚像スクリーン510と、虚像スクリーン510よりも半径の大きい円筒形状の実像スクリーン525とを有する。虚像スクリーン510及び実像スクリーン525は中心軸Oを中心としてそれぞれ配置される。典型的には、実像スクリーン525は、虚像スクリーン510の下方に、虚像1の表示を遮らないように配置される。虚像スクリーン510及び実像スクリーン525は、例えば反射型のHOEにより構成される。
また画像表示装置500は、実像スクリーン525に画像を投射する複数のプロジェクタ526を有する。図23には、複数のプロジェクタ526の各発光点29が図示されている。画像表示装置500は、例えば図10~図12を参照して説明した画像表示装置200の多面スクリーン(虚像スクリーン)及び多面ディスプレイ(実像スクリーン)を、円筒にした構成であると言える。
図23に示すように、複数のプロジェクタ526は、発光点29が実像スクリーン525に沿って円周上に並ぶように配置される。各発光点29からは、中心軸Oを挟んで反対側の実像スクリーン525に向けて画像が投射される。これにより、実像スクリーン525の内側の表示面521には、複数のプロジェクタ526から互いに異なる方向から画像が投射され、視点画像4を表示することが可能となる。表示面521に表示された視点画像4は、虚像スクリーン510に投射される。また虚像スクリーン510の内側には、中心軸Oを中心とする円筒状の虚像面3が形成される。この虚像面3に表示対象5の虚像が表示される。
虚像スクリーン510を円筒型にすると、図23に示すように虚像面3はつながった状態になる。従って画像表示装置500では虚像スクリーン510の継ぎ目がなくなる。このため、表示対象5の虚像を滑らかに表示することが可能となり、実在感を十分に向上する効果がある。また、虚像スクリーン510を見込む角度の最大値が多角柱状の虚像スクリーン510を用いる場合よりも小さくなる。ここで虚像スクリーン510を見込む角度とは、例えば虚像スクリーン510の表面に対する視線方向の交点における、表面の法線方向と視線方向とのなす角度である。
円筒形状では、視点2の移動とともに虚像スクリーン510を見込む角度が連続的に変化する。このため視点2を移動させたときに、面の切り替わりで起こりやすい輝度の低下や変動等が発生しなくなる。これにより、虚像の輝度が不自然に変化するといった事態が回避され自然な立体表示を実現することが可能となる。なお、これらは透過型のHOEが虚像スクリーン510として用いられる場合でも同様である。
上記では、実像スクリーン525も円筒形状である場合について説明したが、これに限定されるわけではない。例えば実像スクリーン525は多角柱形状であってもよい。逆に、実像スクリーン525が円筒形状で、虚像スクリーン510が多角柱形状であってもよい。このように、本実施形態では、虚像スクリーン510及び実像スクリーン525(表示面)の少なくとも一方は、曲面形状である。
図24は、画像表示装置の他の構成例を示す模式図である。図24に示す画像表示装置501は、円弧状の虚像スクリーン510及び実像スクリーン525と、実像スクリーン525に向けて画像を投射する複数のプロジェクタ526とを有する。この構成は、例えば図23に示す画像表示装置500を部分的に切り出した構成となっている。このように、曲面状の虚像スクリーン510(実像スクリーン525)が中心軸Oの周囲の一部を覆うように配置されてもよい。この他、曲面状のスクリーンの具体的な構成は限定されない。例えば水平方向の断面が楕円形、双極線、2次曲線等の任意の曲線となるような虚像スクリーン510が用いられてもよい。
<第6の実施形態>
図25は、第6の実施形態に係る画像表示装置の構成例を示す模式図である。本実施形態では、虚像スクリーン610としてハーフミラーが用いられる。一般にハーフミラーに入射する光は、入射角と等しい出射角で正反射される。このため、例えば水平方向に光を出射させる(虚像を表示する)場合には、垂直方向から45度傾いたミラー面に光を入射することになる。
図25Aに示す画像表示装置600では、複数の虚像スクリーン610aにより、頂点側を上方に向けて配置された多角錐状の多面スクリーンが形成される。また多面スクリーンの上方には、各面に向けて視点画像4を表示する複数の多視点ディスプレイ620aがそれぞれ配置される。図25Bに示す画像表示装置601では、頂点側を上方に向けて配置された円錐状の虚像スクリーン610bが用いられる。虚像スクリーン610aの上方には、図25Aと同様に複数の多視点ディスプレイ620bがそれぞれ配置される。これにより、虚像スクリーン610a及び610bの外周に向けて表示対象5の虚像を表示することが可能となる。
図25Cに示す画像表示装置602では、頂点側を上方に向けて配置された円錐状の虚像スクリーン610cの上方に、円環状に視点画像4を表示可能な多視点ディスプレイ620cが配置される。このように、円環状の多視点ディスプレイ620cを用いることで、全周にわたって連続的に虚像1を表示することが可能となる。これにより、例えば多視点ディスプレイ620が分かれていることで、虚像1の表示が部分的に途切れるといった事態を回避することが可能である。
以上説明した本技術に係る特徴部分のうち、少なくとも2つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
本開示において、「同じ」「等しい」「直交」等は、「実質的に同じ」「実質的に等しい」「実質的に直交」等を含む概念とする。例えば「完全に同じ」「完全に等しい」「完全に直交」等を基準とした所定の範囲(例えば±10%の範囲)に含まれる状態も含まれる。
なお、本技術は以下のような構成も採ることができる。
(1)所定の軸の周囲の少なくとも一部を覆うように配置され、投射された画像の虚像を前記所定の軸を基準として表示する透明な1以上の虚像スクリーンと、
表示対象を互いに異なる方向から見た画像となる複数の視点画像を互いに異なる方向に向けて表示し、前記1以上の虚像スクリーンの各々に前記表示された複数の視点画像を投射する1以上の表示面を有する表示部と、
前記虚像スクリーンの周囲の観察点から前記虚像スクリーンを介して前記表示面を見込む第1の方向に対して、前記観察点から前記所定の軸に向かう第2の方向から見える前記表示対象の虚像となる前記視点画像を表示する表示制御部と
を具備する画像表示装置。
(2)(1)に記載の画像表示装置であって、
前記複数の視点画像は、前記表示対象を所定の角度ピッチでずらした方向からみた画像であり、
前記表示制御部は、前記観察点の移動に応じて、前記観察点から見て前記表示対象の虚像が前記所定の角度ピッチで切り替わるように前記視点画像を表示する
画像表示装置。
(3)(1)又は(2)に記載の画像表示装置であって、
前記虚像スクリーンは、前記表示面から投射された前記視点画像を反射して前記視点画像の虚像を表示し、
前記表示制御部は、前記第2の方向から見た前記表示対象の画像を鏡面反転させた前記視点画像を前記第1の方向に表示する
画像表示装置。
(4)(1)又は(2)に記載の画像表示装置であって、
前記虚像スクリーンは、前記表示面から投射された前記視点画像を透過して前記視点画像の虚像を表示し、
前記表示制御部は、前記第2の方向から見た前記表示対象の前記視点画像を前記第1の方向に表示する
画像表示装置。
(5)(1)から(4)のうちいずれか1つに記載の画像表示装置であって、
前記1以上の虚像スクリーンは、複数の虚像スクリーンを含み、前記所定の軸を基準として多面スクリーンを構成する
画像表示装置。
(6)(1)から(5)のうちいずれか1つに記載の画像表示装置であって、
前記虚像スクリーンは、回折光学素子又はハーフミラーのいずれか一方である
画像表示装置。
(7)(1)から(6)のうちいずれか1つに記載の画像表示装置であって、
前記虚像スクリーンは、反射型のホログラフィック光学素子又は透過型のホログラフィック光学素子のいずれか一方である
画像表示装置。
(8)(1)から(7)のうちいずれか1つに記載の画像表示装置であって、
前記1以上の虚像スクリーンは、前記所定の軸の全周を覆うように配置される
画像表示装置。
(9)(1)から(8)のうちいずれか1つに記載の画像表示装置であって、
前記1以上の表示面は、前記1以上の虚像スクリーンにより表示される虚像を遮らないように配置される
画像表示装置。
(10)(1)から(9)のうちいずれか1つに記載の画像表示装置であって、
前記1以上の表示面は、複数の表示面を含み、前記所定の軸を基準として多面ディスプレイを構成する
画像表示装置。
(11)(1)から(10)のうちいずれか1つに記載の画像表示装置であって、
前記複数の視点画像の虚像は、互いの虚像面の中心線が重なるように表示される
画像表示装置。
(12)(1)から(10)のうちいずれか1つに記載の画像表示装置であって、
前記複数の視点画像の虚像は、互いの虚像面の一部が重なるように表示される
画像表示装置。
(13)(1)から(10)のうちいずれか1つに記載の画像表示装置であって、
前記複数の視点画像の虚像は、互いの虚像面が接するように表示される
画像表示装置。
(14)(1)から(13)のうちいずれか1つに記載の画像表示装置であって、
前記虚像スクリーン及び前記表示面の少なくとも一方は、曲面形状である
画像表示装置。
(15)(1)から(14)のうちいずれか1つに記載の画像表示装置であって、
前記表示面は、異方性拡散スクリーンの画像表示面であり、
前記表示部は、互いに異なる方向から前記異方性拡散スクリーンに画像を投射する複数の投射部を有する
画像表示装置。
(16)(1)から(15)のうちいずれか1つに記載の画像表示装置であって、
前記表示面は、直視型の立体表示ディスプレイの画像表示面である
画像表示装置。
(17)(16)に記載の画像表示装置であって、
前記立体表示ディスプレイは、レンチキュラレンズ方式、レンズアレイ方式、及び視差バリア方式のいずれか1つの方式により前記複数の視点画像を表示する
画像表示装置。
1、1a、1b…虚像
2…視点
3…虚像面
4、4a~4c…視点画像
5…表示対象
8、8a、8b…実像観察方向
9…虚像観察方向
10、210、310、410、510、610…虚像スクリーン
11、211、311、411…多視点映像源
12…映像制御部
20、420、620…多視点ディスプレイ
21、221、421、521、…表示面
25、230、525…実像スクリーン
26、231、526…プロジェクタ
28、341…画像表示面
100、200、201、300、400、401、402、500、501、600、601、602…画像表示装置
340…立体表示ディスプレイ

Claims (17)

  1. 所定の軸の周囲の少なくとも一部を覆うように配置され、投射された画像の虚像を前記所定の軸を基準として表示する透明な1以上の虚像スクリーンと、
    表示対象を互いに異なる方向から見た画像となる複数の視点画像を互いに異なる方向に向けて表示し、前記1以上の虚像スクリーンの各々に前記表示された複数の視点画像を投射する1以上の表示面を有する表示部と、
    前記虚像スクリーンの周囲の観察点から前記虚像スクリーンを介して前記表示面を見込む第1の方向に対して、前記観察点から前記所定の軸に向かう第2の方向から見える前記表示対象の虚像となる前記視点画像を表示する表示制御部と
    を具備する画像表示装置。
  2. 請求項1に記載の画像表示装置であって、
    前記複数の視点画像は、前記表示対象を所定の角度ピッチでずらした方向からみた画像であり、
    前記表示制御部は、前記観察点の移動に応じて、前記観察点から見て前記表示対象の虚像が前記所定の角度ピッチで切り替わるように前記視点画像を表示する
    画像表示装置。
  3. 請求項1に記載の画像表示装置であって、
    前記虚像スクリーンは、前記表示面から投射された前記視点画像を反射して前記視点画像の虚像を表示し、
    前記表示制御部は、前記第2の方向から見た前記表示対象の画像を鏡面反転させた前記視点画像を前記第1の方向に表示する
    画像表示装置。
  4. 請求項1に記載の画像表示装置であって、
    前記虚像スクリーンは、前記表示面から投射された前記視点画像を透過して前記視点画像の虚像を表示し、
    前記表示制御部は、前記第2の方向から見た前記表示対象の前記視点画像を前記第1の方向に表示する
    画像表示装置。
  5. 請求項1に記載の画像表示装置であって、
    前記1以上の虚像スクリーンは、複数の虚像スクリーンを含み、前記所定の軸を基準として多面スクリーンを構成する
    画像表示装置。
  6. 請求項1に記載の画像表示装置であって、
    前記虚像スクリーンは、回折光学素子又はハーフミラーのいずれか一方である
    画像表示装置。
  7. 請求項1に記載の画像表示装置であって、
    前記虚像スクリーンは、反射型のホログラフィック光学素子又は透過型のホログラフィック光学素子のいずれか一方である
    画像表示装置。
  8. 請求項1に記載の画像表示装置であって、
    前記1以上の虚像スクリーンは、前記所定の軸の全周を覆うように配置される
    画像表示装置。
  9. 請求項1に記載の画像表示装置であって、
    前記1以上の表示面は、前記1以上の虚像スクリーンにより表示される虚像を遮らないように配置される
    画像表示装置。
  10. 請求項1に記載の画像表示装置であって、
    前記1以上の表示面は、複数の表示面を含み、前記所定の軸を基準として多面ディスプレイを構成する
    画像表示装置。
  11. 請求項1に記載の画像表示装置であって、
    前記複数の視点画像の虚像は、互いの虚像面の中心線が重なるように表示される
    画像表示装置。
  12. 請求項1に記載の画像表示装置であって、
    前記複数の視点画像の虚像は、互いの虚像面の一部が重なるように表示される
    画像表示装置。
  13. 請求項1に記載の画像表示装置であって、
    前記複数の視点画像の虚像は、互いの虚像面が接するように表示される
    画像表示装置。
  14. 請求項1に記載の画像表示装置であって、
    前記虚像スクリーン及び前記表示面の少なくとも一方は、曲面形状である
    画像表示装置。
  15. 請求項1に記載の画像表示装置であって、
    前記表示面は、異方性拡散スクリーンの画像表示面であり、
    前記表示部は、互いに異なる方向から前記異方性拡散スクリーンに画像を投射する複数の投射部を有する
    画像表示装置。
  16. 請求項1に記載の画像表示装置であって、
    前記表示面は、直視型の立体表示ディスプレイの画像表示面である
    画像表示装置。
  17. 請求項16に記載の画像表示装置であって、
    前記立体表示ディスプレイは、レンチキュラレンズ方式、レンズアレイ方式、及び視差バリア方式のいずれか1つの方式により前記複数の視点画像を表示する
    画像表示装置。
JP2021553512A 2019-10-31 2020-10-22 画像表示装置 Active JP7497733B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019198429 2019-10-31
JP2019198429 2019-10-31
PCT/JP2020/039677 WO2021085287A1 (ja) 2019-10-31 2020-10-22 画像表示装置

Publications (2)

Publication Number Publication Date
JPWO2021085287A1 JPWO2021085287A1 (ja) 2021-05-06
JP7497733B2 true JP7497733B2 (ja) 2024-06-11

Family

ID=75714493

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021553512A Active JP7497733B2 (ja) 2019-10-31 2020-10-22 画像表示装置

Country Status (6)

Country Link
US (1) US11973929B2 (ja)
EP (1) EP4053630A4 (ja)
JP (1) JP7497733B2 (ja)
KR (1) KR20220088698A (ja)
CN (1) CN114641991A (ja)
WO (1) WO2021085287A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020230258A1 (ja) * 2019-05-14 2020-11-19 日本電信電話株式会社 表示装置とその方法
JP7567582B2 (ja) * 2021-03-15 2024-10-16 株式会社Jvcケンウッド 立体映像表示装置、立体映像表示方法およびプログラム
CN117136542A (zh) * 2021-03-31 2023-11-28 苹果公司 用于观看3d照片和3d视频的技术
CN114706497B (zh) * 2022-04-26 2025-04-18 北京七维视觉科技有限公司 一种多屏幕联动显示的触控方法、相关装置和系统
US20250386001A1 (en) * 2022-05-30 2025-12-18 Sony Group Corporation Image display apparatus

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008176180A (ja) 2007-01-22 2008-07-31 Olympus Corp 視覚表示装置
US20160048030A1 (en) 2014-08-14 2016-02-18 Delta Electronics, Inc. Light-field immersive display and operation method thereof
JP2017152784A (ja) 2016-02-22 2017-08-31 セイコーエプソン株式会社 表示装置
WO2019040484A1 (en) 2017-08-23 2019-02-28 Pcms Holdings, Inc. METHOD AND APPARATUS FOR GENERATING 3D PROJECTED LIGHT FIELDS USING LIGHT FIELD IMAGE PROJECTION ENGINE

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6141034A (en) * 1995-12-15 2000-10-31 Immersive Media Co. Immersive imaging method and apparatus
US7224526B2 (en) * 1999-12-08 2007-05-29 Neurok Llc Three-dimensional free space image projection employing Fresnel lenses
JP2004101929A (ja) * 2002-09-10 2004-04-02 Osaka Gas Co Ltd 多視点表示装置
JP4313102B2 (ja) * 2003-06-27 2009-08-12 凸版印刷株式会社 立体像表示装置
RU2007131531A (ru) * 2005-01-26 2009-03-10 Визу Инвест Апс (Dk) Устройство отображения для получения квазитрехмерных изображений
JP5044204B2 (ja) * 2006-12-18 2012-10-10 クラリオン株式会社 運転支援装置
JP4267668B2 (ja) 2007-03-08 2009-05-27 株式会社日立製作所 立体像表示装置
CN101382660B (zh) * 2008-10-27 2010-09-22 浙江大学 360°悬浮式体视三维显示装置
EP2290969A4 (en) * 2009-05-12 2011-06-29 Huawei Device Co Ltd TELEPRESENCE SYSTEM, METHOD AND VIDEO CAPTURE DEVICE
CN102346367A (zh) * 2010-08-03 2012-02-08 北京理工大学 裸眼宽视域多投影机无扫描3d显示装置及方法
US9091911B2 (en) * 2011-09-23 2015-07-28 360Brandvision, Inc. Device and method for omnidirectional image display
US20140085436A1 (en) * 2012-09-21 2014-03-27 Third Dimension Ip Llc Systems and Methods for Convergent Angular Slice True-3D Display
JP6443654B2 (ja) * 2013-09-26 2018-12-26 Tianma Japan株式会社 立体画像表示装置、端末装置、立体画像表示方法、及びそのプログラム
JP2016001212A (ja) * 2014-06-11 2016-01-07 セイコーエプソン株式会社 表示装置
US10877210B2 (en) * 2016-07-15 2020-12-29 Light Field Lab, Inc. Energy propagation and transverse anderson localization with two-dimensional, light field and holographic relays
US11893755B2 (en) * 2018-01-19 2024-02-06 Interdigital Vc Holdings, Inc. Multi-focal planes with varying positions
GB2570903B (en) * 2018-02-08 2020-03-04 Holoxica Ltd Projection array light field display
US11425350B2 (en) * 2018-03-08 2022-08-23 Virtualwindow Co., Ltd. Image display system
WO2019183211A1 (en) * 2018-03-23 2019-09-26 Pcms Holdings, Inc. Multifocal plane based method to produce stereoscopic viewpoints in a dibr system (mfp-dibr)
US10709979B2 (en) * 2018-06-11 2020-07-14 Nintendo Co., Ltd. Systems and methods for adjusting a stereoscopic effect

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008176180A (ja) 2007-01-22 2008-07-31 Olympus Corp 視覚表示装置
US20160048030A1 (en) 2014-08-14 2016-02-18 Delta Electronics, Inc. Light-field immersive display and operation method thereof
JP2017152784A (ja) 2016-02-22 2017-08-31 セイコーエプソン株式会社 表示装置
WO2019040484A1 (en) 2017-08-23 2019-02-28 Pcms Holdings, Inc. METHOD AND APPARATUS FOR GENERATING 3D PROJECTED LIGHT FIELDS USING LIGHT FIELD IMAGE PROJECTION ENGINE

Also Published As

Publication number Publication date
CN114641991A (zh) 2022-06-17
KR20220088698A (ko) 2022-06-28
US11973929B2 (en) 2024-04-30
EP4053630A4 (en) 2022-12-21
WO2021085287A1 (ja) 2021-05-06
JPWO2021085287A1 (ja) 2021-05-06
US20220385885A1 (en) 2022-12-01
EP4053630A1 (en) 2022-09-07

Similar Documents

Publication Publication Date Title
JP7497733B2 (ja) 画像表示装置
US20240045377A1 (en) Relay systems
US9507174B2 (en) Spatial focal field type glasses display
US11686938B2 (en) Augmented reality device for providing 3D augmented reality and operating method of the same
CN100495115C (zh) 显示器
EP1166257B1 (en) Wide-field-of-view projection display
GB2404991A (en) LCD device having at least one viewing window
KR102885603B1 (ko) 포비티드 프로젝션을 갖는 라이트 필드 가상 및 혼합 현실 시스템
JP2005533291A (ja) 自動立体視投影装置
JP2016500829A (ja) 収束角度スライス型の真の3dディスプレイ
CN102200685A (zh) 空中三维图像显示系统
JP5069360B2 (ja) 3次元表示装置
WO2021149511A1 (ja) 画像表示装置
JP3789332B2 (ja) 三次元表示装置
KR20230118657A (ko) 디스플레이 시스템
JP5031909B2 (ja) 3次元表示装置
US20230036326A1 (en) Image display apparatus
JP4703477B2 (ja) 3次元表示装置
WO2021111954A1 (ja) 画像表示装置
JP3960085B2 (ja) 立体画像表示装置
KR101378343B1 (ko) 3차원 영상 표시장치
US9910277B2 (en) Head-up display
KR20190143739A (ko) 공간 영상 투영 장치
JP2005099425A (ja) 三次元表示装置
JP2021117480A (ja) 画像表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230906

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240430

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240513

R150 Certificate of patent or registration of utility model

Ref document number: 7497733

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150