WO2024257499A1

WO2024257499A1 - 空中浮遊映像表示装置、携帯端末、および表示方法

Info

Publication number: WO2024257499A1
Application number: PCT/JP2024/016594
Authority: WO
Inventors: 和夫鋪田; 利昌永井; 浩司藤田; 祥朝倉; 拓也清水
Original assignee: Maxell Ltd
Current assignee: Maxell Ltd
Priority date: 2023-06-13
Filing date: 2024-04-26
Publication date: 2024-12-19
Anticipated expiration: 2025-12-13
Also published as: CN121569335A

Abstract

より好適な空中浮遊映像表示装置を提供すること。本発明によれば、持続可能な開発目標（ＳＤＧｓ）の「３すべての人に健康と福祉を」、「９産業と技術革新の基盤をつくろう」、「１１住み続けられるまちづくりを」に貢献する。空中浮遊映像表示装置は、ユーザの携帯端末との通信接続に基づいて、例えば、携帯端末の画面に表示される表示画像を、空中浮遊映像にも表示画像として表示し、携帯端末の画面に表示される表示画像に対するユーザ操作の検出および判定に基づいて、画面の表示画像に対応付けられた所定の処理を実行させるととともに、空中浮遊映像の表示画像にも当該処理を反映するように制御する。また、本システムでは、どちらの装置での操作および検出が有効／無効となるかが設定および制御される。

Description

空中浮遊映像表示装置、携帯端末、および表示方法

　本発明は、空中浮遊映像表示装置に関する。

　空中浮遊情報表示技術については、例えば、特許文献１に開示されている。

特開２０１９－１２８７２２号公報

　しかしながら、特許文献１の開示では、空中浮遊映像の実用的な明るさや品位を得るための構成や、ユーザが空中浮遊映像をより楽しく視認するための構成などについての考慮は十分ではなかった。

　本発明の目的は、より好適な空中浮遊映像表示装置を提供することにある。

　上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、以下のように構成すればよい。一実施の形態は、空中浮遊映像表示装置であって、映像処理部と、映像処理部が映像処理を行った映像を表示する表示部と、表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、空中浮遊映像の表示範囲に対する物体の接触を検知する検知部と、ユーザの携帯端末と通信する通信部と、を備え、表示範囲への携帯端末の接触を検知した場合に、携帯端末側で指定された対象画像を、空中浮遊映像として表示させる。

　本発明によれば、より好適な空中浮遊映像表示装置を実現できる。これ以外の課題、構成および効果は、以下の実施形態の説明において明らかにされる。

本発明の一実施例に係る空間浮遊映像表示装置の使用形態の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。本発明の一実施例に係る、空中浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。本発明の一実施例に係る、空中浮遊映像表示装置を構成する、再帰反射板の投影図である。本発明の一実施例に係る、空中浮遊映像表示装置を構成する、再帰反射板の上面図である。本発明の一実施例に係る、空中浮遊映像表示装置を構成する、再帰反射板を構成する、コーナーリフレクタを示す斜視図である。本発明の一実施例に係る、空中浮遊映像表示装置を構成する、再帰反射板を構成する、コーナーリフレクタを示す上面図である。本発明の一実施例に係る、空中浮遊映像表示装置を構成する、再帰反射板を構成する、コーナーリフレクタを示す側面図である。本発明の一実施例に係る空間浮遊映像表示装置の構成例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示装置の構成の一例を示す図である。本発明の一実施例に係る光源装置の具体的な構成の一例を示す断面図である。本発明の一実施例に係る光源装置の具体的な構成の一例を示す断面図である。本発明の一実施例に係る光源装置の具体的な構成の一例を示す断面図である。本発明の一実施例に係る空間浮遊映像表示装置の主要部を示す配置図である。本発明の一実施例に係る表示装置の構成を示す断面図である。本発明の一実施例に係る表示装置の構成を示す断面図である。本発明の一実施例に係る映像表示装置の光源拡散特性を説明するための説明図である。本発明の一実施例に係る映像表示装置の拡散特性を説明するための説明図である。本発明の一実施例に係る画像処理が解決する課題の一例の説明図である。本発明の一実施例に係る画像処理の一例の説明図である。本発明の一実施例に係る映像表示処理の一例の説明図である。本発明の一実施例に係る映像表示処理の一例の説明図である。本発明の一実施例に係る空間浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。本発明の一実施例に係る空間浮遊映像表示システムの構成を示す図。本発明の一実施例に係る空間浮遊映像表示システムの概要を示す図。本発明の一実施例に係る携帯端末の構成を示す図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作を示す斜視図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作を示すＸＹ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作を示すＸＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などを示す斜視図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などの例を示すＸＹ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などの例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などの例を示すＸＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などの例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の姿勢などの例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の位置などの例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の位置などの例を示すＸＹ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の挿入・接触操作時の位置などの例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例を示す説明図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例を示す説明図。本発明の一実施例に係る空間浮遊映像への携帯端末の接触の例を示すＸＹ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の接触による視認不可領域の例を示すＸＺ平面図。本発明の一実施例に係る空間浮遊映像への携帯端末の接触による遮光の例を示すＹＺ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例および携帯端末の接触による視認不可領域の例を示すｘｙ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例および表示領域制限の例を示すｘｙ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例を示すｘｙ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例を示すｘｙ平面図。本発明の一実施例に係る空間浮遊映像へのガイド画像の表示例および表示領域制限の例を示す説明図。本発明の一実施例に係るガイド音声出力例を示す説明図。本発明の一実施例に係る空間浮遊映像表示装置におけるセンサの配置例を示すＹＺ平面断面図。本発明の一実施例に係る空中操作検出センサの構成例を示すｘｙ平面図。本発明の一実施例に係る空間浮遊映像表示装置におけるセンサの配置例を示すＹＺ平面断面図。本発明の一実施例に係る携帯端末におけるアプリケーション画面の表示例を示す説明図。本発明の一実施例に係る携帯端末におけるアプリケーション画面の表示例を示す説明図。本発明の一実施例に係る携帯端末におけるアプリケーション画面の表示例を示す説明図。本発明の一実施例に係る携帯端末におけるＱＲコード画面の表示例を示す説明図。本発明の一実施例に係る空間浮遊映像表示装置における携帯端末のＱＲコードの撮像の例を示すＹＺ平面断面図。本発明の一実施例に係る空間浮遊映像におけるＱＲコードの表示例を示す斜視図。本発明の一実施例に係る携帯端末による空間浮遊映像表示装置の空間浮遊映像のＱＲコードの撮像の例を示すＹＺ平面断面図。本発明の一実施例に係る第２の表示装置の画面でのＱＲコードの表示例を示す斜視図。本発明の一実施例に係る、携帯端末と空間浮遊映像表示装置とが通信接続されるシステムの構成例を示す図。本発明の一実施例に係る、携帯端末と空間浮遊映像表示装置との二重表示の例を示す図。本発明の一実施例に係る、システムの基本制御のフローを示す図。本発明の一実施例に係る、システムの接続前の表示・設定の例を示す図。本発明の一実施例に係る、システムの接続後の表示・設定の例（モード）を示す図。本発明の一実施例に係る、携帯端末の画面表示例としてモード設定のＧＵＩ例（１）を示す図。本発明の一実施例に係る、携帯端末の画面表示例としてモード設定のＧＵＩ例（２）を示す図。本発明の一実施例に係る、システムの機能ブロック構成例を示す図。本発明の一実施例に係る、空間浮遊映像表示装置の画面の構成例、および携帯端末の画面の構成例を示す図。本発明の一実施例に係る、課題および解決の例１を示す図。本発明の一実施例に係る、課題および解決の例２を示す図。本発明の一実施例に係る、課題および解決の例３を示す図。本発明の一実施例に係る、課題および解決の例４を示す図。本発明の一実施例に係る、空間浮遊映像表示装置と携帯端末との画像表示の例（パターン）を示す図。本発明の一実施例に係る、制御対象とする操作、および、制御に使用するセンサの例を示す図。本発明の一実施例に係る、空間浮遊映像表示装置の姿勢の例１を示す図。本発明の一実施例に係る、空間浮遊映像表示装置の姿勢の例２を示す図。本発明の一実施例に係る、空間浮遊映像表示装置の姿勢の例３を示す図。本発明の一実施例に係る、モード１のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード１のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード１のシーケンスの例（３）を示す図。本発明の一実施例に係る、モード１のシーケンスの例（４）を示す図。本発明の一実施例に係る、モード２のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード２のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード３のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード３のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード５のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード７のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード７のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード７のシーケンスの例（３）を示す図。本発明の一実施例に係る、モード７のシーケンスの例（４）を示す図。本発明の一実施例に係る、モード８のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード８のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード９のシーケンスの例（１）を示す図。本発明の一実施例に係る、モード９のシーケンスの例（２）を示す図。本発明の一実施例に係る、モード１１のシーケンスの例（１）を示す図。

　以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、本発明は実施例の説明に限定されるものではなく、本明細書に開示される技術的思想の範囲内において当業者による様々な変更および修正が可能である。また、本発明を説明するための全図において、同一の機能を有するものには、同一の符号を付与し、その繰り返しの説明は省略する場合がある。

　以下の実施例は、映像発光源からの映像光による映像を、ガラス等の空間を仕切る透明な部材を介して透過して、前記透明な部材の外部に空間浮遊映像として表示することが可能な映像表示装置に関する。なお、以下の実施例の説明において、空間に浮遊する映像を「空間浮遊映像」という用語で表現している。この用語の代わりに、「空中像」、「空間像」、「空中浮遊映像」、「表示映像の空間浮遊光学像」、「表示映像の空中浮遊光学像」などと表現してもかまわない。実施例の説明で主として用いる「空間浮遊映像」との用語は、これらの用語の代表例として用いている。

　以下の実施例によれば、例えば、銀行のＡＴＭや駅の券売機やデジタルサイネージ等において好適な映像表示装置を実現できる。例えば、現状、銀行のＡＴＭや駅の券売機等では、通常、タッチパネルが用いられているが、透明なガラス面や光透過性の板材を用いて、このガラス面や光透過性の板材上に高解像度な映像情報を空間浮遊した状態で表示可能となる。この時、出射する映像光の発散角を小さく、すなわち鋭角とし、更に特定の偏波に揃えることで、再帰反射板に対して正規の反射光だけを効率良く反射させるため、光の利用効率が高く、従来の再帰反射方式での課題となっていた主空間浮遊像の他に発生するゴースト像を抑えることができ、鮮明な空間浮遊映像を得ることができる。また、本実施例の光源を含む装置により、消費電力を大幅に低減することが可能な、新規で利用性に優れた空間浮遊映像表示装置（空間浮遊映像表示システム）を提供することができる。また、例えば、車両において車両内部および／または外部において視認可能である、いわゆる、一方向性の空間浮遊映像表示が可能な車両用空間浮遊映像表示装置を提供することができる。
　＜実施例１＞

　＜空間浮遊映像表示装置の使用形態の一例＞
　図１は、本発明の一実施例に係る空間浮遊映像表示装置の使用形態の一例を示す図であり、本実施例に係る空間浮遊映像表示装置の全体構成を示す図である。空間浮遊映像表示装置の具体的な構成については、図２等を用いて詳述するが、映像表示装置１から挟角な指向特性でかつ特定偏波の光が、映像光束として出射し、空間浮遊映像表示装置内の光学系での反射等を経て再帰反射板２に一旦入射し、再帰反射して透明な部材１００（ガラス等）を透過して、ガラス面の外側に、実像である空中像（空間浮遊映像３）を形成する。なお、以下の実施例においては、再帰反射部材の例として再帰反射板２（再帰性反射板）を用いて説明する。しかしながら、本発明の再帰反射板２は平面形状のプレートに限られず、平面または非平面の部材に貼り付けるシート状の再帰反射部材や、平面または非平面の部材にシート状の再帰反射部材を貼り付けたアセンブリ全体を含む概念の例として用いている。また、再帰反射板２の反射後の光線は結像する光学特性を有するため、再帰反射板２は結像光学部材または結像光学プレートと表現してもよい。

　また、店舗等においては、ガラス等の透光性の部材であるショーウィンド（「ウィンドガラス」とも言う）１０５により空間が仕切られている。本実施例の空間浮遊映像表示装置によれば、かかる透明な部材を透過して、浮遊映像を店舗（空間）の外部および／または内部に対して一方向に表示することが可能である。

　図１では、ウィンドガラス１０５の内側（店舗内）を奥行方向にしてその外側（例えば、歩道）が手前になるように示している。他方、ウィンドガラス１０５に特定偏波を反射する手段を設けることで反射させ、店内の所望の位置に空中像を形成することもできる。

　＜空間浮遊映像表示装置の光学システムの構成例＞
　図２Ａは、本発明の一実施例に係る空間浮遊映像表示装置の光学システムの構成の一例を示す図である。図２Ａを用いて、空間浮遊映像表示装置の構成をより具体的に説明する。図２Ａ（１）に示すように、ガラス等の透明な部材１００の斜め方向には、特定偏波の映像光を挟角に発散させる表示装置１を備える。表示装置１は、液晶表示パネル１１と、挟角な拡散特性を有する特定偏波の光を生成する光源装置１３とを備えている。

　表示装置１からの特定偏波の映像光は、透明な部材１００に設けた特定偏波の映像光を選択的に反射する膜を有する偏光分離部材１０１（図中は偏光分離部材１０１をシート状に形成して透明な部材１００に粘着している）で反射され、再帰反射板２に入射する。再帰反射板２の映像光入射面にはλ／４板２１を設ける。映像光は、再帰反射板２への入射のときと出射のときの２回、λ／４板２１を通過させられることで、特定偏波から他方の偏波へ偏光変換される。ここで、特定偏波の映像光を選択的に反射する偏光分離部材１０１は偏光変換された他方の偏波の偏光は透過する性質を有するので、偏光変換後の特定偏波の映像光は、偏光分離部材１０１を透過する。偏光分離部材１０１を透過した映像光が、透明な部材１００の外側に、実像である空間浮遊映像３を形成する。なお、再帰反射板２へ入射する映像光の主光線は、図２Ａでは再帰反射板２に対して９０°に入射している例を記載している。ただし、再帰反射板２に対する映像光の主光線の入射角度は９０°に限られず、例えば９０°±１５°でも使用可能である。

　ここで、図２Ａの光学システムにおける偏光設計の第１の例を説明する。例えば、表示装置１からＳ偏光の映像光が偏光分離部材１０１へ射出される構成とし、偏光分離部材１０１がＳ偏光を反射しＰ偏光を透過する特性を有する構成としてもよい。この場合、表示装置１から偏光分離部材１０１へ到達したＳ偏光の映像光は、偏光分離部材１０１により反射され、再帰反射板２へ向かう。当該映像光が再帰反射板２で反射される際に、再帰反射板２の入射面に設けられたλ／４板２１を２回通過するので、当該映像光はＳ偏光からＰ偏光へ変換される。Ｐ偏光へ変換された映像光は再び偏光分離部材１０１へ向かう。ここで、偏光分離部材１０１は、Ｓ偏光を反射しＰ偏光を透過する特性を有するので、Ｐ偏光の映像光は偏光分離部材１０１を透過し、透明な部材１００を透過する。透明な部材１００を透過した映像光は、再帰反射板２により生成された光であるため、偏光分離部材１０１に対して表示装置１の表示映像と鏡面関係にある位置に、表示装置１の表示映像の光学像である空間浮遊映像３を形成する。このような偏光設計により好適に空間浮遊映像３を形成することができる。

　次に、図２Ａの光学システムにおける偏光設計の第２の例を説明する。例えば、表示装置１からＰ偏光の映像光が偏光分離部材１０１へ射出される構成とし、偏光分離部材１０１がＰ偏光を反射しＳ偏光を透過する特性を有する構成としてもよい。この場合、表示装置１から偏光分離部材１０１へ到達したＰ偏光の映像光は、偏光分離部材１０１により反射され、再帰反射板２へ向かう。当該映像光が再帰反射板２で反射される際に、再帰反射板２の入射面に設けられたλ／４板２１を２回通過するので、当該映像光はＰ偏光からＳ偏光へ変換される。Ｓ偏光へ変換された映像光は再び偏光分離部材１０１へ向かう。ここで、偏光分離部材１０１は、Ｐ偏光を反射しＳ偏光を透過する特性を有するので、Ｓ偏光の映像光は偏光分離部材１０１を透過し、透明な部材１００を透過する。透明な部材１００を透過した映像光は、再帰反射板２により生成された光であるため、偏光分離部材１０１に対して表示装置１の表示映像と鏡面関係にある位置に、表示装置１の表示映像の光学像である空間浮遊映像３を形成する。このような偏光設計により好適に空間浮遊映像３を形成することができる。

　なお、空間浮遊映像３を形成する光は再帰反射板２から空間浮遊映像３の光学像へ収束する光線の集合であり、これらの光線は、空間浮遊映像３の光学像を通過後も直進する。よって、空間浮遊映像３は、一般的なプロジェクタなどでスクリーン上に形成される拡散映像光とは異なり、高い指向性を有する映像である。よって、図２Ａの構成では、矢印Ａの方向からユーザが視認する場合は、空間浮遊映像３は明るい映像として視認される。しかし、矢印Ｂの方向から他の人物が視認する場合は、空間浮遊映像３は映像として一切視認することはできない。この特性は、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムに採用する場合に非常に好適である。

　なお、再帰反射板２の性能によっては、反射後の映像光の偏光軸が不揃いになることがある。また、反射角度も不揃いになることがある。このような不揃いの光は、設計上想定された偏光状態および進行角度を保たないことが有る。例えば、このような設計想定外の偏光状態および進行角度の光が、再帰反射板２の位置から偏光分離部材を介さずに直接液晶表示パネル１１の映像表示面側へ再入射してしまうこともある。このような設計想定外の偏光状態および進行角度の光が、空間浮遊映像表示装置内の部品で反射したのち、液晶表示パネル１１の映像表示面側へ再入射してしまうこともある。このような液晶表示パネル１１の映像表示面側へ再入射した光が、表示装置１を構成する液晶表示パネル１１の映像表示面で再反射し、ゴースト像を発生させ空間浮遊像の画質を低下させる可能性がある。そこで、本実施例では表示装置１の映像表示面に吸収型偏光板１２を設けてもよい。表示装置１から出射する映像光は吸収型偏光板１２を透過させ、偏光分離部材１０１から戻ってくる反射光は吸収型偏光板１２で吸収させることで、上記再反射を抑制できる。これにより、空間浮遊像のゴースト像による画質低下を防止することができる。具体的には、表示装置１からＳ偏光の映像光が偏光分離部材１０１へ射出される構成であれば、吸収型偏光板１２はＰ偏光を吸収する偏光板とすればよい。また、表示装置１からＰ偏光の映像光が偏光分離部材１０１へ射出される構成であれば、吸収型偏光板１２はＳ偏光を吸収する偏光板とすればよい。

　上述した偏光分離部材１０１は、例えば反射型偏光板や特定偏波を反射させる金属多層膜などで形成すればよい。

　次に、図２Ａ（２）に、代表的な再帰反射板２として、再帰反射板の表面形状の一例を示す。規則的に配列された６角柱の内部に入射した光線は、６角柱の壁面と底面で反射され再帰反射光として入射光に対応した方向に出射し、表示装置１に表示した映像に基づき実像である空間浮遊映像を表示する。

　この空間浮遊像の解像度は、液晶表示パネル１１の解像度の他に、図２Ａ（２）で示す再帰反射板２の再帰反射部の外形ＤとピッチＰに大きく依存する。例えば、７インチのＷＵＸＧＡ（１９２０×１２００画素）液晶表示パネルを用いる場合には、１画素（１トリプレット）が約８０μｍであっても、例えば再帰反射部の直径Ｄが２４０μｍでピッチが３００μｍであれば、空間浮遊像の１画素は３００μｍ相当となる。このため、空間浮遊映像の実効的な解像度は１／３程度に低下する。

　そこで、空間浮遊映像の解像度を表示装置１の解像度と同等にするためには、再帰反射部の直径とピッチを液晶表示パネルの１画素に近づけることが望まれる。他方、再帰反射板と液晶表示パネルの画素によるモアレの発生を抑えるため、それぞれのピッチ比を１画素の整数倍から外して設計するとよい。また、形状は、再帰反射部のいずれの一辺も液晶表示パネルの１画素のいずれの一辺と重ならないように配置するとよい。

　なお、本実施例に係る再帰反射板の表面形状は上述の例に限られない。再帰性反射を実現する様々な表面形状を有してよい。具体的には、三角錐プリズム、六角錐プリズム、その他多角形プリズムまたはこれらの組み合わせを周期的に配置した再帰反射素子を、本実施例の再帰反射板の表面に備えてもよい。または、これらのプリズムを周期的に配置してキューブコーナーを形成する再帰反射素子を、本実施例の再帰反射板の表面に備えてもよい。これらは、コーナーリフレクタアレイ、多面リフレクタアレイと表現することもできる。または、ガラスビーズを周期的に配置したカプセルレンズ型再帰反射素子を、本実施例の再帰反射板の表面に備えてもよい。これらの再帰反射素子の詳細な構成は、既存の技術を用いればよいので、詳細な説明は省略する。具体的には、特開２００１－３３６０９号公報、特開２００１－２６４５２５号公報、特開２００５－１８１５５５号公報、特開２００８－７０８９８号公報、特開２００９－２２９９４２号公報などに開示される技術を用いればよい。

　＜空間浮遊映像表示装置の光学システムの他の構成例１＞
　空間浮遊映像表示装置の光学システムの他の構成例について、図２Ｂを用いて説明する。なお、図２Ｂにおいて、図２Ａと同一の符号を付している構成は、図２Ａと同一の機能、構成を有するものする。このような構成については、説明を単純化するために繰り返しの説明は省略する。

　図２Ｂの光学システムでは、図２Ａと同様に、表示装置１から特定偏波の映像光が出力される。表示装置１から出力された特定偏波の映像光は、偏光分離部材１０１Ｂに入力される。偏光分離部材１０１Ｂは、特定偏波の映像光を選択的に透過する部材である。偏光分離部材１０１Ｂは、図２Ａの偏光分離部材１０１とは異なり、透明な部材１００とは一体ではなく、独立して板状の形状をしている。よって、偏光分離部材１０１Ｂは、偏光分離板と表現してもよい。偏光分離部材１０１Ｂは、例えば、透明部材に偏光分離シートを貼り付けて構成して構成する反射型偏光板として構成してもよい。または、透明部材に特定偏波を選択的に透過させ、他の特定偏波の偏波を反射する金属多層膜などで形成すればよい。図２Ｂでは、偏光分離部材１０１Ｂは、表示装置１から出力された特定偏波の映像光を透過するように構成されている。

　偏光分離部材１０１Ｂを透過した映像光は、再帰反射板２に入射する。再帰反射板の映像光入射面にはλ／４板２１を設ける。映像光は、再帰反射板への入射のときと出射のときの２回において、λ／４板２１を通過させられることで特定偏波から他方の偏波へ偏光変換される。ここで、偏光分離部材１０１Ｂは、λ／４板２１で偏光変換された他方の偏波の偏光は反射する性質を有するので、偏光変換後の映像光は、偏光分離部材１０１Ｂで反射される。偏光分離部材１０１Ｂで反射した映像光は、透明な部材１００を透過し、透明な部材１００の外側に実像である空間浮遊映像３を形成する。

　ここで、図２Ｂの光学システムにおける偏光設計の第１の例を説明する。例えば、表示装置１からＰ偏光の映像光が偏光分離部材１０１Ｂへ射出される構成とし、偏光分離部材１０１ＢがＳ偏光を反射しＰ偏光を透過する特性を有する構成としてもよい。この場合、表示装置１から偏光分離部材１０１Ｂへ到達したＰ偏光の映像光は、偏光分離部材１０１Ｂを透過し、再帰反射板２へ向かう。当該映像光が再帰反射板２で反射される際に、再帰反射板２の入射面に設けられたλ／４板２１を２回通過するので、当該映像光はＰ偏光からＳ偏光へ変換される。Ｓ偏光へ変換された映像光は再び偏光分離部材１０１Ｂへ向かう。ここで、偏光分離部材１０１Ｂは、Ｓ偏光を反射しＰ偏光を透過する特性を有するので、Ｓ偏光の映像光は偏光分離部材１０１で反射され、透明な部材１００を透過する。透明な部材１００を透過した映像光は、再帰反射板２により生成された光であるため、偏光分離部材１０１Ｂに対して表示装置１の表示映像と鏡面関係にある位置に、表示装置１の表示映像の光学像である空間浮遊映像３を形成する。このような偏光設計により好適に空間浮遊映像３を形成することができる。

　次に、図２Ｂの光学システムにおける偏光設計の第２の例を説明する。例えば、表示装置１からＳ偏光の映像光が偏光分離部材１０１Ｂへ射出される構成とし、偏光分離部材１０１ＢがＰ偏光を反射しＳ偏光を透過する特性を有する構成としてもよい。この場合、表示装置１から偏光分離部材１０１Ｂへ到達したＳ偏光の映像光は、偏光分離部材１０１Ｂを透過し、再帰反射板２へ向かう。当該映像光が再帰反射板２で反射される際に、再帰反射板２の入射面に設けられたλ／４板２１を２回通過するので、当該映像光はＳ偏光からＰ偏光へ変換される。Ｐ偏光へ変換された映像光は再び偏光分離部材１０１Ｂへ向かう。ここで、偏光分離部材１０１Ｂは、Ｐ偏光を反射しＳ偏光を透過する特性を有するので、Ｐ偏光の映像光は偏光分離部材１０１で反射され、透明な部材１００を透過する。透明な部材１００を透過した映像光は、再帰反射板２により生成された光であるため、偏光分離部材１０１Ｂに対して表示装置１の表示映像と鏡面関係にある位置に、表示装置１の表示映像の光学像である空間浮遊映像３を形成する。このような偏光設計により、好適に空間浮遊映像３を形成することができる。

　なお、図２Ｂにおいては、表示装置１の映像表示面と、再帰反射板２の面は平行に配置されている。偏光分離部材１０１Ｂは、表示装置１の映像表示面および再帰反射板２の面に対して、角度α（例えば３０°）だけ傾いて配置されている。すると、偏光分離部材１０１Ｂの反射においては、再帰反射板２から入射される映像光の進行方向（当該映像光の主光線の方向）に対して、偏光分離部材１０１Ｂで反射された映像光の進行方向（当該映像光の主光線の方向）は、角度β（例えば６０°）だけ異なる方向となる。このように構成することにより、図２Ｂの光学システムでは、透明な部材１００の外側に向けて図示される所定の角度で映像光が出力され、実像である空間浮遊映像３を形成する。図２Ｂの構成では、矢印Ａの方向からユーザが視認する場合は、空間浮遊映像３は明るい映像として視認される。しかし、矢印Ｂの方向から他の人物が視認する場合は、空間浮遊映像３は映像として一切視認することはできない。この特性は、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムに採用する場合に非常に好適である。

　以上説明したように、図２Ｂの光学システムでは、図２Ａの光学システムとは異なる構成の光学システムでありながら、図２Ａの光学システムと同様に、好適な空間浮遊映像を形成することができる。

　なお、透明な部材１００の偏光分離部材１０１Ｂ側の面に吸収型偏光板を設けてもよい。当該吸収型偏光板は、偏光分離部材１０１Ｂからの映像光の偏波を透過し、偏光分離部材１０１Ｂからの映像光の偏波と位相が９０°異なる偏波を吸収する吸収型偏光板とすればよい。このようにすれば、空間浮遊映像３を形成するための映像光は充分透過させながら、透明な部材１００の空間浮遊映像３側から入射する外光を約５０％低減することができる。これにより、透明な部材１００の空間浮遊映像３側から入射する外光にもとづく図２Ｂの光学システム内の迷光を低減することができる。

　＜空間浮遊映像表示装置の光学システムの他の構成例２＞
　空間浮遊映像表示装置の光学システムの他の構成例について、図２Ｃを用いて説明する。なお、図２Ｃにおいて、図２Ｂと同一の符号を付している構成は、図２Ｂと同一の機能、構成を有するものする。このような構成については、説明を単純化するために繰り返しの説明はしない。

　図２Ｂの光学システムに対する図２Ｃの光学システムの相違点は、表示装置１の映像表示面および再帰反射板２の面に対する、偏光分離部材１０１Ｂの配置角度のみである。その他の構成はいずれも、図２Ｂの光学システムと同様であるので繰り返しの説明は省略する。図２Ｃの光学システムの偏光設計も、図２Ｂの光学システムの偏光設計と同様であるため、繰り返しの説明は省略する。

　図２Ｃの光学システムでは、偏光分離部材１０１Ｂは、表示装置１の映像表示面および再帰反射板２の面に対して、角度αだけ傾いて配置されている。図２Ｃにおいて、その角度αは４５°である。このように構成すると、偏光分離部材１０１Ｂの反射においては、再帰反射板２から入射される映像光の進行方向（当該映像光の主光線の方向）に対する、偏光分離部材１０１Ｂで反射された映像光の進行方向（当該映像光の主光線の方向）のなす角度βは９０°となる。このように構成すると、表示装置１の映像表示面および再帰反射板２の面と、偏光分離部材１０１Ｂで反射された映像光の進行方向とが直角の関係になり、光学システムを構成する面の角度関係をシンプルにすることができる。透明な部材１００の面を偏光分離部材１０１Ｂで反射された映像光の進行方向に対して直交するように配置すれば、更に光学システムを構成する面の角度関係をシンプルにすることができる。図２Ｃの構成では、矢印Ａの方向からユーザが視認する場合は、空間浮遊映像３は明るい映像として視認される。しかし、矢印Ｂの方向から他の人物が視認する場合は、空間浮遊映像３は映像として一切視認することはできない。この特性は、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムに採用する場合に非常に好適である。

　以上説明したように、図２Ｃの光学システムでは、図２Ａおよび図２Ｂの光学システムとは異なる構成の光学システムでありながら、図２Ａおよび図２Ｂの光学システムと同様に、好適な空間浮遊映像を形成することができる。また、光学システムを構成する面の角度をよりシンプルにすることができる。

　なお、透明な部材１００の偏光分離部材１０１Ｂ側の面に吸収型偏光板を設けてもよい。当該吸収型偏光板は、偏光分離部材１０１Ｂからの映像光の偏波を透過し、偏光分離部材１０１Ｂからの映像光の偏波と位相が９０°異なる偏波を吸収する吸収型偏光板とすればよい。このようにすれば、空間浮遊映像３を形成するための映像光は充分透過させながら、透明な部材１００の空間浮遊映像３側から入射する外光を約５０％低減することができる。これにより、透明な部材１００の空間浮遊映像３側から入射する外光にもとづく図２Ｃの光学システム内の迷光を低減することができる。

　＜空間浮遊映像表示装置の光学システムの他の構成例３＞
　空間浮遊映像表示装置の光学システムの他の構成例について、図２Ｄを用いて説明する。図２Ｄの光学システムは、図２Ａ～図２Ｃにおいて用いた再帰反射板２とは異なる、再帰反射板５を用いた光学システムである。以下、図２Ｄ～図２Ｉを用いて、光学システムの他の構成例３についてより具体的に説明する。図２Ｄにおいて、図２Ａ～Ｃと同一の符号を付している構成は、図２Ａ～図２Ｃと同一の機能、構成を有するものする。このような構成については、説明を単純化するために繰り返しの説明はしない。

　図２Ｄは、本発明の一実施例に係る空間浮遊映像表示装置の主要部構成と再帰反射部構成の一例を示す図である。ガラス等の透明な部材１００の斜め方向には、映像光を出射する表示装置１０を備える。表示装置１０は、液晶表示パネル１１と、光を生成する光源装置１３とを備えている。

　表示装置１０から出射された光束を代表する主光線９０２０は、再帰反射板５に向かって進行し、再帰反射板５に対して入射角αで入射する。入射角αは例えば４５°などでよい。ただし、入射角αは４５°に限られず、例えば４５°±１５°でも使用可能である。

　再帰反射板５は、少なくとも光線を一部の方向について再帰性反射する光学特性を有する光学部材である。また、反射後の光線は結像する光学特性を有するため、再帰反射板５は結像光学部材または結像光学プレートと表現してもよい。

　再帰反射板５の具体的な構成については、図２Ｅ、図２Ｆ等を用いて詳述するが、再帰反射板５によって、主光線９０２０は、ｚ方向に進行しつつ、ｘ、ｙ方向に関して再帰性反射される。これにより、反射光線９０２１は、再帰反射板５を基準に主光線９０２０に対して鏡面対称な光路を、再帰反射板５から離れる方向に進行し、透明な部材１００を透過して、結像面において実像として空間浮遊映像３を形成する。

　空間浮遊映像３を形成する光束は、再帰反射板５から空間浮遊映像３の光学像へ収束する光線の集合であり、これらの光線は、空間浮遊映像３の光学像を通過後も直進する。よって、空間浮遊映像３は、一般的なプロジェクタなどでスクリーン上に形成される拡散映像とは異なり、高い指向性を有する映像である。よって、図２の構成では、矢印Ａの方向からユーザが視認する場合は、空間浮遊映像３は、明るい映像として視認される。しかし、矢印Ｂの方向から他の人物が視認する場合は、空間浮遊映像３は、映像として一切視認することはできない。この特性は、高いセキュリティが求められる映像や、ユーザに正対する人物には秘匿したい秘匿性の高い映像を表示するシステムに採用する場合に好適である。

　図２Ｅ、図２Ｆを用いて再帰反射板５の構成の一例について説明する。再帰反射板５は、透明な部材５０の表面に、複数のコーナーリフレクタ９０４０を、アレイ状に配列した構成となっている。これはコーナーリフレクタアレイまたは多面リフレクタアレイと呼んでもよい。コーナーリフレクタ９０４０の具体的な構成については、図２Ｇ、図２Ｈ、図２Ｉを用いて詳述するが、光源９１１０から出射された光線９１１１、９１１２、９１１３、９１１４は、コーナーリフレクタ９０４０の２つの鏡面９０４１、９０４２によって２回反射され、反射光線９１２１、９１２２、９１２３、９１２４となる。この２回反射は、ｘ、ｙ方向に関しては、入射方向と同一方向に折り返す（１８０°回転した方向に進む）再帰性反射となっており、ｚ方向に関しては、全反射により入射角と反射角が一致する正反射となる。

　すなわち、光線９１１１～９１１４は、コーナーリフレクタ９０４０に対してｚ方向に対称な直線上に、反射光線９１２１～９１２４を生じ、空中実像９１２０を結像する。なお、光源９１１０から出射される光線９１１１～９１１４は、光源９１１０からの拡散光を代表した４光線であり、光源９１１０の拡散特性によっては、再帰反射板５に入射する光線はこれらに限定されないが、いずれの入射光線も同様の反射を引き起こし、空中実像９１２０を結像する。なお、図面を見やすくするために、光源９１１０の位置と空中実像９１２０のｘ方向の位置をずらして表記しているが、実際は光源９１１０の位置と空中実像９１２０のｘ方向の位置は同じ位置であり、ｚ方向から見ると重なった位置になる。

　次に、図２Ｇ、図２Ｈ、図２Ｉにて再帰反射板５を構成するコーナーリフレクタ９０４０の構成および効果について説明する。コーナーリフレクタ９０４０は、特定の２つの面のみが鏡面９０４１、９０４２となっており、それ以外の４面は透明な部材で形成された、直方体である。再帰反射板５は、このコーナーリフレクタ９０４０が、その対応する鏡面が同一方向を向くようにアレイ配列された構成を有している。

　上面（＋ｚ方向）から見ると、光源９１１０から出射される光線９１１１は、特定の入射角で鏡面９０４１（または鏡面９０４２）に入射し、反射点９１３０にて全反射された後、鏡面９０４２（または鏡面９０４１）上の反射点９１３２で再度全反射される。

　光線９１１１の、鏡面９０４１(または鏡面９０４２)に対する入射角をθとすると、鏡面９０４１（または鏡面９０４２）で反射された、第一の反射光線９１３１の、鏡面９０４２（または鏡面９０４１）に対する入射角は、９０°－θと表すことができる。したがって、光線９１１１に対して、第二の反射光線９１２１は、１回目の反射によって２θ、２回目の反射によって２×（９０°－θ）の回転を得るため、合計で１８０°の反転光路となる。一方、側面（－ｘと－ｙの中間方向）から見ると、ｚ方向に対する全反射は、１回のみしか生じない。したがって、鏡面９０４１または鏡面９０４２に対する入射角をφとすると、光線９１１１に対して、反射光線９１２１は、１回の反射によって２×φの回転を得る。

　以上より、コーナーリフレクタ９０４０に入射する光線は、ｘ、ｙ方向には反転光路となる再帰性反射を生じ、ｚ方向には全反射による正反射となる。再帰反射板５を考えると、各光路においても同様の反射を引き起こすので、ｘ、ｙ方向に対しては収束性を持った反転光路によって、ｚ軸方向に対して対称な点に結像する。

　ここで、図２Ａ～図２Ｃの光学システムでは、再帰反射板２が３軸方向の再帰性反射特性を有している。これにより、再帰反射板２に対して拡散性を持った入射光束が入射した場合、収束性を持った反射光束が、再帰反射板２に対して入射光線の光源が存在する側に向かって進行する。当該収束性を持った反射光束は、空中で結像して空間浮遊映像３を形成する。再帰反射板２から反射した収束性を持った反射光束の主光線の進行方向は、再帰反射板２に対して入射する拡散性を持った入射光束の主光線の進行方向の逆方向になる。

　これに対し、図２Ｄの光学システムでは、再帰反射板５が２軸方向の再帰性反射特性を有し、他の１軸方向については正反射する。これにより、再帰反射板５に対して拡散性を持った入射光束が入射した場合、コーナーリフレクタアレイにより反射された収束性を持った反射光束が、再帰反射板５に対して入射光線の光源が存在する側と反対側に向かって進行する。当該収束性を持った反射光束は、空中で結像し空間浮遊映像３を形成することとなる。

　再帰反射板５のコーナーリフレクタアレイにより反射した収束性を持った反射光束の主光線の進行方向は、再帰反射板５に対して入射する拡散性を持った入射光束の主光線の進行方向の逆方向にはならない。再帰反射板５に入射する拡散性を持った入射光束の主光線の進行方向についての再帰反射板５の板形状の面の法線方向成分と、再帰反射板５で反射して収束性を持った反射光束となった後の主光線の進行方向についての再帰反射板５の板形状の面の法線方向成分は、コーナーリフレクタアレイによる反射前後で変わらず直進する。

　すなわち、再帰反射板５における反射により、拡散性を持った入射光束は、収束性を持った反射光束に変換されるが、再帰反射板５の板形状の面の法線方向においては、当該光束は、再帰反射板５を通り抜けるように進行することになる。ここで、再帰反射板５に入射する拡散性を持った入射光束と、再帰反射板５から出射する収束性を持った反射光束とは、再帰反射板５の板形状の面を基準として幾何学的に面対称の関係になる。

　映像出力部１０からの光線により結像した空間浮遊像の解像度は、液晶表示パネル１１の解像度の他に、図２Ｅ、図２Ｆで示す再帰反射板５の再帰反射部の直径ＤとピッチＰ（図示なし）に大きく依存する。例えば、７インチのＷＵＸＧＡ（１９２０×１２００画素）液晶表示パネルを用いる場合には、１画素（１トリプレット）が約８０μｍであっても、例えば再帰反射部の直径Ｄが２４０μｍでピッチＰが３００μｍであれば、空間浮遊像の１画素は３００μｍ相当となる。このため、空間浮遊映像の実効的な解像度は１／３程度に低下する。

　そこで、空間浮遊映像の解像度を表示装置１０の解像度と同等にするためには、再帰反射部の直径ＤとピッチＰを液晶表示パネルの１画素に近づけることが望まれる。他方、再帰反射板と液晶表示パネルの画素によるモアレの発生を抑えるため、それぞれのピッチ比を１画素の整数倍から外して設計するとよい。また、形状は、再帰反射部のいずれの一辺も液晶表示パネルの１画素のいずれの一辺と重ならないように配置するとよい。

　なお、本実施例に係る再帰反射板（結像光学プレート）の形状は上述の例に限られない。再帰性反射を実現する様々な形状を有してよい。具体的には、各種キュービックコーナ体、コーナーリフレクタアレイでもよく、スリットミラーアレイ、二面コーナーリフレクタアレイ、多面リフレクタアレイ、その反射面の組み合わせを周期的に配置した形状でもよい。または、ガラスビーズを周期的に配置したカプセルレンズ型再帰性反射素子を、本実施例の再帰反射板の表面に備えてもよい。これらの再帰性反射素子の詳細な構成は、既存の技術を用いればよいので、詳細な説明は省略する。具体的には、特開２０１７－３３００５号公報、特開２０１９－１３３１１０号公報、特開２０１７－６７９３３号公報、ＷＯ２００９／１３１１２８号公報などに開示される技術を用いればよい。

　なお、図２Ｄの光学システムでは、表示装置１０から出射する映像光はいずれの偏光状態でも構わない。Ｓ偏光でもＰ偏光でも問題ない。

　以上説明したように、図２Ｄの光学システムでは、図２Ａ～図２Ｃの光学システムとは異なる再帰反射板を用いた光学システムでありながら、図２Ａ～図２Ｃの光学システムと同様に、より好適な空間浮遊映像を形成することができる。

　以上説明した、図２Ａ、図２Ｂ、図２Ｃ、図２Ｄの光学システムによれば、より明るく、より高品位な空間浮遊映像を提供することができる。

　＜＜空間浮遊映像表示装置の内部構成のブロック図＞＞

　次に、空間浮遊映像表示装置１０００の内部構成のブロック図について説明する。図３は、空間浮遊映像表示装置１０００の内部構成の一例を示すブロック図である。

　空間浮遊映像表示装置１０００は、再帰反射部１１０１、映像表示部１１０２、導光体１１０４、光源１１０５、電源１１０６、外部電源入力インタフェース１１１１、操作入力部１１０７、不揮発性メモリ１１０８、メモリ１１０９、制御部１１１０、映像信号入力部１１３１、音声信号入力部１１３３、通信部１１３２、空中操作検出センサ１３５１、空中操作検出部１３５０、音声出力部１１４０、マイク１１３９、映像制御部１１６０、ストレージ部１１７０、撮像部１１８０等を備えている。なお、リムーバブルメディアインタフェース１１３４、姿勢センサ１１１３、透過型自発光映像表示装置１６５０、第２の表示装置１６８０、または二次電池１１１２などを備えてもよい。

　空間浮遊映像表示装置１０００の各構成要素は、筐体１１９０に配置されている。なお、図３に示す撮像部１１８０および空中操作検出センサ１３５１は、筐体１１９０の外側に設けられてもよい。

　図３の再帰反射部１１０１は、図２Ａ、図２Ｂ、図２Ｃの再帰反射板２に対応している。再帰反射部１１０１は、映像表示部１１０２により変調された光を再帰性反射する。再帰反射部１１０１からの反射光のうち、空間浮遊映像表示装置１０００の外部に出力された光により空間浮遊映像３が形成される。

　図３の映像表示部１１０２は、図２Ａ、図２Ｂ、図２Ｃの液晶表示パネル１１に対応している。図３の光源１１０５は、図２Ａ、図２Ｂ、図２Ｃの光源装置１３と対応している。そして、図３の映像表示部１１０２、導光体１１０４、および光源１１０５は、図２Ａ、図２Ｂ、図２Ｃの表示装置１に対応している。

　映像表示部１１０２は、後述する映像制御部１１６０による制御により入力される映像信号に基づいて、透過する光を変調して映像を生成する表示部である。映像表示部１１０２は、図２Ａ、図２Ｂ、図２Ｃの液晶表示パネル１１に対応している。映像表示部１１０２として、例えば透過型液晶パネルが用いられる。また、映像表示部１１０２として、例えば反射する光を変調する方式の反射型液晶パネルやＤＭＤ（ＤｉｇｉｔａｌＭｉｃｒｏｍｉｒｒｏｒＤｅｖｉｃｅ：登録商標）パネル等が用いられてもよい。

　光源１１０５は、映像表示部１１０２用の光を発生するもので、ＬＥＤ光源、レーザ光源等の固体光源である。電源１１０６は、外部から外部電源入力インタフェース１１１１介して入力されるＡＣ電流をＤＣ電流に変換し、光源１１０５に電力を供給する。また、電源１１０６は、空間浮遊映像表示装置１０００内の各部に、それぞれ必要なＤＣ電流を供給する。二次電池１１１２は、電源１１０６から供給される電力を蓄電する。また、二次電池１１１２は、外部電源入力インタフェース１１１１を介して、外部から電力が供給されない場合に、光源１１０５およびその他電力を必要とする構成に対して電力を供給する。すなわち、空間浮遊映像表示装置１０００が二次電池１１１２を備える場合は、外部から電力が供給されない場合でもユーザは空間浮遊映像表示装置１０００を使用することが可能となる。

　導光体１１０４は、光源１１０５で発生した光を導光し、映像表示部１１０２に照射させる。導光体１１０４と光源１１０５とを組み合わせたものを、映像表示部１１０２のバックライトと称することもできる。導光体１１０４は、主にガラスを用いた構成にしてもよい。導光体１１０４は、主にプラスチックを用いた構成にしてもよい。導光体１１０４は、ミラーを用いた構成にしてもよい。導光体１１０４と光源１１０５との組み合わせには、様々な方式が考えられる。導光体１１０４と光源１１０５との組み合わせについての具体的な構成例については、後で詳しく説明する。

　空中操作検出センサ１３５１は、ユーザ２３０の指による空間浮遊映像３の操作を検出するセンサである。空中操作検出センサ１３５１は、例えば空間浮遊映像３の表示範囲の全部と重畳する範囲をセンシングする。なお、空中操作検出センサ１３５１は、空間浮遊映像３の表示範囲の少なくとも一部と重畳する範囲のみをセンシングしてもよい。

　空中操作検出センサ１３５１の具体例としては、赤外線などの非可視光、非可視光レーザ、超音波等を用いた距離センサが挙げられる。また、空中操作検出センサ１３５１は、複数のセンサを複数組み合わせ、２次元平面の座標を検出できるように構成されたものでもよい。また、空中操作検出センサ１３５１は、ＴｏＦ（Time of Flight）方式のＬｉＤＡＲ(Light Detection and Ranging)や、画像センサで構成されてもよい。

　空中操作検出センサ１３５１は、ユーザが指で空間浮遊映像３として表示されるオブジェクトに対するタッチ操作等を検出するためのセンシングができればよい。このようなセンシングは、既存の技術を用いて行うことができる。

　空中操作検出部１３５０は、空中操作検出センサ１３５１からセンシング信号を取得し、センシング信号に基づいてユーザ２３０の指による空間浮遊映像３のオブジェクトに対する接触の有無や、ユーザ２３０の指とオブジェクトとが接触した位置（接触位置）の算出等を行う。空中操作検出部１３５０は、例えば、ＦＰＧＡ（Field Programmable Gate Array）等の回路で構成される。また、空中操作検出部１３５０の一部の機能は、例えば制御部１１１０で実行される空間操作検出用プログラムによりソフトウェアで実現されてもよい。

　空中操作検出センサ１３５１および空中操作検出部１３５０は、空間浮遊映像表示装置１０００に内蔵された構成としてもよいが、空間浮遊映像表示装置１０００とは別体で外部に設けられてもよい。空間浮遊映像表示装置１０００と別体で設ける場合、空中操作検出センサ１３５１および空中操作検出部１３５０は、有線または無線の通信接続路や映像信号伝送路を介して空間浮遊映像表示装置１０００に情報や信号を伝達できるように構成される。

　また、空中操作検出センサ１３５１および空中操作検出部１３５０が別体で設けられてもよい。これにより、空中操作検出機能の無い空間浮遊映像表示装置１０００を本体として、空中操作検出機能のみをオプションで追加できるようなシステムを構築することが可能である。また、空中操作検出センサ１３５１のみを別体とし、空中操作検出部１３５０が空間浮遊映像表示装置１０００に内蔵された構成でもよい。空間浮遊映像表示装置１０００の設置位置に対して空中操作検出センサ１３５１をより自由に配置したい場合等には、空中操作検出センサ１３５１のみを別体とする構成に利点がある。

　撮像部１１８０は、イメージセンサを有するカメラであり、空間浮遊映像３付近の空間、および／またはユーザ２３０の顔、腕、指などを撮像する。撮像部１１８０は、複数設けられてもよい。複数の撮像部１１８０を用いることで、あるいは深度センサ付きの撮像部を用いることで、ユーザ２３０による空間浮遊映像３のタッチ操作の検出処理の際、空中操作検出部１３５０を補助することができる。撮像部１１８０は、空間浮遊映像表示装置１０００と別体で設けられてもよい。撮像部１１８０を空間浮遊映像表示装置１０００と別体で設ける場合、有線または無線の通信接続路などを介して空間浮遊映像表示装置１０００に撮像信号を伝達できるように構成すればよい。

　例えば、空中操作検出センサ１３５１が、空間浮遊映像３の表示面を含む平面（侵入検出平面）を対象として、この侵入検出平面内への物体の侵入の有無を検出する物体侵入センサとして構成された場合、侵入検出平面内に侵入していない物体（例えば、ユーザの指）が侵入検出平面からどれだけ離れているのか、あるいは物体が侵入検出平面にどれだけ近いのかといった情報を、空中操作検出センサ１３５１では検出できない場合がある。

　このような場合、複数の撮像部１１８０の撮像画像に基づく物体の深度算出情報や深度センサによる物体の深度情報等の情報を用いることにより、物体と侵入検出平面との距離を算出することができる。そして、これらの情報や、物体と侵入検出平面との距離等の各種情報は、空間浮遊映像３に対する各種表示制御に用いられる。

　また、空中操作検出センサ１３５１を用いずに、撮像部１１８０の撮像画像に基づき、空中操作検出部１３５０がユーザ２３０による空間浮遊映像３のタッチ操作を検出するようにしてもよい。

　また、撮像部１１８０が空間浮遊映像３を操作するユーザ２３０の顔を撮像し、制御部１１１０がユーザ２３０の識別処理を行うようにしてもよい。また、空間浮遊映像３を操作するユーザ２３０の周辺や背後に他人が立っており、他人が空間浮遊映像３に対するユーザ２３０の操作を覗き見ていないか等を判別するため、撮像部１１８０は、空間浮遊映像３を操作するユーザ２３０と、ユーザ２３０の周辺領域とを含めた範囲を撮像するようにしてもよい。

　操作入力部１１０７は、例えば操作ボタンや、リモートコントローラ等の信号受信部または赤外光受光部であり、ユーザ２３０による空中操作（タッチ操作）とは異なる操作についての信号を入力する。空間浮遊映像３をタッチ操作する前述のユーザ２３０とは別に、操作入力部１１０７は、例えば管理者が空間浮遊映像表示装置１０００を操作するために用いられてもよい。

　映像信号入力部１１３１は、外部の映像出力装置を接続して映像データを入力する。映像信号入力部１１３１は、様々なデジタル映像入力インタフェースが考えられる。例えば、ＨＤＭＩ（登録商標）（High―Definition Multimedia Interface）規格の映像入力インタフェース、ＤＶＩ（Digital Visual Interface）規格の映像入力インタフェース、またはＤｉｓｐｌａｙＰｏｒｔ規格の映像入力インタフェースなどで構成すればよい。

　または、アナログＲＧＢや、コンポジットビデオなどのアナログ映像入力インタフェースを設けてもよい。音声信号入力部１１３３は、外部の音声出力装置を接続して音声データを入力する。音声信号入力部１１３３は、ＨＤＭＩ規格の音声入力インタフェース、光デジタル端子インタフェース、または、同軸デジタル端子インタフェース、などで構成すればよい。ＨＤＭＩ規格のインタフェースの場合は、映像信号入力部１１３１と音声信号入力部１１３３とは、端子およびケーブルが一体化したインタフェースとして構成されてもよい。音声出力部１１４０は、音声信号入力部１１３３に入力された音声データに基づいた音声を出力することが可能である。音声出力部１１４０は、スピーカーで構成してもよい。

　また、音声出力部１１４０は、内蔵の操作音やエラー警告音を出力してもよい。または、ＨＤＭＩ規格に規定されるＡｕｄｉｏＲｅｔｕｒｎＣｈａｎｎｅｌ機能のように、外部機器にデジタル信号として出力する構成を音声出力部１１４０としてもよい。マイク１１３９は、空間浮遊映像表示装置１０００の周辺の音を収音し、信号に変換して音声信号を生成するマイクである。ユーザの声など人物の声をマイクが収録して、生成した音声信号を後述する制御部１１１０が音声認識処理を行って、当該音声信号から文字情報を取得するように構成してもよい。

　不揮発性メモリ１１０８は、空間浮遊映像表示装置１０００で用いる各種データを格納する。不揮発性メモリ１１０８に格納されるデータには、例えば、空間浮遊映像３に表示する各種操作用のデータ、表示アイコン、ユーザの操作が操作するためのオブジェクトのデータやレイアウト情報等が含まれる。メモリ１１０９は、空間浮遊映像３として表示する映像データや装置の制御用データ等を記憶する。

　制御部１１１０は、接続される各部の動作を制御する。また、制御部１１１０は、メモリ１１０９に記憶されるプログラムと協働して、空間浮遊映像表示装置１０００内の各部から取得した情報に基づく演算処理を行ってもよい。

　通信部１１３２は、有線または無線の通信インタフェースを介して、外部機器や外部のサーバ等と通信を行う。通信部１１３２が有線の通信インタフェースを有する場合は、当該有線の通信インタフェースは、例えば、イーサネット規格のＬＡＮインタフェースなどで構成すればよい。通信部１１３２が無線の通信インタフェースを有する場合は、例えば、Ｗｉ―Ｆｉ方式の通信インタフェース、Ｂｌｕｅｔｏｏｔｈ方式の通信インタフェース、４Ｇ、５Ｇなどの移動体通信インタフェースなどで構成すればよい。通信部１１３２を介した通信により、映像データ、画像データ、音声データ等の各種データが送受信される。

　また、リムーバブルメディアインタフェース１１３４は、着脱可能な記録媒体（リムーバブルメディア）を接続するインタフェースである。着脱可能な記録媒体（リムーバブルメディア）は、ソリッドステートドライブ（ＳＳＤ）などの半導体素子メモリ、ハードディスクドライブ（ＨＤＤ）などの磁気記録媒体記録装置、または光ディスクなどの光学記録メディアなどで構成してもよい。リムーバブルメディアインタフェース１１３４は着脱可能な記録媒体記録されている、映像データ、画像データ、音声データ等の各種データなどの各種情報を読み出すことが可能である。着脱可能な記録媒体に記録された映像データ、画像データ等は、映像表示部１１０２と再帰反射部１１０１とを介して空間浮遊映像３として出力される。

　ストレージ部１１７０は、映像データ、画像データ、音声データ等の各種データなどの各種情報を記録する記憶装置である。ストレージ部１１７０は、ハードディスクドライブ（ＨＤＤ）などの磁気記録媒体記録装置や、ソリッドステートドライブ（ＳＳＤ）などの半導体素子メモリで構成してもよい。ストレージ部１１７０には、例えば、製品出荷時に予め映像データ、画像データ、音声データ等の各種データ等の各種情報が記録されていてもよい。また、ストレージ部１１７０は、通信部１１３２を介して外部機器や外部のサーバ等から取得した映像データ、画像データ、音声データ等の各種データ等の各種情報を記録してもよい。

　ストレージ部１１７０に記録された映像データ、画像データ等は、映像表示部１１０２と再帰反射部１１０１とを介して空間浮遊映像３として出力される。空間浮遊映像３として表示される、表示アイコンやユーザが操作するためのオブジェクト等の映像データ、画像データ等も、ストレージ部１１７０に記録される。

　空間浮遊映像３として表示される表示アイコンやオブジェクト等のレイアウト情報や、オブジェクトに関する各種メタデータの情報等もストレージ部１１７０に記録される。ストレージ部１１７０に記録された音声データは、例えば音声出力部１１４０から音声として出力される。

　映像制御部１１６０は、映像表示部１１０２に入力する映像信号に関する各種制御を行う。映像制御部１１６０は、映像処理回路と称してもよく、例えば、ＡＳＩＣ、ＦＰＧＡ、映像用プロセッサなどのハードウェアで構成されてもよい。なお、映像制御部１１６０は、映像処理部、画像処理部と称してもよい。映像制御部１１６０は、例えば、メモリ１１０９に記憶させる映像信号と、映像信号入力部１１３１に入力された映像信号（映像データ）等のうち、どの映像信号を映像表示部１１０２に入力するかといった映像切り替えの制御等を行う。

　また、映像制御部１１６０は、メモリ１１０９に記憶させる映像信号と、映像信号入力部１１３１から入力された映像信号とを重畳した重畳映像信号を生成し、重畳映像信号を映像表示部１１０２に入力することで、合成映像を空間浮遊映像３として形成する制御を行ってもよい。

　また、映像制御部１１６０は、映像信号入力部１１３１から入力された映像信号やメモリ１１０９に記憶させる映像信号等に対して画像処理を行う制御を行ってもよい。画像処理としては、例えば、画像の拡大、縮小、変形等を行うスケーリング処理、輝度を変更するブライト調整処理、画像のコントラストカーブを変更するコントラスト調整処理、画像を光の成分に分解して成分ごとの重みづけを変更するレティネックス処理等がある。

　また、映像制御部１１６０は、映像表示部１１０２に入力する映像信号に対して、ユーザ２３０の空中操作（タッチ操作）を補助するための特殊効果映像処理等を行ってもよい。特殊効果映像処理は、例えば、空中操作検出部１３５０によるユーザ２３０のタッチ操作の検出結果や、撮像部１１８０によるユーザ２３０の撮像画像に基づいて行われる。

　姿勢センサ１１１３は、重力センサまたは加速度センサ、またはこれらの組み合わせにより構成されるセンサであり、空間浮遊映像表示装置１０００が設置されている姿勢を検出することができる。姿勢センサ１１１３の姿勢検出結果に基づいて、制御部１１１０が、接続される各部の動作を制御してもよい。例えば、ユーザの使用状態としての好ましくない姿勢を検出した場合に、映像表示部１１０２の表示していた映像の表示を中止し、ユーザにエラーメッセージを表示するような制御を行ってもよい。または、姿勢センサ１１１３により空間浮遊映像表示装置１０００の設置姿勢が変化したことを検出した場合に、映像表示部１１０２の表示していた映像の表示の向きを回転させる制御を行ってもよい。

　ここまで説明したように、空間浮遊映像表示装置１０００には、様々な機能が搭載されている。ただし、空間浮遊映像表示装置１０００は、これらのすべての機能を備える必要はなく、空間浮遊映像３を形成する機能があればどのような構成でもよい。

　＜空間浮遊映像表示装置の構成例＞
　次に、空間浮遊映像表示装置の構成例について説明する。本実施例に係る空間浮遊映像表示装置の構成要素のレイアウトは、使用形態に応じて様々なレイアウトがあり得る。以下、図４Ａ～図４Ｍのそれぞれのレイアウトについて説明する。なお、図４Ａ～図４Ｍのいずれの例においても、空間浮遊映像表示装置１０００を囲む太い線は空間浮遊映像表示装置１０００の筐体構造の一例を示している。

　図４Ａは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ａに示す空間浮遊映像表示装置１０００は、図２Ａの光学システムに対応する光学システムを搭載するものである。図４Ａに示す空間浮遊映像表示装置１０００では、空間浮遊映像３が形成される側の面が上方を向くように、横置きにして設置される。すなわち、図４Ａでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置上面に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対して上方に形成される。空間浮遊映像３の光は、斜め上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。なお、ｘ方向がユーザから見て左右方向、ｙ方向がユーザから見て前後方向（奥行方向）、ｚ方向が上下方向（鉛直方向）である。以下、図４の各図においてｘ方向、ｙ方向、ｚ方向の定義は同じであるので、繰り返しの説明は省略する。

　図４Ｂは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｂに示す空間浮遊映像表示装置１０００は、図２Ａの光学システムに対応する光学システムを搭載するものである。図４Ｂに示す空間浮遊映像表示装置１０００は、空間浮遊映像３が形成される側の面が、空間浮遊映像表示装置１０００の正面（ユーザ２３０の方向）を向くように、縦置きにして設置される。すなわち、図４Ｂでは、空間浮遊映像表示装置は、透明な部材１００が装置の正面（ユーザ２３０の方向）に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対してユーザ２３０側に形成される。空間浮遊映像３の光は、斜め上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。ここで、図４Ｂに示すように、空中操作検出センサ１３５１は、ユーザ２３０の指を上側からセンシングすることで、ユーザの爪によるセンシング光の反射を、タッチ検出に利用することができる。一般的に、爪は指の腹よりも反射率が高いため、このように構成することによりタッチ検出の精度を上げることができる。

　図４Ｃは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｃに示す空間浮遊映像表示装置１０００は、図２Ｂの光学システムに対応する光学システムを搭載するものである。図４Ｃに示す空間浮遊映像表示装置１０００では、空間浮遊映像３が形成される側の面が上方を向くように、横置きにして設置される。すなわち、図４Ｃでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置上面に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対して上方に形成される。空間浮遊映像３の光は、斜め上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。

　図４Ｄは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｄに示す空間浮遊映像表示装置１０００は、図２Ｂの光学システムに対応する光学システムを搭載するものである。図４Ｄに示す空間浮遊映像表示装置１０００は、空間浮遊映像３が形成される側の面が、空間浮遊映像表示装置１０００の正面（ユーザ２３０の方向）を向くように、縦置きにして設置される。すなわち、図４Ｄでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置の正面（ユーザ２３０の方向）に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対してユーザ２３０側に形成される。空間浮遊映像３の光は、斜め上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。ここで、図４Ｄに示すように、空中操作検出センサ１３５１は、ユーザ２３０の指を上側からセンシングすることで、ユーザの爪によるセンシング光の反射を、タッチ検出に利用することができる。一般的に、爪は指の腹よりも反射率が高いため、このように構成することによりタッチ検出の精度を上げることができる。

　図４Ｅは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｅに示す空間浮遊映像表示装置１０００は、図２Ｃの光学システムに対応する光学システムを搭載するものである。図４Ｅに示す空間浮遊映像表示装置１０００では、空間浮遊映像３が形成される側の面が上方を向くように、横置きにして設置される。すなわち、図４Ｅでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置上面に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対して上方に形成される。空間浮遊映像３の光は、真上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。

　図４Ｆは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｆに示す空間浮遊映像表示装置１０００は、図２Ｃの光学システムに対応する光学システムを搭載するものである。図４Ｆに示す空間浮遊映像表示装置１０００は、空間浮遊映像３が形成される側の面が、空間浮遊映像表示装置１０００の正面（ユーザ２３０の方向）を向くように、縦置きにして設置される。すなわち、図４Ｆでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置の正面（ユーザ２３０の方向）に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対してユーザ２３０側に形成される。空間浮遊映像３の光は、ユーザ手前方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。

　図４Ｇは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｇに示す空間浮遊映像表示装置１０００は、図２Ｃの光学システムに対応する光学システムを搭載するものである。図４Ａから図４Ｆまでの空間浮遊映像表示装置の光学システムにおいては、表示装置１から発せられる映像光の中心の光路はｙｚ平面上にあった。すなわち、図４Ａから図４Ｆまでの空間浮遊映像表示装置の光学システム内においては、映像光はユーザから見て前後方向、上下方向に進行した。これに対し、図４Ｇに示す空間浮遊映像表示装置の光学システムにおいては、表示装置１から発せられる映像光の中心の光路はｘｙ平面上にある。すなわち、図４Ｇに示す空間浮遊映像表示装置の光学システム内においては、映像光はユーザから見て左右方向および前後方向に進行する。図４Ｇに示す空間浮遊映像表示装置１０００では、空間浮遊映像３が形成される側の面が、装置の正面（ユーザ２３０の方向）を向くように設置される。すなわち、図４Ｇでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置正面（ユーザ２３０の方向）に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対してユーザ側に形成される。空間浮遊映像３の光は、ユーザ手前方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。

　図４Ｈは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｈの空間浮遊映像表示装置１０００は、装置背面（ユーザ２３０が空間浮遊映像３を視認する位置の反対側、すなわち、ユーザ２３０に向かう空間浮遊映像３の映像光の進行方向の反対側）にガラスやプラスチックなどの透明板１００Ｂを有する窓を有する点で、図４Ｇの空間浮遊映像表示装置と相違する。その他の構成については、図４Ｇの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。図４Ｈの空間浮遊映像表示装置１０００は、空間浮遊映像３に対して、空間浮遊映像３の映像光の進行方向の反対側の位置に、透明板１００Ｂを有する窓を備えている。よって、ユーザ２３０が空間浮遊映像３を視認する場合に、空間浮遊映像３の背景として、空間浮遊映像表示装置１０００の後ろ側の景色を認識することができる。よって、ユーザ２３０は、空間浮遊映像３が空間浮遊映像表示装置１０００の後ろ側の景色の前面の空中に浮遊しているように認識することができる。これにより、空間浮遊映像３の空中浮遊感をより強調することができる。

　なお、表示装置１から出力される映像光の偏光分布および偏光分離部材１０１Ｂの性能によっては、表示装置１から出力される映像光の一部が偏光分離部材１０１Ｂで反射され、透明板１００Ｂへ向かう可能性がある。透明板１００Ｂの表面のコート性能によっては、この光が透明板１００Ｂの表面で再び反射され迷光としてユーザに視認される可能性がある。よって、当該迷光を防止するために、空間浮遊映像表示装置１０００装置の背面の前記窓に、透明板１００Ｂを設けない構成としてもよい。

　図４Ｉは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｉの空間浮遊映像表示装置１０００は、装置背面（ユーザ２３０が空間浮遊映像３を視認する位置の反対側）に配置される透明板１００Ｂの窓に、遮光のための開閉ドア１４１０を設けている点で、図４Ｈの空間浮遊映像表示装置と相違する。その他の構成については、図４Ｈの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。

　図４Ｉの空間浮遊映像表示装置１０００の開閉ドア１４１０は、例えば、遮光板を有し、遮光板を移動（スライド）する機構、回転する機構または着脱する機構を備えることで、空間浮遊映像表示装置１０００の奥側に位置する透明板１００Ｂの窓（背面側窓）について、開口状態と遮光状態を切り替えることができる。開閉ドア１４１０による遮光板の移動（スライド）や回転は、図示しないモータの駆動による電動式としてもよい。当該モータは図３の制御部１１１０が制御してもよい。なお、図４Ｉの例では、開閉ドア１４１０の遮光板の枚数は２枚の例を開示している。これに対し、開閉ドア１４１０の遮光板の枚数は１枚でもよい。

　例えば、空間浮遊映像表示装置１０００の透明板１００Ｂの窓の奥に見える景色が屋外の場合は、天気によって太陽光の明るさが可変する。屋外の太陽光が強い場合、空間浮遊映像３の背景が明るくなり過ぎて、ユーザ２３０が空間浮遊映像３の視認性が下がる場合もある。このような場合に、開閉ドア１４１０の遮光板の移動（スライド）、回転または装着により、背面側窓を遮光状態にすれば、空間浮遊映像３の背景は暗くなるので、相対的に空間浮遊映像３の視認性を上げることができる。このような開閉ドア１４１０の遮光板による遮蔽動作は、ユーザ２３０の手の力により直接的に行われてもよい。図３の操作入力部１１０７を介した操作入力に応じて、制御部１１１０が図示しないモータを制御して開閉ドア１４１０の遮光板による遮蔽動作を行ってもよい。

　なお、背面側窓近傍など、空間浮遊映像表示装置１０００の背面側（ユーザ２３０の反対側）に照度センサを設けて、背面側窓の先の空間の明るさを測定してもよい。この場合、当該照度センサの検出結果に応じて、図３の制御部１１１０が図示しないモータを制御して開閉ドア１４１０の遮光板による開閉動作を行ってもよい。このように開閉ドア１４１０の遮光板による開閉動作を制御することにより、ユーザ２３０が手動で開閉ドア１４１０の遮光板の開閉動作をしなくとも、空間浮遊映像３の視認性をより好適に維持することが可能となる。

　また、開閉ドア１４１０による遮光板を、手動による着脱式としてもよい。空間浮遊映像表示装置１０００の使用用途、設置環境に応じて、背面側窓を開口状態とするか、遮光状態とするかをユーザが選択することができる。長期間にわたって背面側窓を遮光状態のまま使用する予定であれば、着脱式の遮光板を遮光状態のまま固定すればよい。また、長期間にわたって背面側窓を開口状態のまま使用する予定であれば、着脱式の遮光板を外した状態のまま使用すればよい。遮光板の着脱はネジを用いてもよく、引掛け構造を用いてもよく、嵌め込み構造を用いてもよい。

　なお、図４Ｉの空間浮遊映像表示装置１０００の例でも、表示装置１から出力される映像光の偏光分布および偏光分離部材１０１Ｂの性能によっては、表示装置１から出力される映像光の一部が偏光分離部材１０１Ｂで反射され、透明板１００Ｂへ向かう可能性がある。透明板１００Ｂの表面のコート性能によっては、この光が透明板１００Ｂの表面で再び反射され迷光としてユーザに視認される可能性がある。よって、当該迷光を防止するために、空間浮遊映像表示装置１０００装置の背面の前記窓に、透明板１００Ｂを設けない構成としてもよい。透明板１００Ｂを有しない窓に、上述の開閉ドア１４１０を備えるようにすればよい。当該迷光を防止するため上述の開閉ドア１４１０の遮光板の筐体内側の面は光反射率の低いコートまたは素材を有することが望ましい。

　図４Ｊは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｊの空間浮遊映像表示装置１０００は、図４Ｈの空間浮遊映像表示装置の背面側窓に、ガラスやプラスチックである透明板１００Ｂを配置する代わりに、電子制御透過率可変装置１６２０を配置する点で相違する。その他の構成については、図４Ｈの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。電子制御透過率可変装置１６２０の例は、液晶シャッターなどである。

　すなわち、液晶シャッターは２つの偏光板に挟まれた液晶素子を電圧制御することにより、光の透過光を制御することができる。よって、液晶シャッターを制御して透過率を大きくすれば、空間浮遊映像３の背景は、背面側窓越しの景色が透けて見える状態となる。また、液晶シャッターを制御して透過率を大きくすれば、空間浮遊映像３の背景として背面側窓越しの景色は見えない状態とすることができる。
　また、液晶シャッターは中間長の制御が可能であるので、透過率５０％などの状態にもすることができる。例えば、図３の操作入力部１１０７を介した操作入力に応じて、制御部１１１０が、電子制御透過率可変装置１６２０の透過率を制御すればよい。このように構成すれば、空間浮遊映像３の背景として背面側窓越しの景色を見たいものの、背景である背面側窓越しの景色が明る過ぎて空間浮遊映像３の視認性が下がってしまう場合などに、電子制御透過率可変装置１６２０の透過率を調整することにより、空間浮遊映像３の視認性を調整することが可能となる。

　なお、背面側窓近傍など、空間浮遊映像表示装置１０００の背面側（ユーザ２３０の反対側）に照度センサを設けて、背面側窓の先の空間の明るさを測定してもよい。この場合、当該照度センサの検出結果に応じて、図３の制御部１１１０が、電子制御透過率可変装置１６２０の透過率を制御すればよい。このようにすれば、ユーザ２３０が図３の操作入力部１１０７を介した操作入力を行わなくとも、背面側窓の先の空間の明るさに応じて電子制御透過率可変装置１６２０の透過率を調整することができるので、空間浮遊映像３の視認性をより好適に維持することが可能となる。

　また、上述の例では、電子制御透過率可変装置１６２０として液晶シャッターの例を説明した。これに対し、電子制御透過率可変装置１６２０の別の例として、電子ペーパーを用いてもよい。電子ペーパーを用いても、上述と同様の効果を得ることができる。そのうえ、電子ペーパーは中間調状態を維持するための消費電力が非常に小さい。よって、液晶シャッターを採用した場合に比べて、低消費電力の空間浮遊映像表示装置を実現することができる。

　図４Ｋは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｋの空間浮遊映像表示装置１０００は、透明な部材１００の代わりに、透過型自発光映像表示装置１６５０を有する点で、図４Ｇの空間浮遊映像表示装置と相違する。その他の構成については、図４Ｇの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。

　図４Ｋの空間浮遊映像表示装置１０００では、透過型自発光映像表示装置１６５０の表示面を、映像光束が透過したのち、空間浮遊映像表示装置１０００の外部に空間浮遊映像３を形成する。すなわち、２次元平面ディスプレイである透過型自発光映像表示装置１６５０で映像を表示しているときに、透過型自発光映像表示装置１６５０の映像の更にユーザ手前側に、空間浮遊映像３を飛び出す映像として表示することができる。このときユーザ２３０は奥行位置の異なる２つの映像を同時に視認することができる。透過型自発光映像表示装置１６５０は、例えば、特開２０１４－２１６７６１号公報などに開示される、透過型有機ＥＬパネルなどの既存の技術を用いて構成すればよい。なお、透過型自発光映像表示装置１６５０は、図３に図示されていないが、図３の空間浮遊映像表示装置１０００の一構成部として、制御部１１１０などの他の処理部と接続されるように構成すればよい。

　ここで、透過型自発光映像表示装置１６５０に、背景とキャラクターなどのオブジェクトの両者を表示した後に、キャラクターなどのオブジェクトだけ手前側の空間浮遊映像３に移動してくる、などの演出を行えば、ユーザ２３０により効果的なサプライズ演出での映像体験を提供することができる。

　また、空間浮遊映像表示装置１０００の内部を遮光状態にしておけば、透過型自発光映像表示装置１６５０の背景は十分暗くなる。よって、表示装置１に映像を表示せず、または表示装置１の光源を不点灯とし、透過型自発光映像表示装置１６５０だけに映像を表示している場合、ユーザ２３０には、透過型自発光映像表示装置１６５０は透過型ディスプレイではなく通常の２次元平面ディスプレイであるように見える（本発明の実施例における空間浮遊映像３はスクリーンのない空間に実像の光学像として表示するため、表示装置１の光源を不点灯とすれば、空間浮遊映像３の表示予定位置は何もない空間になる。）。よって、透過型自発光映像表示装置１６５０を、あたかも一般的な２次元平面ディスプレイとして使用して映像を表示しているときに、キャラクターやオブジェクトなどを突然、空間浮遊映像３として空中に表示することでユーザ２３０により効果的なサプライズ演出での映像体験を提供することができる。

　なお、空間浮遊映像表示装置１０００の内部をより暗くすればするほど、透過型自発光映像表示装置１６５０は２次元平面ディスプレイのように見える。よって、透過型自発光映像表示装置１６５０の空間浮遊映像表示装置１０００の内部側の面（偏光分離部材１０１Ｂで反射した映像光の透過型自発光映像表示装置１６５０への入射面、すなわち、透過型自発光映像表示装置１６５０の空間浮遊映像３と反対側の面）に、偏光分離部材１０１Ｂで反射した映像光の偏波を透過し当該偏波と９０°位相が異なる偏波を吸収する吸収型偏光板（図示せず）を設けてもよい。このようにすれば、空間浮遊映像３を形成する映像光への影響はさほど大きくないが、外部から透過型自発光映像表示装置１６５０を介して、空間浮遊映像表示装置１０００の内部へ入射する光を大幅に低減することができ、空間浮遊映像表示装置１０００の内部をより暗くすることができ、好適である。

　図４Ｌは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｌの空間浮遊映像表示装置１０００は、図４Ｋの空間浮遊映像表示装置の変形例である。空間浮遊映像表示装置１０００における構成の配置の向きが図４Ｋの空間浮遊映像表示装置と異なり、図４Ｆの空間浮遊映像表示装置に近い配置となっている。各構成の機能、動作などについては、図４Ｋの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。

　図４Ｌの空間浮遊映像表示装置でも、透過型自発光映像表示装置１６５０を映像光の光束が透過したのち、透過型自発光映像表示装置１６５０よりもユーザ２３０側に空間浮遊映像３を形成する。

　図４Ｋの空間浮遊映像表示装置の例でも、図４Ｌの空間浮遊映像表示装置の例でも、ユーザ２３０からは、透過型自発光映像表示装置１６５０の映像の手前に、空間浮遊映像３が重なって表示される。ここで、空間浮遊映像３の位置と透過型自発光映像表示装置１６５０の映像の位置は、奥行方向に差があるように構成している。よって、ユーザが頭（視点の位置）を動かすと視差により２つの映像の奥行を認識することができる。よって、奥行位置の異なる２枚の映像を表示することで、立体視眼鏡などを必要とせず裸眼で、３次元的な映像体験をより好適にユーザに提供することができる。

　図４Ｍは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｍの空間浮遊映像表示装置１０００は、図４Ｇの空間浮遊映像表示装置の偏光分離部材１０１Ｂに対してユーザから見て奥側に、第２の表示装置１６８０を設ける。その他の構成については、図４Ｇの空間浮遊映像表示装置と同じ構成であるため、繰り返しの説明を省略する。

　図４Ｍに示す構成例では、第２の表示装置１６８０が空間浮遊映像３の表示位置の奥側に設けられており、映像表示面が空間浮遊映像３に向けられている。かかる構成により、ユーザ２３０からみると、第２の表示装置１６８０の映像と、空間浮遊映像３との、２つの奥行の異なる位置に表示される映像を重ねて視認することができる。すなわち、第２の表示装置１６８０は、空間浮遊映像３を視認するユーザ２３０側の方向に映像を表示する向きに配置されている、といえる。なお、第２の表示装置１６８０は、図３に図示されていないが、図３の空間浮遊映像表示装置１０００の一構成部として、制御部１１１０などの他の処理部と接続されるように構成すればよい。

　なお、図４Ｍの空間浮遊映像表示装置１０００の第２の表示装置１６８０の映像光は、偏光分離部材１０１Ｂを透過したのち、ユーザ２３０に視認される。したがて、第２の表示装置１６８０の映像光がより好適に偏光分離部材１０１Ｂを透過するためには、第２の表示装置１６８０から出力される映像光は、偏光分離部材１０１Ｂがより好適に透過する振動方向の偏波の偏光であることが望ましい。すなわち、表示装置１から出力される映像光の偏波と同じ振動方向の偏波の偏光であることが望ましい。例えば、表示装置１から出力される映像光がＳ偏光である場合は、第２の表示装置１６８０から出力される映像光もＳ偏光とすることが望ましい。また、表示装置１から出力される映像光がＰ偏光である場合は、第２の表示装置１６８０から出力される映像光もＰ偏光とすることが望ましい。

　図４Ｍの空間浮遊映像表示装置の例も、空間浮遊映像３の奥に第２の映像を表示するという点で、図４Ｋの空間浮遊映像表示装置の例および図４Ｌの空間浮遊映像表示装置の例と同様の効果を有する。ただし、図４Ｋの空間浮遊映像表示装置の例および図４Ｌの空間浮遊映像表示装置の例と異なり、図４Ｍの空間浮遊映像表示装置の例では、空間浮遊映像３を形成するための映像光の光束が第２の表示装置１６８０を通過することはない。よって、第２の表示装置１６８０は、透過型自発光映像表示装置である必要はなく、２次元平面ディスプレイである液晶ディスプレイでよい。第２の表示装置１６８０は、有機ＥＬディスプレイでもよい。よって、図４Ｍの空間浮遊映像表示装置の例では、図４Ｋの空間浮遊映像表示装置の例および図４Ｌの空間浮遊映像表示装置の例よりも、空間浮遊映像表示装置１０００をより低コストで実現することが可能である。

　ここで、表示装置１から出力される映像光の偏光分布および偏光分離部材１０１Ｂの性能によっては、表示装置１から出力される映像光の一部が偏光分離部材１０１Ｂで反射され、第２の表示装置１６８０へ向かう可能性がある。この光（映像光の一部）は、第２の表示装置１６８０の表面で再び反射され迷光としてユーザに視認される可能性がある。

　よって、当該迷光を防止するために、第２の表示装置１６８０の表面に吸収型偏光板を設けてもよい。この場合、当該吸収型偏光板は、第２の表示装置１６８０から出力される映像光の偏波を透過し、第２の表示装置１６８０から出力される映像光の偏波と位相が９０°異なる偏波を吸収する吸収型偏光板とすればよい。なお、第２の表示装置１６８０が液晶ディスプレイである場合は、当該液晶ディスプレイ内部の映像出射側にも吸収型偏光板が存在する。しかしながら、当該液晶ディスプレイ内部の映像出射側の吸収型偏光板の更に出射面にカバーガラス（映像表示面側のカバーガラス）が有る場合は、液晶ディスプレイ外部からの光により当該カバーガラスの反射で生じる迷光を防ぐことができない。よって、上述の吸収型偏光板を当該カバーガラスの表面に別途設ける必要がある。

　なお、２次元平面ディスプレイである第２の表示装置１６８０で映像を表示しているときに、第２の表示装置１６８０の映像の更にユーザ手前側に、空間浮遊映像３を映像として表示することができる。このときユーザ２３０は、奥行位置の異なる２つの映像を同時に視認することができる。空間浮遊映像３にキャラクターを表示して、第２の表示装置１６８０に背景を表示することにより、ユーザ２３０があたかもキャラクターが存在する空間を立体的に視認しているような効果を提供することができる。

　また、第２の表示装置１６８０に、背景とキャラクターなどのオブジェクトの両者を表示した後に、キャラクターなどのオブジェクトだけ手前側の空間浮遊映像３に移動してくる、などの演出を行えば、ユーザ２３０により効果的なサプライズ演出での映像体験を提供することができる。

　次に、図４Ｎは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｎの空間浮遊映像表示装置１０００は、図２Ｄの光学システムを採用した空間浮遊映像表示装置である。図２Ａ～図２Ｃの光学システムを採用した空間浮遊映像表示装置の例と同様に、透明な部材１００を透過してきた映像光により空間浮遊映像３として空中に結像する。また、ユーザから見て透明な部材１００の奥側に配置された空中操作検出センサ１３５１のセンシング光を用いて、ユーザの指９００４による空間浮遊映像３の操作を検出することができる。

　図２Ａ～図２Ｃの光学システムを採用した空間浮遊映像表示装置の例においても、図２Ｄの光学システムを採用した空間浮遊映像表示装置の例においても、透明な部材１００の手前に空間浮遊映像３が結像し、ユーザから見て透明な部材１００の奥側に配置された空中操作検出センサ１３５１のセンシング光を用いて、ユーザの指による空間浮遊映像３の操作を検出することができる。よって、図２Ｄの光学システムを採用した空間浮遊映像表示装置は、ユーザから見て透明な部材１００の奥側に図２Ａ～図２Ｃの光学システムを配置した空間浮遊映像表示装置に対して、光学システムが異なっている。

　しかしながら、ユーザから見た図２Ｄの光学システムを採用した空間浮遊映像表示装置の使い勝手は、図２Ａ～図２Ｃの光学システムを採用した空間浮遊映像表示装置とほぼ同様の使い勝手を有することとなる。

　次に、図４Ｏは、空間浮遊映像表示装置の構成の一例を示す図である。図４Ｏは、図４Ｎの空間浮遊映像表示装置１０００において、内部の光学システムの構成も見えるよう示した図である。図４Ｏに示す空間浮遊映像表示装置１０００は、図２Ｄの光学システムに対応する光学システムを搭載するものである。図４Ｏに示す空間浮遊映像表示装置１０００では、空間浮遊映像３が形成される側の面が上方を向くように、横置きにして設置される。

　すなわち、図４Ｏでは、空間浮遊映像表示装置１０００は、透明な部材１００が装置上面に設置される。空間浮遊映像３が、空間浮遊映像表示装置１０００の透明な部材１００の面に対して上方に形成される。空間浮遊映像３の光は、斜め上方向に進行する。空中操作検出センサ１３５１を図のように設けた場合は、ユーザ２３０の指による空間浮遊映像３の操作を検出することができる。

　ここで、図４Ｏの構成を図４Ａの構成と比較し、その差異を確認する。図４Ａにおいて、表示装置１と空間浮遊映像３とは偏光分離部材１０１の面を基準に面対称の関係にある。これに対し、図４Ｏにおいて、表示装置１と空間浮遊映像３とは再帰反射板５の面を基準に面対称の関係にある。また、図４Ａの構成には、再帰反射板２とλ／４板２１が存在するが、図４Ｏにはこれらが存在しない。また、図４Ａにおいては吸収型偏光板１２がある方がより好適であるが、図４Ｏでは、吸収型偏光板１２は特に必要はない。

　すなわち、図４Ａの構成における図２Ａの光学システムを図２Ｄの光学システムに置き換え、図４Ｏの構成に置換するためには、以下のようにすればよい。すなわち、図４Ａの構成における偏光分離部材１０１を再帰反射板５に置き変え、図４Ａの構成から再帰反射板２とλ／４板２１とを取り除けばよい。吸収型偏光板１２はあってもなくてもよい。この考えに基づいた置換を行えば、図４Ａ～図４Ｇの空間浮遊映像表示装置の構成に搭載される図２Ａ～図２Ｃの光学システムを図２Ｄの光学システムに置換し、図２Ｄの光学システムを搭載する空間浮遊映像表示装置に置換することができる。このとき、図４Ａおよび図４Ｂでは偏光分離部材１０１を再帰反射板５に置き変えればよく、図４Ｃ～図４Ｇでは偏光分離部材１０１Ｂを再帰反射板５に置き変えればよい。

　このようにすれば、図４Ａ～図４Ｇの空間浮遊映像表示装置の構成において光学システムを図２Ｄの光学システムに置換した空間浮遊映像表示装置を実現することができる。これらの図２Ｄの光学システムに置換した空間浮遊映像表示装置においても、図４Ａ～図４Ｇの空間浮遊映像表示装置とほぼ同様の使い勝手の空間浮遊映像表示装置を実現することができる。

　＜表示装置＞
　次に、本実施例の表示装置１について、図を用いて説明する。本実施例の表示装置１は、映像表示素子１１（液晶表示パネル）と共に、その光源を構成する光源装置１３を備えており、図５では、光源装置１３を液晶表示パネルと共に展開斜視図として示している。

　この液晶表示パネル（映像表示素子１１）は、図５に矢印３０で示すように、バックライト装置である光源装置１３から、挟角な拡散特性を有する、すなわち、指向性（直進性）が強く、かつ、偏光面を一方向に揃えたレーザ光に似た特性の照明光束を受光する。液晶表示パネル（映像表示素子１１）は、入力される映像信号に応じて受光した照明光束を変調する。変調された映像光は、再帰反射板２により反射し、透明な部材１００を透過して、実像である空間浮遊像を形成する（図１参照）。

　また、図５では、表示装置１を構成する液晶表示パネル１１と、更に、光源装置１３からの出射光束の指向特性を制御する光方向変換パネル５４、および、必要に応じ挟角拡散板（図示せず）を備えて構成されている。すなわち、液晶表示パネル１１の両面には偏光板が設けられ、特定の偏波の映像光が映像信号により光の強度を変調して出射する（図５の矢印３０を参照）構成となっている。これにより、所望の映像を指向性（直進性）の高い特定偏波の光として、光方向変換パネル５４を介して、再帰反射板２に向けて投写し、再帰反射板２で反射後、店舗（空間）の外部の監視者の眼に向けて透過して空間浮遊映像３を形成する。なお、上述した光方向変換パネル５４の表面には保護カバー５０（図６、図７を参照）を設けてよい。

　＜表示装置の例１＞
　図６には、表示装置１の具体的な構成の一例を示す。図６では、図５の光源装置１３の上に液晶表示パネル１１と光方向変換パネル５４を配置している。この光源装置１３は、図５に示したケース上に、例えば、プラスチックなどにより形成され、その内部にＬＥＤ素子２０１、導光体２０３を収納して構成されており、導光体２０３の端面には、図５等にも示したように、それぞれのＬＥＤ素子２０１からの発散光を略平行光束に変換するために、受光部に対して対面に向かって徐々に断面積が大きくなる形状を有し、内部を伝搬する際に複数回全反射することで発散角が徐々に小さくなるような作用を有するレンズ形状を設けている。表示装置１における上面には、かかる表示装置１を構成する液晶表示パネル１１が取り付けられている。また、光源装置１３のケースのひとつの側面（本例では左側の端面）には、半導体光源であるＬＥＤ（ＬｉｇｈｔＥｍｉｔｔｉｎｇＤｉｏｄｅ）素子２０１や、その制御回路を実装したＬＥＤ基板２０２が取り付けられる。ＬＥＤ基板２０２の外側面には、ＬＥＤ素子および制御回路で発生する熱を冷却するための部材であるヒートシンクが取り付けられてもよい。

　また、光源装置１３のケースの上面に取り付けられる液晶表示パネルのフレーム（図示せず）には、当該フレームに取り付けられた液晶表示パネル１１と、更に、当該液晶表示パネル１１に電気的に接続されたＦＰＣ（ＦｌｅｘｉｂｌｅＰｒｉｎｔｅｄＣｉｒｃｕｉｔｓ：フレキシブル配線基板）（図示せず）などが取り付けられて構成される。すなわち、映像表示素子である液晶表示パネル１１は、固体光源であるＬＥＤ素子２０１と共に、電子装置を構成する制御回路（図３の映像制御部１１６０）からの制御信号に基づいて、透過光の強度を変調することによって表示映像を生成する。この時、生成される映像光は拡散角度が狭く特定の偏波成分のみとなるため、映像信号により駆動された面発光レーザ映像源に近い、従来にない新しい映像表示装置が得られることとなる。なお、現状では、レーザ装置により、上述した表示装置１で得られる画像と同等のサイズのレーザ光束を得ることは、技術的にも安全上からも不可能である。そこで、本実施例では、例えば、ＬＥＤ素子を備えた一般的な光源からの光束から、上述した面発光レーザ映像光に近い光を得る。

　続いて、光源装置１３のケース内に収納されている光学系の構成について、図６と共に、図７を参照しながら詳細に説明する。

　図６および図７は断面図であるため、光源を構成する複数のＬＥＤ素子２０１が１つだけ示されており、これらは導光体２０３の受光端面２０３ａの形状により略コリメート光に変換される。このため、導光体端面の受光部とＬＥＤ素子は、所定の位置関係を保って取り付けられている。

　なお、この導光体２０３は、各々、例えば、アクリル等の透光性の樹脂により形成されている。そして、この導光体２０３の端部のＬＥＤ受光面は、例えば、放物断面を回転して得られる円錐凸形状の外周面を有し、その頂部では、その中央部に凸部（すなわち、凸レンズ面）を形成した凹部を有し、その平面部の中央部には、外側に突出した凸レンズ面（あるいは、内側に凹んだ凹レンズ面でもよい）を有するものである（図示せず）。なお、ＬＥＤ素子２０１を取り付ける導光体の受光部外形形状は、円錐形状の外周面を形成する放物面形状をなし、ＬＥＤ素子から周辺方向に出射する光をその内部で全反射することが可能な角度の範囲内において設定され、あるいは、反射面が形成されている。

　他方、ＬＥＤ素子２０１は、その回路基板である、ＬＥＤ基板２０２の表面上の所定の位置にそれぞれ配置されている。このＬＥＤ基板２０２は、ＬＥＤコリメータ（受光端面２０３ａ）に対して、その表面上のＬＥＤ素子２０１が、それぞれ、前述した凹部の中央部に位置するように配置されて固定される。

　かかる構成によれば、導光体２０３の受光端面２０３ａの形状によって、ＬＥＤ素子２０１から放射される光は略平行光として取り出すことが可能となり、発生した光の利用効率を向上することが可能となる。

　以上述べたように、光源装置１３は、導光体２０３の端面に設けた受光部である受光端面２０３ａに光源であるＬＥＤ素子２０１を複数並べた光源ユニットを取り付けて構成され、ＬＥＤ素子２０１からの発散光束を導光体端面の受光端面２０３ａのレンズ形状によって略平行光として、矢印で示すように、導光体２０３内部を導光し（図面に平行な方向）、光束方向変換手段２０４によって、導光体２０３に対して略平行に配置された液晶表示パネル１１に向かって（図面から手前に垂直な方向に）出射する。導光体内部または表面の形状によって、この光束方向変換手段２０４の分布（密度）を最適化することで、液晶表示パネル１１に入射する光束の均一性を制御することができる。

　上述した光束方向変換手段２０４は、導光体表面の形状により、あるいは導光体内部に例えば屈折率の異なる部分を設けることで、導光体内を伝搬した光束を、導光体２０３に対して略平行に配置された液晶表示パネル１１に向かって（図面から手前に垂直な方向に）出射する。この時、液晶表示パネル１１を画面中央に正対し画面対角寸法と同じ位置に視点を置いた状態で画面中央と画面周辺部の輝度を比較した場合の相対輝度比が２０％以上あれば実用上問題なく、３０％を超えていれば更に優れた特性となる。

　なお、図６は上述した導光体２０３とＬＥＤ素子２０１を含む光源装置１３において、偏光変換する本実施例の光源の構成とその作用を説明するための断面配置図である。図６において、光源装置１３は、例えば、プラスチックなどにより形成される表面または内部に光束方向変換手段２０４を設けた導光体２０３、光源としてのＬＥＤ素子２０１、反射シート２０５、位相差板２０６、レンチキュラーレンズなどから構成されており、その上面には、光源光入射面と映像光出射面に偏光板を備える液晶表示パネル１１が取り付けられている。

　また、光源装置１３に対応した液晶表示パネル１１の光源光入射面（図の下面）にはフィルムまたはシート状の反射型偏光板４９を設けており、ＬＥＤ素子２０１から出射した自然光束２１０のうち片側の偏波（例えばＰ波）２１２を選択的に反射させる。反射光は、導光体２０３の一方（図の下方）の面に設けた反射シート２０５で再度、反射して、液晶表示パネル１１に向かうようにする。そこで、反射シート２０５と導光体２０３の間もしくは導光体２０３と反射型偏光板４９の間に位相差板（λ／４板）を設けて反射シート２０５で反射させ、２回通過させることで反射光束をＰ偏光からＳ偏光に変換し、映像光としての光源光の利用効率を向上する。液晶表示パネル１１で映像信号により光強度を変調された映像光束は（図６の矢印２１３）、再帰反射板２に入射する。再帰反射板２で反射した後に実像である空間浮遊像を得ることができる。

　図７は、図６と同様に、導光体２０３とＬＥＤ素子２０１を含む光源装置１３において、偏光変換する本実施例の光源の構成と作用を説明するための断面配置図である。光源装置１３も、同様に、例えばプラスチックなどにより形成される表面または内部に光束方向変換手段２０４を設けた導光体２０３、光源としてのＬＥＤ素子２０１、反射シート２０５、位相差板２０６、レンチキュラーレンズなどから構成されている。光源装置１３における上面には、映像表示素子として、光源光入射面と映像光出射面に偏光板を備える液晶表示パネル１１が取り付けられている。

　また、光源装置１３に対応した液晶表示パネル１１の光源光入射面（図の下面）にはフィルムまたはシート状の反射型偏光板４９を設け、ＬＥＤ素子２０１から出射した自然光束２１０うち片側の偏波（例えばＳ波）２１１を選択的に反射させる。すなわち、図７の例では、反射型偏光板４９の選択反射特性が図７と異なる。反射光は、導光体２０３の一方（図の下方）の面に設けた反射シート２０５で反射して、再度液晶表示パネル１１に向かう。反射シート２０５と導光体２０３の間もしくは導光体２０３と反射型偏光板４９の間に位相差板（λ／４板）を設けて反射シート２０５で反射させ、２回通過させることで反射光束をＳ偏光からＰ偏光に変換し、映像光として光源光の利用効率を向上する。液晶表示パネル１１で映像信号により光強度変調された映像光束は（図７の矢印２１４）、再帰反射板２に入射する。再帰反射板２で反射した後に実像である空間浮遊像を得ることができる。

　図６および図７に示す光源装置においては、対応する液晶表示パネル１１の光入射面に設けた偏光板の作用の他に、反射型偏光板で片側の偏光成分を反射するため、理論上得られるコントラスト比は、反射型偏光板のクロス透過率の逆数と液晶表示パネルに付帯した２枚の偏光板により得られるクロス透過率の逆数を乗じたものとなる。これにより、高いコントラスト性能が得られる。実際には、表示画像のコントラスト性能が１０倍以上向上することを実験により確認した。この結果、自発光型の有機ＥＬに比較しても遜色ない高品位な映像が得られた。

　＜表示装置の例２＞
　図８には、表示装置１の具体的な構成の他の一例を示す。この光源装置１３は、例えばプラスチックなどのケース内にＬＥＤ、コリメータ、合成拡散ブロック、導光体等を収納して構成されており、その上面には液晶表示パネル１１が取り付けられている。また、光源装置１３のケースのひとつの側面には、半導体光源であるＬＥＤ（ＬｉｇｈｔＥｍｉｔｔｉｎｇＤｉｏｄｅ）素子１４ａ、１４ｂや、その制御回路を実装したＬＥＤ基板が取り付けられると共に、ＬＥＤ基板の外側面には、ＬＥＤ素子および制御回路で発生する熱を冷却するための部材であるヒートシンク１０３が取り付けられている。

　また、ケースの上面に取り付けられた液晶表示パネルフレームには、当該フレームに取り付けられた液晶表示パネル１１と、更に、液晶表示パネル１１に電気的に接続されたＦＰＣ（ＦｌｅｘｉｂｌｅＰｒｉｎｔｅｄＣｉｒｃｕｉｔｓ：フレキシブル配線基板）４０３などが取り付けられて構成されている。すなわち、液晶表示素子である液晶表示パネル１１は、固体光源であるＬＥＤ素子１４ａ，１４ｂと共に、電子装置を構成する制御回路（ここでは図示せず）からの制御信号に基づいて、透過光の強度を変調することによって、表示映像を生成する。

　＜表示装置の例３＞
　続いて、図９を用いて、表示装置１の具体的な構成の他の例（表示装置の例３）を説明する。この表示装置１の光源装置は、ＬＥＤからの光（Ｐ偏光とＳ偏光が混在）の発散光束をコリメータ１８により略平行光束に変換し、反射型導光体３０４の反射面により液晶表示パネル１１に向け反射する。反射された光は、液晶表示パネル１１と反射型導光体３０４の間に配置された反射型偏光板４９に入射する。反射型偏光板４９は、特定の偏波の光（例えばＰ偏光）を透過させ、透過した偏波光を液晶表示パネル１１に入射させる。ここで、特定の偏波以外の他の偏波（例えばＳ偏光）は、反射型偏光板４９で反射されて、再び反射型導光体３０４へ向かう。

　反射型偏光板４９は、反射型導光体３０４の反射面からの光の主光線に対して垂直とならないように、液晶表示パネル１１に対して傾きを以て設置されている。そして、反射型偏光板４９で反射された光の主光線は、反射型導光体３０４の透過面に入射する。反射型導光体３０４の透過面に入射した光は、反射型導光体３０４の背面を透過し、位相差板であるλ／４板２７０を透過し、反射板２７１で反射される。反射板２７１で反射された光は、再びλ／４板２７０を透過し、反射型導光体３０４の透過面を透過する。反射型導光体３０４の透過面を透過した光は、再び反射型偏光板４９に入射する。

　このとき、反射型偏光板４９に再度入射する光は、λ／４板２７０を２回通過しているため、反射型偏光板４９を透過する偏波（例えば、Ｐ偏光）へ偏光が変換されている。よって、偏光が変換されている光は反射型偏光板４９を透過し、液晶表示パネル１１に入射する。なお、偏光変換に係る偏光設計について、上述の説明から偏波を逆に構成（Ｓ偏光とＰ偏光を逆にする）してもかまわない。

　この結果、ＬＥＤからの光は特定の偏波（例えばＰ偏光）に揃えられ、液晶表示パネル１１に入射し、映像信号に合わせて輝度変調されパネル面に映像を表示する。上述の例と同様に光源を構成する複数のＬＥＤが示されており（ただし、縦断面のため図９では１個のみ図示している）、これらはコリメータ１８に対して所定の位置に取り付けられている。

　なお、コリメータ１８は、各々、例えばアクリル等の透光性の樹脂またはガラスにより形成されている。そして、このコリメータ１８は、放物断面を回転して得られる円錐凸形状の外周面を有してもよい。また、コリメータ１８の頂部（ＬＥＤ基板１０２に対向する側）における中央部に、凸部（すなわち、凸レンズ面）を形成した凹部を有してもよい。また、コリメータ１８の平面部（上記の頂部とは逆の側）の中央部には、外側に突出した凸レンズ面（あるいは、内側に凹んだ凹レンズ面でもよい）を有している。なお、コリメータ１８の円錐形状の外周面を形成する放物面は、ＬＥＤから周辺方向に出射する光をその内部で全反射することが可能な角度の範囲内において設定され、あるいは、反射面が形成されている。

　なお、ＬＥＤは、その回路基板である、ＬＥＤ基板１０２の表面上の所定の位置にそれぞれ配置されている。このＬＥＤ基板１０２は、コリメータ１８に対して、その表面上のＬＥＤが、それぞれ、円錐凸形状の頂部の中央部（頂部に凹部が有る場合はその凹部）に位置するように配置されて固定される。

　かかる構成によれば、コリメータ１８によって、ＬＥＤから放射される光のうち、特に、その中央部分から放射される光は、コリメータ１８の外形を形成する凸レンズ面により集光されて平行光となる。また、その他の部分から周辺方向に向かって出射される光は、コリメータ１８の円錐形状の外周面を形成する放物面によって反射され、同様に、集光されて平行光となる。換言すれば、その中央部に凸レンズを構成すると共に、その周辺部に放物面を形成したコリメータ１８によれば、ＬＥＤにより発生された光のほぼすべてを平行光として取り出すことが可能となり、発生した光の利用効率を向上することが可能となる。

　更に、図９に示したコリメータ１８により略平行光に変換された光は、反射型導光体３０４で反射される。当該光のうち、反射型偏光板４９の作用により特定の偏波の光は反射型偏光板４９透過し、反射型偏光板４９の作用により反射された他方の偏波の光は再度導光体３０４を透過する。当該光は、反射型導光体３０４に対して、液晶表示パネル１１とは逆の位置にある反射板２７１で反射する。このとき、当該光は位相差板であるλ／４板２７０を２度通過することで偏光変換される。反射板２７１で反射した光は、再び導光体３０４を透過して、反対面に設けた反射型偏光板４９に入射する。当該入射光は、偏光変換がなされているので、反射型偏光板４９を透過して、偏光方向を揃えて液晶表示パネル１１に入射される。この結果、光源の光をすべて利用できるので光の幾何光学的な利用効率が２倍になる。また、反射型偏光板の偏光度（消光比）もシステム全体の消光比に乗せられるので、本実施例の光源装置を用いることで表示装置全体としてのコントラスト比が大幅に向上する。なお、反射型導光体３０４の反射面の面粗さおよび反射板２７１の面粗さを調整することで、それぞれの反射面での光の反射拡散角を調整することができる。液晶表示パネル１１に入射する光の均一性がより好適になるように、設計毎に、反射型導光体３０４の反射面の面粗さおよび反射板２７１の面粗さを調整すればよい。

　なお、図９の位相差板であるλ／４板２７０は、必ずしもλ／４板２７０へ垂直に入射した偏光に対する位相差がλ／４である必要はない。図９の構成において、偏光が２回通過することで、位相が９０°（λ／２）変わる位相差板であればよい。位相差板の厚さは、偏光の入射角度分布に応じて調整すればよい。

　＜表示装置の例４＞
　更に、表示装置の光源装置等の光学系の構成についての他の例（表示装置の例４）を、図１０を用いて説明する。表示装置の例３の光源装置において、反射型導光体３０４の代わりに拡散シートを用いる場合の構成例である。具体的には、コリメータ１８の光の出射側には図面の垂直方向と水平方向（図の前後方向で図示せず）の拡散特性を変換する光学シートを２枚用い（光学シート２０７Ａおよび光学シート２０７Ｂ）、コリメータ１８からの光を２枚の光学シート（拡散シート）の間に入射させる。

　なお、上記の光学シートは、２枚構成ではなく１枚としてもよい。１枚構成とする場合には、１枚の光学シートの表面と裏面の微細形状で垂直と水平の拡散特性を調整する。また、拡散シートを複数枚使用して作用を分担してもよい。ここで、図１０の例では、光学シート２０７Ａと光学シート２０７Ｂの表面形状と裏面形状による反射拡散特性について、液晶表示パネル１１から出射する光束の面密度が均一になるように、ＬＥＤの数量とＬＥＤ基板（光学素子）１０２からの発散角およびコリメータ１８の光学仕様を設計パラメータとして最適設計するとよい。つまり、導光体の代わりに複数の拡散シートの表面形状により拡散特性を調整する。

　図１０の例では、偏光変換は、上述した表示装置の例３と同様の方法で行われる。すなわち、図１０の例において、反射型偏光板４９は、Ｓ偏光を反射（Ｐ偏光は透過）させる特性を有するように構成すればよい。その場合、光源であるＬＥＤから発した光のうちＰ偏光を透過して、透過した光は液晶表示パネル１１に入射する。光源であるＬＥＤから発した光のうちＳ偏光を反射し、反射した光は、図１０に示した位相差板２７０を通過する。位相差板２７０を通過した光は、反射板２７１で反射される。反射板２７１で反射した光は、再び位相差板２７０を通過することでＰ偏光に変換される。偏光変換された光は、反射型偏光板４９を透過し、液晶表示パネル１１に入射する。

　なお、図１０の位相差板であるλ／４板２７０は、必ずしもλ／４板２７０へ垂直に入射した偏光に対する位相差がλ／４である必要はない。図１０の構成において、偏光が２回通過することで、位相が９０°（λ／２）変わる位相差板であればよい。位相差板の厚さは、偏光の入射角度分布に応じて調整すればよい。なお、図１０においても、偏光変換に係る偏光設計について、上述の説明から偏波を逆に構成（Ｓ偏光とＰ偏光を逆にする）してもかまわない。

　液晶表示パネル１１からの出射光は、一般的なＴＶ用途の装置では画面水平方向（図１２（ａ）Ｘ軸で表示）と画面垂直方向（図１２（ｂ）Ｙ軸で表示）ともに同様な拡散特性を持っている。これに対して、本実施例の液晶表示パネルからの出射光束の拡散特性は、例えば図１２の例１に示すように輝度が正面視（角度０度）の５０％になる視野角が１３度とすることで、一般的なＴＶ用途の装置の６２度に対して１／５となる。同様に、垂直方向の視野角は、上下不均等として上側の視野角を下側の視野角に対して１／３程度に抑えるように反射型導光体の反射角度と反射面の面積等を最適化する。この結果、従来の液晶ＴＶに比べ、監視方向に向かう映像光量が大幅に向上し、輝度は５０倍以上となる。

　更に、図１２の例２に示す視野角特性とすれば、輝度が正面視（角度０度）の５０％になる視野角が５度とすることで、一般的なＴＶ用途の装置の６２度に対して１／１２となる。同様に、垂直方向の視野角は、上下均等として視野角を一般的なＴＶ用途の装置に対して１／１２程度に抑えるように、反射型導光体の反射角度と反射面の面積等を最適化する。この結果、従来の液晶ＴＶに比べ、監視方向に向かう映像光量が大幅に向上し、輝度は１００倍以上となる。

　以上述べたように、視野角を挟角とすることで、監視方向に向かう光束量を集中できるので、光の利用効率が大幅に向上する。この結果、一般的なＴＶ用途の液晶表示パネルを使用しても、光源装置の光拡散特性を制御することで、同様な消費電力で大幅な輝度向上が実現可能で、明るい屋外に向けての情報表示システムに対応した映像表示装置とすることができる。

　大型の液晶表示パネルを使用する場合には、画面周辺の光は画面中央を監視者が正対した場合に監視者の方向に向かうように内側に向けることで、画面明るさの全面性が向上する。図１１は、監視者のパネルからの距離Ｌと、パネルサイズ（画面比１６：１０）とをパラメータとしたときのパネル長辺と短辺の収斂角度を求めたものである。画面を縦長として監視する場合には、短辺に合わせて収斂角度を設定すればよく、例えば２２インチパネルの縦使いで監視距離が０.８ｍの場合には、収斂角度を１０度とすれば、画面４コーナーからの映像光を有効に監視者に向けることができる。

　同様に、１５インチパネルの縦使いで監視する場合には、監視距離が０.８ｍの場合には、収斂角度を７度とすれば、画面４コーナーからの映像光を有効に監視者に向けることができる。以上述べたように、液晶表示パネルのサイズおよび縦使いか横使いかによって、画面周辺の映像光を、画面中央を監視するのに最適な位置にいる監視者に向けることで、画面明るさの全面性を向上できる。

　基本構成としては、図９に示すように、光源装置により挟角な指向特性の光束を液晶表示パネル１１に入射させ、映像信号に合わせて輝度変調することで、液晶表示パネル１１の画面上に表示した映像情報を、再帰反射板で反射させ得られた空間浮遊映像を、透明な部材１００を介して室外または室内に表示する。

　以上説明した、本発明の一実施例に係る表示装置や光源装置を用いれば、光の利用効率がより高い空間浮遊映像表示装置を実現することが可能となる。

　＜空間浮遊映像表示装置における映像表示処理の例＞
　次に、本実施例の画像処理が解決する課題の一例について、図１３Ａを用いて説明する。空間浮遊映像表示装置１０００において、ユーザから見て空間浮遊映像３の奥側が空間浮遊映像表示装置１０００の筐体内であり、十分暗い場合には、ユーザは、空間浮遊映像３の背景は黒であると視認する。

　ここで、図１３Ａを用いて、空間浮遊映像３において、キャラクター“パンダ”１５２５を表示する例を説明する。まず、図３の映像制御部１１６０は、図１３Ａ（１）に示すような、キャラクター“パンダ” １５２５の画像を描画する画素領域と、背景画像である透明情報領域１５２０を含む画像について、キャラクター“パンダ”１５２５の画像を描画する画素領域と、背景画像である透明情報領域１５２０とを区別して認識する。

　キャラクター画像と背景画像を区別して認識する方法は、例えば、映像制御部１１６０の画像処理において、背景画像レイヤーと、背景画像レイヤーの前面にあるキャラクター画像のレイヤーを別のレイヤーとして処理できるように構成しておき、これらのレイヤーを合成するときの重畳関係により、キャラクター画像と背景画像を区別して認識してもよい。

　ここで、映像制御部１１６０は、キャラクター画像などのオブジェクトを描画する画素の黒と透明情報画素とは異なる情報として認識する。ただし、オブジェクトを描画する画素の黒と透明情報画素のいずれの画素も輝度が０であるとする。この場合、空間浮遊映像３を表示するとき、キャラクター“パンダ”１５２５の画像のうち黒を描画する画素と、背景画像である透明情報領域１５２０の画素とには、輝度の差がない。よって、空間浮遊映像３では、図１３Ａ（２）に示すように、キャラクター“パンダ”１５２５の画像のうち黒を描画する画素と透明情報領域１５２０の画素のいずれにも輝度はなく、光学的に同じ黒色の空間としてユーザ視認される。すなわち、オブジェクトであるキャラクター“パンダ” １５２５の画像のうち黒を描画する部分は、背景に溶け込んでしまい、キャラクター“パンダ”１５２５の黒ではない部分だけが空間浮遊映像３の表示領域に浮遊している映像として認識されてしまう。

　本実施例の画像処理の一例について図１３Ｂを用いて説明する。図１３Ｂは、図１３Ａで説明した、オブジェクトの黒い画像領域が、背景に溶け込んでしまうという課題をより好適に解消する画像処理の一例を説明する図である。図１３Ｂ（１）、（２）では、それぞれ、上側に空間浮遊映像３の表示状態、下側に、オブジェクトの画像の画像処理の入出力特性を示している。なお、オブジェクト（キャラクター“パンダ”１５２５）の画像やこれに対応するデータは、図３のストレージ部１１７０やメモリ１１０９から読み出してもよい。または、映像信号入力部１１３１から入力されてもよい。または、通信部１１３２を介して取得してもよい。

　ここで、図１３Ｂ（１）の状態では、オブジェクトの画像の画像処理の入出力特性は、特に調整していないリニアな状態である。この場合、図１３Ａ（２）と同様の表示状態であり、オブジェクトの黒い画像領域が、背景に溶け込んでしまっている。これに対し、図１３Ｂ（２）では、本実施例の映像制御部１１６０は、オブジェクト（キャラクター“パンダ”１５２５）の画像への画像処理の入出力特性を、下段に示す入出力特性にように調整する。

　すなわち、映像制御部１１６０は、オブジェクト（キャラクター“パンダ”１５２５）の画像について、入力画像の画素について低輝度領域の画素の輝度値を増加させた出力画素に変換する特性を有する、入出力特性の画像処理を施す。オブジェクト（キャラクター“パンダ”１５２５）の画像は、当該入出力特性の画像処理を施されたのちに、オブジェクト（キャラクター“パンダ”１５２５）の画像を含む映像が表示装置１に入力され、表示されることとなる。すると、空間浮遊映像３の表示状態は、図１３Ｂ（２）上段に示すように、キャラクター“パンダ”１５２５の画像における黒を描画する画素領域の輝度が増加する。これにより、キャラクター“パンダ”１５２５の画像を描画する領域のうち、黒を描画する領域についても、背景の黒に溶け込ませず区別してユーザに認識させることができ、オブジェクトをより好適に表示することが可能となる。

　すなわち、図１３Ｂ（２）の画像処理を用いることにより、オブジェクトであるキャラクター“パンダ”１５２５の画像を表示する領域が、窓を介した空間浮遊映像表示装置１０００の筐体内部である背景の黒と区別して認識できるようになり、当該オブジェクトの視認性が改善する。よって、例えば、前記画像処理前（すなわち、前記オブジェクトの画像やこれに対応するデータを図３のストレージ部１１７０やメモリ１１０９から読み出した時点、または、前記オブジェクトの画像を映像信号入力部１１３１から入力した時点、または、通信部１１３２を介して前記オブジェクトのデータを取得した時点、など。）において、オブジェクトを構成する画素に輝度の値が０の画素が含まれているオブジェクトであっても、映像制御部１１６０による当該入出力特性の画像処理により、低輝度領域の画素の輝度値を大きくしたオブジェクトに変換されたのち、表示装置１に表示され、空間浮遊映像表示装置１０００の光学システムによって、空間浮遊映像３に変換されることとなる。

　すなわち、当該入出力特性の画像処理後のオブジェクトを構成する画素には、輝度の値が０の画素は含まれない状態に変換されたのち、表示装置１に表示され、空間浮遊映像表示装置１０００の光学システムによって、空間浮遊映像３に変換されることとなる。

　なお、図１３Ｂ（２）の画像処理において、オブジェクト（キャラクター“パンダ”１５２５）の画像の領域のみ、図１３Ｂ（２）の入出力特性の画像処理を施す方法としては、例えば、映像制御部１１６０の画像処理において、背景画像レイヤーと、背景画像レイヤーの前面にあるキャラクター画像のレイヤーを別のレイヤーとして処理できるように構成しておき、キャラクター画像のレイヤーに図１３Ｂ（２）の入出力特性の画像処理を施し、背景画像レイヤーには当該画像処理を行わないようにする。

　その後、これらのレイヤーを合成すれば、図１３Ｂ（２）に示すように、キャラクター画像のみ、入力画像の低輝度領域を持ち上げる特性の画像処理が施されることとなる。また、別の方法としては、キャラクター画像のレイヤーと背景画像レイヤーが合成されたのちに、キャラクター画像の領域にのみ、図１３Ｂ（２）の入出力特性の画像処理を施すように構成してもよい。

　また、入力映像に対する入出力特性の低輝度領域を持ち上げる映像処理で用いる入出力映像特性は、図１３Ｂ（２）の例に限られない。低輝度を持ち上げる映像処理であれば何でもよく、いわゆるブライト調整でもよい。または、国際公開２０１４／１６２５３３号に開示されるような、レティネックス処理の重みづけを変える利得を制御することで、視認性を向上する映像処理を行ってもよい。

　以上説明した、図１３Ｂ（２）の画像処理によれば、キャラクターやオブジェクトなどの画像を描画する領域のうち黒を描画する領域について、背景の黒に溶け込ませずユーザに認識させることができ、より好適な表示を実現することが可能となる。

　なお、図１３Ａ，図１３Ｂの例では、背景が黒に見える空間浮遊映像表示装置（例えば、図４Ａ～Ｇの空間浮遊映像表示装置１０００や、図４Ｉ、図４Ｊで背面側窓を遮光している状態の空間浮遊映像表示装置１０００など）を例に、その課題とより好適な画像処理について説明した。しかしながら、当該画像処理は、これらの空間浮遊映像表示装置以外の装置においても有効である。

　具体的には、図４Ｈの空間浮遊映像表示装置１０００や、図４Ｉ、図４Ｊで背面側窓を遮光していない状態の空間浮遊映像表示装置１０００では、空間浮遊映像３の背景は黒ではなく、窓を介した空間浮遊映像表示装置１０００の後ろ側の景色となる。この場合も、図１３Ａおよび図１３Ｂで説明した課題は同様に存在する。

　すなわち、オブジェクトであるキャラクター“パンダ”１５２５の画像のうち黒を描画する部分は、窓を介した空間浮遊映像表示装置１０００の後ろ側の景色に溶け込んでしまうこととなる。この場合も、図１３Ｂ（２）の画像処理を用いることにより、オブジェクトであるキャラクター“パンダ”１５２５の画像のうち黒を描画する部分が、窓を介した空間浮遊映像表示装置１０００の後ろ側の景色と区別して認識できるようになり、当該オブジェクトの視認性が改善する。

　すなわち、図１３Ｂ（２）の画像処理を用いることにより、オブジェクトであるキャラクター“パンダ”１５２５の画像を表示する領域が、窓を介した空間浮遊映像表示装置１０００の後ろ側の景色と区別して認識でき、当該オブジェクトであるキャラクター“パンダ”１５２５が前記景色の前面にあることがより好適に認識できるようになり、当該オブジェクトの視認性が改善する。

　また、図４Ｋ、図４Ｌ、図４Ｍの空間浮遊映像表示装置１０００において、上述のとおり、空間浮遊映像３とは奥行の異なる位置に別の映像（透過型自発光映像表示装置１６５０の映像、または第２の表示装置１６８０の映像、など）が表示されている場合は、空間浮遊映像３の背景は黒ではなく、当該別の映像となる。この場合も、図１３Ａおよび図１３Ｂで説明した課題は同様に存在する。

　すなわち、オブジェクトであるキャラクター“パンダ”１５２５の画像のうち黒を描画する部分は、空間浮遊映像３とは奥行の異なる位置に表示されている前記別の映像に溶け込んでしまうこととなる。この場合も、図１３Ｂ（２）の画像処理を用いることにより、オブジェクトであるキャラクター“パンダ”１５２５の画像のうち黒を描画する部分が、前記別の映像と区別して認識できるようになり、当該オブジェクトの視認性が改善する。

　すなわち、図１３Ｂ（２）の画像処理を用いることにより、オブジェクトであるキャラクター“パンダ”１５２５の画像を表示する領域が、前記別の映像と区別して認識でき、当該オブジェクトであるキャラクター“パンダ”１５２５が前記別の映像の前面にあることがより好適に認識できるようになり、当該オブジェクトの視認性が改善する。

　本実施例の映像表示処理の一例について、図１３Ｃを用いて説明する。図１３Ｃは、本実施例の映像表示の例のうち、空間浮遊映像３と、別の映像である第２の画像２０５０を同時に表示する映像表示例である。第２の画像２０５０は、図４Ｋまたは図４Ｌの透過型自発光映像表示装置１６５０の表示映像に対応してもよい。また、第２の画像２０５０は、図４Ｍの第２の表示装置１６８０の表示映像に対応してもよい。

　すなわち、図１３Ｃの映像表示の一例は、図４Ｋ、図４Ｌ、図４Ｍの空間浮遊映像表示装置１０００の映像表示例の具体例の一例を示したものである。本図の例では、空間浮遊映像３にはクマのキャラクターが表示されている。空間浮遊映像３でのクマのキャラクター以外の領域は黒表示であり、空間浮遊映像としては透明になる。また、第２の画像２０５０は、平原と山と太陽が描画された背景画像である。

　ここで、図１３Ｃにおいて、空間浮遊映像３と、第２の画像２０５０は、奥行の異なる位置に表示されている。ユーザ２３０が矢印２０４０の視線方向で空間浮遊映像３と第２の画像２０５０の２つの映像を視認することにより、ユーザ２３０は、この２つの映像が重なった状態で映像を視認することができる。具体的には、第２の画像２０５０に描画される平原と山と太陽の背景の手前に、空間浮遊映像３のクマのキャラクターが重畳して見えることとなる。

　ここで、空間浮遊映像３は空中に実像として結像しているため、ユーザ２３０が少し視点を動かすと、視差により空間浮遊映像３と第２の画像２０５０の奥行を認識することができる。よって、ユーザ２３０は、２つの映像を重なった状態で視認しながら、空間浮遊映像３についてより強い空間浮遊感を得ることが可能となる。

　本実施例の映像表示処理の一例について図１３Ｄを用いて説明する。図１３Ｄ（１）は、図１３Ｃの本実施例の映像表示の例のうち、空間浮遊映像３をユーザ２３０の視線方向から見た図である。ここで、空間浮遊映像３には、クマのキャラクターが表示されている。空間浮遊映像３でのクマのキャラクター以外の領域は黒表示であり、空間浮遊映像としては透明になる。

　図１３Ｄ（２）は、図１３Ｃの本実施例の映像表示の例のうち、第２の画像２０５０をユーザ２３０の視線方向から見た図である。本図の例では、第２の画像２０５０は、平原と山と太陽が描画された背景画像である。

　図１３Ｄ（３）は、図１３Ｃの本実施例の映像表示の例のうち、ユーザ２３０の視線方向において、第２の画像２０５０と空間浮遊映像３とが重畳して見える状態を示した図である。具体的には、第２の画像２０５０に描画される平原と山と太陽の背景の手前に、空間浮遊映像３のクマのキャラクターが重畳して見えることとなる。

　ここで、空間浮遊映像３と第２の画像２０５０とを同時に表示する場合に、空間浮遊映像３の視認性をより好適に確保するためには、両者の映像の明るさのバランスに留意することが望ましい。空間浮遊映像３の明るさに対して、第２の画像２０５０が明る過ぎれば、空間浮遊映像３の表示映像が透けてしまい、背景である第２の画像２０５０が透過して強く視認されるようになる。

　よって、少なくとも、空間浮遊映像３の表示位置における空間浮遊映像３の単位面積当たりの明るさが、第２の画像２０５０から空間浮遊映像３の表示位置に到達する映像光の単位面積当たりの明るさよりも大きくなるように、空間浮遊映像３の光源の出力および表示装置１の表示映像輝度、第２の画像２０５０を表示する表示装置の光源の出力および当該表示装置の表示映像輝度を設定すればよい。

　なお、空間浮遊映像３と第２の画像２０５０とを同時に表示する場合にこの条件を満たせばよいので、空間浮遊映像３を表示せず第２の画像２０５０のみを表示している第１の表示モードから、空間浮遊映像３と第２の画像２０５０とを同時に表示する第２の表示モードに切り替える場合に、第２の画像２０５０を表示する表示装置の光源の出力および／または当該表示装置の表示映像輝度を下げることにより、第２の画像２０５０の明るさを低減する制御を行ってもよい。これらの制御は、図３の制御部１１１０が表示装置１および第２の画像２０５０を表示する表示装置（図４Ｋまたは図４Ｌの透過型自発光映像表示装置１６５０または図４Ｍの第２の表示装置１６８０）を制御することにより実現すればよい。

　なお、上述の第１の表示モードから上述の第２の表示モードへの切り替えにおいて、第２の画像２０５０の明るさを低減する制御を行う場合、第２の画像２０５０の画面全体に対して均一に明るさを低減してもよい。または、第２の画像２０５０の画面全体に対して均一に明るさを低減せずに、空間浮遊映像３にオブジェクトが表示されている部分を最も明るさ低減効果が高い状態とし、その周辺は段階的に明るさ低減効果を緩めてもよい。すなわち、空間浮遊映像３が第２の画像２０５０に重畳されて視認される部分のみ、第２の画像２０５０の明るさ低減を実現すれば、空間浮遊映像３の視認性確保は十分であるからである。

　ここで、空間浮遊映像３と、第２の画像２０５０は奥行の異なる位置に表示されているので、ユーザ２３０が少し視点を変えると、視差により、第２の画像２０５０に対する空間浮遊映像３の重畳位置は変化する。よって、上述の第１の表示モードから上述の第２の表示モードへの切り替えにおいて、第２の画像２０５０の画面全体に対して不均一に明るさを低減する場合は、空間浮遊映像３に表示されているオブジェクトの輪郭に基づいてシャープに明るさを低減することは望ましくなく、上述のように位置によって段階的に明るさ低減効果を変えていく、明るさ低減効果のグラデーション処理を行うことが望ましい。

　なお、空間浮遊映像３に表示されるオブジェクトの位置がほぼ空間浮遊映像３の中央である空間浮遊映像表示装置１０００においては、当該明るさ低減効果のグラデーション処理の最も明るさ低減効果が高い位置は、空間浮遊映像３の中央の位置にすればよい。

　以上説明した、本実施例の映像表示処理によれば、ユーザ２３０は空間浮遊映像３と第２の画像２０５０をより好適に視認できる。

　なお、空間浮遊映像３を表示する場合は第２の画像２０５０の表示を行わないように制御してもよい。第２の画像２０５０の表示を行わない方が空間浮遊映像３の視認性は高まるので、空間浮遊映像３の表示時は空間浮遊映像３をユーザが確実に視認しなければならない用途の空間浮遊映像表示装置１０００などに好適である。

　＜実施例２＞
　本発明の実施例２として、空間浮遊映像表示装置の別の構成例の一例について説明する。なお、本実施例に係る空間浮遊映像表示装置は実施例１で説明した、空間浮遊映像表示装置に格納される光学システムを、図１４（１）または図１４（２）に示す光学システムに変更したものである。本実施例では、実施例１との相違点を説明し、実施例１と同様の構成については、繰り返しの説明は省略する。なお、本実施例の以降の説明において、所定の偏光と他方の偏光とは、互いに位相が９０°異なる偏波の偏光である。

　図１４（１）は、本実施例にかかる光学システムおよび光路の一例である。図１４（１）に示す光学システムは、図２Ｃの光学システムにおいて、表示装置１を偏光分離部材１０１Ｂにより近づけて、光学システム全体をよりコンパクトに構成したものである。図１４（１）において、図２Ｃと同一の符号を付した構成については、繰り返しの詳細な説明は省略する。

　図１４（１）では、図２Ｃと同様、表示装置１から出射した所定の偏光（図ではＰ偏光）の映像光が、表示装置１の映像表示面から垂直方向に進行する。ここで、偏光分離部材１０１Ｂは、図２Ｃ同様に、表示装置１から出射した所定の偏光（図ではＰ偏光）を選択的に透過させ、他方の偏光（図ではＳ偏光）を反射する。

　よって、表示装置１の映像表示面から垂直方向に進行した所定の偏光（図ではＰ偏光）の映像光は、偏光分離部材１０１Ｂを透過し、λ／４板２１が貼り付けられた再帰反射板２に到達する。再帰反射板２で再帰性反射され、再び偏光分離部材１０１Ｂに向かって進行する映像光は、λ／４板２１を２回透過したことにより、表示装置１から出射時の所定の偏光（図ではＰ偏光）から他方の偏光（図ではＳ偏光）へと変換されている。再び偏光分離部材１０１Ｂに向かって進行した映像光は、他方の偏光（図ではＳ偏光）であるので、偏光分離部材１０１Ｂでユーザがいるべき位置に向かって反射される。偏光分離部材１０１Ｂで反射された映像の進行方向は、偏光分離部材１０１Ｂが配置される角度に基づいて定まる。

　図１４（１）の例では、偏光分離部材１０１Ｂに向かって進行した映像光は、偏光分離部材１０１Ｂで直角に反射して図のように進行する。偏光分離部材１０１Ｂで反射された映像光は空間浮遊映像３Ａを形成する。空間浮遊映像３Ａは、ユーザによって、矢印Ａの方向から好適に視認できる。

　ここで、再帰反射板２による再帰性反射の特性上、表示装置１から出射した映像光が再帰反射板２に到達するまでの光路長と、再帰反射板２から出射した映像光が空間浮遊映像３Ａの形成位置に到達するまでの光路長とが、等しくなる関係にある。これの関係により、偏光分離部材１０１Ｂで反射された映像光の進行方向における空間浮遊映像３Ａの形成位置が定まる。

　図１４（１）の例では、表示装置１、偏光分離部材１０１Ｂ、および再帰反射板２を、図２Ｃの例よりも近づくように配置している。これにより、光学システム全体をよりコンパクトに構成することを実現している。しかしながら、図１４（１）の光学システムから空間浮遊映像３Ａが飛び出す量はさほど大きくない。例えば、光学システムから空間浮遊映像３Ａが飛び出す量の一つの指標として、映像光の中心部分の光線が、偏光分離部材１０１Ｂで反射された位置から映像光が空間浮遊映像３Ａを形成する位置までの距離を図に示している（図１４（１）の例ではＬ１）。

　なお、図１４（１）の光学システムにおける偏光設計について、Ｐ偏光とＳ偏光の特性を入れ替えてもよい。具体的には、表示装置１から出射した映像光の所定の偏光をＳ偏光とし、偏光分離部材１０１Ｂの反射特性について、Ｐ偏光とＳ偏光の特性を入れ替えてもよい。この場合、図示される、Ｐ偏光とＳ偏光はいずれも逆になるが、光路などの光学設計は、まったく同様に実現可能である。

　次に、図１４（２）に本実施例にかかる光学システムおよび光路の別の一例を示す。図１４（２）の光学システムは、図１４（１）の光学システム同様のコンパクトさを実現しつつ、光学システムから空間浮遊映像が飛び出す量をより大きくするために、図１４（１）の光学システムにおける構成を変更したものである。図１４（２）において、図１４（１）と同一の符号を付した構成については、繰り返しの詳細な説明は省略する。

　図１４（２）において、図１４（１）同様、表示装置１から出射した所定の偏光（図ではＰ偏光）の映像光が、表示装置１の映像表示面から垂直方向に進行する。ここで、偏光分離部材１０１Ｂの偏光特性は、図１４（１）と配置が９０度異なっている。表示装置１の映像表示面から垂直方向に進行した所定の偏光（図ではＰ偏光）の映像光は、偏光分離部材１０１Ｂを透過する。

　ここで、図１４（１）と異なり、映像光が偏光分離部材１０１Ｂを透過した先には、λ／４板２１が貼り付けられた再帰反射板２ではなく、λ／４板２１Ｂが貼り付けられた鏡面反射板４が配置されている。ここで、鏡面反射板４における反射は鏡面反射（正反射ともよばれる）であり、再帰性反射ではない。

　よって、偏光分離部材１０１Ｂを透過した映像光は、λ／４板２１Ｂが貼り付けられた鏡面反射板４で鏡面反射する。鏡面反射板４で鏡面反射されて再び偏光分離部材１０１Ｂに向かって進行する映像光は、λ／４板２１を２回透過したことにより、表示装置１から出射時の所定の偏光（図ではＰ偏光）から他方の偏光（図ではＳ偏光）へと変換されている。再び偏光分離部材１０１Ｂに向かって進行した映像光は、他方の偏光（図ではＳ偏光）であるので、偏光分離部材１０１Ｂで反射される。

　ここで、図１４（２）における偏光分離部材１０１Ｂの配置の向きは、図１４（１）と異なるため、偏光分離部材１０１Ｂで反射された映像光は、ユーザがいるべき位置とは逆方向に進行する。偏光分離部材１０１Ｂで反射された映像光が進行する先には、λ／４板２１Ｃが貼り付けられた再帰反射板２が配置されている。映像光は、再帰反射板２により再帰性反射される。再帰反射板２で再帰性反射され、再び偏光分離部材１０１Ｂに向かって進行する映像光は、λ／４板２１Ｃを２回透過したことにより、他方の偏光（図ではＳ偏光）から再びの所定の偏光（図ではＰ偏光）へと変換されている。

　再び偏光分離部材１０１Ｂに向かって進行した映像光は、所定の偏光（図ではＰ偏光）であるので、偏光分離部材１０１Ｂを透過し、そのままユーザがいるべき位置に向かって進行する。偏光分離部材１０１Ｂを透過した映像光は空間浮遊映像３Ｂを形成する。空間浮遊映像３Ｂは、ユーザによって、矢印Ａの方向から好適に視認できる。

　ここで、図１４（２）においても、図１４（１）と同様、再帰反射板２による再帰性反射の特性上、表示装置１から出射した映像光が再帰反射板２に到達するまでの光路長と、再帰反射板２から出射した映像光が空間浮遊映像３Ｂの形成位置に到達するまでの光路長とが、等しくなる関係にある。この関係により、偏光分離部材１０１Ｂを透過した映像光の進行方向における空間浮遊映像３Ｂの形成位置が定まる。

　図１４（２）における、表示装置１から出射した映像光が再帰反射板２に到達するまでの光路長は、図１４（１）における、表示装置１から出射した映像光が再帰反射板２に到達するまでの光路長に比べ、長い。図１４（２）の光学システムにおいては、図１４（１）の光学システムには存在しない、偏光分離部材１０１Ｂと鏡面反射板４との間を往復する光路が、表示装置１から出射した映像光が再帰反射板２に到達するまでの光路長に追加されているからである。

　これにより、図１４（２）の光学システムにおける、映像光の中心部分の光線が、偏光分離部材１０１Ｂを透過した位置から映像光が空間浮遊映像３Ｂを形成する位置までの距離（図１４（２）の例ではＬ２）は、図１４（１）の光学システムにおける、映像光の中心部分の光線が、偏光分離部材１０１Ｂで反射された位置から映像光が空間浮遊映像３Ａを形成する位置までの距離（図１４（１）の例ではＬ１）に比べ、格段に長くなる。

　なお、図１４（２）の光学システムにおける偏光設計についても、Ｐ偏光とＳ偏光の特性を入れ替えてもよい。具体的には、表示装置１から出射した映像光の所定の偏光をＳ偏光とし、偏光分離部材１０１Ｂの反射特性について、Ｐ偏光とＳ偏光の特性を入れ替えてもよい。この場合、図示される、Ｐ偏光とＳ偏光はいずれも逆になるが、光路などの光学設計は、まったく同様に実現可能である。

　以上説明した、本発明の実施例２における、図１４（１）および図１４（２）の光学システムによれば、よりコンパクトな光学システムを実現できる。特に、図１４（２）の光学システムによれば、よりコンパクトな光学システムでありながら、光学システムから空間浮遊映像が飛び出す量をより大きくすることが可能となる。

　なお、図１４（１）または図１４（２）の光学システムを、空間浮遊映像表示装置に組み込む場合には、実施例１で説明した空間浮遊映像表示装置における光学システムを、図１４（１）または図１４（２）の光学システムへ置き換えれば実現できる。具体的には、図１４（１）の光学システムを、図４Ｅ、図４Ｆ、図４Ｇ、図４Ｈ、図４Ｉ、図４Ｊ、図４Ｋ、図４Ｌ、または図４Ｍの空間浮遊映像表示装置の光学システムと置き換えてもよい。この場合、光学システムがコンパクトになるので、各図の空間浮遊映像表示装置の筐体をより小さくすることが可能である。

　また、具体的には、図１４（２）の光学システムを、図４Ｅ、図４Ｆ、図４Ｇ、図４Ｋ、または図４Ｌの空間浮遊映像表示装置の光学システムと置き換えてもよい。この場合、光学システムから空間浮遊映像が飛び出す量をより大きくすることが可能となる。また、光学システムがコンパクトになるので、各図の空間浮遊映像表示装置の筐体をより小さくすることが可能である。

　＜実施例３＞
　本発明の実施例３として、空間浮遊映像表示装置の構成例を説明する。実施例３の空間浮遊映像表示装置は、基本構成としては、実施例１や実施例２の構成を同様に適用できる。実施例３の空間浮遊映像表示装置は、光学システムの構成としては例えば図２Ａ等をベースとし、筐体、言い換えると本体の構成としては例えば図４Ａをベースとして適用できる。また、実施例３は、空間浮遊映像表示装置と、それに接続される外部機器などとを有するシステム（空間浮遊映像表示システム等と記載する場合がある）である。外部機器は、例えばユーザの所持するスマートフォンやタブレットやウェアラブル端末（スマートウォッチ等）などの携帯端末がある。携帯端末は、モバイル情報処理端末装置と称してもよい。

　実施例３の空間浮遊映像表示装置・システムにおいて実現される基本的な機能などとして以下を有する。この空間浮遊映像表示システムは、空間浮遊映像表示装置と、ユーザの携帯端末とを、通信で接続して連携する。このシステムは、ユーザが有している画像／映像、例えば携帯端末内にありユーザが携帯端末の画面に表示している画像（対象画像等と記載する場合がある）を、空間浮遊映像表示装置に空間浮遊映像３として表示させる機能を有する。そのために、ユーザは、その携帯端末を、空間浮遊映像表示装置の空間浮遊映像３（それに対応する所定の結像位置、表示範囲）に接触させるように操作／動作を行う。この操作／動作は、予め決められた操作／動作であり、挿入操作／接触操作などと記載する場合がある。空間浮遊映像表示装置は、その接触操作を、センサ等を用いて判定・検知する。本実施例では、例えばユーザの入力操作に基づいて携帯端末が表示要求を発信しながら、ユーザが携帯端末を空間浮遊映像３の平面の位置に対し挿入・接触させるように接触操作を行う。

　空間浮遊映像表示装置または携帯端末は、その接触操作に基づいて、携帯端末側の対象画像を空間浮遊映像３として表示させるための表示要求／表示指示を発生させる。言い換えると、空間浮遊映像表示装置／携帯端末は、携帯端末と空間浮遊映像３との接触に関する所定の条件を満たした、所定の接触操作がされた、と判定した場合に、そのような表示要求／表示指示を発生させる。空間浮遊映像表示装置の特に図３の映像制御部１１６０は、その表示要求を受領し、携帯端末側から対象画像のデータを通信によって受信・取得する。そして、空間浮遊映像表示装置は、その対象画像を空間浮遊映像３として表示させるように、表示装置１の映像処理を実行する。

　本機能は、以下のような機能としてもよい。ユーザの携帯端末が、上記接触操作とともに、言い換えると接触の直前、途中、あるいは直後に、上記表示要求を発信する。空間浮遊映像表示装置は、上記接触操作に基づいて、携帯端末からの表示要求を受領、許可／有効化し、上記と同様に、対象画像を空間浮遊映像３として表示させる処理を実行する。当該表示要求は、対象画像のデータの送信とセットでもよい。本機能は、表示要求を空間浮遊映像表示装置が発生させるか携帯端末が発生させるかに違いがあるが、いずれであっても、所定の接触操作を契機として自動的に対象画像を空間浮遊映像３として表示させることについては同様である。

　本機能は、以下のような機能としてもよい。最初、携帯端末は、表示要求を発信せず、ユーザは、携帯端末を空間浮遊映像３に接触させる。空間浮遊映像表示装置は、所定の接触操作を判定・検知した場合、その携帯端末に、通信で、表示要求を受け入れる旨、言い換えると本機能による画像表示が可能である旨の、確認などの情報を送信する。携帯端末は、その確認などの情報を受信すると、対象画像のデータを空間浮遊映像表示装置に送信する。対象画像のデータは表示要求を伴ってもよい。空間浮遊映像表示装置は、その対象画像のデータを受信すると、対象画像を空間浮遊映像３として表示させる。

　［空間浮遊映像表示システム］
　図１５は、実施例３の空間浮遊映像表示システムであるシステム３０００の構成を示す。このシステム３０００は、空間浮遊映像表示装置１０００と、ユーザ２３０の携帯端末２０００とが、ＬＡＮ３０２０および/またはインターネット３０１０等の通信網を介して接続されるシステムである。図１５では、空間浮遊映像表示装置１０００の筐体１１９０言い換えると本体、空間浮遊映像３、通信部１１３２（図３）の一部を模式で図示している。筐体１１９０には前述の図３のような各構成要素が実装されている。なお、図３の制御部１１１０や通信部１１３２などが、筐体１１９０内に実装されてもよいし、筐体１１９０外に実装されてもよい。筐体１１９０外に、撮像部１１８０のカメラ、空中操作検出センサ１３５１、マイクやスピーカー等が設置されていてもよい。

　本システム３０００は、携帯端末２０００と空間浮遊映像表示装置１０００との間で、任意の通信インタフェースで通信を行う。携帯端末２０００と空間浮遊映像表示装置１０００とが直接的に通信接続、例えば近距離無線通信してもよいし、携帯端末２０００と空間浮遊映像表示装置１０００との間にインターネット３０１０等を介在して通信接続してもよい。なお、本システム３０００では、携帯端末２０００と空間浮遊映像表示装置１０００との間で、画像データ等を授受するので、ある程度の通信速度が必要である。そのため、図１５の例では、携帯端末２０００と空間浮遊映像表示装置１０００とがＬＡＮ３０２０で接続されている。すなわち、携帯端末２０００と空間浮遊映像表示装置１０００は、ルータ等を介して、同一のネットワークに接続され、ＩＰアドレス等を用いて互いに識別等ができるように設定される。これに限らず、ミラーリング等による通信とすることも可能である。

　携帯端末２０００は、アプリケーション２０１０や画像２０２０を有している。アプリケーション２０１０は、例えば携帯端末２０００のディスプレイの画面に画像２０２０等を表示する任意のアプリケーションプログラムである。アプリケーション２０１０は、一般的なＯＳやアプリでもよいし、実施例３のシステム３０００の空間浮遊映像表示装置１０００と連携・通信等をするための専用アプリケーションとしてもよい。アプリケーション２０１０のデータは、空間浮遊映像表示装置１０００から配信されてもよいし、インターネット３０１０上のサーバ等から配信されてもよい。画像２０２０は、対象画像となる画像データである。画像２０２０は、インターネット３０１０上のサーバ等に保持されていてもよいし、空間浮遊映像表示装置１０００から配信されてもよい。画像２０２０は、静止画でも動画でもよい。画像２０２０は、プログラム等の形式のデータでもよい。

　携帯端末２０００のアプリケーション２０１０は、対象画像（画像２０２０）を空間浮遊映像３として表示させるための表示要求２０３０を作成して、空間浮遊映像表示装置１０００に送信してもよい。

　図１６は、実施例３の空間浮遊映像表示システムの機能などの概要を示す。（１）．まず、ユーザ２３０は、自分の携帯端末２０００に対象画像１６０１などを有している。対象画像１６０１は、空間浮遊映像３として表示させる対象となる画像である。

　（２）．ユーザ２３０は、携帯端末２０００を、空間浮遊映像表示装置１０００の空間浮遊映像３の表示範囲３Ｒに対し、挿入して接触させる接触操作１６００を行う。この際、携帯端末２０００は、表示要求２０３０を発信してもよい。表示要求２０３０は、対象画像１６０１を空間浮遊映像３として表示させるための要求や指示である。

　（３）．空間浮遊映像表示装置１０００は、接触操作１６００を検知すると、携帯端末２０００の対象画像１６０１を、空間浮遊映像３である画像１６０２として表示させる。この際、空間浮遊映像表示装置１０００は、表示要求２０３０を受領し、表示要求２０３０に基づいて携帯端末２０００の対象画像１６０１を取得してもよい。空間浮遊映像表示装置１０００は、表示要求２０３０に対する何らかの応答を携帯端末２０００へ送信してもよい。

　図１７は、携帯端末２０００の構成例を示す。携帯端末２０００は、筐体２０９０に、制御部２００１１、表示パネル２００１２、外部電源入力ＩＦ（インタフェース）２００１３、電源２００１４、二次電池２００１５、ストレージ部２００１６、映像制御部２００１７、姿勢センサ２００１８、操作入力部２００１９、通信部（アンテナを含む）２００２０、音声出力部（スピーカーを含む）２００２１、音声入力部（マイクを含む）２００２２、映像信号入力部２００２３、音声信号入力部２００２４、撮像部２００２５、メモリ２００２６、不揮発性メモリ２００２７等を備える。これらの構成要素はバス等のアーキテクチャで接続されている。

　制御部２００１１は、携帯端末２０００の全体および各部を制御するプロセッサ等を有する。制御部２００１１は、不揮発性メモリ２００２７またはストレージ部２００１６に格納されたプログラム等のデータをメモリ２００２６に展開して、プログラムに従った処理を実行する。これにより、各種の機能が実現される。制御部２００１１は、メモリ２００２６に記憶されるプログラムと協働して、携帯端末２０００内の各部から取得した情報に基づく演算処理を行ってもよい。図１５のアプリケーション２０１０は、例えば、制御部２００１１または映像制御部２００１７により実行される。

　メモリ２００２６は、表示パネル２００１２に表示するための映像データや携帯端末２０００の制御用データ等を記憶する。制御部２００１１がストレージ部２００１６等から各種ソフトウェアのプログラムを読み出して、メモリ２００２６に展開して記憶してもよい。不揮発性メモリ２００２７やストレージ部２００１６は、携帯端末２０００で用いる各種データや各種情報を保持する。不揮発性メモリ２００２７やストレージ部２００１６に格納されるデータ・情報には、例えば、表示パネル２００１２に表示するための各種操作用のデータ、表示アイコン、ユーザ２３０が操作するためのオブジェクトのデータやレイアウト情報等が含まれる。

　表示パネル２００１２は、表示部であり、例えばタッチパネルであり、表示手段であるとともにタッチ操作入力を受け付ける入力手段である。表示パネル２００１２の画面には画像等が表示される。表示パネル２００１２にはタッチセンサを備えており、ユーザ２３０の指などによるタッチ操作入力を受け付ける。表示パネル２００１２は、液晶パネルや有機ＥＬパネル等を適用できる。

　通信部２００２０は、各種の通信インタフェースが実装されたデバイスである。通信部２００２０は、通信インタフェース／通信方式として、例えば、４Ｇや５Ｇなどの移動体通信インタフェースや、Ｗｉ―Ｆｉ（登録商標）等の無線ＬＡＮ通信インタフェースや、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＮＦＣ等の近距離通信インタフェースなどが実装されている。携帯端末２０００の通信部２００２０は、これらの通信方式を用いて、空間浮遊映像表示装置１０００の通信部１１３２（図３）との間で、通信可能である。同様に、空間浮遊映像表示装置１０００からみれば、通信部１１３２は、それらの通信インタフェース／通信方式が実装されている。通信部２００２０は、いずれかの通信方式により、インターネット３０１０に接続された通信装置、例えば無線基地局などと通信可能である。これにより、携帯端末２０００は、インターネット３０１０に接続されたサーバ等と通信可能である。

　電源２００１４は、外部から外部電源入力ＩＦ（インタフェース）２００１３を介して入力されるＡＣ電流をＤＣ電流に変換し、携帯端末２０００の各部にそれぞれ必要なＤＣ電流を供給する。二次電池２００１５は、電源２００１４から供給される電力を蓄電する。二次電池２００１５は、外部電源入力ＩＦ２００１３を介して外部から電力が供給されない場合に、電力を必要とする各部に対して電力を供給する。

　映像信号入力部２００２３は、外部の映像出力装置を接続して映像データを入力する。映像信号入力部２００２３は、様々なデジタル映像入力インタフェースが適用できる。例えば、ＨＤＭＩ（登録商標）（High―Definition Multimedia Interface）規格の映像入力インタフェース、ＤＶＩ（Digital Visual Interface）規格の映像入力インタフェース、または、ＤｉｓｐｌａｙＰｏｒｔ規格の映像入力インタフェース等が適用できる。または、アナログＲＧＢや、コンポジットビデオなどのアナログ映像入力インタフェースを設けてもよい。映像信号入力部２００２３は、各種ＵＳＢインタフェースなどでもよい。

　音声信号入力部２００２４は、外部の音声出力装置を接続して音声データを入力する。音声信号入力部２００２４は、ＨＤＭＩ規格の音声入力インタフェース、光デジタル端子インタフェース、または、同軸デジタル端子インタフェースなどが適用できる。音声信号入力部２００２４は、各種ＵＳＢインタフェースなどでもよい。ＨＤＭＩ規格のインタフェースの場合は、映像信号入力部２００２３と音声信号入力部２００２４とは、端子およびケーブルが一体化したインタフェースとして構成されてもよい。

　音声出力部２００２１は、音声信号入力部２００２４に入力された音声データや、ストレージ部２００１６に格納されている音声データに基づいた音声を出力可能である。音声出力部２００２１は、スピーカーで構成してもよいし、イヤホン端子を有してもよい。また、音声出力部２００２１は、内蔵の操作音やエラー警告音を出力してもよい。音声出力部２００２１は、ＨＤＭＩ規格に規定されるAudio Return Channel機能のように、外部機器にデジタル信号として出力する構成を適用してもよい。

　マイクを含む音声入力部２００２２は、携帯端末２０００の周辺の音を収音し、信号に変換して音声信号を生成する。音声入力部２００２２は、ユーザ２３０の声などの人物の声をマイクが収録して音声信号を生成し、制御部２００１１等がその音声信号から音声認識処理を行って文字情報を取得するようにしてもよい。

　撮像部２００２５は、例えばイメージセンサを有するカメラである。携帯端末２０００は、例えば筐体２０９０における表示パネル２００１２側である前面にカメラ（インカメラ）を設けてもよいし、反対の背面にカメラ（アウトカメラ）を設けてもよい。本実施例では、撮像部２００２５は、インカメラとアウトカメラとの両方を有する。

　ストレージ部２００１６は、映像データ、画像データ、音声データ等の各種データやプログラム等の各種情報を記録する記憶装置である。ストレージ部２００１６は、例えばハードディスクドライブ（ＨＤＤ）などの磁気記録媒体記録装置や、ソリッドステートドライブ（ＳＳＤ）などの半導体素子メモリで構成してもよい。ストレージ部２００１６には、例えば、製品出荷時に予め映像データ、画像データ、音声データ等の各種データやプログラム等の各種情報が記録されていてもよい。また、ストレージ部２００１６は、通信部２００２０を介して外部のサーバ等から取得された各種データや各種情報を記録してもよい。ストレージ部２００１６に記録された画像データ等は、映像制御部２００１７による処理を介して、表示パネル２００１２に出力・表示される。携帯端末２０００は、ストレージ部２００１６に記録された各種データや情報を、通信部２００２０を介して、外部のサーバ等に出力・送信してもよい。

　映像制御部２００１７は、表示パネル２００１２に入力する映像信号に関する各種制御を行う。映像制御部２００１７は、映像処理回路、映像処理部、画像処理部などと称してもよい。映像制御部２００１７は、例えば、ＡＳＩＣ、ＦＰＧＡ、映像用プロセッサなどのハードウェアで構成されてもよい。映像制御部２００１７は、例えば、メモリ２００２６等に記憶させる映像信号や、映像信号入力部２００２３に入力された映像信号（映像データ）等のうち、どの映像信号を表示パネル２００１１に入力して表示させるかといった映像切り替え制御等を行う。また、映像制御部２００１７は、映像信号入力部２００２３から入力された映像信号やメモリ２００２６に記憶させる映像信号等に対し画像処理を行う制御を行ってもよい。画像処理としては、例えば、画像の拡大、縮小、変形等を行うスケーリング処理、輝度を変更するブライト調整処理、画像のコントラストカーブを変更するコントラスト調整処理、画像を光の成分に分解して成分ごとの重みづけを変更するレティネックス処理等がある。映像制御部２００１７は、表示パネル２００１２に入力するための映像データを保持するビデオメモリ等を備えてもよい。

　姿勢センサ２００１８は、ジャイロセンサ、重力センサ、加速度センサ、地磁気センサなどの組み合わせにより構成されるセンサであり、携帯端末２０００の姿勢を検出できる。姿勢は、例えば空間における直交する３軸（Ｘ，Ｙ，Ｚ）の方向、角度で表現できる。姿勢センサ２００１８の姿勢検出結果に基づいて、制御部２００１１が、各部の動作を制御してもよい。そのほか、携帯端末２０００は、ＧＰＳ受信器、近接センサ、照度センサ、測距センサなどを備えてもよい。

　操作入力部２００１９は、ユーザ２３０が操作入力するためのデバイスであり、例えば電源ボタンや音量ボタンなどがある。

　［映像表示方法］
　図１８（図１８Ａ等）は、実施例３のシステム３０００における空間浮遊映像表示装置１０００と携帯端末２０００との連携による映像表示方法についての説明図である。図１８Ａ等では、ユーザ２３０が携帯端末２０００を空間浮遊映像表示装置１０００の空間浮遊映像３の表示範囲３Ｒに接触させることにより、携帯端末２０００から空間浮遊映像表示装置１０００へ表示要求２０３０を行う様子を示している。図１８Ａは斜視図であり、図１８Ｂは上方から見た上面図（ＸＹ平面図）であり、図１８Ｃは、横から見た側面図（ＹＺ平面図）であり、図１８Ｄは、装置正面から見た正面図（ＸＺ平面図）である。

　図１８Ａで、筐体１１９０の上面には、開口部１２００を有し、開口部１２００には、例えば図２Ａと同様に、透明部材１００（例えばガラス板）や偏光分離部材１０１が設けられている。表示範囲３Ｒは、実像である空間浮遊映像３が形成される空間内の所定の位置、平面を表している。図１８Ａでは、空間座標系を（Ｘ，Ｙ，Ｚ）で表している。Ｘ軸・Ｘ方向は、ユーザ２３０（矢印Ａの方向の元にある図示しない視点）から見て左右方向（第１水平方向）である。Ｙ軸・Ｙ方向は、ユーザ２３０から見て前後方向（奥行き方向、第２水平方向）である。Ｚ軸・Ｚ方向は、ユーザ２３０から見て上下方向（鉛直方向）である。また、空間浮遊映像３における座標系を（ｘ，ｙ，ｚ）で示している。ｘ方向は画面水平方向、ｙ方向は画面垂直方向、ｚ方向は奥行き方向である。

　方向１８０１は、ユーザ２３０が接触操作の際に携帯端末２０００を空間浮遊映像３の表示範囲３Ｒに対し挿入する方向（挿入方向）の例を示しており、本例ではＹ方向である。図１８Ａでは、携帯端末２０００と表示範囲３Ｒとが接触する箇所の例を接触箇所１８０２で示している。本例では、接触箇所１８０２は、表示範囲３Ｒのうちの右下付近である。

　図１８の実施例では、携帯端末２０００と表示範囲３Ｒとの接触をもって、携帯端末２０００から空間浮遊映像表示装置１０００への表示要求２０３０が行われる。言い換えると、接触の直前、途中、または直後に、携帯端末２０００から空間浮遊映像表示装置１０００へ表示要求２０３０が発信される。例えば、空間浮遊映像表示装置１０００は、この接触を判定・検知し、この接触を検知すると、携帯端末２０００から送信されている表示要求２０３０を受領する。すなわち、空間浮遊映像表示装置１０００は、その表示要求２０３０に基づいて、対象画像を空間浮遊映像３に表示させることを、許容する。空間浮遊映像表示装置１０００は、その表示要求２０３０に伴う対象画像の画像データを携帯端末２０００から転送によって受信する。空間浮遊映像表示装置１０００は、取得した画像データに基づいて、表示装置１を制御して、空間浮遊映像３として対象画像を表示させる。言い換えると、空間浮遊映像表示装置１０００は、ユーザ２３０が指定した対象画像を、空間浮遊映像に変換して、空間浮遊映像３として表示させる。

　携帯端末２０００から送信される表示要求２０３０は、前述の各種の通信方式で可能であり、詳細を限定しない。本例では、ＬＡＮ３０２０において無線通信で表示要求２０３０が送信されるものとするが、これに限らず、有線接続を用いてもよいし、携帯端末２０００と空間浮遊映像表示装置１０００とが赤外線通信などで接続されてもよい。

　携帯端末２０００と表示範囲３Ｒとの接触の判定・検知は、後述するが、空中操作検出センサ１３５１等（図３）によるものや、撮像部１１８０（カメラ）によるものなどが挙げられる。そのほか、当該接触の判定・検知は、筐体１１９０の内外に取り付けられた各種センサ、あるいは携帯端末２０００に有する各種センサ、例えばジャイロセンサを用いて、もしくはこれらを複合的に用いて、行うようにしてもよい。

　上記のように、本システム３０００は、表示範囲３Ｒに対する携帯端末２０００の接触操作の判定・検知を契機として、空間浮遊映像表示装置１０００が携帯端末２０００からの表示要求２０３０を認識し、空間浮遊映像表示装置１０００が空間浮遊映像の対象画像の表示を開始する。上記のように、実施例３での特徴として、空間浮遊映像３の表示範囲３Ｒに携帯端末２０００を接触・配置させるだけで、空間浮遊映像である対象画像を表示させることができる。

　［接触操作］
　図１９（図１９Ａ等）は、携帯端末２０００を空間浮遊映像３の表示範囲３Ｒに接触させる際の、姿勢変化方向などについて示している。携帯端末２０００の姿勢変化方向１９０１は、図示のように様々な方向がある。図１９Ａでは、斜視図で、ピッチ角α、ロール角β、ヨー角γの３軸の回転角度を表している。本実施例では、基本として、接触操作時には、携帯端末２０００の姿勢は任意でよく、すなわち、これらの角度（α，β，γ）の状態がどのような状態であってもよい。これにより、ユーザ２３０による接触操作が簡単となり、利便性が高い。

　図１９Ｂは、ＸＹ平面図であり、接触操作時に、携帯端末２０００の姿勢を、水平面（ＸＹ平面）内で回転させた姿勢とする場合の例を示している。ここでは、説明上、携帯端末２０００の代表的な位置および向きを、図１９Ａのように、筐体の前面、特に表示パネル２００１２における中央の位置Ｐ１、および前面の長辺に沿った向きＲ１（ロール角βの軸と同じ）とする。本例では、接触時の携帯端末２０００の向きＲ１およびそれに対応する挿入方向１８０１は、Ｚ軸（ヨー角γ）の周りに回転しており、Ｙ軸に対し左斜めに傾いた向きとなっている。姿勢変化方向１９０１は、Ｚ軸（ヨー角γ）の周りの回転方向である。表示範囲３Ｒに対しては、携帯端末２０００の筐体の上辺の付近が接触している（接触箇所１８０２）。ユーザ２３０は、例えば右手に持った携帯端末２０００を、表示範囲３Ｒの中央付近に挿入している。

　図１９Ｃは、ＹＺ平面図であり、接触操作時に、携帯端末２０００の姿勢を、ＹＺ平面内で回転させた姿勢とする場合の例を示している。本例では、接触時の携帯端末２０００の向きＲ１およびそれに対応する挿入方向１８０１は、Ｘ軸（ピッチ角α）の周りに回転しており、Ｙ軸に対し斜め下に傾いた向きとなっている。姿勢変化方向１９０１は、Ｘ軸（ピッチ角α）の周りの回転方向である。挿入方向１８０１を表示範囲３Ｒに対し垂直とする場合である。表示範囲３Ｒに対しては、携帯端末２０００の筐体の上辺の付近が接触している（接触箇所１８０２）。

　図１９Ｄは、ＸＺ平面図であり、接触操作時に、携帯端末２０００の姿勢を、ＸＺ平面内で回転させた姿勢とする場合の例を示している。本例では、接触時の携帯端末２０００の向きＲ１およびそれに対応する挿入方向１８０１は、Ｙ軸（ロール角β）の周りに回転しており、筐体の平板が鉛直に立つ向きとなっている。姿勢変化方向１９０１は、Ｙ軸（ロール角β）の周りの回転方向である。

　図１９Ｅは、ＹＺ平面断面図であり、接触操作時の携帯端末２０００の姿勢の別の例を示している。本例は、接触操作時に携帯端末２０００の前面の表示パネル２００１２の画面が下向きとなるようにする場合を示す。図１９Ｅでは、空間浮遊映像表示装置１０００の構成として図４Ａの構成に適用した例を示す。筐体１１９０の上面（ＸＹ平面）の透明部材１００の開口部１２００から、斜め上方向に映像光が出射し、空間浮遊映像３を形成する。空間浮遊映像３の表示範囲３Ｒの平面（ｘｙ平面）は、ＸＹ平面から４５度程度傾いて配置されている。図１９Ｅでは空中操作検出センサ１３５１等の図示は省略している（後述）。

　ユーザ２３０は、接触操作の際に、携帯端末２０００を、画面１９０２を下向き（方向１９０３）にし、表示範囲３Ｒに対し挿入方向１８０１としてＹ方向で奥（正）に挿入する。図１９Ｅでは、携帯端末２０００が表示範囲３Ｒに接触して奥側に通過した状態（携帯端末２０００ｂ）を示している。この状態で、携帯端末２０００ｂの画面１９０２が下向き（方向１９０３）となっている。このような接触操作としてもよい。

　図１９Ｆは、ＹＺ平面断面図であり、接触操作時の携帯端末２０００の姿勢などの別の例を示している。本例は、接触操作時に携帯端末２０００の前面の表示パネル２００１２の画面１９０２が、空間浮遊映像３の表示範囲３Ｒの平面（ｘｙ平面）に沿った向きとなるようにする場合を示す。ユーザ２３０は、携帯端末２０００の画面１９０２を表示範囲３Ｒに対向して重ね合わせるように操作する。図１９Ｆでは、携帯端末２０００の画面１９０２が表示範囲３Ｒに接触した状態が維持されている。

　また、所定の接触操作は、携帯端末２０００が表示範囲３Ｒに接触している時間（接触時間とする）が判定されるものとしてもよい。すなわち、空間浮遊映像表示装置１０００は、接触時間をカウントし、判定条件として、接触時間が一定時間以上となった場合に、所定の接触操作がされたと判定する。

　図２０（図２０Ａ等）は、携帯端末２０００を表示範囲３Ｒに挿入するように接触操作をする際に、挿入前、挿入中、および挿入後を含む各時点で、携帯端末２０００の位置等が、基本的に任意の位置等でもよいことを示す説明図である。表示範囲３Ｒへの携帯端末２０００の挿入は、携帯端末２０００と表示範囲３Ｒとが接触すればよく、言い換えると接触判定が可能であればよく、任意の位置、挿入方向や姿勢角度をとることができる。また、表示範囲３Ｒと携帯端末２０００の接触は、基本的に、表示範囲３Ｒのいずれの箇所で行われてもよい。

　このように、許容する接触操作・動作（対応する判定条件）を広くしておくことで、ユーザ操作が容易になる利点がある。逆に、許容する接触操作・動作（判定条件）を狭くすることも可能である。すなわち、接触操作時（挿入前、挿入中、挿入後など）に許容される携帯端末２０００の位置、姿勢、挿入方向、接触時間、表示範囲３Ｒの接触領域などが限定されるように規定されてもよい。

　図２０Ａは、ＹＺ平面で、挿入前の携帯端末２０００の位置や挿入方向の各例を示している。図２０Ａでは、携帯端末２０００の図示を省略し、携帯端末２０００の位置を点で示している。黒丸点や白丸点（ｐ１等）は、挿入前の携帯端末２０００の位置の例を示す。図示のように、携帯端末２０００が表示範囲３Ｒに接触すれば、様々な位置や挿入方向が可能である。

　図２０Ｂは、ＸＹ平面で、挿入前の携帯端末２０００の位置や挿入方向の各例を示している。挿入前の任意の位置（ｐ１１等）から、表示範囲３Ｒに接触するように、任意の挿入方向で、操作が可能である。また、位置ｐ１４の場合、挿入前に、携帯端末２０００が、表示範囲３Ｒの右側で表示範囲３ＲよりもＹ方向で奥側にあり、挿入方向は、表示範囲３Ｒに対し、奥（＋Ｙ）から前（－Ｙ）への方向、あるいは左右方向となる。このような場合でも、携帯端末２０００が表示範囲３Ｒに接触すれば、接触操作として許容される。

　図２０Ｃは、ＹＺ平面図で、携帯端末２０００が表示範囲３Ｒに接触した時の状態の例を示している。表示範囲３Ｒへの携帯端末２０００の接触は、接触が検知・判定可能であれば、携帯端末２０００の任意の部分の接触でよい。また、表示範囲３Ｒへ携帯端末２０００が一度接触した後（接触操作が検知された後）であれば、携帯端末２０００が表示範囲３Ｒから外れてもよい。

　状態２０００ｃ１は、接触時の携帯端末２０００の状態の例を示し、その時の接触箇所（接触位置）ｃ１は、表示範囲３Ｒ側での中央付近であり、携帯端末２０００側での例えば筐体の上辺付近の一部である。状態２０００ｃ２は、接触時の携帯端末２０００の状態の他の例を示し、その時の接触箇所ｃ２は、表示範囲３Ｒの上部で、例えば筐体の下辺付近の一部である。状態２０００ｃ３は、接触時の携帯端末２０００の状態の他の例を示し、その時の接触箇所ｃ３は、表示範囲３Ｒ側での下部であり、一旦接触した後に、携帯端末２０００が奥側に通過しており、表示範囲３Ｒには触れていない。また、状態２０００ｃ４は、接触した状態２０００ｃ１から、携帯端末２０００がＹ方向で手前側に戻された状態である。

　［変形例：判定条件］
　実施例３では、携帯端末２０００の表示範囲３Ｒへの挿入・接触操作時の姿勢や位置などを任意としたが、これに限定されない。変形例では、携帯端末２０００の挿入・接触操作時の姿勢や位置などを特定の状態に限定してもよい。すなわち、空間浮遊映像表示装置１０００は、携帯端末２０００の接触操作時に、特定の姿勢などの状態を判定・検知し、検知した場合のみ、表示要求２０３０を許容するようにしてもよい。変形例として、許容される所定の接触操作を狭く限定する場合、例えば以下のような判定条件が挙げられる。

　（１）．空間浮遊映像３の表示範囲３Ｒの平面に対し、Ｙ方向で前、すなわちユーザ２３０が空間浮遊映像３を視認する側から奥への方向に挿入する挿入方向のみが許容される。言い換えると、表示範囲３Ｒに対し後ろや横から接触させることは許容されない。また、空間浮遊映像３の表示範囲３Ｒの平面に対し、挿入方向が所定の角度範囲内である場合のみが許容される。

　（２）．携帯端末２０００が表示範囲３Ｒの平面に接触した時の接触箇所、すなわち携帯端末２０００の位置、表示範囲３Ｒ内の領域が、一部に限定される。例えば、表示範囲３Ｒ内の中央の一部、右下の一部、左上の一部など。

　（３）．携帯端末２０００が表示範囲３Ｒの平面に接触した時の、携帯端末２０００の姿勢が、一部の姿勢に限定される。例えば、表示範囲３Ｒの平面に対する角度が所定の角度範囲内であること等。例えば、図１９Ｃのように、表示範囲３Ｒの平面に対し携帯端末２０００の平板状の筐体が概略的に垂直に挿入される場合のみ、許容されるようにしてもよい。また、例えば、図１９Ｆのように、表示範囲３Ｒの平面に対し携帯端末２０００の平板状の筐体が概略的に平行に接触される場合のみ、許容されるようにしてもよい。

　（４）．携帯端末２０００が表示範囲３Ｒの平面に接触した後に、奥側に通過した後の状態における、携帯端末２０００の姿勢や保持時間が限定される。例えば、図１９Ｅの例のように、表示範囲３Ｒまたは開口部１２００の平面に対する姿勢角度が所定の角度範囲内であること等。

　［ガイド表示］
　図２１Ａは、空間浮遊映像３の表示範囲３Ｒへ携帯端末２０００を挿入する接触操作の際に、空間浮遊映像表示システムが、ユーザ２３０に対するその挿入・接触操作に関するガイド情報を表示する例を示す。実施例３では、空間浮遊映像表示装置１０００が、そのガイド情報、言い換えると携帯端末２０００を挿入する箇所や方向などを誘導・案内するための情報、ユーザインタフェース情報を、空間浮遊映像３に表示する。これにより、ユーザ２３０は、そのガイド情報に従って、表示範囲３Ｒへ携帯端末２０００を挿入する接触操作を容易に行うことができる。

　このガイド情報における誘導表示の例としては、以下が挙げられる。
　（ａ）．表示範囲３Ｒの全体（接触操作を受け付ける領域。一部領域でもよい。）を、所定の有色などで表示すること。あるいは、その表示範囲３Ｒの全体を表す枠を、有色などで表示すること。
　（ｂ）．矢印等の表示で、挿入箇所や挿入方向を説明すること。
　（ｃ）．自然言語や映像・画像・アニメーション等で、挿入箇所や挿入方向を説明すること。

　図２１Ａの例では、下部に、空間浮遊映像３を正面視する場合のｘｙ平面図で、ガイド情報の表示例を示している。図２１Ａのガイド情報は、いくつかの誘導表示例をまとめて図示しており、これらのうち少なくとも１つを適用すればよい。誘導表示例２１０１は、表示範囲３Ｒの全体を表す矩形の枠を有色で表示する例である。誘導表示例２１０２は、矢印画像（他の所定の記号や図形などでもよい）の表示によって、挿入・接触を受け付ける領域をユーザに示す例である。本例の矢印画像は、表示範囲３Ｒの四辺から内側に向いた複数の矢印の画像である。誘導表示例２１０３は、自然言語の文字画像、例えば“Insert here”の表示によって、表示範囲３Ｒの領域への挿入・接触をユーザに伝える例である。誘導表示例２１０４は、映像・画像、例えばアニメーション等によって、表示範囲３Ｒの領域への挿入・接触をユーザに伝える例である。

　変形例としては、後述のように、携帯端末２０００側の画面に、同様にガイド情報を表示してもよい。

　また、変形例として、携帯端末２０００の挿入・接触操作時に、接触状況を伝えるためのガイド画像を空間浮遊映像３に表示してもよい。図２１Ｂの例では、空間浮遊映像３の表示範囲３Ｒのうち、一部の領域２１０５のみが、挿入・接触操作を受け付ける所定の領域（挿入領域／接触領域）として規定されている。

　空間浮遊映像表示装置１０００は、センサを用いて、表示範囲３Ｒに対する携帯端末２０００の接触状況を検出し、検出した接触箇所に応じて、接触状況を表すガイド画像２１０６を表示する。このガイド画像２１０６は、そのガイド画像２１０６に対応する空間位置で携帯端末２０００が表示範囲３Ｒに接触していることを表す画像である。本例では、ガイド画像２１０６は、接触箇所を中心に広がる波紋のようなエフェクト画像である。ユーザ２３０は、ガイド画像２１０６を見ることで、表示範囲３Ｒへの携帯端末２０００の接触状況をよりわかりやすく認識できる。そして、ユーザ２３０は、ガイド画像２１０６に基づいて、携帯端末２０００を、一部の領域２１０５である挿入領域へ移動させればよい。ユーザ２３０へのガイド情報／フィードバック情報は、上記のような画像表示のみに限らず、音声出力などを併用してもよい。

　［表示制限機能］
　また、本システム３０００は、以下のような機能（表示制限機能とする）を有してもよい。本システム３０００は、接触操作の際に表示範囲３Ｒに携帯端末２０００が挿入された際に、表示範囲３Ｒのうちで携帯端末２０００が挿入されている列近傍の一部領域を空間浮遊映像３の非表示にした上で、残りの表示範囲３Ｒの領域に別の表示を行うようにしてもよい。携帯端末２０００の挿入の操作に伴い、ユーザ２３０から表示範囲３Ｒを見ると、携帯端末２０００によって遮光・遮蔽されて、表示映像である空間浮遊映像３が見えなくなる箇所が発生する場合がある。この機能は、このように見えなくなる箇所（一部領域）の空間浮遊映像３の表示を、一時的に非表示となるように制御する機能である。空間浮遊映像表示装置１０００の特に図３の映像制御部１１６０などは、この機能において、表示装置１の光源装置１３や映像表示素子（液晶表示パネル１１）の制御によって、上記非表示を実現してもよい。

　また、空間浮遊映像表示装置１０００は、上記接触操作に伴い表示範囲３Ｒの一部領域を非表示とした場合に、残りの表示領域と、表示映像である空間浮遊映像３とが合致するように、表示映像の表示サイズの縮小やアスペクト比の変更などを行ってもよい。

　図２２（図２２Ａ等）は、この表示制限機能の例を示す。図２２Ａは、ＸＹ平面図で、例えば図１８Ａ～図１８Ｄと同様に、ユーザ２３０が表示範囲３Ｒの一部に対しＹ方向で携帯端末２０００を挿入・接触した場合を示している。領域２２０１は、表示範囲３Ｒへ挿入後に接触している状態の時の携帯端末２０００の位置・領域を示す。図２２Ｂは、図２２Ａの状態に対応したＸＺ平面図を示す。領域２２０２は、映像光の遮蔽によって生じる視認不可領域の例である。また、対応して、図２２Ｃは、ＹＺ平面図で、映像光の遮蔽の状態を示している。位置２２０３は、表示範囲３Ｒへ挿入後の接触している状態の携帯端末２０００の位置・領域を示す。

　映像光成分２２０４は、開口部１２００から外へ出射した映像光の光束のうち、携帯端末２０００（位置２２０３）によって遮蔽されずに、ユーザ２３０の視点（目）に入射することで、表示範囲３Ｒに空間浮遊映像３を形成する成分を示す。映像光成分２２０５は、開口部１２００から外へ出射した映像光の光束のうち、携帯端末２０００（位置２２０３）によって遮蔽されて、ユーザ２３０の視点（目）には入射しないことで、表示範囲３Ｒに視認不可領域２２０２を形成する成分を示す。

　図２３（図２３Ａ等）は、空間浮遊映像３でのガイド画像の表示例ととともに、表示制限機能の動作例を示している。

　まず、図２３Ａは、空間浮遊映像３の表示範囲３Ｒの正面視（ｘｙ平面）において、接触操作が検知された場合に、表示要求２０３０が発生中であることを表すガイド画像２３０２が表示される例を示している。本例では、表示範囲３Ｒにおいて、全体を示す枠表示２３０１があり、その枠表示２３０１の中で、表示要求２０３０の発生中を表すガイド画像２３０２が表示されている。ガイド画像２３０２は、例えば、表示要求２０３０の発生中を表す文字画像、例えば“Requesting...”や矢印アイコン等である。また、この状態では、携帯端末２０００による遮蔽によって、視認不可領域２２０２が生じている。

　図２３Ｂは、空間浮遊映像表示装置１０００が、図２３Ａのような視認不可領域２２０２の発生の検知に基づいて、表示範囲３Ｒのうち一部領域を非表示にし、残りの領域の表示を制御する例を示している。視認不可領域２２０２の発生の検知は、空中操作検出センサ１３５１や撮像部１１８０により検知可能である。

　空間浮遊映像表示装置１０００の例えば図３の映像制御部１１６０は、接触操作の判定・検知とともに、視認不可領域２２０２を判定・検知し、表示範囲３Ｒのうち、視認不可領域２２０２を含む、非表示領域を決定する。本例では、空中操作検出センサ１３５１（後述）による検出に基づいて、表示範囲３Ｒのうち、Ｘ方向およびｘ方向での接触箇所２３０３言い換えると幅、列がわかる。よって、空間浮遊映像表示装置１０００は、表示範囲３Ｒのうち、その接触箇所２３０３に対応する表示列を、斜線ハッチングパターンで示す非表示領域２３０４とするように決定する。非表示領域２３０４は、視認不可領域２２０２を包含している。表示範囲３Ｒのうち、非表示領域２３０４以外の領域は、表示領域２３０５となる。言い換えると、空間浮遊映像表示装置１０００は、表示範囲３Ｒを、Ｘ方向およびｘ方向で非表示領域２３０４の幅の分だけサイズを縮小することで、表示領域２３０５を構成する。

　空間浮遊映像表示装置１０００は、非表示領域２３０４には空間浮遊映像３を表示しないようにし、表示領域２３０５のみに空間浮遊映像３を表示するように、表示装置１の表示を制御する。本例では、表示範囲３Ｒの表示領域２３０５において、図２３Ａのような元の枠画像２３０１およびガイド画像２３０２から、アスペクト比を維持したまま、表示領域２３０５の幅に収まるように、縮小等調整されることで、枠画像２３０６およびガイド画像２３０７に変更されている。

　上記機能により、ユーザ２３０は、空間浮遊映像３におけるガイド画像２３０７等を視認しやすくなる。上記例は、視認不可領域２２０２に対し、より広い領域を非表示領域２３０４とする場合を示したが、これに限定されず、非表示領域は、視認不可領域と同じ領域としてもよいし、視認不可領域と少なくとも一部が重なる異なる領域としてもよい。また、ガイド画像の変更・調整は、アスペクト比の変更、色や輝度の変更、表示位置シフト等、様々に可能である。

　図２４Ａは、所定の接触操作が検知されて、言い換えると接触操作の成功と判定されて、表示要求２０３０が受領された場合の、ユーザ２３０への通知などのフィードバックとしての、空間浮遊映像３のガイド画像の表示例を示す。本例では、表示範囲３Ｒの全体に、成功を表すガイド画像２４０１が表示されている。ガイド画像２４０１は、成功を表す文字やアイコン等で構成されている。このように成功となった場合、対象画像を空間浮遊映像３として表示するフェーズに移行される。

　図２４Ｂは、所定の接触操作が検知できない、言い換えると接触操作の失敗と判定されて、表示要求２０３０が受領されない場合の、ユーザ２３０への通知などのフィードバックとしての、空間浮遊映像３のガイド画像の表示例を示す。本例では、表示範囲３Ｒの全体に、失敗を表すガイド画像２４０２が表示されている。ガイド画像２４０２は、失敗やリトライを表す文字やアイコン等で構成されている。

　ユーザ２３０による表示範囲３Ｒへの携帯端末２０００の挿入・接触操作が、適切に行われなかった場合、あるいは、適切に行われたものの本システム３０００がセンサ不具合等によって適切に検知できなかった場合、空間浮遊映像表示装置１０００は、上記のように、失敗あるいはエラーと判定し、ユーザ２３０へフィードバックとしてガイド画像２４０２を出力する。この場合、空間浮遊映像表示装置１０００は、ユーザ２３０に接触操作のリトライを促してもよい。ユーザ２３０は、接触操作からやり直す。

　さらに、図２４Ｃは、表示範囲３Ｒへの携帯端末２０００の接触操作とともに携帯端末２０００から空間浮遊映像表示装置１０００への表示要求２０３０が適切に行われた旨（成功）のガイド画像を空間浮遊映像３として表示する場合に、視認不可領域２２０２に応じて表示領域を調整して表示する例を示す。非表示領域２４０４は、表示範囲３Ｒのうち、視認不可領域２２０２を含んだ領域であり、表示領域２４０５は、非表示領域２４０４以外の領域である。

　図２４Ｃの下部の左側の（Ａ）は、成功の場合の例であり、表示領域２４０５には、図２４Ａのようなガイド映像２４０１に基づいてサイズ等が調整されたガイド映像２４０１ｂが表示される。同様に、図２４Ｃの下部の右側の（Ｂ）は、失敗の場合の例であり、表示領域２４０５には、図２４Ｂのようなガイド映像２４０２に基づいてサイズ等が調整されたガイド映像２４０２ｂが表示される。

　上記ユーザ２３０へのフィードバックは、空間浮遊映像３でのガイド画像の表示やランプ発光などの視覚的手段に限らずに、音声出力などの聴覚的手段や、振動／エアー／超音波などの刺激を発生させる装置等の触覚的手段を用いてもよい。そのような装置、例えばエアー噴出機、超音波発生器が、筐体１１９０の内または外に設置されていてもよい。また、各手段を組み合わせて同時に用いてもよい。

　図２４Ｄは、ＹＺ平面で、接触操作および表示要求２０３０が成功や失敗の結果となった場合に、空間浮遊映像表示装置１０００が、ユーザ２３０に対し、スピーカー等の図３での音声出力部１１４０から、成功や失敗を表す音声２４０８を発生する場合を示す。（Ａ）は成功の場合の音声２４０８（音声通知例）であり、例えば「接続しました」となる。（Ｂ）は失敗の場合の音声２４０８（音声通知例）であり、例えば「接続できませんでした」「もう一度お試しください」となる。スピーカーは、筐体１１９０の内または外に設置されていてもよい。スピーカーは、超指向性スピーカー等としてもよい。上記例は自然言語の音声出力例であるが、これに限らず、所定の短音、例えばビープ音、アラート音や音楽の出力などとしてもよい。

　［空中操作検出センサ］
　図２５（図２５Ａ等）は、実施例３の空間浮遊映像表示装置１０００におけるセンサとして空中操作検出センサ１３５１および撮像部１１８０（カメラ）の実装例を示す。実施例３の空間浮遊映像表示装置１０００の特に図３での空中操作検出部１３５０、制御部１１１０または映像制御部１１６０等は、これらのセンサを用いて、空間浮遊映像３の表示範囲３Ｒに対する携帯端末２０００の挿入・接触操作を判定・検知する。

　図２５Ａは、ＹＺ平面図で、筐体１１９０における空中操作検出センサ１３５１および撮像部１１８０（カメラ）の配置例を示す。図２５Ａでの光学システムの構成例は、図４Ａ、図１８Ｅと同様である。図２５Ａの例では、空中操作検出センサ１３５１は、筐体１１９０の上面の透明部材１００の付近において、Ｙ方向でユーザ２３０に近い手前側に設置されている。この空中操作検出センサ１３５１は、一点鎖線矢印で示す光軸が図示のように斜め上、つまりｙ方向を向いており、その光軸は、空間浮遊映像３の表示範囲３Ｒと重なるように設定されている。また、図２５Ａの例では、撮像部１１８０（カメラ）は、筐体１１９０内において、一点鎖線矢印で示す光軸が上、つまりＺ方向を向いて設置されている。撮像部１１８０（カメラ）の撮像範囲は、破線で示すように、表示範囲３Ｒおよび開口部１２００を含む範囲となるように設定されている。

　図２５Ｂは、空中操作検出センサ１３５１の構成例を示す。図２５Ｂでは、空間浮遊映像３の表示範囲３Ｒに合わせたｘｙ平面図を示している。空中操作検出センサ１３５１は、ｘ方向（図２５ＡでのＸ方向）に、複数の光学素子１３５１ｃが配列されている。光学素子１３５１ｃは、発光素子１３５１ａと受光素子１３５１ｂとの対である。発光素子１３５１ａは、例えば赤外線素子等で構成される。空中操作検出センサ１３５１の発光素子１３５１ａの出射面は、図２５Ａでの筐体１１９０の透明部材１００の上面と一致しているとする。発光素子１３５１ａは、ｙ方向に光ａ１例えば赤外線を出射する。その光ａ１は、物体によって遮られない場合、表示範囲３Ｒを通過する。その光ａ１は、物体によって遮られる場合、その物体で反射されて、反射光ａ２として戻ってくる。反射光ａ２は、受光素子１３５１ｂで受光される。

　例えば、表示範囲３Ｒのｘｙ平面内に、ユーザ２３０の指による接触箇所２５０１がある場合、その接触箇所２５０１で光ａ１が反射して反射光ａ２として戻ってくる。あるｘ方向の位置の受光素子１３５１ｂは、その反射光ａ２を検出する。これにより、空中操作検出部１３５０は、そのｘ方向の位置に、接触箇所２５０１があることがわかる。また、空中操作検出部１３５０は、出射された光ａ１が反射光ａ２として戻ってくるまでの時間から、ＴＯＦ方式で、距離を計算できる。例えば、接触箇所２５０１までの距離２５０２を計算できる。これにより、表示範囲３Ｒのｘｙ平面における接触箇所２５０１の位置座標もわかる。

　また、図２５Ｂでは、表示範囲３Ｒ内に、挿入・接触操作によって、携帯端末２０００ｂが配置された場合を、接触箇所２５０３として示している。この場合も、同様に、空中操作検出センサ１３５１および空中操作検出部１３５０は、接触箇所２５０３の位置座標を検出できる。なお、図２５Ａの例では、空間浮遊映像３の上側には何もないが、空間浮遊映像３の上側にも筐体１１９０の一部を設けてもよい。その場合、空中操作検出センサ１３５１の光ａ１は、その筐体１１９０の一部によって反射されて、反射光ａ２として戻ってくる。

　空間浮遊映像表示装置１０００は、上記空中操作検出センサ１３５１および空中操作検出部１３５０を用いることで、図２５Ａのように表示範囲３Ｒに携帯端末２０００ｂが接触した場合に、接触操作として検知できる。上記配置例に限らず、空中操作検出センサ１３５１は、表示範囲３Ｒのｘｙ平面に対し、上側に配置されてもよいし、前後つまりｚ方向やＹ方向にずらした位置に配置されてもよいし、その前後方向で複数の位置に複数の空中操作検出センサが配置されてもよい。

　また、図２５Ａの例で、表示範囲３Ｒに携帯端末２０００ｂが配置された場合に、撮像部１１８０（カメラ）の撮像画像内には、その携帯端末２０００ｂが写り込む。よって、撮像部１１８０に連携する映像制御部１１６０等は、撮像画像内からその携帯端末２０００ｂを検出し、表示範囲３Ｒに携帯端末２０００ｂが接触したかどうかを判定できる。これにより、空間浮遊映像表示装置１０００は、上記撮像部１１８０を用いることによっても、図２５Ａのように表示範囲３Ｒに携帯端末２０００ｂが接触した場合に、接触操作として検知できる。空間浮遊映像表示装置１０００は、上記空中操作検出センサ１３５１と撮像部１１８０との少なくとも一方を用いて、接触操作を判定・検知すればよい。それらの両方を用いる場合には、判定・検知の精度をより高くできる。

　図２５Ａの例に限らず、撮像部１１８０（カメラ）の他の配置として、例えば、破線で撮像部１１８０ｂとして示すように、筐体１１９０の外側、Ｙ方向で奥側の位置で、光軸が表示範囲３Ｒの方を向く配置としてもよい。撮像部１１８０ｂがユーザ２３０の顔などを撮像してもよいし、ユーザ２３０が近接したことを検出してもよい。また、図２５Ｂのように空間浮遊映像３の平面に平行にセンシングする空中操作検出センサ１３５１に限らず、空間浮遊映像３の平面に対して垂直等の方向から当該平面をセンシングする測距センサやステレオカメラ等を用いてもよい。

　図２５Ｃは、筐体１１９０における空中操作検出センサ１３５１および撮像部１１８０（カメラ）の他の配置例を示す。図２５Ｃの例は、光学システムとしては、図２Ｂをベースとして、筐体１１９０を縦置きとし、空間浮遊映像３が鉛直方向（Ｚ方向）に立つように形成される場合を示す。Ｙ方向で筐体１１９０の後部には前述の光学システムの構成要素が搭載されており、筐体１１９０の前部において、上下の筐体部の間に、空間浮遊映像３が形成される。本例では、上側の筐体部に、空中操作検出センサ１３５１と撮像部１１８０（カメラ）が設置されている。空中操作検出センサ１３５１は、光軸が表示範囲３Ｒと重なるように下を向いている。撮像部１１８０（カメラ）は、表示範囲３Ｒを含むように撮像範囲が設定されている。このような構成でも、同様に、表示範囲３Ｒに携帯端末２０００が挿入された場合に、空中操作検出センサ１３５１と撮像部１１８０（カメラ）との少なくとも一方を用いて、接触操作を検知できる。

　［手指と携帯端末との区別について］
　空間浮遊映像表示装置１０００は、空間浮遊映像３（表示範囲３Ｒ）に接触する物体として、ユーザ２３０の手指と携帯端末２０００とを区別してもよいし、区別しなくてもよい。それらを区別する場合、技術的な手段として例えば以下が挙げられる。

　（１）．携帯端末２０００と空間浮遊映像表示装置１０００との間で任意の通信を行う際の、接続要求などの通信情報から、空間浮遊映像表示装置１０００が携帯端末２０００を認識してもよい。空間浮遊映像表示装置１０００は、空中操作検出センサ１３５１によって、何らかの物体が表示範囲３Ｒに接触していることを検知した時に、上記通信情報がある場合には、その物体が携帯端末２０００であると推定してもよい。

　（２）．空間浮遊映像表示装置１０００は、撮像部１１８０（カメラ）による撮像画像などに基づいて、画像認識処理などによって、空間浮遊映像３に接触している物体が携帯端末２０００であることを認識・判定してもよい。

　（３）．空間浮遊映像表示装置１０００は、空中操作検出センサ１３５１および空中操作検出部１３５０によって、空間浮遊映像３に接触している物体がユーザ２３０の手指であるか携帯端末２０００であるかを区別するための判定を行ってもよい。例えば、通常の空中操作・タッチ操作としては、一本指による操作を受け付けるようにしておく（例えば図２５Ｂの接触箇所２５０１のような検出）。表示範囲３Ｒに携帯端末２０００が挿入された場合、接触箇所の面積は、一本指よりも携帯端末２０００の方が大きくなることや、接触箇所の形状が直線状になることを利用する。空間浮遊映像表示装置１０００は、空中操作検出センサ１３５１等により、接触箇所、例えば図２５Ｂの接触箇所２５０３の面積や形状などを検出・判定し、それに基づいて、接触している物体が手指であるか携帯端末２０００であるかを判定する。

　（４）．空間浮遊映像表示装置１０００と携帯端末２０００との間で授受する情報において、携帯端末２０００を表す情報、例えば後述のＱＲコードを持たせる。空間浮遊映像表示装置１０００は、その情報を認識・取得することで、空間浮遊映像３に接触している物体がユーザ２３０の手指であるか携帯端末２０００であるかを区別する。

　［携帯端末のアプリケーションおよび画面］
　図２６Ａは、実施例３での携帯端末２０００のアプリケーション２０１０等による表示部２００１２の画面の表示例を示す。携帯端末２０００は、ユーザ２３０の入力操作に基づいて、ＯＳやアプリケーション２０１０等の処理によって、表示部２００１２の画面に、アプリケーション画面２６０１を表示する。本例では、アプリケーション２０１０は、空間浮遊映像表示装置１０００と連携して空間浮遊映像表示装置１０００の各種機能をユーザ２３０が便利に利用できるようにするための専用アプリである。

　図２６Ａのアプリケーション画面２６０１では、ユーザ２３０に対し、空間浮遊映像表示装置１０００の空間浮遊映像３に表示させるための画像２０２０（対象画像）を指定するように促すＧＵＩを有する。例えば「空中ディスプレイに表示させる画像を指定してください」といったメッセージが表示される。ユーザ２３０は、携帯端末２０００内にある画像から、空中ディスプレイに表示させる画像２０２０（図１５）を選択する。選択された画像は、表示対象画像２６０２としてプレビュー表示される。ユーザ２３０は、表示対象画像２６０２を確認後、表示要求ボタン２６０３を押す。これにより、携帯端末２０００は、その表示対象画像２６０２を対象画像とした表示要求２０３０を、近距離無線通信などによって空間浮遊映像表示装置１０００に発信する。

　図２６Ｂは、前述の図２１Ａのガイド画像の表示に関する変形例であり、携帯端末２０００側の画面にガイド画像を表示する例である。図２６Ｂのアプリケーション画面２６０１では、ユーザ２３０に対し接触操作を促すためのガイド画像２６０４を表示する。ガイド画像２６０４は、例えば、「スマートフォンを空中浮遊映像に接触させてください」といったメッセージが表示され、表示範囲３Ｒに携帯端末２０００を挿入・接触させる動作を表す画像が表示される。

　図２６Ｃは、前述の図２３Ａのガイド画像の表示および図２４Ａのガイド画像の表示に関する変形例であり、携帯端末２０００側の画面にガイド画像を表示する例である。図２６Ｃのアプリケーション画面２６０１では、状況に応じて、ユーザ２３０に対し、表示要求２０３０の途中であることを伝えるためのガイド画像２６０５や、表示要求２０３０が受領されて成功となったことを伝えるためのガイド画像２６０６等が表示される。

　実施例３では、１つの方式として、接触操作時に、上記のように、ユーザ２３０が、携帯端末２０００のアプリケーション２０１０の画面で、対象の画像２０２０を指定して、表示要求ボタン２６０３を押し、携帯端末２０００が表示要求２０３０を発信する。その後にユーザ２３０が携帯端末２０００を表示範囲３Ｒに挿入する。

　これに限らず、他の実施例では、ユーザ２３０の操作を最低限としてもよい。例えば、ユーザ２３０は、携帯端末２０００の画面に所望の対象画像を表示させ、その状態で携帯端末２０００を表示範囲３Ｒに挿入する。空間浮遊映像表示装置１０００は、接触操作を判定・検知し、成功の場合、表示要求２０３０を発生させる。空間浮遊映像表示装置１０００は、携帯端末２０００と通信して、表示要求２０３０に対応付けられる対象画像を取得し、空間浮遊映像３に表示させる。その対象画像は、その時に携帯端末２０００の画面に表示されている画像である。

　［空間浮遊映像における対象画像の表示］
　空間浮遊映像表示装置１０００の映像制御部１１６０（図３）は、対象画像の画像データに基づいて、表示装置１（液晶表示パネル１１）の画面に表示するための画像データを生成する。この画像データは、例えば、対象画像が２次元画像データである場合には、その２次元画像データから加工によって生成される２次元画像データである。また、対象画像が３次元画像データ（３次元モデルなど）である場合には、その３次元画像データから、仮想３次元空間内でのレンダリング等によって生成される２次元画像データである。

　上記機能によって、例えば図１６に示したように、ユーザ２３０が携帯端末２０００で表示・指定した対象画像１６０１（キャラクター画像の例）を、接触操作および表示要求２０３０に応じて、空間浮遊映像３として画像１６０２を表示させることができる。これにより、ユーザ２３０は、所望の対象画像１６０１を、空間浮遊映像３の画像１６０２として見て楽しむこと等ができる。

　その後、空間浮遊映像３における対象画像の表示を解除する方法については、特に限定しない。例えば、対象画像の表示を開始してから一定時間経過後に自動的に解除としてもよい。また、空間浮遊映像３、または携帯端末２０００の画面に、表示解除ボタン等を設けてもよい。筐体１１９０に表示解除ボタン等を設けてもよい。

　以上のように、実施例３の空間浮遊映像表示システムによれば、携帯端末２０００と連携することで、所望の画像を空間浮遊映像３として表示させて見ることができるサービス等をユーザ２３０に提供することができる。

　なお、携帯端末２０００と空間浮遊映像表示装置１０００との間で授受するデータ・情報は、表示対象画像のみに限らず可能であり、表示対象画像とともに、何かの管理・制御用のデータ・情報、例えばユーザ情報などを、授受するようにしてもよい。

　変形例として、予め空間浮遊映像３として背景画像やキャラクター画像などを表示しておき、その状態から、ユーザ２３０による携帯端末２０００の接触操作および表示要求２０３０によって、その背景画像などの上に、対象画像を重ね合わせて表示させることも、同様に可能である。

　実施例３では、空間浮遊映像３に携帯端末２０００が接触した場合に、成功として、表示要求２０３０を受領し、対象画像を表示させるものとしたが、これに限定されない。変形例では、ユーザ２３０が携帯端末２０００を空間浮遊映像３に挿入して接触した後、空間浮遊映像３を通過して、奥側の空間内に携帯端末２０００が入り、表示範囲３Ｒに接触していない状態となった場合（例えば図１９Ｅ）に、成功とするものとしてもよい。

　また、変形例として以下も可能である。変形例での機能は、空間浮遊映像３として表示されている画像を、携帯端末２０００側に取得する機能である。予め、空間浮遊映像表示装置１０００は、空間浮遊映像３にキャラクター画像などを表示しておく（例えば図１６の（３）と同様）。ユーザ２３０は、空間浮遊映像３として表示されている画像を、携帯端末２０００側に取得したい場合に、前述と同様に空間浮遊映像３に対する携帯端末２０００の接触操作を行う。この接触操作が成功すると、空間浮遊映像表示装置１０００は、空間浮遊映像３として表示されている画像（それに対応する画像データ）を、その携帯端末２０００へ送信する。これにより、ユーザ２３０は、携帯端末２０００にその画像を取得して表示し、見て楽しむことができる（例えば図１６の（１）と同様）。

　実施例３では、空間浮遊映像３に携帯端末２０００を接触操作させて対象画像を表示させた後、空間浮遊映像３に携帯端末２０００が接触していなくても、対象画像の表示が継続されるという機能としたが、これに限定されない。変形例では、空間浮遊映像３に携帯端末２０００を接触させ続けている間のみ対象画像を表示させる機能としてもよい。空間浮遊映像表示装置１０００は、表示範囲３Ｒから携帯端末２０００が離れたことを検知した場合、空間浮遊映像３での対象画像の表示を解除する。

　＜実施例４＞
　つぎに、図２７Ａ以降を用いて、他の実施例（実施例４とする）として、ＱＲコード（２次元コード）等を用いる例を説明する。実施例４は実施例３の変形例である。携帯端末２０００は、適宜に、表示部２００１２の画面にＱＲコードを表示する機能を有する。このＱＲコードは、例えば前述の表示要求２０３０を表すコードとしてもよい。

　実施例４では、携帯端末２０００から空間浮遊映像表示装置１０００への表示要求２０３０の際に、携帯端末２０００側に空間浮遊映像表示装置１０００を認識させること、あるいは、空間浮遊映像表示装置１０００側に携帯端末２０００を認識させることを目的として、以下のような操作・動作が行われてもよい。ユーザ２３０は、携帯端末２０００側のアプリケーション２０１０等から、空間浮遊映像表示装置１０００に対し、連携や接続を行う旨、および表示要求２０３０を行う旨の操作を行う（例えば図２６Ａ等と同様）。そのうえで、ユーザ２３０は、携帯端末２０００を表示範囲３Ｒへ挿入する接触操作を行う。あるいは、例えば、ユーザ２３０は、挿入前の携帯端末２０００の画面にＱＲコード等を表示したうえで、その携帯端末２０００のＱＲコード等を、空間浮遊映像表示装置１０００側の撮像部１１８０（カメラ）によって読み込ませるような姿勢として、表示範囲３Ｒへ挿入する接触操作を行う。

　図２７Ａは、携帯端末２０００が、表示部２００１２の画面１９０２において、ユーザ２３０の入力操作に基づいて、ＱＲコード画面２７０１を表示し、ＱＲコード画面２７０１にＱＲコード２７０２等の画像情報を表示した例である。

　図２７Ｂは、ＹＺ平面図で、ユーザ２３０が、表示範囲３Ｒへの挿入前の位置の携帯端末２０００ａで画面１９０２にＱＲコードを表示させた状態（図２７Ａ）とし、その位置から携帯端末２０００ａを表示範囲３Ｒへ挿入し、接触した位置での携帯端末２０００ｂの状態となった例を示す。この状態の携帯端末２０００ｂは、画面１９０２が下を向いていて、撮像部１１８０（カメラ）の撮像範囲内にある。そのため、空間浮遊映像表示装置１０００は、撮像画像から携帯端末２０００ｂを検出できるとともに、画面１９０２に表示されているＱＲコード２７０２を検出できる。空間浮遊映像表示装置１０００は、そのＱＲコードを認識して、そのＱＲコードに記述されているデータ・情報を取り出す。例えば、空間浮遊映像表示装置１０００は、そのＱＲコードから、表示要求２０３０を取得する。

　空間浮遊映像表示装置１０００は、空中操作検出センサ１３５１または撮像部１１８０によって表示範囲３Ｒへの携帯端末２０００ｂの接触を検知するとともに、携帯端末２０００ｂのＱＲコードから表示要求２０３０を取得する。これらの動作の成功に基づいて、空間浮遊映像表示装置１０００は、表示要求２０３０に対応付けられた対象画像を空間浮遊映像３に表示させる。

　なお、図２７Ｂでは、携帯端末２０００ｂは表示範囲３Ｒに接触しているが、これに限らず、前述のように、携帯端末２０００は、表示範囲３Ｒに接触した後に、表示範囲３Ｒよりも奥側に侵入して非接触の状態となってもよい。携帯端末２０００の姿勢は、画面１９０２のＱＲコードが撮像部１１８０（カメラ）によって検出できる姿勢であればよい。例えば図２５Ａの撮像部１１８０ｂの場合であれば、携帯端末２０００の姿勢は、画面１９０２をＹ方向の奥側に向けた姿勢とすればよい（例えば図１９Ｅと同様でもよい）。

　実施例４では、上記のように、実施例３での所定の接触操作の判定条件に対し、ＱＲコードの認識の条件が追加されている。言い換えると、実施例４では、空間浮遊映像表示装置１０００は、所定の接触操作が検知され、かつ、ＱＲコードが認識された、というＡＮＤ条件を満たした場合に、表示要求２０３０を受領・許可し、空間浮遊映像３に対象画像を表示する。

　実施例４（図２７Ｂ）では、ユーザ２３０は、携帯端末２０００を、画面１９０２を下に向けた状態として、筐体１１９０の上面に平行な水平方向で、表示範囲３Ｒに対し挿入するようにしてもよい（図１９Ｅと同様）。また、変形例では、ユーザ２３０は、携帯端末２０００を、画面１９０２を下に向けた状態として、表示範囲３Ｒに対し挿入した後、画面１９０２を、筐体１１９０の透明部材１００の上面に接触して置いてもよい。これらの場合でも、ＱＲコードを認識可能である。

　［ＱＲコード］
　上記ＱＲコード／バーコード等のコードに記述されるデータ・情報は、上記表示要求２０３０の例に限らずに、例えば以下が挙げられる。これらのデータ・情報は、組み合わせで用いてもよい。

　（１）．接続情報：図１５の通信網において、携帯端末２０００と空間浮遊映像表示装置１０００とが通信接続するための情報。例えば、ＩＰアドレス、ＩＤおよびパスワードなどの情報。ここでの通信網は、インターネット３０１０やＬＡＮ３０２０等のことで、あるいは、携帯端末２０００と空間浮遊映像表示装置１０００とのダイレクト通信でもよい。

　（２）．端末ＩＤ／ユーザＩＤ：携帯端末２０００のＩＤ等の情報。あるいは、ユーザ２３０のＩＤ等の情報。

　（３）．画像ＩＤ：ユーザ２３０が表示させたい対象画像のＩＤやＵＲＬ等の情報。

　上記接続情報をＱＲコードとする場合、携帯端末２０００は、空間浮遊映像表示装置１０００に対し、ＱＲコードを提示することで、接続情報を伝え、携帯端末２０００の通信部２００２０と、空間浮遊映像表示装置１０００の通信部１１３２との間で、その接続情報を用いて無線接続がされる。

　上記端末ＩＤ／ユーザＩＤ等をＱＲコードとする場合、空間浮遊映像表示装置１０００は、特定の携帯端末２０００／ユーザ２３０を認識できる。空間浮遊映像表示装置１０００は、特定の端末ＩＤ／ユーザＩＤに対応付けられた特定の携帯端末２０００／ユーザ２３０のみを、本機能のサービス提供対象として、許可するようにしてもよい。

　上記画像ＩＤをＱＲコードとする場合、対象画像は、携帯端末２０００に保持している画像に限らずに利用可能となる。

　上記のように、実施例４の空間浮遊映像表示システムによれば、上記ＱＲコードを用いることで、携帯端末２０００と空間浮遊映像表示装置１０００との間での所定の接触操作を規定するとともに、上記ＱＲコードを用いた各種の制御が可能である。

　なお、ＱＲコードを用いない実施例３等の形態の場合でも、上記のようなデータ・情報を、携帯端末２０００と空間浮遊映像表示装置１０００との間で、表示要求２０３０とともに授受して使用するようにしてもよい。

　実施例４の変形例として、空間浮遊映像表示装置１０００は、近くにいる携帯端末２０００に、上記ＱＲコードの情報を送信し、その情報を受信した携帯端末２０００が上記ＱＲコードを表示してもよい。

　実施例３や４では、空間浮遊映像３に表示する対象画像のデータは、予め携帯端末２０００に保持されているものとしたが、これに限定されない。変形例では、対象画像のデータが、空間浮遊映像表示装置１０００側に保持されており、ユーザ２３０、携帯端末２０００側がその対象画像を選択・指定し、表示要求２０３０を発信するものとしてもよい。また、他の変形例では、通信網上のサーバ等に、対象画像のデータが保持されており、ユーザ２３０、携帯端末２０００側がその対象画像を選択・指定し、表示要求２０３０を発信するものとしてもよい。

　また、実施例４の変形例として、空間浮遊映像表示装置１０００は、空間浮遊映像３に、上記ＱＲコードの情報を表示し、ユーザ２３０は、携帯端末２０００のカメラによって、空間浮遊映像３として表示しているＱＲコードの情報を認識してもよい。

　図２８（図２８Ａ等）は、この変形例を示す。図２８Ａは、空間浮遊映像表示装置１０００が空間浮遊映像３であるＱＲコード２８０１を表示する例である。図２８Ｂは、ＹＺ平面図で、図２８Ａの空間浮遊映像３のＱＲコード２８０１を、携帯端末２０００が撮像部２００２５のカメラ、例えばアウトカメラによって撮像して読み取る例である。携帯端末２０００は、認識したＱＲコード２８０１から所定の情報を得る。ＱＲコード２８０１の認識後、ユーザ２３０は、携帯端末２０００を表示範囲３Ｒに接触させる。

　図２８Ｃは、さらなる変形例であり、空間浮遊映像表示装置１０００の第２の表示装置１６８０の画面にＱＲコード２８０２を表示する例である。空間浮遊映像表示装置１０００は、例えば図４Ｍと同様に、空間浮遊映像３に対し奥側に重なるように配置される第２の表示装置１６８０を用いて、第２の表示装置１６８０の画面に、ＱＲコード２８０２を表示する。また、空間浮遊映像表示装置１０００は、図４Ｌと同様に、透過型自発光映像表示装置１６５０を用いて、透過型自発光映像表示装置１６５０の画面にＱＲコードを表示してもよい。

　ユーザ２３０は、携帯端末２０００の撮像部２００２５のカメラによって、第２の表示装置１６８０の画面に表示されているＱＲコード２８０２を撮像し、携帯端末２０００は、そのＱＲコードを認識して情報を得る。ＱＲコード２８０２の認識後、ユーザ２３０は、携帯端末２０００を表示範囲３Ｒに接触させる。

　＜実施例５＞
　本発明の実施例５として、空間浮遊映像表示装置の構成例を説明する。実施例５の空間浮遊映像表示装置は、基本構成としては、実施例１～４の構成を同様に適用できる。また、実施例５は、実施例３，４と同様に、空間浮遊映像表示装置と、それに接続される外部機器などとを有するシステム（空間浮遊映像表示システム）とすることができる。外部機器は、例えばユーザの所持するスマートフォンやタブレットやウェアラブル端末（スマートウォッチ等）などの携帯端末（モバイル情報処理端末装置）がある。

　［実施例５に関する課題と解決］
　課題として、空間浮遊映像表示装置１０００には、具備するセンサ類として、空中操作検出センサ１３５１や姿勢センサ１１１３（図３）などの各種のセンサが含まれるが、携帯端末２０００も同種のセンサ（タッチセンサや姿勢センサ）を具備している場合がある。実施例３，４のように、空間浮遊映像表示装置１０００に携帯端末２０００が通信接続された場合に、どちら側の装置での操作および検出（センサ）を有効にするのか、使用するのか等について、様々な可能性が考えられる。どちら側の操作および検出を有効にするのかが不明確である場合、用途や機能や状況などによっては、好ましくない動作や効果をもたらす可能性がある。そのため、用途や機能や状況などに応じて、どちら側の操作および検出を有効にするのかを明確にする必要がある。

　そこで、実施例５での空間浮遊映像表示システムおよび表示方法は、機能等として、以下を有する。実施例５のシステムは、携帯端末２０００側のユーザ操作等を検出するためのセンサと、空間浮遊映像表示装置１０００側のユーザ操作等を検出するためのセンサとの両方を対象として取り使う。本システムは、携帯端末２０００側の画面に表示される画像に対するタッチ操作や回転操作を検出するためのセンサと、空間浮遊映像表示装置１０００側の空間浮遊映像３に表示される画像に対するタッチ操作や回転操作を検出するためのセンサとを取り扱う。本システムは、携帯端末２０００側の画面と空間浮遊映像３側との両方に画像／映像が表示される場合（後述の二重表示）に、どちら側の装置のセンサを有効／無効にするかを、選択・設定・制御する。

　［課題と解決の例１］
　図３７は、課題と解決の例１を示す。まず、携帯端末２０００の画面２００５に画像３７０１（例えば画像Ｂ）が表示されており、その画像Ｂに基づいて、空間浮遊映像表示装置１０００の画面である空間浮遊映像３にも同様の画像３７０２（例えば画像Ｂ）が表示されているとする（図２９の二重表示機能２９１０）。課題の１つとして、このような状態で、ユーザ２３０が例えば携帯端末２０００の画面２００５の画像Ｂに対しタッチ操作を行った場合に、それらの２つの画像３７０１，３７０２がどうなるか、従来では曖昧である。

　本実施例では、解決の１つとして、以下のようにする。本システムは、携帯端末２０００の画面２００５の画像３７０１（画像Ｂ）に対する例えばタッチ操作の検出に応じて、当該画像３７０１に対応付けられた所定の処理として表示更新等が行われるとともに、空間浮遊映像３側の画像３７０２（画像Ｂ）にも、その表示更新等が反映されるように、同期を行う（図２９の同期制御機能２９２０）。携帯端末２０００側の画像Ｂは、表示更新として画像Ｂから画像Ｂｂに変化し、空間浮遊映像３側の画像Ｂは、表示更新として画像Ｂから画像Ｂｂに変化する。

　逆に、図３７の下部に示すように、空間浮遊映像３側の画像３７０２（画像Ｂ）に対しタッチ操作が行われた場合、本システムは、当該画像３７０２には表示更新等を行わず、携帯端末２０００側の画像３７０１（画像Ｂ）にも反映しない、言い換えると、携帯端末２０００側には同期を行わない。

　この例のような同期制御は、携帯端末２０００側のタッチ操作の検出を有効とし、空間浮遊映像３側のタッチ操作の検出を無効とする設定に基づいて行われる（図２９の操作検出制御機能２９３０）。本システムは、２つの装置の通信接続時に、そのような接続後の状態に関する設定を行う。各装置は、その接続後の設定に従って、操作、検出および表示を制御する。これにより、図３７のような作用効果が実現される。

　［課題と解決の例２］
　図３８は、課題と解決の例２を示す。図３８の例では、空間浮遊映像表示装置１０００の画面である空間浮遊映像３に画像３８０２（画像Ａ）が表示されており、その画像Ａに基づいて、携帯端末２０００の画面にも同様の画像３８０１（画像Ａ）が表示されているとする（図２９の二重表示機能２９１０）。課題の１つとして、このような状態で、ユーザ２３０が例えば空間浮遊映像３の画像Ａに対しタッチ操作を行った場合に、それらの２つの画像３８０１，３８０２がどうなるか、従来では曖昧である。

　本実施例では、解決の１つとして、以下のようにする。本システムは、空間浮遊映像３の画像３８０２（画像Ａ）に対する例えばタッチ操作の検出に応じて、当該画像３８０２に対応付けられた所定の処理として表示更新等が行われるとともに、携帯端末２０００側の画像３８０１（画像Ａ）にも、その表示更新等が反映されるように、同期を行う（図２９の同期制御機能２９２０）。空間浮遊映像３側の画像Ａは、表示更新として画像Ａｂに変化し、携帯端末２０００側の画像Ａは、表示更新として画像Ａｂに変化する。

　逆に、図３８の下部に示すように、携帯端末２０００側の画像３８０１（画像Ａ）に対しタッチ操作が行われた場合、本システムは、当該画像３８０１には表示更新等を行わず、空間浮遊映像３側の画像３８０２（画像Ａ）にも反映しない。

　この例のような同期制御は、携帯端末２０００側のタッチ操作の検出を無効とし、空間浮遊映像３側のタッチ操作の検出を有効とする設定に基づいて行われる（図２９の操作検出制御機能２９３０）。本システムは、２つの装置の通信接続時に、そのような接続後の状態に関する設定を行う。各装置は、その接続後の設定に従って、操作、検出および表示を制御する。これにより、図３８のような作用効果が実現される。

　［課題と解決の例３］
　図３９は、課題と解決の例３を示す。図３９の例では、まず、図３７と同様に、携帯端末２０００の画面に画像３９０１（例えば画像Ｂ）が表示されており、その画像Ｂに基づいて、空間浮遊映像表示装置１０００の画面である空間浮遊映像３にも同様の画像３９０２（例えば画像Ｂ）が表示されているとする（図２９の二重表示機能２９１０）。課題の１つとして、このような状態で、ユーザ２３０が例えば携帯端末２０００の画面２００５の画像Ｂに対し回転操作を行った場合に、それらの２つの画像３９０１，３９０２がどうなるか、従来では曖昧である。

　本実施例では、解決の１つとして、以下のようにする。本システムは、携帯端末２０００の画面２００５の画像３９０１（画像Ｂ）に対する回転操作、例えば筐体の回転による画像３９０１の回転を検出する。ユーザ２３０から見た画面２００５内の画像Ｂは、例えば９０度回転した状態の画像Ｂｃとなっている。この検出に応じて、本システムは、空間浮遊映像３側の画像３９０２（画像Ｂ）にも、その画像回転が反映されるように、同期を行う（図２９の同期制御機能２９２０）。ユーザ２３０から見た空間浮遊映像３の画像Ｂは、９０度回転した状態の画像Ｂｃとなっている。

　あるいは、図３９の下部に示すように、本システムは、携帯端末２０００の画面２００５の画像３９０１（画像Ｂ）に対する回転操作、例えばタッチ操作による画像回転を検出する。ユーザ２３０から見た画面２００５内の画像Ｂは、例えば９０度回転した状態の画像Ｂｃとなっている。この検出に応じて、本システムは、空間浮遊映像３側の画像３９０２（画像Ｂ）にも、その画像回転が反映されるように、同期を行う（図２９の同期制御機能２９２０）。

　この例のような同期制御は、携帯端末２０００側の回転操作の検出、画像回転を有効とし、空間浮遊映像３側の回転操作の検出、画像回転を無効とする設定に基づいて行われる（図２９の操作検出制御機能２９３０）。本システムは、２つの装置の通信接続時に、そのような接続後の状態に関する設定を行う。各装置は、その接続後の設定に従って、操作、検出および表示を制御する。これにより、図３９のような作用効果が実現される。

　［課題と解決の例４］
　図４０は、課題と解決の例４を示す。図４０の例では、まず、図３９と同様に、携帯端末２０００の画面２００５に画像４００１（例えば画像Ｂ）が表示されており、その画像Ｂに基づいて、空間浮遊映像表示装置１０００の画面である空間浮遊映像３にも同様の画像４００２（例えば画像Ｂ）が表示されているとする（図２９の二重表示機能２９１０）。課題の１つとして、このような状態で、ユーザ２３０が例えば携帯端末２０００の画面２００５の画像Ｂに対しタッチ操作（特にピンチ操作）による拡大縮小操作を行った場合に、それらの２つの画像４００１，４００２がどうなるか、従来では曖昧である。

　本実施例では、解決の１つとして、以下のようにする。本システムは、携帯端末２０００の画面２００５の画像４００１（画像Ｂ）に対するタッチ操作、例えばピンチアウト操作を検出し、ピンチアウト操作に対応した画像４００１の拡大表示が行われる。画像Ｂは、拡大された画像Ｂｄとなっている。この検出に応じて、本システムは、空間浮遊映像３側の画像４００２（画像Ｂ）にも、その画像拡大表示が反映されるように、同期を行う（図２９の同期制御機能２９２０）。図４０の下部に示すように、ピンチイン操作による縮小表示の場合にも、同様である。

　この例のような同期制御は、携帯端末２０００側のタッチ操作の検出、拡大縮小表示を有効とし、空間浮遊映像３側のタッチ操作の検出、拡大縮小表示を無効とする設定に基づいて行われる（図２９の操作検出制御機能２９３０）。本システムは、２つの装置の通信接続時に、そのような接続後の状態に関する設定を行う。各装置は、その接続後の設定に従って、操作、検出および表示を制御する。これにより、図４０のような作用効果が実現される。

　上述した各例のように、携帯端末２０００と空間浮遊映像表示装置１０００とが接続され、対象の画像／映像が、携帯端末２０００の画面と空間浮遊映像表示装置１０００の画面（空間浮遊映像３）との両方に表示される場合（二重表示）がある。この場合において、ユーザ２３０が、携帯端末２０００側の表示画像にタッチ操作等を行う場合と、空間浮遊映像３側の表示画像にタッチ操作等を行う場合とがある。一方の装置でユーザ操作がされた場合に、当該操作がされなかった方の装置での表示画像に対し、当該操作を反映すべきか否か、従来では不明確であり、対応としては様々な可能性が考えられる。通信接続後の状態において、特に二重表示の状態において、携帯端末２０００側の操作および検出と、空間浮遊映像３側の操作および検出とにおける、一方または両方の装置のハードウェアおよびソフトウェアの操作および検出について、適切に設定・制御を行う必要がある。ユーザ２３０の要望に応じて、適切に設定・制御を行うことで、携帯端末２０００側の表示画像と空間浮遊映像３側の表示画像とに対する明確なユーザ操作とその操作に応じた反応（表示制御処理）が実現できる。一例では、携帯端末２０００側を有効、空間浮遊映像３側を無効として設定することで、例えば図３９のようにユーザ２３０が携帯端末２０００側の表示画像を回転操作した場合に、その操作に合わせて、同期するように、空間浮遊映像３側の表示画像を回転させることができる。このようにして、ユーザ操作を明確化し、ユーザ２３０の利便性などを高めることができる。

　上述のように、通信接続後の状態において、ある時間帯、モードでは、携帯端末２０００側の操作検出のみが有効となり、別の時間帯、モードでは、空間浮遊映像表示装置１０００側の操作検出のみが有効となる。各モードで、所定の機能が実現される。一方の装置での操作検出が有効となる場合、他方の装置での無用な操作検出を防止できる。所定のモードによっては、両方の装置での操作検出が有効となってもよい。

　また、本システムは、携帯端末２０００と空間浮遊映像表示装置１０００との通信接続が解除された場合には、上記のような各装置の操作検出に関する設定を、接続前の設定の状態、通常の設定に戻す。

　［空間浮遊映像表示システムおよび表示方法］
　図２９は、実施例５での空間浮遊映像表示システムおよび表示方法に関する説明図である。図２９のシステム２９００は、空間浮遊映像表示装置１０００と携帯端末２０００とが通信接続される空間浮遊映像表示システムである。図２９を用いて実施例５の概要を説明する。

　状態Ａは、空間浮遊映像表示装置１０００と携帯端末２０００との通信接続後に、例えば携帯端末２０００の画面２００５の画像２９０１を、空間浮遊映像表示装置１０００の空間浮遊映像３（表示範囲３Ｒ）にも画像２９０２として表示する場合を示す。状態Ａは、携帯端末２０００側の画像２９０１と空間浮遊映像３側の画像２９０２との二重表示の状態である。この二重表示は、同じ画像データに基づいて、各装置の画面に各態様の画像２９０１，２９０２として表示する状態である。

　状態Ｂは、状態Ａから、例えばユーザ２３０が携帯端末２０００の画面２００５の画像２９０１に対するタッチ操作をした場合を示す。図２９の例では、本システムは、接続後の設定（後述のあるモード）として、携帯端末２０００側の操作検出を有効、空間浮遊映像３側の操作検出を無効、として設定しているとする。画像２９０１は、タッチ操作を受け付けるオブジェクトであり、当該画像２９０１に対応付けて予め規定されている所定の処理、例えば表示更新、が実行される。本例では、画像２９０１のタッチ操作および検出が有効と判定されるので、表示更新により、画像２９０１は、画像２９０３に変化する。

　つぎに、本システムは、携帯端末２０００側の画像２９０１のタッチ操作の検出および表示更新に基づいて、空間浮遊映像表示装置１０００側に通信で連携し、同期制御として、空間浮遊映像３側の画像２９０３にも、そのタッチ操作に応じた処理を反映する。すなわち、タッチ操作の結果として、空間浮遊映像３側の画像２９０２も、表示更新が行われる。表示更新により、画像２９０２は、画像２９０４に変化する。このように、携帯端末２０００側が有効の設定の場合、ユーザ２３０が携帯端末２０００側でユーザ操作をすれば、空間浮遊映像３側にも当該ユーザ操作を反映できる。

　他方で、ユーザ２３０が、空間浮遊映像３側に表示されている画像２９０２に対しタッチ操作をした場合、空間浮遊映像３側での操作検出が無効の設定であるため、本システムは、当該タッチ操作を空間浮遊映像３側の画像２９０２および携帯端末２０００側の画像２９０１には反映しない。結果として、両方とも表示更新は行われないので、空間浮遊映像３側の画像２９０２および携帯端末２０００側の画像２９０１の状態のままとなる。

　図２９のシステム２９００は、上記例のような設定・制御を行うための機能として、二重表示機能２９１０、同期制御機能２９２０、および操作検出制御機能２９３０を備える。

　二重表示機能２９１０は、通信接続に応じて、空間浮遊映像表示装置１０００の空間浮遊映像３による画面に表示されている画像／映像を、携帯端末２０００の画面に表示する機能、および／または、携帯端末２０００の画面に表示されている画像／映像を、空間浮遊映像表示装置１０００の空間浮遊映像３による画面に表示する機能である。同期制御機能２９２０は、二重表示による各装置の画面の表示画像について、一方の装置の画面にユーザ２３０がタッチ操作等の操作をした場合に、その操作に対応して実行される所定の処理（言い換えると、表示制御処理、システム処理）を、通信を介して、他方の装置の画面の表示画像にも反映するように同期する機能である。なお、同期制御機能２９２０を二重表示機能２９１０の一部として統合して捉えてもよい。

　さらに、操作検出制御機能２９３０は、各装置の画面の表示画像に対するタッチ操作等の操作とその操作に応じて実行される所定の処理に関して、空間浮遊映像表示装置１０００側の操作・検出・表示制御と、携帯端末２０００側の操作・検出・表示制御とにおける、どちら側または両方を有効／無効にするか、設定および制御する機能である。

　［二重表示機能］
　図３０は、図２９の二重表示機能２９１０に関する説明図である。状態Ａは、二重表示の第１例として、空間浮遊映像表示装置１０００の空間浮遊映像３に表示される画像Ａを、携帯端末２０００の画面２００５にも画像Ａとして表示する場合を示している。最初、空間浮遊映像表示装置１０００の空間浮遊映像３に、画像３００２として画像Ａが表示されている。ユーザ２３０は、携帯端末２０００を空間浮遊映像表示装置１０００に通信接続する。空間浮遊映像表示装置１０００は通信で画像Ａに対応する画像データを携帯端末２０００に送信し、携帯端末２０００は、空間浮遊映像表示装置１０００から通信で画像Ａに対応する画像データを取得し、画面２００５に画像３００１として画像Ａを表示する。ユーザ２３０は、空間浮遊映像３の画像Ａを見ることができるとともに、携帯端末２０００の画面２００５での対応する画像Ａを見ることができる。

　状態Ｂは、二重表示の第２例として、携帯端末２０００の画面２００５に表示される画像Ｂを、空間浮遊映像表示装置１０００の空間浮遊映像３にも画像Ｂとして表示する場合を示している。最初、携帯端末２０００の画面２００５に、画像３００３として画像Ｂが表示されている。ユーザ２３０は、携帯端末２０００を空間浮遊映像表示装置１０００に通信接続する。携帯端末２０００は、通信で画像Ｂに対応する画像データを空間浮遊映像表示装置１０００に送信し、空間浮遊映像表示装置１０００は携帯端末２０００から画像Ｂに対応する画像データを取得し、空間浮遊映像３に画像３００４として画像Ｂを表示する。ユーザ２３０は、携帯端末２０００の画面２００５での画像Ｂを見ることができるとともに、空間浮遊映像３での対応する画像Ｂを見ることができる。

　［画像データの取得に関する変形例］
　図３０や後述の図３２Ｂのように、空間浮遊映像表示装置１０００から携帯端末２０００への方向で、対象画像データを送信すること、あるいはその逆方向で、対象画像データを送信すること、には限定されない。変形例では、例えば、空間浮遊映像表示装置１０００から、携帯端末２０００へ、対象画像のＩＤ情報を送信する。携帯端末２０００は、受信したＩＤ情報から、当該携帯端末２０００がメモリに保持している対象画像データを特定し、特定した画像データに基づいて、画面２００５に対象画像を表示する。あるいは、携帯端末２０００は、受信したＩＤ情報（ＵＲＬ等でもよい）から、外部サーバ等を参照し、その外部サーバ等に保持されている対象画像データを特定し、その外部サーバ等から特定した画像データを取得し、その画像データに基づいて、画面２００５に対象画像を表示する。

　［基本制御フロー］
　図３１は、実施例５での空間浮遊映像表示システム（図２９のシステム２９００）および表示方法における基本制御フローを示す。空間浮遊映像表示装置１０００と携帯端末２０００との各装置の主体、特に、携帯端末２０００の制御部、および、空間浮遊映像表示装置１０００の映像処理部は、本実施例での制御に関する処理を行う。以下特に断りが無い場合、主体は同様である。

　ステップＳ１０は、空間浮遊映像表示装置１０００と携帯端末２０００とが通信接続前の状態（言い換えると非接続の状態）である。各装置は、任意の利用の状態である。なお、ステップＳ１０で、予めシステム設定やユーザ設定として、後述のモードの選択・設定があってもよい。

　ステップＳ１０の接続前の状態から、ステップＳ１１で、携帯端末２０００と空間浮遊映像表示装置１０００とが通信接続される。例えば、携帯端末２０００を所持するユーザ２３０の操作・動作に基づいて、携帯端末２０００が空間浮遊映像表示装置１０００に通信接続される。ここでの通信接続は、通信インタフェースを含め詳細を問わない任意の方式での接続である。この通信接続は、従来の一般的な方式のように、携帯端末２０００が空間浮遊映像表示装置１０００へ接続要求を送信して、空間浮遊映像表示装置１０００との間で接続を確立する方式でもよい。この通信接続は、前述の実施例３，４での特有の方式として、携帯端末２０００を空間浮遊映像３へ接触させることによる通信接続としてもよい。

　ステップＳ１２は、通信接続の直後の時点の処理や状態である。ステップＳ１２では、本システムの携帯端末２０００と空間浮遊映像表示装置１０００との各装置は、接続時の設定、言いかえると、接続直後の設定、本システムの接続後の状態に関する設定、接続後の設定、を行う。各装置は、相手装置との通信での連携に基づいて、自装置の「接続後の設定」を行う。この設定は、ハードウェア、ソフトウェア、機能等に関する設定を含む。この設定は、主に、図２９の操作検出機能２９３０における、各装置でのユーザ操作およびセンサ検出の有効／無効に関する設定である。この設定は、図２９の二重表示機能２９１０および同期制御機能２９２０に関して、各装置の画面に表示する画像に関する設定を含んでもよい。「接続後の設定」の詳細については後述する（図３２Ｂ）。

　この設定は、携帯端末２０００側での操作検出の設定としては、携帯端末２０００の画面に対するタッチ操作や回転操作に関する検出のためのセンサの有効／無効の設定を含む。また、この設定は、空間浮遊映像表示装置１０００側での操作検出の設定としては、空間浮遊映像３による画面（表示範囲３Ｒ）に対するタッチ操作や回転操作に関する検出のためのセンサの有効／無効の設定を含む。「接続後の設定」は、後述の通信接続解除となるまで続く。

　ステップＳ１２で、本システムは、後述のモードを選択・設定してもよい。例えば、いずれかの装置の画面に、モードの選択・設定のためのＧＵＩを表示し、ユーザ２３０がモードを選択・設定してもよい。

　ステップＳ１３は、接続後の設定の状態、言い換えると通信接続状態での、ユーザ２３０による本システムの各装置の利用の状態である。例えば、二重表示として、空間浮遊映像３側の表示画像が、携帯端末２０００側の画面にも表示される。あるいは、携帯端末２０００側の画像が、空間浮遊映像３側にも表示される。ユーザ２３０は、携帯端末２０００の画面での表示画像を利用し、また、空間浮遊映像表示装置１０００の空間浮遊映像３での表示画像を利用する。この際、各装置の画面の表示画像に対するタッチ操作や回転操作などのユーザ操作は、ステップＳ１２での接続後の設定に基づいて、有効／無効、同期などが制御される。例えば、ある設定のモードでは、携帯端末２０００側の表示画像に対するタッチ操作が有効となり、当該操作に応じて、各装置の表示画像の表示更新等の反応が生じるが、空間浮遊映像３側の表示画像に対するタッチ操作は無効となる。これにより、二重表示時の操作や検出が明確となり、ユーザ２３０は操作などがしやすい。各モードの詳細は後述する。

　ステップＳ１４で、携帯端末２０００と空間浮遊映像表示装置１０００との通信接続が解除される。例えば、携帯端末２０００を所持するユーザ２３０の操作・動作に基づいて、携帯端末２０００が空間浮遊映像表示装置１０００から通信接続解除される。接続解除には、ユーザ２３０による意図的な切断、解除の操作の場合の他に、エラー等による意図的ではない切断・解除の場合も含まれる。ステップＳ１４により、本システムは、接続解除後の状態、言い換えると非接続状態となり、接続前の状態に戻る。

　ステップＳ１４の後、ステップＳ１５で、本システムの携帯端末２０００と空間浮遊映像表示装置１０００との各装置は、接続解除時の設定、言い換えると、接続解除直後の設定、本システムの接続前の状態に関する設定、接続前の設定を行う。この設定は、各装置のハードウェア、ソフトウェア、機能などに関する設定を含む。各装置は、自装置の「接続前の設定」を行う。この設定は、ステップＳ１０の接続前の状態に戻すことに相当する。例えば後述の図３２Ａの設定に戻される。なお、本システムは、ステップＳ１１，Ｓ１２の通信接続時に、「接続前の設定」をメモリに記憶しておき、ステップＳ１４，Ｓ１５の解除時に、メモリの情報に基づいて「接続前の設定」に戻すようにしてもよい。

　［接続前後の表示および設定の例］
　図３２Ａおよび図３２Ｂは、本システムにおける携帯端末２０００と空間浮遊映像表示装置１０００との通信接続の前後の表示および設定の例（言い換えるとモードやパターン）を表形式でまとめた説明図である。

　図３２Ａは、接続前の表示・設定の例を示す。この設定は図３１のステップＳ１０の状態と対応する。表において、本システムの接続前の設定として、携帯端末２０００（表ではＭＴと略称）と空間浮遊映像表示装置１０００（表ではＡＤと略称）との各設定を示している。空間浮遊映像表示装置１０００は、空間浮遊映像３の画面に、所定の画像、例えばユーザ２３０によって選択された画像Ａ（言い換えるとコンテンツＡ）を表示する。携帯端末２０００は、表示パネルの画面に、所定の画像、例えばユーザ２３０によって選択された画像Ｂ（言い換えるとコンテンツＢ）を表示する。画像Ａと画像Ｂは、異なる画像／コンテンツである。空間浮遊映像表示装置１０００側において、画面の画像Ａに対するタッチ操作および検出に使用されるのは、ＡＤに備えるタッチセンサ（後述）であり、画面の画像Ａに対する回転操作および検出に使用されるのは、ＡＤに備える姿勢センサ（後述）である。携帯端末２０００側において、画面の画像Ｂに対するタッチ操作および検出に使用されるのは、ＭＴに備えるタッチセンサ（後述）であり、画面の画像Ｂに対する回転操作および検出に使用されるのは、ＭＴに備える姿勢センサ（後述）である。

　接続前は、２つの装置（ＭＴ，ＡＤ）は独立しているので、図３２Ａは、それぞれの装置での一般的なセンサ等の技術の適用を整理して図示しているだけである。

　図３２Ｂは、接続後の表示・設定の例を示す。この設定は図３１のステップＳ１２の設定と対応する。表において、本システムの接続後の設定として、携帯端末２０００（ＭＴ）と空間浮遊映像表示装置１０００（ＡＤ）との各装置の各画面の表示画像と、タッチ操作および検出に使用するタッチセンサ（言い換えるとどちらの装置での操作および検出を有効にするか）と、回転操作および検出に使用する姿勢センサ（言い換えるとどちらの装置での操作および検出を有効にするか）との設定を示している。

　図３１のステップＳ１２の接続時の設定は、図３２Ｂのような「接続後の設定」にすることに相当する。この設定は、後述の画像データ格納元の選択の設定を含む。

　なお、「タッチ操作検出　タッチセンサ」列および「回転操作検出　姿勢センサ」列での有効とする装置／センサの設定は、どちらの装置でのユーザ操作および当該操作に応じた反応を有効とするかを規定するものであり、各種のセンサデバイス（タッチセンサおよび姿勢センサ）の通常使用を妨げるものではない。無効として設定された側の装置のセンサデバイスも、通常の検出動作自体（例えばタッチ検出信号の生成や出力等）は行われ、既存の様々な機能に使用される。無効の設定の場合には、例えばタッチ操作の検出・判定に応じた所定の処理が実行されない。

　なお、表中の「タッチセンサ」および「姿勢センサ」は、各装置の各画面の表示画像に対するタッチ操作や回転操作を検出するための任意のセンサ類を指し、実装に応じて異なる所定のハードウェアおよびソフトウェアを含み、詳細を限定しない。

　なお、本システムの実装によっては、空間浮遊映像表示装置１０００の筐体１１９０に姿勢センサ１１１３（図３）を備えていなくてもよい。筐体１１９０および空間浮遊映像３（表示範囲３Ｒ）が特定の向きで固定的に設置される場合には、筐体１１９０および空間浮遊映像３の姿勢の検出は必須ではないためである。この形態の場合には、図３２Ｂの表の「姿勢センサ」列に関する回転操作の制御については、対象外とされると捉えればよい。言い換えると、この形態の場合には、空間浮遊映像表示装置１０００（ＡＤ）側での表示画像に対する回転操作に関する制御を行わない。

　図３２Ｂにおいて、複数の例（言い換えるとモード）の大別としては以下である。例１から例６までは、図３０の状態Ａのように、空間浮遊映像３側に表示されている画像Ａを、携帯端末２０００側の画面にも画像Ａとして表示する例である。ユーザ２３０は、それらの両方の画像Ａを見ることができる。例７から例１２までは、図３０の状態Ｂのように、携帯端末２０００側の画面に表示されている画像Ｂを、空間浮遊映像３側にも画像Ｂとして表示する例である。ユーザ２３０は、それらの両方の画像Ｂを見ることができる。

　また、各例、モードにおいて、右側の列に示すように、どちら側の装置の操作および検出を有効にするか設定される。本実施例では、制御対象とするユーザ操作は、大別して、タッチ操作と回転操作とに分けている（後述の図４２）。各装置は、タッチ操作の検出のために使用するタッチセンサと、回転操作の検出のために使用する姿勢センサ（言い換えると回転センサ）とを有する。各操作および検出について、表の「タッチ操作検出　タッチセンサ」列は、ＡＤ側とＭＴ側とのどちらの装置のタッチセンサを有効として設定するかを示す。表の「回転操作検出　姿勢センサ」列は、ＡＤ側とＭＴ側とのどちらの装置の姿勢センサを有効として設定するかを示す。例えば、例１の行では、ＡＤ側のタッチセンサが有効、および、ＡＤ側の姿勢センサが有効として設定される。この設定は、言い換えると、ＭＴ側のタッチセンサが無効、および、ＭＴ側の姿勢センサが無効ということである。また、例えば、例４の行では、ＭＴ側のタッチセンサが有効、および、ＭＴ側の姿勢センサが有効として設定される。この設定は、言い換えると、ＡＤ側のタッチセンサが無効、および、ＡＤ側の姿勢センサが無効ということである。また、例５や例６では、表の「タッチ操作検出　タッチセンサ」列は、「ＡＤまたはＭＴ」と記載している。この記載は、ＡＤ側のタッチセンサとＭＴ側のタッチセンサとの両方が有効であることを示す。各例の具体的な動作については後述する。

　［各モードの利用に関して］
　図３２Ｂに示した各種の例、モードは、本システムの設計または設定において少なくとも１つを実装して利用可能とする。１つのモードのみが固定的に実装・設定されているシステムとしてもよいし、複数のモードが選択利用可能に実装・設定されているシステムとしてもよい。後者の場合、本システムは、図３２Ｂの表に示す各種の設定の例、モードを予め規定・用意し、それらのモードを適宜に切り替えるように制御する。本システムでは、ユーザ２３０が、使用するモードを、ユーザ設定などで選択・設定できるようにしてもよい。

　［モード選択・設定の画面例］
　図３３は、ユーザ２３０が上記モードを選択・設定できるように、ユーザ設定のＧＵＩを提供する場合の画面表示例を示す。図３３の例は、携帯端末２０００の画面２００５において、モードの選択を可能とするＧＵＩ３３００を表示する例である。これに限らず、同様に、空間浮遊映像３でのＧＵＩを提供してもよい。また、本例では、図３２Ｂのモード１～４からの選択の場合を示しているが、これに限らず、ＧＵＩ画面では、図３２Ｂのような表や詳細情報を表示して、各モードを選択可能としてもよい。

　図３３の例では、図３０の状態Ａのように、空間浮遊映像３側の画像Ａを携帯端末２０００側にも取得して二重表示する場合に、「表示画像に対する操作・検出のモードの設定」として、図３２Ｂの例１～４に対応した、タッチ操作（タッチセンサ）および回転操作（姿勢センサ）の有効／無効に関するモード１～４を選択肢として表示し、ユーザ２３０の操作によるモード選択を可能としている。例えばモード４が選択されて、現在のモードとしてモード４が設定されている。

　図３４は、上記モードの選択・設定に関する、図３３とは別の表現によるＧＵＩの例を示している。図３４の例では、携帯端末２０００の画面２００５のＧＵＩ３４００において、「表示画像に対する操作・検出のモードの設定」として、タッチ操作と回転操作のそれぞれに関して、携帯端末２０００（ＭＴ）側と空間浮遊映像３（ＡＤ）側とのどちらの装置あるいは両方の装置の操作・検出を有効にするか、使用するかを、リストボックス等のＧＵＩを用いて選択設定可能としている。これらの選択設定が、モードの選択設定に相当する。例えばタッチ操作についてＭＴのみ、回転操作についてＭＴのみ、が選択されており、これはモード４に相当する。

　本例は、ユーザ操作をタッチ操作と回転操作とに分けてそれぞれ設定可能な場合であるが、タッチ操作のみの設定が可能な形態、回転操作のみの設定が可能な形態としてもよい。また、本例では、回転操作に関しては、一方の装置の回転操作しか有効として選択できないものとしているが、これに限らず、両方の装置の回転操作を選択できるようにすることも可能である。

　［機能ブロック構成例］
　図３５は、本システムの機能ブロック構成例を示す。図２９のような各機能を実現する構成例を示す。携帯端末２０００は、制御部（プロセッサ）２００１、メモリ２００２、通信インタフェース２００３、センサ２００４、表示画面（画面）２００５などを備え、これらはバス等の所定のアーキテクチャで相互に接続されている。制御部（プロセッサ）２００１は、プロセッサによるプログラム等の処理の実行に基づいて、所定の制御機能２０１１を実現する。この制御機能２０１１は、図２９での二重表示機能２９１０、同期制御機能２９２０、および操作検出制御機能２９３０を含む。制御機能２０１１は、携帯端末２０００側で必要な機能部分を実装したものである。メモリ２００２には、画像データ２０２１、センサ検出情報２０２２、設定情報２０２３などが記憶される。センサ２００４は、タッチセンサ２００６および姿勢センサ２００７を含む。

　空間浮遊映像表示装置１０００は、映像処理部（プロセッサ）１０００１、メモリ１０００２、通信インタフェース１０００３、ユーザ操作検出機構１０００４、表示部１０００５、光学システム１０００６、表示画面１０００７（表示範囲３Ｒ）などを備え、これらはバス等の所定のアーキテクチャで相互に接続されている。制御部（プロセッサ）１０００１は、プロセッサによるプログラム等の処理の実行に基づいて、所定の制御機能１００１１を実現する。この制御機能１００１１は、図２９での二重表示機能２９１０、同期制御機能２９２０、および操作検出制御機能２９３０を含む。制御機能１００１１は、空間浮遊映像表示装置１０００側で必要な機能部分を実装したものである。メモリ１０００２には、画像データ１０２１、センサ検出情報１０２２、設定情報１０２３などが記憶される。ユーザ操作検出機構１０００４は、タッチセンサ１０００８および姿勢センサ１０００９を含む。

　映像処理部１０００１は、映像処理を行って作成した画像データに基づいて、表示部１０００５の画面に画像／映像を表示する。表示部１０００５に表示された画像／映像に基づいて、出射した映像光は、光学システム１０００６を経由して調整された後、表示画面１０００７である表示範囲３Ｒに結像し、空間浮遊映像３を形成する。

　携帯端末２０００側の制御機能２０１１と、空間浮遊映像表示装置１０００側の制御機能１００１１とは、互いに適宜に通信を介して連携する。各装置のメモリに記憶される画像データ、センサ検出情報、および設定情報は、適宜に自装置から相手装置へ送信されてもよい。

　ユーザ２３０は、携帯端末２０００側の表示画面２００５に対しタッチ操作等のユーザ操作を行う。センサ２００４は、その操作を検出する。制御部２００１は、検出した操作に応じた表示制御処理を実行する。また、ユーザ２３０は、空間浮遊映像表示装置１０００側の表示画面１０００７（空間浮遊映像３）に対しタッチ操作等のユーザ操作を行う。ユーザ操作検出機構１０００４は、その操作を検出する。映像処理部１０００１は、検出した操作に応じた表示制御処理を実行する。

　携帯端末２０００側の画像データ２０２１は、表示画面２００５に画像／映像を表示するための画像データである。センサ検出情報２０２２は、センサ２００４で検出した情報である。設定情報２０２３は、図２９の操作検出制御機能２９３０による図３２Ｂのようなモードの設定に関する設定情報である。同様に、空間浮遊映像表示装置１０００側の画像データ１０２１は、表示部１０００５の画面に画像／映像を表示するための画像データである。センサ検出情報１０２２は、ユーザ操作検出機構１０００４のセンサで検出した情報である。設定情報１０２３は、図２９の操作検出制御機能２９３０による図３２Ｂのようなモードの設定に関する設定情報である。

　例えば、携帯端末２０００側の制御機能２０１１は、選択されたモードに対応して、通信接続後の携帯端末２０００の設定を行い、この設定の設定情報２０２３をメモリ２００２に保存する。この設定は、表示画面２００５の表示画像に対するユーザ操作、当該ユーザ操作に関するセンサ２００４を用いた検出、および当該ユーザ操作に対応した表示制御処理についての、有効／無効に関する設定を含む。同様に、空間浮遊映像表示装置１０００側の制御機能１００１１は、選択されたモードに対応して、通信接続後の空間浮遊映像表示装置１０００の設定を行い、この設定の設定情報１０２３をメモリ１０００２に保存する。この設定は、表示画面１０００７の表示画像に対するユーザ操作、当該ユーザ操作に関するユーザ操作検出機構１０００４を用いた検出、および当該ユーザ操作に対応した表示制御処理についての、有効／無効に関する設定を含む。

　なお、図３５と図１７の携帯端末２０００の構成例との対応を述べると以下である。図３５での制御部２００１は、図１７での制御部２００１１や映像制御部２００１７と対応している。メモリ２００２は、メモリ２００２６や不揮発性メモリ２００２７やストレージ部２００１６と対応している。通信インタフェース２００３は、通信部２００２０と対応している。センサ２００４におけるタッチセンサ２００６は、表示パネル２００１２（タッチパネル）に内蔵するタッチセンサに対応している。姿勢センサ２００７は、姿勢センサ２００１８と対応している。表示画面２００５は、表示パネル２００１２と対応している。

　図３５と図３の空間浮遊映像表示装置１０００の構成例との対応を述べると以下である。図３５での映像処理部１０００１は、図３での制御部１１１０や映像制御部１１６０と対応している。メモリ１０００２は、メモリ１１０９や不揮発性メモリ１１０８やストレージ部１１７０と対応している。通信インタフェース１０００３は、通信部１１３２と対応している。ユーザ操作検出機構１０００４におけるタッチセンサ１０００８は、空中操作検出センサ１３５１、空中操作検出部１３５０、撮像部１１８０等と対応している。姿勢センサ１０００９は、姿勢センサ１１１３と対応している。表示部１０００５は、表示装置１、特に映像表示部１１０２と対応している。光学システム１０００６は、再帰反射部１１０１等と対応している。表示画面１０００７は、空間浮遊映像３の表示範囲３Ｒと対応している。

　［画面および画像のアスペクト比］
　図３６は、図３２Ｂの各モードの具体例の説明のために、空間浮遊映像表示装置１０００と携帯端末２０００との各装置の画面および画像のアスペクト比についての例を示す。

　状態Ａは、空間浮遊映像表示装置１０００の空間浮遊映像３の画面（表示範囲３Ｒ）のアスペクト比の構成例を示し、特に、横長の画面の場合、および横長のコンテンツ画像の場合を示す。本例では、空間浮遊映像表示装置１０００のアスペクト比、言い換えると空間浮遊映像３の画面（表示範囲３Ｒ）のアスペクト比は、標準的な設置状態において、一般的なディスプレイと同様に、１６：９や１６：１０などの、横長アスペクト比であるものとする。画面（表示範囲３Ｒ）の横幅をＷ１、縦幅をＨ１で示す。他の実装や設置状態では、空間浮遊映像３の画面（表示範囲３Ｒ）のアスペクト比を縦長とすることも可能である（後述）。空間浮遊映像３の正面視のｘ－ｙ平面図において、画面（表示範囲３Ｒ）は、図示のように横長アスペクト比である。画面に表示されている画像（コンテンツ画像）３６０１は、図示のように、横長アスペクト比の画像である。本例では、画面の横幅サイズに画像３６０１の横幅サイズを合わせるようにして表示されている。なお、本例では画像３６０１に含まれているキャラクター画像部分のみを見ると縦長である。本例では画像３６０１にキャラクター画像のみが含まれているが、背景画像などが含まれている場合もある。

　状態Ｂは、携帯端末２０００の画面２００５のアスペクト比の構成例として、携帯端末２０００の筐体の縦配置の場合１である。携帯端末２０００の筐体が縦長であり、ユーザ２３０から携帯端末２０００の画面２００５を正面視した場合のｘ－ｙ平面図において、画面２００５は、縦方向（ｙ方向）の長さが横方向（ｘ方向）の長さよりも長い、縦長アスペクト比の画面である。画面２００５の横幅をＷ２、縦幅をＨ２で示す。状態Ｂでは、筐体における縦長の方の辺がｙ方向（例えばユーザ２３０から見た鉛直方向と対応）に沿って配置されており、これを縦配置と記載している。画面２００５に表示される画像３６０２は、画像３６０１と同様に横長アスペクト比の画像である。本例では、アプリケーションやＷｅｂサイト等の表示としてよくある例として、画面２００５の横幅サイズ（Ｗ２）に画像３６０２の横幅サイズを合わせるようにして表示されている。

　状態Ｃは、携帯端末２０００の画面２００５のアスペクト比の構成例として、携帯端末２０００の筐体の縦配置の場合２である。場合２は、画面２００５内に、画像３６０２を拡大して、画像３６０２の一部（例えばキャラクター画像部分）を、画像３６０３として表示する例である。本例では、画面２００５の横幅サイズにキャラクター画像部分の横幅サイズを合わせるようにして表示されている。

　状態Ｄは、携帯端末２０００の画面２００５のアスペクト比の構成例として、携帯端末２０００の筐体の横配置の場合１である。状態Ｄでは、状態Ｂの筐体における縦長の方の辺がｘ方向（例えばユーザ２３０から見た水平方向と対応）に沿って配置されており、これを横配置と記載している。画面２００５に表示される画像３６０４は、画像３６０１と同様に横長アスペクト比の画像である。本例では、画面２００５の横幅サイズ（Ｈ２）に画像３６０４の横幅サイズを合わせるようにして表示されている。

　ユーザ２３０は、携帯端末２０００を所望の状態として利用する。例えば、状態Ｂの表示画像に対し、状態Ｄの表示画像の方が、より大きく表示された状態で視認できる。また、二重表示の場合に、ユーザ２３０は、所望の装置の方の表示画像を視認できる。例えば、状態Ｄの表示画像に対し、状態Ａの空間浮遊映像３での表示画像の方が、より大きく表示された状態で視認できる。図３６の例では、携帯端末２０００の画面２００５のサイズよりも、空間浮遊映像３の画面（表示範囲３Ｒ）のサイズの方が大きい場合を示したが、これに限らずに可能である。

　なお、図３６で例示しているように、ユーザ２３０が、最初例えば状態Ｂのような携帯端末２０００の縦配置の状態で画像３６０２を見ているとする。画像３６０２は相対的に小さいサイズで画面２００５内に表示されているので、ユーザ２３０が、より大きいサイズで画像を見たい場合には、筐体を例えば９０度回転させて、横配置の状態にして画像３６０４を見ることができる。携帯端末２０００は、状態Ｄのように、画面２００５内に画像３６０４をより大きいサイズとして表示する。この際、携帯端末２０００は、一般的な動作・機能としては、姿勢センサの出力情報（検出情報）が変化し、画面２００５内に表示する画像の画像データの表示レイアウトを状態Ｂから状態Ｄのように変更する。この場合、回転前後で画像の上下の関係（例えばキャラクターの頭と足の関係）は維持されている。

　なお、携帯端末２０００の機能・設定・操作等に応じては、状態Ｅのような表示状態にすることもできる。状態Ｅは例えば状態Ｃから筐体を９０度回転した場合である。これは、画面２００５内の画像の配置関係を、筐体の姿勢（姿勢検出情報）に依らずに固定する表示であり、これも一般的な機能（例えばスマートフォンでの「画面の向きのロックオン機能」）である。画像３６０５はキャラクターの例であるため、ユーザ２３０から見て自然ではない（頭と足が水平方向に配置されている）が、他のオブジェクト画像では、このように回転させた状態をユーザ２３０が見たい場合もある。

　［システム処理、表示制御処理］
　なお、各装置の画面の表示画像に対するタッチ操作等の検出・判定に応じて実行される所定の処理（言い換えるとシステム処理、表示制御処理）は、図２９のような表示変更（表示更新）の例に限らずに、予めコンテンツ画像および操作に対応付けて規定されている任意の処理が可能である。例えば、表示画像が、数字ボタンオブジェクトやＹＥＳボタンオブジェクトである場合に、当該オブジェクト画像のタッチ操作／タップ操作／押し込み操作等に応じて、所定の処理として、決定処理、数字入力やＹＥＳ入力が実行される。また、例えば、表示画像が、キャラクター画像である場合に、当該オブジェクト画像のスライド操作等に応じて、所定の処理として、取り消し処理が実行される。

　［２つの装置での画像表示と画像データ格納元］
　図４１は、空間浮遊映像表示装置１０００（ＡＤ）と携帯端末２０００（ＭＴ）との各装置の各画面での画像表示の例（言い換えるとパターン）と、それに対応した画像データ格納元の選択とについて、表にまとめた説明図である。＃１の行で示すパターンでは、空間浮遊映像表示装置１０００（ＡＤ）の画面である空間浮遊映像３に表示する画像は、画像Ａ（言い換えるとコンテンツＡ）であり、携帯端末２０００（ＭＴ）の画面には画像を表示しない（「非表示」で示す）。このパターンの場合、本システムは、前述の二重表示および同期制御（図２９）を行わない（ＯＦＦで示す）。接続後に、空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像のデータ格納元（言い換えるとデータ格納元の選択）は、画像Ａのデータ格納元として空間浮遊映像表示装置１０００（ＡＤ）であり、詳しくはＡＤのメモリ、アドレス、ファイル等である。

　＃２の行で示すパターンでは、携帯端末２０００（ＭＴ）の画面に表示する画像は、画像Ｂ（言い換えるとコンテンツＢ）であり、空間浮遊映像表示装置１０００（ＡＤ）の画面である空間浮遊映像３には画像を表示しない。この場合、本システムは、二重表示および同期制御（図２９）を行わない。接続後に、携帯端末２０００（ＭＴ）の画面に表示する画像のデータ格納元は、画像Ｂのデータ格納元として携帯端末２０００（ＭＴ）であり、詳しくはＭＴのメモリ、アドレス、ファイル等である。

　＃３の行で示すパターンでは、携帯端末２０００（ＭＴ）の画面に表示する画像は、画像Ｂであり、空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像は、画像Ａである。画像Ａと画像Ｂは独立した別の画像である。この場合、本システムは、二重表示および同期制御（図２９）を行わない。接続後に携帯端末２０００（ＭＴ）の画面に表示する画像のデータ格納元は、画像Ｂのデータ格納元として携帯端末２０００（ＭＴ）であり、接続後に空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像のデータ格納元は、画像Ａのデータ格納元として空間浮遊映像表示装置１０００（ＡＤ）である。

　＃４の行で示すパターンでは、空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像は、画像Ａであり、携帯端末２０００（ＭＴ）の画面に表示する画像は、ＡＤ側と同じ画像Ａであり、ＡＤ側から取得した画像Ａである。この場合、本システムは、二重表示および同期制御（図２９）を行う（ＯＮで示す）。接続後に、空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像のデータ格納元は、画像Ａのデータ格納元として空間浮遊映像表示装置１０００（ＡＤ）であり、接続後に、携帯端末２０００（ＭＴ）の画面に表示する画像のデータ格納元は、同じ画像Ａのデータ格納元として空間浮遊映像表示装置１０００（ＡＤ）である。

　＃５の行で示すパターンでは、携帯端末２０００（ＭＴ）の画面に表示する画像は、画像Ｂであり、空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像は、ＭＴ側と同じ画像Ｂであり、ＭＴ側から取得した画像Ｂである。この場合、本システムは、二重表示および同期制御（図２９）を行う。接続後に、携帯端末２０００（ＭＴ）の画面に表示する画像のデータ格納元は、画像Ｂのデータ格納元として携帯端末２０００（ＭＴ）であり、接続後に空間浮遊映像表示装置１０００（ＡＤ）の画面に表示する画像のデータ格納元は、同じ画像Ｂのデータ格納元として携帯端末２０００（ＭＴ）である。

　なお、上記例では、表示対象画像に関する画像データの格納元の選択について示したが、画像表示制御に関しては、格納元の画像データのみならず、当該画像のオブジェクトとタッチ操作等のユーザ操作とに応じて実行される所定の処理がある。その所定の処理の例が、前述の表示更新、画像回転、拡大縮小等である。そのため、画像表示制御に関しては、画像データ以外にも、所定の処理のために必要な、プログラムやテーブル等のデータ、表示変化後の画像データ、等がある場合もある。その場合、表示対象画像に対応付けられるデータ格納元のデータとしては、そのようなプログラム等のデータや表示変化後の画像データ等も含むものとする。

　なお、上記例では、画像データ格納元は、その画像データを最初に保持している装置と対応しているが、これに限らずに可能である。画像データ格納元を、外部のサーバ等とすることも可能である。例えば＃４のパターンで、画像Ａの最初のデータ格納元を、外部のサーバとしてもよい。また、例えば＃１のパターンで、空間浮遊映像表示装置１０００（ＡＤ）が表示する画像Ａは、最初からＡＤが保持している画像であるが、これに限らず、最初時には外部サーバや携帯端末２０００（ＭＴ）が保持している画像Ａを、通信でＡＤに転送・取得し、その画像ＡをＡＤが表示するようにしてもよい。

　［制御対象とする操作・動作］
　図４２は、本システムにおいて、各装置の各画面の表示画像に対する制御対象とする操作（ユーザ操作）、および当該操作を検出・制御するために使用するセンサなどについてまとめた表である。＃１の行で、制御対象とする操作は、タッチ操作であり、このタッチ操作は、例えばタッチ、タップ、スライド、ピンチ等の操作の総称である。このタッチ操作は、詳細は異なるが、空間浮遊映像表示装置１０００（ＡＤ）側と携帯端末２０００（ＭＴ）側とのいずれでも可能な操作である。このタッチ操作を検出・制御するためのセンサとしては、空間浮遊映像表示装置１０００（ＡＤ）側では、ＡＤが具備するタッチセンサ（図３５のタッチセンサ１０００８）である。このＡＤ側のタッチセンサは、空中操作検出センサ１３５１や撮像部１１８０のカメラ等を含む総称である。また、このセンサは、携帯端末２０００（ＭＴ）側では、ＭＴが具備するタッチセンサ（図３５でのタッチセンサ２００６）である。

　＃２の行で、制御対象とする操作は、タッチ操作であり、このタッチ操作は、特に、押し込み操作である。この押し込み操作は、画面から奥側に手指を侵入する操作である。そのため、この押し込み操作は、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３による画面に対応したタッチセンサでは検出可能であるが、携帯端末２０００（ＭＴ）側では物理的な画面であるため検出不可である。もしくは、この押し込み操作は、画面に対する押圧の操作とする場合で、携帯端末２０００（ＭＴ）側に押圧センサを具備する場合には、ＭＴ側で検出可能である。逆に言うと、ＭＴ側の物理的な画面に対する押圧の操作は、ＡＤ側では検出不可である。

　＃２の例のように、空間浮遊映像表示装置１０００（ＡＤ）側では検出可能であるが携帯端末２０００（ＭＴ）側では検出できない種類の操作や、ＭＴ側では検出可能であるがＡＤ側では検出できない種類の操作もある。このような操作の場合には、当該操作を検出可能なセンサ・機構を備える側を制御対象として設定すればよい。

　＃３の行では、制御対象とする操作は、回転操作であり、この回転操作は、特に、タッチ操作によって実現される場合の操作である。この回転操作は、画面に対して所定のタッチ操作、例えばタッチした指で弧を描くような操作をすることで、表示画像を回転させるための操作である。この回転操作は、タッチ操作の一種であるため、空間浮遊映像表示装置１０００（ＡＤ）側および携帯端末２０００（ＭＴ）側のそれぞれでのタッチセンサによって検出できる。

　＃４の行では、制御対象とする操作は、回転操作であり、この回転操作は、特に、タッチ操作ではなく、装置の筐体の回転によって実現される場合の操作である。この回転操作は、携帯端末２０００（ＭＴ）側の場合には、ユーザ２３０が筐体を持って空間内で筐体を回転させる操作・動作である（図３９の例）。この回転操作を検出するセンサとしては、空間浮遊映像表示装置１０００（ＡＤ）側では、ＡＤが具備する姿勢センサ（図３５での姿勢センサ１０００９）であり、携帯端末２０００（ＭＴ）側では、ＭＴが具備する姿勢センサ（図３５での姿勢センサ２００７）である。ＭＴが具備する姿勢センサは、方位センサ、ジャイロセンサ、加速度センサ等を含む。ＡＤ側の場合で、環境に筐体が固定的に設置されている場合には、この回転操作は不可となるが、人が筐体の向きを変えて設置する際に、筐体に具備する姿勢センサによって、空間浮遊映像３を含むＡＤの姿勢・回転の状態を検出可能である（後述）。また、筐体に、空間浮遊映像３の平面（表示範囲３Ｒ）の形成の位置・姿勢を変更する機械的な機構があってもよく、その場合にも、その機構に係わる姿勢センサによって、空間浮遊映像３の平面の姿勢・回転の状態を検出可能である（後述）。なお、前述のように、ＡＤに姿勢センサを具備していない形態の場合には、当該姿勢センサを用いる制御は対象外となる。

　上記例のように、制御対象とする操作に応じて、使用可能なセンサ類がある。本システムにおける操作検出制御機能２９３０（図２９）は、制御対象とする操作、および使用するモードの設定に応じて、使用するセンサ類とそれを用いた処理を、有効／無効に制御する。

　［空間浮遊映像表示装置の姿勢］
　図４３は、空間浮遊映像表示装置１０００および空間浮遊映像３の姿勢の状態の例を示す。状態Ａは、姿勢１として、図２Ａや図１９Ｅのような方式で実装された筐体１１９０の横置きの場合を示す。床４３００の上に空間浮遊映像表示装置１０００の筐体１１９０が横置きで設置されている。空間浮遊映像３の表示範囲３Ｒ（ｘ－ｙ平面）は、姿勢としては、図示のように、光軸が斜め上に向いた状態で配置されている。ユーザ２３０は、矢印Ａの方向（斜め下方向）で空間浮遊映像３を好適に視認できる。

　状態Ｂは、姿勢２として、筐体１１９０の縦置きの場合を示す。床４３００の上に空間浮遊映像表示装置１０００の筐体１１９０が縦置きで設置されている。空間浮遊映像３の表示範囲３Ｒ（ｘ－ｙ平面）は、姿勢としては、図示のように、光軸が斜め上に向いた状態で配置されている。ユーザ２３０は、矢印Ｂの方向（斜め下方向）で空間浮遊映像３を視認できる。

　ユーザ２３０は、環境などに応じて、空間浮遊映像表示装置１０００を状態Ａまたは状態Ｂの設置状態として利用する。また、ユーザ２３０は、必要に応じて、例えば状態Ａから状態Ｂへの設置状態の変更、言い換えると姿勢・向きの変更をしてもよい。例えば、状態Ａから状態Ｂへの姿勢変更は、筐体１１９０の９０度の回転である。

　筐体１１９０に備える姿勢センサ１０００９は、筐体１１９０の姿勢、言い換えると回転の状態を検出する。筐体１１９０の姿勢と空間浮遊映像３の姿勢とが対応関係を有しているので、姿勢センサ１０００９の検出情報から、空間浮遊映像３の姿勢を検出・計算可能である。なお、姿勢は、例えば座標系の各軸の向き等で表現できる。

　なお、筐体１１９０が大型の場合、空間浮遊映像表示装置１０００の設置の姿勢は、初期の導入時の設置の状態で固定的となることが多いが、設置状態変更は可能である。また、筐体１１９０が小型の場合、ユーザ２３０が適宜に筐体１１９０の姿勢を変更することが可能である。

　図４４は、同様であるが、図２Ｄのような再帰反射部材５を用いた方式で実装された筐体１１９０の場合の姿勢の例であり、床４３００の上に筐体１１９０が横置きで配置されている。空間浮遊映像３の表示範囲３Ｒ（ｘ－ｙ平面）は、姿勢としては、図示のように、光軸が斜め上に向いた状態で配置されている。ユーザ２３０は、矢印Ａの方向（斜め下方向）で空間浮遊映像３を好適に視認できる。

　図４５は、変形例として、空間浮遊映像表示装置１０００が、自身の姿勢変更が可能な機構を備える場合を示す。図示の例では、筐体１１９０Ａ（言い換えると内部筐体）の外側に、回転軸１１９０Ｃを通じて筐体１１９０Ａを回転可能に支持する筐体１１９０Ｂ（言い換えると外部筐体）を備える。図示の例では、筐体１１９０Ｂの左右側面板のみを簡易的に図示している。このような機構により、筐体１１９０Ａを回転させて姿勢を変更でき、すなわち、空間浮遊映像３の姿勢を変更できる。図示の例の設置状態では、ユーザ２３０が矢印Ｃの方向（水平方向、Ｙ方向）で空間浮遊映像３を好適に視認できる。筐体１１９０Ａに備える姿勢センサ１０００９によって、筐体１１９０Ａおよび空間浮遊映像３の姿勢を検出できる。

　［具体例］
　つぎに、図３２Ｂの各例、モードについて、順に具体例を説明する。

　［モード１：説明（１）］
　図４６は、図３２Ｂの例１、モード１の場合について、本システムの携帯端末２０００（ＭＴ）と空間浮遊映像表示装置１０００（ＡＤ）との処理・動作等のシーケンスの具体例を示す。図４６は、特に、ＡＤ側のタッチ操作が有効であることを示す。最初、ステップＳ１０１の前は、接続前の状態である。左側に示す携帯端末２０００（ＭＴ）側の画面２００５には画像が表示されていないとする。なお、この非表示は、対象画像が表示されていないということであり、任意のアプリやＧＵＩ等の表示はあってもよい。なお、図３６のような縦配置の場合と横配置の場合とをまとめて示す。右側に示す空間浮遊映像表示装置１０００（ＡＤ）側の画面である空間浮遊映像３（表示範囲３Ｒ）には、画像Ａ（言い換えるとコンテンツＡ）が表示されているとする。本例では、空間浮遊映像３の画面（表示範囲３Ｒ）は、図３６のような横長アスペクト比の画面であり、画像Ａとして、横長アスペクト比のコンテンツ画像が表示されている。

　ステップＳ１０１で、携帯端末２０００（ＭＴ）が空間浮遊映像表示装置１０００（ＡＤ）に通信接続されたとする。なお、通信接続時に例えば携帯端末２０００から空間浮遊映像表示装置１０００に画像Ａの要求を行ってもよい。ステップＳ１０２で、本システムは、図３２Ｂの例１の行に示すような接続後の設定を行う。「接続後の設定」において、各装置の表示画像としては、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の表示画像は、画像Ａである。携帯端末２０００（ＭＴ）側の画面２００５の表示画像は、空間浮遊映像３側と同じ画像Ａである。画像Ａのデータ格納元はＡＤである。また、「接続後の設定」において、タッチ操作検出に使用する有効なタッチセンサはＡＤ側のタッチセンサ（図３５でのタッチセンサ１０００８）、回転操作検出に使用する有効な姿勢センサはＡＤ側の姿勢センサ（図３５での姿勢センサ１０００９）として設定される。ステップＳ１０２の接続後の設定は、言い換えると、ＡＤ側のタッチ操作および回転操作が有効であることに相当する。

　ステップＳ１０３で、例えば、空間浮遊映像表示装置１０００（ＡＤ）に格納されている画像Ａの画像データが、携帯端末２０００に送信・転送される。ステップＳ１０４で、携帯端末２０００は、取得した画像データに基づいて、画面２００５に画像Ａを表示する。これにより、図示のように、２つの装置での画像Ａの二重表示の状態となる。

　つぎに、ステップＳ１０５で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ａに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ１０６で、ＡＤ側のタッチセンサおよび映像処理部は、このタッチ操作を検出し、ステップＳ１０２の接続後の設定に従って、このタッチ操作を有効として判定する。

　ステップＳ１０７で、空間浮遊映像表示装置１０００（ＡＤ）側の映像処理部は、上記タッチ操作の有効に基づいて、画像Ａのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行する。これにより、画像Ａは例えば画像Ａｂに変化する。なお、ＡＤ側は、画像Ａおよび画像Ａｂに関する元データを保持しているので、画像Ａｂの生成が可能である。

　ステップＳ１０８で、空間浮遊映像表示装置１０００（ＡＤ）側の映像処理部は、表示更新に関する同期のために、ＡＤ側の画像Ａｂの画像データを、携帯端末２０００（ＭＴ）に送信・転送する。なお、ＭＴ側は、画像Ａおよび画像Ａｂに関する元データを保持していないので、画像Ａｂの生成が不可能である。そのため、ステップＳ１０８では、ＡＤ側の画像Ａｂの画像データを携帯端末２０００（ＭＴ）に送信するものである。

　ステップＳ１０９で、携帯端末２０００（ＭＴ）は、画像Ａｂの画像データを取得すると、画面２００５に画像Ａｂを表示することにより、ＭＴ側での表示更新を実現する。このようにして、モード１の設定に基づいて、２つの装置における画像Ａの二重表示および同期制御が実現される。特に、ＡＤ側の空間浮遊映像３に対するタッチ操作が行われると、そのタッチ操作に応じた表示制御を、ＡＤ側とＭＴ側との両方の画像Ａに反映することができる。

　［モード１：説明（２）］
　図４７は、モード１で、特に、ＡＤ側の回転操作が有効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。画像Ａは、回転に関する作用がわかりやすいように、円柱のオブジェクトである場合を示している。

　ステップＳ１２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ａに対する回転操作が行われたとする。例えば、空間浮遊映像３の姿勢変更として例えば９０度回転されたとする。この回転操作は、例えば図４３のように筐体１１９０が回転された場合が相当する。ステップＳ１２２で、ＡＤ側の姿勢センサおよび映像処理部は、この姿勢変更、回転操作を検出し、ステップＳ１０２の接続後の設定に従って、この回転操作を有効として判定する。

　ステップＳ１２３で、空間浮遊映像表示装置１０００（ＡＤ）側の映像処理部は、上記回転操作の有効に基づいて、当該回転操作に対応付けられた所定の処理を実行する。本例では、この所定の処理である画像回転では、横長画面内の画像Ａが、縦長画面内の回転後の画像Ａｃに変化する。ＡＤ側は、画像Ａおよび画像Ａｃに関する元データを保持しているので、当該画像Ａｃの生成が可能である。なお、本例では、この画像回転の処理では、空間浮遊映像３の画面内の表示画像の配置関係が維持される。そのため、画像Ａと画像Ａｃは実質同じであり、表示部１０００５（図３５）での表示は変更無い。

　ステップＳ１２４で、空間浮遊映像表示装置１０００（ＡＤ）側の映像処理部は、同期のために、回転後の画像Ａｃの画像データを携帯端末２０００（ＭＴ）に送信する。ステップＳ１２５で、携帯端末２０００（ＭＴ）は、取得した画像Ａｃの画像データに基づいて、画面２００５に画像Ａｃを表示する。これにより、携帯端末２０００（ＭＴ）側での画像回転として、画像Ａが回転後の画像Ａｃに変化する。

　変形例として、ステップＳ１２４で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、回転後の画像Ａｃの画像データを送信するのではなく、姿勢センサによる姿勢検出情報（言い換えると回転情報）のみを携帯端末２０００（ＭＴ）に送信するようにしてもよい。この場合、ステップＳ１２５で、携帯端末２０００（ＭＴ）は、取得した姿勢検出情報と取得済みの画像Ａのデータに基づいて、画像Ａから回転処理を行って回転後の画像Ａｂを生成し、画面２００５に表示する。

　このように、特に、ＡＤ側の空間浮遊映像３に対する回転操作が行われると、その回転操作に応じた表示制御を、ＡＤ側とＭＴ側との両方の画像Ａに反映することができる。回転操作後において、ＡＤ側の画像Ａｃと、ＭＴ側の画像Ａｃとは、ユーザ２３０から見て回転後の状態で表示されており、それらが整合している。

　オブジェクト画像に応じて、ユーザ２３０が回転後の状態を見たい場合がある。例えば、製品などの３次元オブジェクト画像を、回転操作に基づいて様々な方向から見て確認したい場合が挙げられる。その場合に、上記例のように、ユーザ２３０が一方の装置の画面に対する回転操作を行なえば、両方の装置の画面で、対象画像を回転後の状態にして見ることができ、便利である。

　［モード１：説明（３）］
　図４８は、モード１で、特に、ＭＴ側のタッチ操作が無効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。ステップＳ１３１で、携帯端末２０００（ＭＴ）側の画像Ａに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ１３２で、ＭＴ側のタッチセンサおよび制御部は、このタッチ操作を検出し、ステップＳ１０２の接続後の設定に従って、このタッチ操作を無効として判定する。

　ステップＳ１３３で、携帯端末２０００（ＭＴ）は、上記タッチ操作の無効に基づいて、画像Ａのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行しない。これにより、ＭＴ側の画像Ａは変化しない。また、携帯端末２０００（ＭＴ）は、空間浮遊映像表示装置１０００（ＡＤ）側に同期を行わない。すなわち、携帯端末２０００（ＭＴ）は、ＭＴ側のタッチ検出情報をＡＤ側に送信しない。これにより、ＡＤ側の画像Ａも変化しない。

　このように、モード１では、携帯端末２０００（ＭＴ）側のタッチ操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示の状態が維持される。

　［モード１：説明（４）］
　図４９は、モード１で、特に、ＭＴ側の回転操作が無効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。ステップＳ１４１で、携帯端末２０００（ＭＴ）側の画像Ａに対し、ユーザ２３０による回転操作が行われたとする。この回転操作は、例えば筐体の９０度回転である。ステップＳ１４２で、ＭＴ側の姿勢センサおよび制御部は、この回転操作を検出し、ステップＳ１０２の接続後の設定に従って、この回転操作を無効として判定する。

　ステップＳ１４３で、携帯端末２０００（ＭＴ）は、上記回転操作の無効に基づいて、画像Ａの回転操作に対応付けて予め規定されている所定の処理として例えば画像回転の処理（ここでは画面２００５内の画像Ａの配置関係を維持する処理）を実行しない。これにより、ＭＴ側の画像Ａは変化しない。つまり、ユーザ２３０から見て、画面２００５は縦配置または横配置から他方の配置に変化しているが、画面２００５内の画像Ａは回転しない。このようにユーザ２３０から見て画像Ａが回転しないようにするために、携帯端末２０００（ＭＴ）は、ここでは、画面２００５内の画像Ａを９０度回転させて配置関係を変更する処理を行う。また、携帯端末２０００（ＭＴ）は、空間浮遊映像表示装置１０００（ＡＤ）側に同期を行わない。すなわち、携帯端末２０００（ＭＴ）は、ＭＴ側の姿勢検出情報をＡＤ側に送信しない。これにより、ＡＤ側の画像Ａも変化しない。

　このように、モード１では、携帯端末２０００（ＭＴ）側の回転操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示の状態が維持される。

　［モード２：説明（１）］
　図５０は、図３２Ｂの例２、モード２の場合について、シーケンスの具体例を示す。モード２は、モード１との違いとして、ＭＴ側の回転操作が有効である。図５０は、モード２で、特に、ＭＴ側の回転操作が有効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。ステップＳ１０２で、接続後の設定では、回転操作検出に使用する有効な姿勢センサとして携帯端末２０００（ＭＴ）が設定される。

　ステップＳ２１１で、携帯端末２０００（ＭＴ）側の画面２００５の画像Ａに対する回転操作が行われたとする。この回転操作は、例えば筐体の９０度回転である。ステップＳ２１２で、ＭＴ側の姿勢センサおよび制御部は、この姿勢変更、回転操作を検出し、ステップＳ１０２の接続後の設定に従って、この回転操作を有効として判定する。

　ステップＳ２１３で、携帯端末２０００（ＭＴ）は、上記回転操作の有効に基づいて、当該回転操作に対応付けられた所定の処理（画像回転）を実行する。本例では、この処理（画像回転）は、画面２００５内の画像Ａの配置関係を維持する処理であり、縦配置の場合の画面２００５内の画像Ａは、横配置の画面２００５内の回転後の画像Ａｃに変化する。横配置の場合の画面２００５内の画像Ａは、縦配置の画面２００５内の回転後の画像Ａｃに変化する。すなわち、ユーザ２３０から見て、画像Ａは回転された後の画像Ａｃのような状態となる。本例では、画面２００５内の表示画像の配置関係が維持される。そのため、画像Ａと画像Ａｃは実質同じであり、画面２００５の表示パネル２００１２（図１７）での表示は変更無い。

　ステップＳ２１４で、携帯端末２０００（ＭＴ）は、同期のために、姿勢センサによる姿勢検出情報（言い換えると回転情報）のみを空間浮遊映像表示装置１０００（ＡＤ）に送信する。ステップＳ２１５で、空間浮遊映像表示装置１０００（ＡＤ）は、取得した姿勢検出情報と、画像Ａの画像データに基づいて、画像Ａから回転後の画像Ａｃを生成し、空間浮遊映像３に画像Ａｃを表示する。

　このように、モード２では、携帯端末２０００（ＭＴ）側の回転操作が有効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示および同期制御が実現される。

　［モード２：説明（２）］
　図５１は、モード２で、特に、ＡＤ側の回転操作が無効であることを示す。ステップＳ２２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画面の画像Ａに対する回転操作が行われたとする。この回転操作は、例えば筐体１１９０の９０度回転である。ステップＳ２２２で、ＡＤ側の姿勢センサおよび映像処理部は、この姿勢変更、回転操作を検出し、ステップＳ１０２の接続後の設定に従って、この回転操作を無効として判定する。

　ステップＳ２２３で、空間浮遊映像表示装置１０００（ＡＤ）は、上記回転操作の無効に基づいて、当該回転操作に対応付けられた所定の処理（画像回転）を実行しない。本例では、この処理（画像回転）は、画面内の画像Ａの配置関係を維持する処理である。ここでは、ユーザ２３０から見て、回転前の横長画面内の画像Ａが、回転後の縦長画面内の画像Ａに維持されるようにする。そのために、ステップＳ２２３では、空間浮遊映像表示装置１０００（ＡＤ）は、空間浮遊映像３の画面内の画像Ａを９０度回転させる。また、空間浮遊映像表示装置１０００（ＡＤ）は、携帯端末２０００（ＭＴ）側に同期を行わないので、ＡＤ側の姿勢検出情報をＭＴに送信しない。

　このように、モード２では、空間浮遊映像表示装置１０００（ＡＤ）側の回転操作が有効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示の状態が維持される。

　［モード３：説明（１）］
　図５２は、図３２Ｂの例３、モード３の場合について、シーケンスの具体例を示す。モード３は、モード１との違いとして、ＭＴ側のタッチ操作が有効である。図５２は、モード３で、特に、ＭＴ側のタッチ操作が有効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。ステップＳ１０２で、接続後の設定では、タッチ操作検出に使用する有効なタッチセンサとして携帯端末２０００（ＭＴ）が設定される。

　ステップＳ３１１で、携帯端末２０００（ＭＴ）側の画像Ａに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ３１２で、ＭＴ側のタッチセンサおよび制御部は、このタッチ操作を検出し、ステップＳ１０２の接続後の設定に従って、このタッチ操作を有効として判定する。

　ステップＳ３１３で、携帯端末２０００（ＭＴ）は、上記タッチ操作の有効に基づいて、画像Ａのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行する。しかしながら、携帯端末２０００（ＭＴ）は、画像Ａの表示更新のためのデータ（画像Ａに関する元データ、例えば画像Ａｂのデータ）を保持していないので、当該表示更新の処理をまだ実行できない。携帯端末２０００（ＭＴ）は、まず、ステップＳ３１３で、同期のために、ＭＴ側のタッチセンサのタッチ検出情報（例えばタッチ座標データ）を、空間浮遊映像表示装置１０００（ＡＤ）側に送信する。

　ステップＳ３１４で、空間浮遊映像表示装置１０００（ＡＤ）は、取得したタッチ検出情報に基づいて、画像Ａに対するタッチ判定を行い、判定結果に基づいて、ステップＳ３１５で、当該タッチ操作に対応付けられた所定の処理、例えば表示更新の処理を実行する。これにより、画像Ａは画像Ａｂに変化する。ＡＤ側は、画像Ａに関する元データを保持しているので、画像Ａｂの生成が可能である。ステップＳ３１６で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、表示更新後の画像Ａｂのデータを携帯端末２０００（ＭＴ）に送信する。ステップＳ３１７で、携帯端末２０００（ＭＴ）は、取得した画像Ａｂのデータに基づいて、表示更新の処理として、画面２００５に画像Ａｂを表示する。

　このように、モード３では、携帯端末２０００（ＭＴ）側のタッチ操作が有効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示および同期制御が実現される。

　なお、図５２の例では、携帯端末２０００（ＭＴ）側は、画像Ａの元データ（画像Ａｂを生成可能なデータ、表示更新処理の定義など）を保持していないので、元データを保持している空間浮遊映像表示装置１０００（ＡＤ）側から画像Ａｂのデータを取得することで、表示更新を実現している。変形例として以下も可能である。ステップＳ１０３で、ＡＤからＭＴへ画像Ａのデータを送信する際に、画像Ａのデータのみならず、画像Ａに対する表示更新等を可能とするデータセットを送信してもよい。この場合、ＭＴ側では、画像Ａに対するタッチ操作がされると、ステップＳ３１３のようにＡＤ側に同期を行うとともに、そのデータセットに基づいて画像Ａｂを生成し表示すればよい。このような変形例は各モードで同様に適用可能である。

　［モード３：説明（２）］
　図５３は、モード３で、特に、ＡＤ側のタッチ操作が無効であることを示す。ステップＳ１０１からステップＳ１０４までは図４６と同様である。ステップＳ３２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ａに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ３２２で、ＡＤ側のタッチセンサおよび映像処理部は、このタッチ操作を検出し、ステップＳ１０２の接続後の設定に従って、このタッチ操作を無効として判定する。

　ステップＳ３２３で、空間浮遊映像表示装置１０００（ＡＤ）は、上記タッチ操作の無効に基づいて、画像Ａのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行しない。空間浮遊映像表示装置１０００（ＡＤ）は、携帯端末２０００（ＭＴ）側に同期を行わない。すなわち、空間浮遊映像表示装置１０００（ＡＤ）は、ＡＤ側のタッチ検出情報をＭＴ側に送信しない。これにより、ＡＤ側の画像ＡおよびＭＴ側の画像Ａは変化しない。

　このように、モード３では、空間浮遊映像表示装置１０００（ＡＤ）側のタッチ操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ａと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ａとの二重表示の状態が維持される。

　なお、モード３でＡＤ側での回転操作がされた場合、図４７のモード１の場合と同様となる。モード３でＭＴ側での回転操作がされた場合、図４９のモード１の場合と同様となる。

　［モード４：説明（１）］
　図３２Ｂの例４、モード４の場合について、モード１～３の説明と重複するので、シーケンスの具体例は省略する。モード４は、ステップＳ１０２で、接続後の設定では、タッチ操作検出および回転操作検出について、いずれも携帯端末２０００（ＭＴ）側が有効として設定される。すなわち、モード４では、携帯端末２０００（ＭＴ）側でのタッチ操作および回転操作が有効となる。ＭＴ側でタッチ操作がされた場合（有効）には、図５２のモード３の場合と同様となる。ＭＴ側で回転操作がされた場合（有効）には、図５０のモード２の場合と同様となる。ＡＤ側でタッチ操作がされた場合（無効）には、図５３のモード３の場合と同様となる。ＡＤ側で回転操作がされた場合（無効）には、図５１のモード２の場合と同様となる。

　［モード５：説明（１）］
　図５４は、図３２Ｂの例５、モード５の場合について、シーケンスの具体例を示す。図５４は、特に、携帯端末２０００（ＭＴ）側でのタッチ操作、および空間浮遊映像表示装置１０００（ＡＤ）側でのタッチ操作が両方とも有効であることを示す。モード５は、ステップＳ１０２で、接続後の設定では、タッチ操作検出について、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）側との両方が有効として設定される。すなわち、モード５では、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）側との両方でのタッチ操作が有効となる。回転操作検出については、モード１，３と同様に、空間浮遊映像表示装置１０００（ＡＤ）側が有効として設定される。

　ＭＴ側でタッチ操作がされた場合（有効）には、図５２のモード３の場合と同様となる。ＡＤ側でタッチ操作がされた場合（有効）には、図４６のモード１の場合と同様となる。ＡＤ側で回転操作がされた場合（有効）には、図４７のモード１の場合と同様となる。ＭＴ側で回転操作がされた場合（無効）には、図４９のモード１の場合と同様となる。

　図５４で、まず、ステップＳ５１１では、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画面の画像Ａに対するタッチ操作がされたとする。ステップＳ５１２で、空間浮遊映像表示装置１０００（ＡＤ）は、このタッチ操作を検出し、ステップＳ１０２の設定に基づいて、有効と判定する。ステップＳ５１３で、空間浮遊映像表示装置１０００（ＡＤ）は、このタッチ操作に応じた所定の処理、例えば表示更新を実行する。これにより、空間浮遊映像３の画像Ａは画像Ａｂに変化する。ステップＳ５１４で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、ＡＤ側の画像Ａｂのデータを携帯端末２０００（ＭＴ）側に送信する。ステップＳ５１５で、携帯端末２０００（ＭＴ）は、取得した画像Ａｂのデータに基づいて、画面２００５に画像Ａｂを表示する。これにより、表示更新として、画面２００５の画像Ａが画像Ａｂに変化する。

　つぎに、ステップＳ５２１で、携帯端末２０００（ＭＴ）側の画面２００５の画像Ａｂに対するタッチ操作がされたとする。ステップＳ５２２で、携帯端末２０００（ＭＴ）は、このタッチ操作を検出し、ステップＳ１０２の設定に基づいて、有効と判定する。ステップＳ５２３で、携帯端末２０００（ＭＴ）は、このタッチ操作に応じた所定の処理、例えば表示更新を実行する。ここでは、この表示更新は、画像Ａｂを画像Ａに戻すことであるとする。携帯端末２０００（ＭＴ）は、元の画像Ａのデータを取得済みであるので、この表示更新が可能である。これにより、画面２００５の画像Ａｂは画像Ａに変化する。また、ステップＳ５２４で、携帯端末２０００（ＭＴ）は、同期のために、ＭＴ側のタッチ検出情報を、空間浮遊映像表示装置１０００（ＡＤ）側に送信する。ステップＳ５２５で、空間浮遊映像表示装置１０００（ＡＤ）は、取得したタッチ検出情報に基づいて、タッチ判定を行い、判定結果に基づいて、ステップＳ５２６で、表示更新として、空間浮遊映像３の画像Ａｂを画像Ａに変更する。

　このように、モード５では、携帯端末２０００側と空間浮遊映像表示装置１０００側とのいずれでタッチ操作がされたとしても、二重表示および同期制御が実現できる。なお、ステップＳ５２３のＭＴ側の所定の処理の際に、ＭＴ側にその処理のために必要なデータが無い場合には、元データを保持しているＡＤ側に当該データを要求して取得すればよい。

　［モード６：説明（１）］
　図３２Ｂの例６、モード６の場合について、モード１～５の説明と重複するので、シーケンスの具体例は省略する。モード６は、ステップＳ１０２で、接続後の設定では、モード５と同様に、タッチ操作検出について、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）との両方が有効として設定される。また、モード６は、モード５との違いとして、回転操作検出について、携帯端末２０００（ＭＴ）側が有効として設定される。すなわち、モード６では、携帯端末２０００（ＭＴ）側での回転操作が有効となる。タッチ操作については、図５４のモード５の場合と同様となる。ＭＴ側で回転操作がされた場合（有効）には、図５０のモード２の場合と同様となる。ＡＤ側で回転操作がされた場合（無効）には、図５１のモード２の場合と同様となる。

　［モード７：説明（１）］
　図５５は、図３２Ｂの例７、モード７の場合について、本システムの携帯端末２０００（ＭＴ）と空間浮遊映像表示装置１０００（ＡＤ）との処理・動作等のシーケンスの具体例を示す。図５５は、特に、ＡＤ側のタッチ操作が有効であることを示す。最初、ステップＳ７０１の前は、接続前の状態である。右側に示す空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画面には画像が表示されていないとする。なお、この非表示は、対象画像が表示されていないということであり、任意のアプリやＧＵＩ等の表示はあってもよい。左側に示す携帯端末２０００（ＭＴ）側の画面２００５には、画像Ｂ（言い換えるとコンテンツＢ）が表示されているとする。

　ステップＳ７０１で、携帯端末２０００（ＭＴ）が空間浮遊映像表示装置１０００（ＡＤ）に通信接続されたとする。ステップＳ７０２で、本システムは、図３２Ｂの例７の行に示すような接続後の設定を行う。「接続後の設定」において、各装置の表示画像としては、携帯端末２０００（ＭＴ）側の表示画像は、画像Ｂである。空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の表示画像は、携帯端末２０００（ＭＴ）側と同じ画像Ｂである。画像Ｂのデータ格納元はＭＴである。また、「接続後の設定」において、タッチ操作検出に使用する有効なタッチセンサはＡＤ側のタッチセンサ（図３５でのタッチセンサ１０００８）、回転操作検出に使用する有効な姿勢センサはＡＤ側の姿勢センサ（図３５での姿勢センサ１０００９）として設定される。ステップＳ７０２の接続後の設定は、言い換えると、ＡＤ側のタッチ操作および回転操作が有効であることに相当する。

　ステップＳ７０３で、例えば、携帯端末２０００に格納されている画像Ｂの画像データが、空間浮遊映像表示装置１０００に送信・転送される。ステップＳ７０４で、空間浮遊映像表示装置１０００は、その画像データに基づいて、空間浮遊映像３の画面に画像Ｂを表示する。これにより、図示のように、２つの装置での画像Ｂの二重表示の状態となる。

　つぎに、ステップＳ７１１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ｂに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ７１２で、ＡＤ側のタッチセンサおよび映像処理部は、このタッチ操作を検出し、ステップＳ７０２の接続後の設定に従って、このタッチ操作を有効として判定する。

　空間浮遊映像表示装置１０００（ＡＤ）は、上記タッチ操作の有効に基づいて、画像Ｂのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行する。しかしながら、ここでは、空間浮遊映像表示装置１０００（ＡＤ）は、画像Ｂの元データを保持していないので、当該表示更新の処理をまだ実行できない。ステップＳ７１３で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、ＡＤ側のタッチ検出情報(例えばタッチ座標データ)を、携帯端末２０００（ＭＴ）側に送信する。ステップＳ７１４で、携帯端末２０００（ＭＴ）は、取得したタッチ検出情報に基づいて、タッチ判定を行い、判定結果に基づいて、ステップＳ７１５で、表示更新の処理を実行する。その処理として、携帯端末２０００（ＭＴ）は、画像Ｂのデータに基づいて、画像Ｂｂを生成し、画面２００５に画像Ｂｂを表示する。ステップＳ７１６で、携帯端末２０００（ＭＴ）は、同期のために、画像Ｂｂのデータを、空間浮遊映像表示装置１０００（ＡＤ）側に送信する。ステップＳ７１７で、空間浮遊映像表示装置１０００（ＡＤ）は、取得した画像Ｂｂのデータに基づいて、表示更新として、空間浮遊映像３の画面に画像Ｂｂを表示する。

　このようにして、モード７の設定に基づいて、２つの装置における画像Ｂの二重表示および同期制御が実現される。特に、ＡＤ側の空間浮遊映像３に対するタッチ操作に応じた表示制御を、ＡＤ側とＭＴ側との両方の画像に反映することができる。

　［モード７：説明（２）］
　図５６は、モード７で、特に、空間浮遊映像表示装置１０００（ＡＤ）側の回転操作が有効であることを示す。ステップＳ７０１からステップＳ７０４までは図５５と同様である。ステップＳ７２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ｂに対する回転操作が行われたとする。この回転操作は、例えば筐体１１９０の回転である。ステップＳ７２２で、ＡＤ側の姿勢センサおよび映像処理部は、この姿勢変更、回転操作を検出し、ステップＳ７０２の接続後の設定に従って、この回転操作を有効として判定する。

　ステップＳ７２３で、空間浮遊映像表示装置１０００（ＡＤ）は、上記回転操作の有効に基づいて、当該回転操作に対応付けられた所定の処理を実行する。本例では、この所定の処理である画像回転は、ユーザ２３０から見て画像Ｂが回転した画像Ｂｃの状態となるように、横長画面内の画像Ｂの配置関係を維持する処理である。ＡＤ側は、画像Ｂのデータに基づいて回転後の画像Ｂｃの生成が可能である。

　ステップＳ７２４で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、回転の際の姿勢検出情報を携帯端末２０００（ＭＴ）に送信する。ステップＳ７２５で、携帯端末２０００（ＭＴ）は、取得した姿勢検出情報と画像Ｂのデータに基づいて、回転後の画像Ｂｃを生成し、画面２００５に画像Ｂｃを表示する。

　このように、モード７では、ＡＤ側の空間浮遊映像３に対する回転操作が行われると、その回転操作に応じた表示制御を、ＡＤ側とＭＴ側との両方の画像Ｂに反映することができる。回転操作後において、ＡＤ側の画像Ｂｃと、ＭＴ側の画像Ｂｃとは、回転後の状態で表示されており、整合している。

　［モード７：説明（３）］
　図５７は、モード７で、特に、携帯端末２０００（ＭＴ）側のタッチ操作が無効であることを示す。ステップＳ７０１からステップＳ７０４までは図５５と同様である。ステップＳ７３１で、携帯端末２０００（ＭＴ）側の画面２００５の画像Ｂに対するタッチ操作が行われたとする。ステップＳ７３２で、ＭＴ側のタッチセンサおよび制御部は、このタッチ操作を検出し、ステップＳ７０２の接続後の設定に従って、このタッチ操作を無効として判定する。

　ステップＳ７３３で、携帯端末２０００（ＭＴ）は、上記タッチ操作の無効に基づいて、当該タッチ操作に対応付けられた所定の処理（例えば表示更新）を実行せず、空間浮遊映像表示装置１０００（ＡＤ）側への同期（例えばタッチ検出情報の送信）も行わない。

　このように、モード７では、携帯端末２０００（ＭＴ）側のタッチ操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示の状態が維持される。

　［モード７：説明（４）］
　図５８は、モード７で、特に、携帯端末２０００（ＭＴ）側の回転操作が無効であることを示す。ステップＳ７０１からステップＳ７０４までは図５５と同様である。ステップＳ７４１で、携帯端末２０００（ＭＴ）側の画面２００５の画像Ｂに対する回転操作（例えば筐体回転）が行われたとする。ステップＳ７４２で、ＭＴ側の姿勢センサおよび制御部は、この回転操作を検出し、ステップＳ７０２の接続後の設定に従って、この回転操作を無効として判定する。

　ステップＳ７４３で、携帯端末２０００（ＭＴ）は、上記回転操作の無効に基づいて、当該回転操作に対応付けられた所定の処理（例えば画像回転）を実行せず、空間浮遊映像表示装置１０００（ＡＤ）側への同期（例えば姿勢検出情報の送信）も行わない。

　このように、モード７では、携帯端末２０００（ＭＴ）側の回転操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示の状態が維持される。

　［モード８：説明（１）］
　図５９は、図３２Ｂの例８、モード８の場合について、シーケンスの具体例を示す。モード８は、モード７との違いとして、ＭＴ側の回転操作が有効である。図５９は、モード８で、特に、ＭＴ側の回転操作が有効であることを示す。ステップＳ７０１からステップＳ７０４までは図５５と同様である。ステップＳ７０２で、接続後の設定では、回転操作検出に使用する有効な姿勢センサとして携帯端末２０００（ＭＴ）が設定される。

　ステップＳ８１１で、携帯端末２０００（ＭＴ）側の画面２００５の画像Ｂに対する回転操作が行われたとする。この回転操作は、例えば筐体の９０度回転である。ステップＳ８１２で、ＭＴ側の姿勢センサおよび制御部は、この姿勢変更、回転操作を検出し、ステップＳ７０２の接続後の設定に従って、この回転操作を有効として判定する。

　ステップＳ８１３で、携帯端末２０００（ＭＴ）は、上記回転操作の有効に基づいて、当該回転操作に対応付けられた所定の処理（画像回転）を実行する。本例では、この処理（画像回転）は、画面２００５内の画像Ｂの配置関係を維持する処理である。縦配置の場合の画面２００５内の画像Ｂは、横配置の画面２００５内の回転後の画像Ｂｃに変化する。横配置の場合の画面２００５内の画像Ｂは、縦配置の画面２００５内の回転後の画像Ｂｃに変化する。すなわち、ユーザ２３０から見て、画像Ｂは回転された後の画像Ｂｃのような状態となる。本例では、画面２００５内の表示画像の配置関係が維持される。そのため、画像Ｂと画像Ｂｃは実質同じであり、表示パネル２００１２での表示は変更無い。

　ステップＳ８１４で、携帯端末２０００（ＭＴ）は、同期のために、回転後の画像Ｂｃの画像データを空間浮遊映像表示装置１０００（ＡＤ）に送信する。あるいは、変形例では、携帯端末２０００（ＭＴ）は、同期のために、姿勢センサによる姿勢検出情報（言い換えると回転情報）のみを空間浮遊映像表示装置１０００（ＡＤ）に送信するようにしてもよい。ステップＳ８１５で、空間浮遊映像表示装置１０００（ＡＤ）は、取得した画像Ｂｃの画像データまたは姿勢検出情報に基づいて、空間浮遊映像３に画像Ｂｃを表示する。これにより、ユーザ２３０から見てＡＤ側での画像Ｂが回転後の画像Ｂｃに変化する。

　このように、モード８では、携帯端末２０００（ＭＴ）側の回転操作が有効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示および同期制御が実現される。

　［モード８：説明（２）］
　図６０は、モード８で、特に、ＡＤ側の回転操作が無効であることを示す。ステップＳ８２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画面の画像Ｂに対する回転操作が行われたとする。この回転操作は、例えば筐体１１９０の９０度回転である。ステップＳ８２２で、ＡＤ側の姿勢センサおよび映像処理部は、この姿勢変更、回転操作を検出し、ステップＳ７０２の接続後の設定に従って、この回転操作を無効として判定する。

　ステップＳ８２３で、空間浮遊映像表示装置１０００（ＡＤ）は、上記回転操作の無効に基づいて、当該回転操作に対応付けられた所定の処理（画像回転）を実行しない。本例では、この処理（画像回転）は、画面内の画像Ｂの配置関係を維持する処理である。ここでは、ユーザ２３０から見て、回転前の横長画面内の画像Ｂが、回転後の縦長画面内の画像Ｂに維持されるようにする。そのために、ステップＳ８２３では、空間浮遊映像表示装置１０００（ＡＤ）は、空間浮遊映像３の画面内の画像Ｂを９０度回転させる。また、空間浮遊映像表示装置１０００（ＡＤ）は、携帯端末２０００（ＭＴ）側に同期を行わないので、ＡＤ側の姿勢検出情報をＭＴに送信しない。

　このように、モード８では、空間浮遊映像表示装置１０００（ＡＤ）側の回転操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示の状態が維持される。

　［モード９：説明（１）］
　図６１は、図３２Ｂの例９、モード９の場合について、シーケンスの具体例を示す。モード９は、モード７との違いとして、ＭＴ側のタッチ操作が有効である。図６１は、モード９で、特に、ＭＴ側のタッチ操作が有効であることを示す。ステップＳ７０１からステップＳ７０４までは図５５と同様である。ステップＳ７０２で、接続後の設定では、タッチ操作検出に使用する有効なタッチセンサとして携帯端末２０００（ＭＴ）が設定される。

　ステップＳ９１１で、携帯端末２０００（ＭＴ）側の画像Ｂに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ９１２で、ＭＴ側のタッチセンサおよび制御部は、このタッチ操作を検出し、ステップＳ７０２の接続後の設定に従って、このタッチ操作を有効として判定する。

　ステップＳ９１３で、携帯端末２０００（ＭＴ）は、上記タッチ操作の有効に基づいて、画像Ｂのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行する。これにより、画面２００５の画像Ｂは画像Ｂｂに変化する。ステップＳ９１４で、携帯端末２０００（ＭＴ）は、同期のために、ＭＴ側の画像Ｂｂのデータを、空間浮遊映像表示装置１０００（ＡＤ）側に送信する。ステップＳ９１５で、空間浮遊映像表示装置１０００（ＡＤ）は、取得した画像Ｂｂのデータに基づいて、表示更新として、空間浮遊映像３の画面に画像Ｂｂを表示する。

　このように、モード９では、携帯端末２０００（ＭＴ）側のタッチ操作が有効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示および同期制御が実現される。

　［モード９：説明（２）］
　図６２は、モード９で、特に、ＡＤ側のタッチ操作が無効であることを示す。ステップＳ７０１からステップＳ７０５までは図５５と同様である。ステップＳ９２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画像Ｂに対し、ユーザ２３０によるタッチ操作が行われたとする。ステップＳ９２２で、ＡＤ側のタッチセンサおよび映像処理部は、このタッチ操作を検出し、ステップＳ７０２の接続後の設定に従って、このタッチ操作を無効として判定する。

　ステップＳ９２３で、空間浮遊映像表示装置１０００（ＡＤ）は、上記タッチ操作の無効に基づいて、画像Ｂのタッチ操作に対応付けて予め規定されている所定の処理として例えば表示更新の処理を実行しない。空間浮遊映像表示装置１０００（ＡＤ）は、携帯端末２０００（ＭＴ）側に同期を行わない。すなわち、空間浮遊映像表示装置１０００（ＡＤ）は、ＡＤ側のタッチ検出情報をＭＴ側に送信しない。これにより、ＡＤ側の画像ＢおよびＭＴ側の画像Ｂは変化しない。

　このように、モード９では、空間浮遊映像表示装置１０００（ＡＤ）側のタッチ操作が無効となり、携帯端末２０００（ＭＴ）側の画像Ｂと空間浮遊映像表示装置１０００（ＡＤ）側の画像Ｂとの二重表示の状態が維持される。なお、モード９でＡＤ側での回転操作がされた場合、図５６のモード７の場合と同様となる。モード９でＭＴ側での回転操作がされた場合、図５８のモード７の場合と同様となる。

　［モード１０：説明（１）］
　図３２Ｂの例１０、モード１０の場合について、モード７～９の説明と重複するので、シーケンスの具体例は省略する。モード１０は、ステップＳ７０２で、接続後の設定では、タッチ操作検出および回転操作検出について、いずれも携帯端末２０００（ＭＴ）側が有効として設定される。すなわち、モード１０では、携帯端末２０００（ＭＴ）側でのタッチ操作および回転操作が有効となる。ＭＴ側でタッチ操作がされた場合（有効）には、図６１のモード９の場合と同様となる。ＭＴ側で回転操作がされた場合（有効）には、図５９のモード８の場合と同様となる。ＡＤ側でタッチ操作がされた場合（無効）には、図６２のモード９の場合と同様となる。ＡＤ側で回転操作がされた場合（無効）には、図６０のモード８の場合と同様となる。

　［モード１１：説明（１）］
　図６３は、図３２Ｂの例１１、モード１１の場合について、シーケンスの具体例を示す。図６３は、特に、携帯端末２０００（ＭＴ）側でのタッチ操作、および空間浮遊映像表示装置１０００（ＡＤ）側でのタッチ操作が両方とも有効であることを示す。モード１１は、ステップＳ７０２で、接続後の設定では、タッチ操作検出について、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）側との両方が有効として設定される。すなわち、モード１１では、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）側との両方でのタッチ操作が有効となる。回転操作検出については、モード７，９と同様に、空間浮遊映像表示装置１０００（ＡＤ）側が有効として設定される。

　ＭＴ側でタッチ操作がされた場合（有効）には、図６１のモード９の場合と同様となる。ＡＤ側でタッチ操作がされた場合（有効）には、図５５のモード７の場合と同様となる。ＡＤ側で回転操作がされた場合（有効）には、図５６のモード７の場合と同様となる。ＭＴ側で回転操作がされた場合（無効）には、図５８のモード７の場合と同様となる。

　図６３で、まず、ステップＳ１１１１では、携帯端末２０００（ＭＴ）側の画面２００５の画像Ｂに対するタッチ操作がされたとする。ステップＳ１１１２で、携帯端末２０００（ＭＴ）は、このタッチ操作を検出し、ステップＳ７０２の設定に基づいて、有効と判定する。ステップＳ１１１３で、携帯端末２０００（ＭＴ）は、このタッチ操作に応じた所定の処理、例えば表示更新を実行する。これにより、画面２００５の画像Ｂは画像Ｂｂに変化する。ステップＳ１１１４で、携帯端末２０００（ＭＴ）は、同期のために、ＭＴ側の画像Ｂｂのデータを空間浮遊映像表示装置１０００（ＡＤ）側に送信する。ステップＳ１１１５で、空間浮遊映像表示装置１０００（ＡＤ）は、取得した画像Ｂｂのデータに基づいて、空間浮遊映像３の画面に画像Ｂｂを表示する。これにより、表示更新として、空間浮遊映像３の画面の画像Ｂが画像Ｂｂに変化する。

　つぎに、ステップＳ１１２１で、空間浮遊映像表示装置１０００（ＡＤ）側の空間浮遊映像３の画面の画像Ｂｂに対するタッチ操作がされたとする。ステップＳ１１２２で、空間浮遊映像表示装置１０００（ＡＤ）は、このタッチ操作を検出し、ステップＳ７０２の設定に基づいて、有効と判定する。ステップＳ１１２３で、空間浮遊映像表示装置１０００（ＡＤ）は、このタッチ操作に応じた所定の処理、例えば表示更新を実行する。ここでは、この表示更新は、画像Ｂｂを画像Ｂに戻すことであるとする。空間浮遊映像表示装置１０００（ＡＤ）は、元の画像Ｂのデータを取得済みであるので、この表示更新が可能である。これにより、空間浮遊映像３の画面の画像Ｂｂは画像Ｂに変化する。また、ステップＳ１１２４で、空間浮遊映像表示装置１０００（ＡＤ）は、同期のために、ＡＤ側のタッチ検出情報を、携帯端末２０００（ＭＴ）側に送信する。ステップＳ１１２５で、携帯端末２０００（ＭＴ）は、取得したタッチ検出情報に基づいて、タッチ判定を行い、判定結果に基づいて、ステップＳ１１２６で、表示更新として、画面２００５の画像Ｂｂを画像Ｂに変更する。

　このように、モード１１では、携帯端末２０００側と空間浮遊映像表示装置１０００側とのいずれでタッチ操作がされたとしても、二重表示および同期制御が実現できる。なお、ステップＳ１１２３のＡＤ側の所定の処理の際に、ＡＤ側にその処理のために必要なデータが無い場合には、元データを保持しているＭＴ側に当該データを要求して取得すればよい。

　［モード１２：説明（１）］
　図３２Ｂの例１２、モード１２の場合について、モード７～１１の説明と重複するので、シーケンスの具体例は省略する。モード１２は、ステップＳ７０２で、接続後の設定では、モード１１と同様に、タッチ操作検出について、携帯端末２０００（ＭＴ）側と空間浮遊映像表示装置１０００（ＡＤ）との両方が有効として設定される。また、モード１２は、モード１１との違いとして、回転操作検出について、携帯端末２０００（ＭＴ）側が有効として設定される。すなわち、モード１２では、携帯端末２０００（ＭＴ）側での回転操作が有効となる。タッチ操作については、図６３のモード１１の場合と同様となる。ＭＴ側で回転操作がされた場合（有効）には、図５９のモード８の場合と同様となる。ＡＤ側で回転操作がされた場合（無効）には、図６０のモード８の場合と同様となる。

　［モードの利用例］
　上記モード１～１２等から選択利用可能な形態の場合、ユーザ２３０は例えば以下のようにモードを使い分けることができる。例えば、図３０の状態Ａのように、本システムの接続後、空間浮遊映像表示装置１０００側の画像Ａを、携帯端末２０００側にも取得して画像Ａとして表示するとする。最初、ユーザ２３０が、携帯端末２０００を縦配置で使用している場合、図３６の状態Ｂの例のように、画像Ａは、相対的に小さいサイズで画面２００５内に表示される。ユーザ２３０は、画像Ａをより大きいサイズで見たい場合、携帯端末２０００の筐体を回転させて横配置の状態にする。これにより、図３６の状態Ｄの例のようにすることができる。この際、ユーザ２３０が、画像Ａを回転したくない場合には、例えばモード１やモード３を指定すればよい。本システムは、指定されたモードに切り替える。それらのモードでは、回転操作検出については、空間浮遊映像表示装置１０００（ＡＤ）側が有効、携帯端末２０００（ＭＴ）側が無効となる。よって、それらのモードでは、ユーザ２３０が携帯端末２０００の筐体を回転させて横配置の状態にした場合に、画面２００５内の画像Ａはユーザ２３０から見て回転しない状態が維持される。例えば図４９で、状態４９０１から状態４９０２に変わる。携帯端末２０００は、回転操作が無効であるため、空間浮遊映像表示装置１０００（ＡＤ）側にも同期を行わない。よって、空間浮遊映像３側の画像Ａも、回転しない状態が維持される。

　また、上記例と同様に、２つの装置に画像Ａが二重表示されている状況で、ユーザ２３０が、携帯端末２０００の筐体を回転させて横配置の状態にする際に、画像Ａを回転させたい場合には、例えばモード２やモード４を指定すればよい。本システムは、指定されたモードに切り替える。それらのモードでは、回転操作検出については、携帯端末２０００（ＭＴ）側が有効、空間浮遊映像表示装置１０００（ＡＤ）側が無効となる。よって、それらのモードでは、ユーザ２３０が携帯端末２０００の筐体を回転させて横配置の状態にした場合に、画面２００５内の画像Ａはユーザ２３０から見て回転した状態に変化する。例えば図５０で、状態５００１から状態５００２に変わる。携帯端末２０００は、回転操作が有効であるため、空間浮遊映像表示装置１０００（ＡＤ）側にも同期を行う。よって、空間浮遊映像３側の画像Ａも、回転された状態に変化する。

　本実施例に係る技術では、高解像度かつ高輝度な映像情報を空間浮遊した状態で表示することにより、例えば、ユーザは感染症の接触感染に対する不安を感じることなく操作することを可能にする。不特定多数のユーザが使用するシステムに本実施例に係る技術を用いれば、感染症の接触感染のリスクを低減し、不安を感じることなく使用できる非接触ユーザインタフェースを提供することを可能にする。これにより、国連の提唱する持続可能な開発目標（ＳＤＧｓ：Sustainable Development Goals）の「３すべての人に健康と福祉を」に貢献する。

　また、本実施例に係る技術では、出射する映像光の発散角を小さく、更に特定の偏波に揃えることで、再帰反射板に対して正規の反射光だけを効率良く反射させるため、光の利用効率が高く、明るく鮮明な空間浮遊映像を得ることを可能にする。本実施例に係る技術によれば、消費電力を大幅に低減することが可能な、利用性に優れた非接触ユーザインタフェースを提供することができる。これにより、国連の提唱する持続可能な開発目標（ＳＤＧｓ：Sustainable Development Goals）の「９産業と技術革新の基盤をつくろう」および「１１住み続けられるまちづくりを」に貢献する。

　以上、種々の実施例について詳述したが、しかしながら、本発明は、上述した実施例のみに限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するためにシステム全体を詳細に説明したものであり、必ずしも説明したすべての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。

　１，１０…表示装置、２…再帰反射板、３…空間浮遊映像（空中浮遊映像）、３Ｒ…表示範囲、５…再帰反射部材、１００…透明な部材、１０１，１０１Ｂ…偏光分離部材、１１…液晶表示パネル、１２…吸収型偏光板、１３…光源装置、２３０…ユーザ、１０００…空間浮遊映像表示装置（空中浮遊映像表示装置）、１１９０…筐体、１３５１…空中操作検出センサ、２００５…画面、２０００…携帯端末、２９００…システム、２９０１，２９０２，２９０３，２９０４…画像、２９１０…二重表示機能、２９２０…同期制御機能、２９３０…操作検出制御機能。

Claims

　空中浮遊映像表示装置であって、
　映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対する物体の接触を検知する検知部と、
　ユーザの携帯端末と通信する通信部と、
　を備え、
　前記表示範囲への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の前、途中、または後に、前記携帯端末から前記空中浮遊映像表示装置への表示要求が発生し、
　前記表示範囲への前記携帯端末の接触を検知した場合に、前記表示要求を受領し、前記携帯端末側で指定された対象画像を、前記携帯端末または外部機器から通信で取得し、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲のうち特定の領域への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の際の前記携帯端末の特定の姿勢を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の後に、前記携帯端末が前記表示範囲よりも奥側の空間内に入ったことを検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の際に、接触時間が一定時間以上となった場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の操作を促すためのガイド画像を、前記空間浮遊映像として表示する、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触の操作を促すためのガイド画像を、前記携帯端末の画面に表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触によって生じる視認不可領域を検知した場合に、前記表示範囲のうち前記視認不可領域を含む非表示領域を決定し、前記非表示領域以外の表示領域に前記空間浮遊映像として表示する、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記検知部は、前記表示範囲を含む範囲に対する空中操作を検出する空中操作検出センサ、または、前記表示範囲を含む範囲を撮像する撮像部、の少なくとも一方である、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記携帯端末の画面に表示されるコードを認識して情報を取得し、
　前記コードが認識され、かつ、前記表示範囲への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記空間浮遊映像に表示されるコードを前記携帯端末が認識して情報を取得し、
　前記コードが認識され、かつ、前記表示範囲への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示装置。
　請求項１１または１２に記載の空中浮遊映像表示装置において、
　前記コードの情報は、以下の少なくとも１つの情報である；
　　前記携帯端末から前記空中浮遊映像表示装置への表示要求、
　　前記携帯端末と前記空中浮遊映像表示装置との通信の接続情報、
　　前記携帯端末のＩＤまたは前記ユーザのＩＤ、
　　前記対象画像のＩＤまたはＵＲＬ、
　空中浮遊映像表示装置。
　請求項１記載の空中浮遊映像表示装置において、
　前記表示範囲への前記携帯端末の接触を検知した場合に、前記空間浮遊映像に表示されている画像を、前記携帯端末側に取得させる、
　空中浮遊映像表示装置。
　空中浮遊映像表示装置とユーザの携帯端末とを有する空中浮遊映像表示システムであって、
　前記空中浮遊映像表示装置は、
　映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対する物体の接触を検知する検知部と、
　ユーザの携帯端末と通信する通信部と、
　を備え、
　前記空中浮遊映像表示装置は、前記表示範囲への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させる、
　空中浮遊映像表示システム。
　空中浮遊映像表示装置とユーザの携帯端末とを有する空中浮遊映像表示システムにおける前記携帯端末であって、
　前記空中浮遊映像表示装置は、
　映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対する物体の接触を検知する検知部と、
　前記ユーザの前記携帯端末と通信する通信部と、
　を備え、
　前記空中浮遊映像表示装置は、前記表示範囲への前記携帯端末の接触を検知した場合に、前記携帯端末側で指定された対象画像を、前記空中浮遊映像として表示させ、
　前記携帯端末は、前記ユーザの操作に基づいて前記対象画像を指定し、指定された対象画像の画像データまたは情報を前記空中浮遊映像表示装置へ送信する、
　携帯端末。
　空中浮遊映像表示装置であって、
　映像処理を行う映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対するユーザによる操作を検出するユーザ操作検出機構と、
　前記ユーザの携帯端末と通信する通信部と、
　を備え、
　前記ユーザの前記携帯端末との通信接続に基づいて、前記空中浮遊映像に表示される第１画像を、前記携帯端末の画面にも第１画像として表示し、および／または、前記携帯端末の画面に表示される第２画像を、前記空中浮遊映像にも第２画像として表示し、
　前記空中浮遊映像に表示される前記第１画像に対する前記ユーザの操作の検出および判定に基づいて、前記空中浮遊映像の前記第１画像に対応付けられた所定の第１処理を実行するととともに、前記携帯端末の画面の前記第１画像にも前記第１処理を反映するように制御し、および／または、前記携帯端末の側における、前記携帯端末の画面に表示される前記第２画像に対する前記ユーザの操作の検出および判定に基づいて、前記携帯端末の画面の前記第２画像に対応付けられた所定の第２処理を実行させるととともに、前記空中浮遊映像の前記第２画像にも前記第２処理を反映するように制御する、
　空中浮遊映像表示装置。
　請求項１７記載の空中浮遊映像表示装置において、
　前記通信接続の後の設定として、前記空中浮遊映像表示装置の側における前記空中浮遊映像の表示画像に対する前記ユーザの操作および検出と、前記携帯端末の側における前記画面の表示画像に対する前記ユーザの操作および検出とについての、有効／無効を設定し、当該設定にしたがって、前記操作、検出、表示および処理を制御する、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　前記通信接続の時に、前記通信接続の後の前記有効／無効の設定を行い、
　前記通信接続の解除の時に、前記有効／無効の設定を前記通信接続の前の設定に戻す、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　前記空中浮遊映像または前記携帯端末の画面の表示画像に対する前記ユーザの操作は、タッチ操作と回転操作とを有し、
　前記タッチ操作については、前記空中浮遊映像表示装置に備える前記ユーザ操作検出機構のうちのタッチセンサ、または前記携帯端末に備えるタッチセンサを用いて検出し、
　前記回転操作については、前記空中浮遊映像表示装置に備える姿勢センサ、または前記携帯端末に備える姿勢センサを用いて検出する、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　あるモードにおいて、前記空中浮遊映像表示装置の側における前記空中浮遊映像の表示画像に対する前記ユーザの操作および検出を有効に設定し、前記携帯端末の側における前記画面の表示画像に対する前記ユーザの操作および検出を無効に設定する、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　あるモードにおいて、前記空中浮遊映像表示装置の側における前記空中浮遊映像の表示画像に対する前記ユーザの操作および検出を無効に設定し、前記携帯端末の側における前記画面の表示画像に対する前記ユーザの操作および検出を有効に設定する、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　あるモードにおいて、前記空中浮遊映像表示装置の側における前記空中浮遊映像の表示画像に対する前記ユーザの操作および検出を有効に設定し、前記携帯端末の側における前記画面の表示画像に対する前記ユーザの操作および検出も有効に設定する、
　空中浮遊映像表示装置。
　請求項１８記載の空中浮遊映像表示装置において、
　前記空中浮遊映像表示装置の前記空中浮遊映像に、および／または、前記携帯端末の前記画面に、前記空中浮遊映像表示装置の側における前記空中浮遊映像の表示画像に対する前記ユーザの操作および検出と、前記携帯端末の側における前記画面の表示画像に対する前記ユーザの操作および検出とについての、有効／無効の設定に対応した、モードの選択肢を表示し、前記ユーザによる前記モードの選択にしたがって前記有効／無効を設定する、
　空中浮遊映像表示装置。
　請求項２０記載の空中浮遊映像表示装置において、
　前記空中浮遊映像表示装置に備える前記タッチセンサとしては、前記空中浮遊映像の前記表示範囲に対する前記ユーザの手指または操作物の位置を検出する空中操作検出センサまたはカメラを有する、
　空中浮遊映像表示装置。
　請求項２０記載の空中浮遊映像表示装置において、
　前記回転操作は、前記空中浮遊映像表示装置の筐体または前記携帯端末の筐体の回転操作の場合を含み、
　前記回転操作の判定に応じた所定の処理としては、前記空中浮遊映像内の表示画像または前記携帯端末の画面内の表示画像を前記ユーザから見て回転した状態となるように表示することを含む、
　空中浮遊映像表示装置。
　請求項１７記載の空中浮遊映像表示装置において、
　前記通信接続の際に、前記空中浮遊映像の前記表示範囲への前記携帯端末の接触の検知に基づいて、前記空中浮遊映像に表示される第１画像を、前記携帯端末の画面にも第１画像として表示し、および／または、前記携帯端末の画面に表示される第２画像を、前記空中浮遊映像にも第２画像として表示する、
　空中浮遊映像表示装置。
　空中浮遊映像表示装置とユーザの携帯端末とが通信接続されるシステムにおける表示方法であって、
　前記空中浮遊映像表示装置は、
　映像処理を行う映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対するユーザによる操作を検出するユーザ操作検出機構と、
　前記ユーザの携帯端末と通信する通信部と、
　を備え、
　前記空中浮遊映像表示装置と前記ユーザの前記携帯端末との通信接続を行うステップと、
　前記通信接続に基づいて、前記空中浮遊映像に表示される第１画像を、前記携帯端末の画面にも第１画像として表示し、および／または、前記携帯端末の画面に表示される第２画像を、前記空中浮遊映像にも第２画像として表示するステップと、
　前記空中浮遊映像に表示される前記第１画像に対する前記ユーザの操作の検出および判定に基づいて、前記空中浮遊映像の前記第１画像に対応付けられた所定の第１処理を実行するととともに、前記携帯端末の画面の前記第１画像にも前記第１処理を反映するように制御し、および／または、前記携帯端末の側における、前記携帯端末の画面に表示される前記第２画像に対する前記ユーザの操作の検出および判定に基づいて、前記携帯端末の画面の前記第２画像に対応付けられた所定の第２処理を実行させるととともに、前記空中浮遊映像の前記第２画像にも前記第２処理を反映するように制御するステップと、
　を有する、表示方法。
　空中浮遊映像表示装置とユーザの携帯端末とが通信接続されるシステムにおける携帯端末であって、
　前記空中浮遊映像表示装置は、
　映像処理を行う映像処理部と、
　前記映像処理部が映像処理を行った映像を表示する表示部と、
　前記表示部が表示する映像に基づいて空中浮遊映像を生成する光学システムと、
　前記空中浮遊映像の表示範囲に対するユーザによる操作を検出するユーザ操作検出機構と、
　前記ユーザの携帯端末と通信する通信部と、
　を備え、
　前記携帯端末は、
　前記空中浮遊映像表示装置との通信接続を行い、
　前記通信接続に基づいて、前記空中浮遊映像に表示される第１画像を、前記携帯端末の画面にも第１画像として表示し、および／または、前記携帯端末の画面に表示される第２画像を、前記空中浮遊映像にも第２画像として表示させ、
　前記空中浮遊映像に表示される前記第１画像に対する前記ユーザの操作の検出および判定に基づいて、前記空中浮遊映像の前記第１画像に対応付けられた所定の第１処理を実行させるととともに、前記携帯端末の画面の前記第１画像にも前記第１処理を反映するように制御し、および／または、前記携帯端末の側における、前記携帯端末の画面に表示される前記第２画像に対する前記ユーザの操作の検出および判定に基づいて、前記携帯端末の画面の前記第２画像に対応付けられた所定の第２処理を実行するととともに、前記空中浮遊映像の前記第２画像にも前記第２処理を反映するように制御する、
　携帯端末。