JPH10224821A - 複眼カメラおよびその複眼カメラを用いた映像表示システム - Google Patents

複眼カメラおよびその複眼カメラを用いた映像表示システム

Info

Publication number
JPH10224821A
JPH10224821A JP9025242A JP2524297A JPH10224821A JP H10224821 A JPH10224821 A JP H10224821A JP 9025242 A JP9025242 A JP 9025242A JP 2524297 A JP2524297 A JP 2524297A JP H10224821 A JPH10224821 A JP H10224821A
Authority
JP
Japan
Prior art keywords
image
display
eye camera
compound
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9025242A
Other languages
English (en)
Inventor
Katsumi Iijima
克己 飯島
Katsuhiko Mori
克彦 森
Hideki Morishima
英樹 森島
Sunao Kurahashi
直 倉橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP9025242A priority Critical patent/JPH10224821A/ja
Priority to US09/018,652 priority patent/US6278480B1/en
Publication of JPH10224821A publication Critical patent/JPH10224821A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Stereoscopic And Panoramic Photography (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

(57)【要約】 【課題】 立体映像を表示するにあって高い表示速度
(フレームレート)が要求されることのない立体表示機
能を備えた複眼カメラを提供する。 【解決手段】 複眼カメラ1は、撮像光学系2,3と表
示デバイス4とが一体的に設けられ、撮像光学系2,3
により撮影された視差を有する2枚の画像をそれぞれ水
平方向にストライプ状に分割し、1ラインづつ交互に配
列してストライプ状の画像に合成し、該ストライプ状の
合成画像を表示デバイス4に表示させる表示制御部が内
蔵されている。表示デバイス4は、バックライト5、市
松状の開口を有する開口マスク6、レンチキュラーレン
ズ7,8、PDLC9、表示画素部10、ガラス基板1
1が順に重ねられた構成となっており、表示されるスト
ライプ画像の奇数ラインの表示と偶数ラインの表示とに
異なる指向性を持ち、所定の観察位置において立体表示
を得られる構成となっている。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、立体映像および2
次元映像の撮影・表示が可能な複眼カメラに関する。さ
らには、その複眼カメラを用いた映像表示システムに関
する。
【0002】
【従来の技術】立体映像を撮影・表示するシステムとし
ては、例えば特開昭62-21396号公報に開示されているよ
うな立体テレビ装置などがあり、基本的に複数のカメラ
から視差を持った一組の映像を得て、これをそのシステ
ム専用の立体映像表示装置に立体表示することにより撮
影者に立体映像が提供される構成となっている。このよ
うな立体映像表示システムは、一般に、撮影を行うため
のカメラと立体映像を表示するディスプレイとが分離さ
れた構成となっており、通常は、カメラをディスプレイ
から切り離して撮影を行った後、ディスプレイに映像を
表示して編集するといった作業が行われる。
【0003】また、立体表示を得る方式としては、右眼
用画像と左眼用画像に対して偏光状態を異ならせ、偏光
めがねを用いて左右の画像を分離する立体テレビの方式
を用いるものがある。具体的には、偏光状態を異ならせ
るためにディスプレイ側に液晶シヤッターを設け、ディ
スプレイの表示画像のフィールド信号に同期させて偏光
状態を切り替え、偏光めがねをかけた観察者が時分割で
片目づつ左右画像を分離して立体視を可能にする。しか
し、この方式では、観察者は常に偏光めがねをかけなけ
ればならないという煩わしさがあった。
【0004】偏光めがねを用いない立体表示方式として
は、ディスプレイの前面にレンチキュラーレンズを設
け、空間的に左右の眼に入る画像を分離するようにした
ものがある。図11はレンチキュラーレンズを用いた立
体表示方式の説明図で、(a)は観察者の頭上方向から
みた液晶ディスプレイの表示画素部の断面図、(b)は
表示画素部のフィルタ構成を示す図である。
【0005】表示画素部60は液晶ディスプレイの表示
画素を示すもので、ここではガラス基板、カラーフィル
タ、電極、偏光板、バックライトなどは省略している。
この表示画素部60は、図11(b)に示すように、画
素を形成するカラーフィルタを配置した開口部61と画
素間を分離するブラックマトリクス62とからなる。液
晶ディスプレイの表示面には、断面が半円状で各々紙面
に直角方向に延びるシリドリカルレンズからなるレンチ
キュラーレンズ63が設けられており、その焦点面に液
晶ディスプレイの表示画素部60が位置するようになっ
ている。表示画素部60は図示するようにレンチキュラ
ーレンズ63の一つのピッチに対応して右眼用画像
(R)、左目用画像(L)がストライプ状に対となるよ
うに交互に配置されており、レンチキュラーレンズ63
により観察者の右眼ER、左眼ELに光学的に分離して結
像され、これにより立体視が可能となる。
【0006】なお、図11(a)には、ディスプレイの
中央部分のレンチキュラーレンズにより右眼用、左眼用
画像の各々を観察できる空間的領域のみが示されている
が、他の各レンチキュラーレンズについても同様に左右
に分離した空間的領域があり、これらの領域が観察者の
左右の眼の位置で重なることにより画面全体にわたって
一様に左右画像が分離して観察される。
【0007】上述の立体表示方式の他、特開平5-107663
号公報および特開平7-234459号公報に開示されているよ
うな方式もある。一例として、図12に特開平7-234459
号公報に開示されている立体画像表示装置の基本構成を
示す。
【0008】この立体画像表示装置は、マトリクス型面
光源70とレンチキュラーレンズ71からなる光指向性
切り替え装置72と透過型表示装置73とから構成され
る。右眼用のストライプ状の光源(図12(b)の70
R)が点灯しているときは、これに同期して右眼用の画
像(図12(c)の73R)を奇数フレーム(フィール
ド)で表示し、左眼用のストライプ状の光源(図12
(b)の70L)が点灯しているときは、これに同期し
て左眼用の画像(図12(c)の73L)を偶数フレー
ム(フィールド)で表示することにより、各画素を偶数
フレーム(フィールド)と奇数フレーム(フィールド)
に応じて全て用いることができる。この場合には、画素
の分割を行う必要はない。
【0009】
【発明が解決しようとする課題】上述したように、従来
は複眼カメラと立体表示ディスプレイとが分離されたシ
ステム構成になっており、複眼カメラ自体に立体映像を
表示する機能は設けられていない。そのため、通常は、
複眼カメラをディスプレイから切り離して撮影を行った
後、ディスプレイに映像を表示して編集するといった作
業が行われていた。しかし、このような撮影作業では、
良好な立体映像が得られているかについては編集の際に
しか判断できず、良好な立体映像を簡単に得ることは困
難であった。そこで、撮影しながらその場で立体映像を
確認できる、表示機能を備えた複眼カメラの提供が強く
望まれていた。
【0010】また、上記のような従来の立体表示システ
ムでは、現在の画像システムの主流であるパーソナルコ
ンピュータを用いたシステムへの接続については考慮さ
れていなかったため、複眼カメラで撮影した立体映像を
パーソナルコンピュータに取り込んで表示しようとした
場合、ユーザは改めてシステムを構築する必要があり、
ユーザの負担が大きなものになってしまう。
【0011】なお、上述したような液晶ディスプレイの
表面にレンチキュラーレンズを設けて立体視を得るもの
においては、レンズなどからの表面反射で画質が損なわ
れたり、液晶ディスプレイのブラックマトリクスがモア
レ縞となって見えたりし、良好な映像表示を得られない
という問題がある。また、右眼画像と左眼画像の2枚の
視差画像を時分割で表示することにより立体視するもの
においては、フリッカの発生を解決するために画像の切
替を高速で行わなければならないという問題がある。例
えば、「テレビジョン学会誌」,磯野他,Vol.4
1,No.6,pp549〜555,1987には、”
時分割立体視の成立条件”についての報告があり、それ
によるとフィールド(フレーム)周波数30Hzの時分
割方式では立体視できないことが示されている。さら
に、両眼を交互に開閉した場合のフリッカが知覚されな
い限界の周波数(臨海融合周波数CFFという)は約5
5Hzであり、フリッカの点からいえばフィールド(フ
レーム)周波数は少なくとも110Hz以上必要である
ことが示されている。このように、従来用いられていた
表示方式においては、透過型表示装置として、高速表示
のできる表示デバイスが必要であるという問題がある。
以上のことから、複眼カメラや映像表示システムに立体
表示機能を設けるにあたっては、上述の立体表示方式に
おける各問題を考慮する必要もあった。
【0012】本発明の目的は、上記課題を解決し、立体
映像を表示するにあって高い表示速度(フレームレー
ト)が要求されることのない立体表示機能を備えた複眼
カメラを提供することにある。さらには、立体映像をパ
ーソナルコンピュータに取り込んで表示できる映像表示
システムを提供することにある。
【0013】
【課題を解決するための手段】上記目的を達成するた
め、本発明の複眼カメラは、複数の撮像手段と、1つま
たは複数の走査線毎に画像が分割されてストライプ状に
表示され、該ストライプ画像の奇数ラインの表示と偶数
ラインの表示とに異なる指向性を持ち、所定の観察位置
において立体表示を得られる表示手段と、が一体的に構
成された複眼カメラであって、前記複数の撮像手段によ
り撮影された視差を有する2枚の画像をそれぞれ水平方
向にストライプ状に分割し、1ラインづつ交互に配列し
てストライプ状の画像に合成し、該ストライプ状の合成
画像を前記表示手段に表示させる表示制御手段が内蔵さ
れたことを特徴とする。
【0014】上記の場合、前記表示手段は自発光型の表
示素子を有し、前記表示素子により前記ストライプ画像
の奇数ラインの表示と偶数ラインの表示とに異なる指向
性を持たせる発光パターンを形成する構成であってもよ
い。
【0015】また、前記表示手段は、照明光源と、前記
照明光源からの光を透過する市松状の開口を有する開口
マスクと、前記開口マスクを透過した光束に対して、前
記ストライプ画像の奇数ラインと偶数ラインとに対応し
て異なる指向性を持たせる第1のレンチキュラーレンズ
と、前記第1のレンチキュラーレンズを透過した光束に
対して、前記ストライプ画像の各ラインに対応する視域
を持たせる第2のレンチキュラーレンズと、前記ストラ
イプ画像を表示する液晶表示手段と、を有する構成とし
てもよい。
【0016】さらに、前記複数の撮像手段により撮影さ
れた視差画像が保持される記憶手段がさらに内蔵され、
前記表示制御手段が、前記記憶手段に保持された視差画
像をストライプ状に合成して前記表示手段に表示させる
ように構成してもよい。
【0017】さらに、立体映像撮影モードと2次元映像
撮影モードとを選択的に設定するモード設定手段を有
し、前記表示手段が、奇数ラインの表示と偶数ラインの
表示とに異なる指向性を持たせる立体映像表示と、各ラ
インの表示には指向性を持せない2次元映像表示が可能
に構成され、前記表示制御手段が、立体映像撮影モード
が設定された場合は、前記複数の撮像手段により撮影さ
れた視差画像をストライプ状に合成して前記表示手段に
立体映像表示させ、2次元映像撮影モードが設定された
場合は、前記複数の撮像手段により撮影された2次元の
画像を前記表示手段に2次元映像表示させるように構成
してもよい。
【0018】上記の場合、前記2次元映像撮影モードが
パノラマ映像撮影モードであり、前記表示制御手段が、
パノラマ映像撮影モードが設定された場合は、前記複数
の撮像手段により撮影されたオーバラップ部分を有する
左右の画像を、そのオーバーラプ部分が重なるように横
方向に合わせてパノラマ画像とし、該パノラマ画像を前
記表示手段に2次元映像表示させるように構成してもよ
い。
【0019】さらに、前記モード設定手段は記録モード
と再生モードを選択的に設定する機能をさらに有し、前
記複数の撮像手段により撮影された画像が保持される記
憶手段と、記録モードが設定されると、前記記憶手段に
前記複数の撮像手段により撮影された視差画像または2
次元の画像を保持させ、再生モードが設定されると、前
記記憶手段に保持された視差画像または2次元の画像を
読み出す制御手段と、がさらに内蔵され、前記表示制御
手段が、前記記憶手段から読み出された視差画像または
2次元の画像を合成して前記表示手段に表示させるよう
に構成してもよい。
【0020】上記の場合、前記記憶手段に保持される2
次元の画像が前記複数の撮像手段により撮影されたオー
バラップ部分を有する左右の画像であり、前記表示制御
手段が、前記記憶手段から前記オーバラップ部分を有す
る左右の画像が読み出された場合には、左右の画像をそ
のオーバーラプ部分が重なるように横方向に合わせてパ
ノラマ画像とし、該パノラマ画像を前記表示手段に2次
元映像表示させるように構成してもよい。
【0021】上述のいずれかの複眼カメラにおいて、イ
ンタフェースケーブルを介して外部装置と接続されるデ
ジタル・インタフェースがさらに内蔵され、前記制御手
段が、前記表示制御手段により合成された画像を前記デ
ジタル・インタフェースを介して送出するように構成し
てもよい。
【0022】第2の発明の複眼カメラは、複数の撮像手
段を備え、前記撮像手段により視差を有する画像が撮影
される複眼カメラにおいて、前記撮像手段により撮影さ
れた視差を有する画像をそれぞれ水平方向にストライプ
状に分割し、交互に配列してストライプ状の画像を合成
する画像合成手段と、インタフェースケーブルを介して
外部装置と接続されるデジタル・インタフェースと、前
記画像合成手段により合成された画像を前記デジタル・
インタフェースを介して送出する制御手段と、が内蔵さ
れたことを特徴とする。
【0023】上記の場合、立体映像撮影モードと2次元
映像撮影モードとを選択的に設定するモード設定手段を
有し、前記画像合成手段が、立体映像撮影モードが設定
された場合は、前記複数の撮像手段により撮影された視
差画像をストライプ状に合成し、2次元映像撮影モード
が設定された場合は、前記複数の撮像手段により撮影さ
れた画像から2次元の合成画像を得るように構成しても
よい。この場合、前記2次元映像撮影モードがパノラマ
映像撮影モードであり、前記画像合成手段が、パノラマ
映像撮影モードが設定された場合は、前記複数の撮像手
段により撮影されたオーバラップ部分を有する左右の画
像を、そのオーバーラプ部分が重なるように横方向に合
わせてパノラマ画像とするように構成してもよい。
【0024】上述の第2の発明の複眼カメラにおいて、
前記複数の撮像手段により撮影された画像が保持される
記憶手段がさらに内蔵され、前記制御手段が、前記記憶
手段から画像を読み出し、該読み出した画像を前記画像
合成手段により合成させ、該合成画像を前記デジタル・
インタフェースを介して送出するように構成してもよ
い。
【0025】本発明の映像表示システムは、上述のデジ
タル・インタフェースを備えたいずれかの複眼カメラと
パーソナルコンピュータとがインタフェースケーブルを
介して接続された映像表示システムであって、前記パー
ソナルコンピュータは、1つまたは複数の走査線毎に画
像が分割されてストライプ状に表示され、該ストライプ
画像の奇数ラインによる表示と偶数ラインによる表示と
に異なる指向性を持たせて所定の観察位置において立体
表示を得る立体ディスプレイを備え、前記複眼カメラか
ら送出された合成画像を前記立体ディスプレイに表示さ
せることを特徴とする。
【0026】上記の場合、前記複眼カメラは、撮影され
た画像または記憶装置から読み出した画像をインタフェ
ースケーブルを介して送出する機能を備え、前記複眼カ
メラとインタフェースケーブルを介して接続され、視差
を有する2枚の画像が送出された場合は、各画像をそれ
ぞれ水平方向にストライプ状に分割し、1ラインづつ交
互に配列してストライプ状の画像に合成し、オーバラッ
プ部分を有する左右の画像が送出された場合には、各画
像をそのオーバーラプ部分が重なるように横方向に合わ
せてパノラマ画像に合成するアダプタ手段を有し、前記
パーソナルコンピュータが前記アダプタ手段とインタフ
ェースケーブルを介して接続され、前記アダプタ手段か
ら送出された合成画像を前記立体ディスプレイに表示す
るように構成してもよい。
【0027】上述のとおりの本発明によれば、複眼カメ
ラ自体に立体表示が可能な表示手段が設けられているの
で、撮影しながらその場で立体映像を確認して、視差の
調整など種々の調整を行える。
【0028】また、表示手段は、1つまたは複数の走査
線毎に画像が分割されてストライプ状に表示され、該ス
トライプ画像の奇数ラインによる表示と偶数ラインによ
る表示とに異なる指向性を持たせて所定の観察位置にお
いて立体表示を得る構成となっており、右眼用画像と左
眼用画像の2枚の視差画像が画面上に同時に表示される
ので、立体映像の表示速度(フレームレート)は、従来
の視差画像を時分割で表示するものに比べて1/2と遅
い。
【0029】また、表示手段として照明光源からの光束
がレンチキュラーレンズを介して液晶表示手段を照明す
るように構成されているものを用いたものにおいては、
液晶表示手段を照明した光束(画像)を観察するように
なっており、従来のように液晶表示手段の全面にはレン
ズは設けられていない。したがって、立体表示の際に、
レンズなどからの表面反射で画質が損なわれたり、液晶
ディスプレイのブラックマトリクスがモアレ縞となって
見えたりすることはない。
【0030】さらに、本発明の複眼カメラは、インタフ
ェースケーブルを介して外部装置と接続されるデジタル
・インタフェースが内蔵され、撮影された視差を有する
2枚の画像をそれぞれ水平方向にストライプ状に分割
し、1ラインづつ交互に配列してストライプ状の画像に
合成した合成画像をデジタル・インタフェースを介して
送出するように構成されているので、インタフェースケ
ーブルを介してパーソナルコンピュータとの接続が可能
で、撮影した立体画像をパーソナルコンピュータに取り
込むことができる。本発明では、パーソナルコンピュー
タ側に、取り込まれた合成画像を立体表示可能な表示手
段、すなわちストライプ画像の奇数ラインによる表示と
偶数ラインによる表示とに異なる指向性を持たせて所定
の観察位置において立体表示を得るような表示手段が備
えられているので、取り込まれた合成画像をパーソナル
コンピュータ側で立体表示できる。
【0031】上記のようにパーソナルコンピュータを用
いたシステムの構築が可能になっている本発明によれ
ば、ユーザは、複眼カメラで撮影した立体映像をパーソ
ナルコンピュータに取り込んで表示しようとした場合に
改めてシステムを構築する必要はない。
【0032】ここで、表示制御手段とは、後述する実施
形態の信号処理回路における信号処理およびその信号処
理結果に基づくLCD制御部による表示制御を行う手段
をいう。また、画像合成手段とは信号処理回路における
信号処理を行う手段をいう。
【0033】
【発明の実施の形態】次に、本発明の実施形態について
図面を参照して説明する。
【0034】<実施形態1>図1は本発明の複眼カメラ
の一実施形態を示す構成図である。同図において、複眼
カメラは、左右に設けられた撮像光学系2,3と、これ
ら撮像光学系2,3にて撮影された視差画像に基づいて
立体映像および2次元映像の表示がなされる表示デバイ
ス4とが一体的に設けられ、その表示デバイス4におけ
る映像表示を制御する回路(不図示)が内蔵された構成
となっている。
【0035】撮像光学系2,3のそれぞれはレンズを中
に持つ鏡筒を有し、立体映像あるいはパノラマ映像を得
るために左右に配置され、基線長を長くとれるように構
成されている。本形態では、撮像光学系2,3は表示デ
バイス4の左右に設けられ、その相対位置関係は固定さ
れている。表示デバイス4はチルト方向に回転可能にな
っており、表示デバイス4がチルト方向に回転しても撮
像光学系2,3の相対位置関係は変わらないようになっ
ている。
【0036】表示デバイス4は、照明光源となるバック
ライト5、光が透過する市松状の開口を有するマスクパ
ターンが形成された開口マスク6、レンチキュラーレン
ズ7,8、PDLC(高分子分散型液晶)9、液晶層に
より構成された表示画素部10、ガラス基板11が順次
重ねられた構成になっており、設定モードに応じて立体
映像またはパノラマ映像の表示が可能である。開口マス
ク6のマスクパターンは、クロムなどの金属蒸着膜また
は光吸収材料からなり、ガラスまたは樹脂からなるマス
ク基板上に既知のパターニングにより形成される。開口
マスク6と液晶表示画素部10の間に設けられたレンチ
キュラーレンズ7,8は、透明樹脂またはガラス性のマ
イクロレンズで、互いに直交する配置となっている。な
お、図1示した表示デバイス4の構成には、偏光板、カ
ラーフィルタ、電極、ブラックマトリクス、反射防止膜
などは省略されている。
【0037】この表示デバイス4による立体表示は、リ
アバリアレンチ方式と呼ばれる以下のような表示原理に
基づいて行われる。
【0038】図2(a)はリアバリアレンチ方式のディ
スプレイの表示原理図をである。リアバリアレンチ方式
のディスプレイは、バックライト901、市松状マスク
902、レンチキュラーレンズA903、レンチキュラ
ーレンズB904、PDLC(高分子分散型液晶)90
5、表示用LCD906からなる。まずバックライト9
01から光を照射し市松状マスク902を通す。これは
左右の画像をディスプレイからそれぞれ指向性を持たせ
て表示する照射光に分離するためである。分離した照射
光はレンチキュラーレンズ903、レンチキュラーレン
ズ904に入射する。レンチキュラーレンズ903はレ
ンチキュラーレンズが縦に並べられており、ここに市松
状マスク902によって分離した光が入射すると、右画
像表示用に分離した光はディスプレイに対して左、すな
わち観察者の右眼907の方へ、左画像表示用に分離し
た光はディスプレイに対して右、すなわち観察者の左眼
908の方へ、屈折して進む。同様にレンチキュラーレ
ンズ904はレンチキュラーレンズが横に並べられてい
る。レンチキュラーレンズ903が左右方向の画像を分
離していたのに対して、レンチキュラーレンズ904で
は上下方向の視域を広げる役割をする。このようにして
指向性を持った光に分離する。一方、表示用LCD90
6には立体視画像表示制御部によって垂直走査方向の1
ラインおきに左画素910、右画素909が並ぶように
して配置しておく。ここでレンチキュラーレンズ90
3、レンチキュラーレンズ904を透過したPDLC9
05を通過して照射されるとストライプ状に並べられた
画素のうち、右画素909は観察者に対する視域の右の
方へ、左画素910は観察者に対する視域の左の方へ表
示され、観察者は立体視画像を観察することができる。
【0039】以下、PDLC905の動作原理について
説明する。PDLC905は図2(b)に示すよう液晶
分子911を含む特殊ポリマー912が電極913の間
に存在し、この外側が基材914によって挟まれてい
る。ここで電極間に電圧をかけた状態では特殊ポリマー
912内の液晶分子911は透過状態となる。従って、
レンチキュラーレンズ903、レンチキュラーレンズ9
04と通過した左右に指向性を持った光はそのまま透過
していくため、表示用LCD906上の画像は左右に分
離して観察者は立体視画像を観察することができる。一
方電圧をかけないときには特殊ポリマー912内の液晶
分子911は散乱状態となる。従ってレンチキュラーレ
ンズ903、レンチキュラーレンズ904と通過した左
右に指向性を持った光はその指向性を失い、表示用LC
D906上の画像は2次元の画像として表示される。P
DLC905上の表示切換はPC9内の立体視画像表示
制御部802からの制御信号によリ制御する。また、こ
の切換はウィンドウ単位で行い、ディスプレイ画面上で
2次元の画像と3次元画像(立体視画像)を設定モード
に応じて切り替えて表示することができる。
【0040】上述したように構成される本実施形態の複
眼カメラ1では、撮像光学系2,3により撮影された左
右の画像は複眼カメラ1の本体にある記憶装置(不図
示)に一旦記憶された後、該記憶装置から映像信号とし
て表示デバイス4へ送出される。表示デバイス4では、
設定モードに応じてその撮像光学系2,3から送出され
た映像信号(左右の画像)を基に立体映像またはパノラ
マ映像の表示が行われる。
【0041】立体映像撮影モードの場合は、撮像光学系
2,3により左右の視差画像が撮影され、この左右の視
差画像が映像信号として表示デバイス4に送られる。表
示デバイス4では、左右の視差画像が上下方向に交互に
横ストライプ状に配列され、そのストライプ状の合成画
像が液晶表示画素部10に表示され、バックライト5か
らの光が開口マスク6の各開口を透過し、レンチキュラ
ーレンズ7,8、PDLC9をそれぞれ介して液晶表示
画素部10が照明される。この液晶表示画素部10の照
明では、PDLC9に電界がかけられており(PDLC
9は透明状態になっている。)、上述したリアバリアレ
ンチ方式の表示原理により観察者の両眼には左右の視差
画像が分離して観察され、立体的な映像の表示がなされ
る。
【0042】パノラマ映像撮影モードの場合は、撮像光
学系2,3によりオーバーラップした左右の画像が撮影
され、この左右の画像が映像信号として表示デバイス4
に送られる。表示デバイス4では、左右の画像がそのオ
ーバーラプ部分が重なるように横方向に合わせられたパ
ノラマ画像(重複部分は左右いずれかの画像が用いられ
る)とされ、そのパノラマ画像が液晶表示画素部10に
表示される。このパノラマ映像撮影モードにおける液晶
表示画素部10の照明では、PDLC9には電界はかけ
られず、指向性を持たされた光はこのPDLC9内の液
晶分子により散乱し、指向性がくずれた状態で液晶表示
画素部10を照明する。これにより、観察者は2次元の
ディスプレイとしてパノラマ画像を観察することにな
る。
【0043】なお、上述の表示デバイス4は、走査線の
奇数ラインによる表示と偶数ラインによる表示とに異な
る指向性を持たせる発光パターンを形成する、LEDな
どの自発光型の表示素子を用いて構成してもよい。ま
た、垂直走査方向の1ラインおきに左画素910、右画
素909が並ぶようにして配置されてた構成となってい
るが、垂直走査方向の複数のライン毎に左画素910、
右画素909が並ぶようにしてもよい。
【0044】以上説明したように、本形態の複眼カメラ
では撮像光学系2,3にて撮影された画像は表示デバイ
ス4にて立体映像またはパノラマ映像として表示される
ので、撮影者は撮影した画像をその場で観察することが
でき、また撮影をしながら観察することもできる。ま
た、表示デバイス4はチルト方向に回転可能に構成され
ているので、表示デバイス4の向きを撮影者の最も観察
し易い方向に設定でき、撮影者は最適な観察位置で立体
映像またはパノラマ映像を観察することができる。
【0045】次に、この複眼カメラの具体的な構成につ
いて詳細に説明する。図3は、図1に示した複眼カメラ
の具体的な構成を示すブロック図である。
【0046】CCD(Charge Coupled Device)20
a,20bは、それぞれ複眼カメラ1の左右の撮像光学
系2,3を構成する撮像素子で、これらはCCD駆動回
路24によりその駆動が制御される。CCD20a,2
0bからの左右の画像信号はそれぞれCDS/AGC
(Correlated Double Sampling:相関2重サンプリング
回路 /Automatic Gain Control:自動利得制御)2
1,21b、クランプ回路22a,22b、A/D変換
回路23a,23bを介して信号処理回路27に入力さ
れており、これら左右の画像信号の生成に関する駆動回
路および処理回路は全てタイミング・ジェネレータ25
の制御により同期が取られるようになっている。
【0047】信号処理回路27は、色処理回路26a,
26b、プロセス・メモリ31a,31b、圧縮/伸長
回路32、VRAM28のそれぞれと接続されており、
A/D変換回路23a,23bにてデジタル信号に変換
された左右の画像信号を色処理回路26a,26bに入
力して色変換処理を施したり、その色変換処理が施され
た左右のデジタル画像信号を所定の画素サイズに変換し
上下1ラインづつ交互にVRAM28へ転送したり、さ
らには画像データをプロセス・メモリ31a,31bに
保存したりするといった信号処理を行う。なお、後述す
るようにプロセス・メモリ31a,31bに保持された
画像の画素数とLCD30の表示画像の画素数は同数と
は限らないことから、信号処理回路27には上述の処理
機能の他、画素数の違いに応じた間引きや補間を行う処
理機能も備えられている。
【0048】液晶ディスプレイ(LCD:Liquid cryst
al display)30は複眼カメラ1の表示デバイス4を構
成するもので、LCD制御部29により駆動制御され
る。VRAM28は表示用メモリでLCD30に表示さ
れる画像に関する十分な容量を有しており、LCD制御
部29によるLCD30の表示制御によって、そのVR
AM28に書き込まれた内容がLCD30上に表示され
る。このLCD制御部29によるLCD30の表示制御
は、設定モード(立体映像撮影またはパノラマ映像撮影
など)に応じて行われる。
【0049】カメラ制御部40は撮影者による入力操作
が行われる部で、映像の記録・再生の設定や各種モード
の設定(例えば立体映像撮影モードとパノラマ映像撮影
モードの設定など)が行われる。このカメラ制御部40
はLCD制御部29と接続されるとともに、バスライン
39を介してMPU36と接続されている。
【0050】MPU36は、バスライン39を介して上
述したプロセス・メモリ31a,31bおよび圧縮/伸
長回路32、記録媒体35との接続が行われるメモリ・
インタフェース34、ワーク・メモリ37、マッチング
回路38とそれぞれ接続されており、カメラ制御部40
における設定入力に基づいて各部を制御する。記録媒体
35としては、磁気テープ、磁気ディスク、光ディス
ク、半導体メモリ等の種々のメモリを用いることができ
るが、ここではフラッシュメモリが用いられている。
【0051】メモリ・インターフェース34は、記録媒
体35の空き領域にプロセス・メモリ31a,31bに
保持された映像信号をデジタル形式のままファイルとし
て保存したり、保存したファイルのファイル管理領域へ
の登録を行ったりする。また、メモリ・インターフェー
ス34は、記録媒体35の管理領域を調べ、登録された
ファイル・データの読み出しを行う。
【0052】次に、この複眼カメラにおける記録・再生
について詳細に説明する。本形態の複眼カメラは、立体
映像撮影モードとパノラマ映像撮影モードの2つの撮影
モードが設定可能であり、以下これらモードに分けて説
明する。また、CCD20a,20bにより取り込まれ
る画像の蓄積には、フレーム単位で蓄積を行うフレーム
蓄積モードとフィールド(1つのフレームは2つのフィ
ールドで構成される)単位で蓄積を行うフィールド蓄積
モードの2つのモードがあるが、ここでは、フレーム蓄
積モードを例に挙げて説明する。
【0053】(1)立体映像撮影モード 撮影者がカメラ制御部40に対して立体映像撮影モード
を設定し、映像の記録・再生等の入力を行うと、この入
力操作に対する信号がカメラ制御部40からMPU36
へ送出され、MPU36により各部の制御が行われる。
【0054】まず、撮影した画像の立体表示について説
明する。
【0055】撮像光学系2,3により撮影が行われる
と、CCD20a,20bにて結像された画像が光電変
換され、左右の視差画像がCDS/AGC21,21
b、クランプ回路22a,22b、A/D変換回路23
a,23bを介してそれぞれ信号処理回路27に入力さ
れる。この信号処理回路27に入力される左右の視差画
像信号は、タイミング・ジェネレータ25の制御により
同期が取られているので、信号処理回路27では時間的
に左右同じ時刻に撮像された視差画像について以下の処
理が行われる。
【0056】信号処理回路27は、A/D変換器23
a,23bによりデジタル信号に変換された左右の視差
画像をそれぞれの色信号処理回路26a,26bへ出力
する。色信号処理回路26a,26bでは、入力された
左右の視差画像に対して既知の色変換処理が行われ、そ
の色変換が施された左右の視差画像が信号処理回路27
に再び入力される。
【0057】色変換が施された左右の視差画像が入力さ
れると、信号処理回路27は、その色変換が施された左
右の視差画像に関する画像データをプロセス・メモリ3
1a,31bに保存するとともに、その左右の視差画像
をLCD30の画素サイズに合うように変換し、上下1
ラインづつ交互にインターレース合成された画像をVR
AM28に書き込む。この処理により、CCD20a,
20bからの左右の視差画像はそれぞれプロセス・メモ
リ31a,31bおよびVRAM28に保持されたこと
になる。
【0058】上記の信号処理回路27による画像合成を
図4に摸式的に示す。色信号処理回路26aにて色変換
された左側画像は、図4に示す左側画像(a)のように
640×480(L0〜L479のライン)の有効画素
を持ち、色信号処理回路26bにて色変換された右側画
像は、図4に示す右側画像(b)のように640×48
0(R0〜R479のライン)の有効画素を持つ。本形
態では、これら左側画像(a)と右側画像(b)が、一
方ではそのまま画像データとして信号処理回路27を介
してプロセス・メモリ31a,31bに保存され、その
一方では信号処理回路27にて以下の画像圧縮が施され
る。
【0059】まず、左側画像(a)と右側画像(b)を
LCD30の表示サイズに合わせて例えば縦横1/2圧
縮された320×240(L’0〜L’239のライ
ン,R’0〜R’239のライン)の圧縮画像(c),
(d)に変換する。このような画像変換は、単純な間引
きや補間処理により行うことができる。続いて、これら
圧縮画像(c),(d)を「L’0,R’1,L’
2,...,R’237,L’238,R’239」の
順で1ライン毎に交互に合成して合成画像(e)を生成
する。この生成された合成画像(e)が、VRAM28
に書き込まれる。
【0060】上述のようにして左右の視差画像に関する
合成画像(e)がVRAM28に書き込まれると、LC
D制御部29によってそのVRAM28に書き込まれた
合成画像(e)が走査線毎に交互にLCD30(表示デ
バイス4)上に表示される。この表示の際、LCD制御
部29は、カメラ制御部40における撮影モードが立体
映像撮影モードに設定されていることから、PDLC9
に対して電界をかける。これにより、撮影者は撮像光学
系2,3により撮影した画像をLCD30上で立体的に
観察することができることになり、撮影をしながらその
立体映像を見ることができる。
【0061】次に、撮影画像の記録について説明する。
この撮影画像の記録は、撮影者がカメラ制御部40に対
して画像記録開始の入力操作を行うことにより開始さ
れ、上述のプロセス・メモリ31a,31bに保持され
た画像データを記録媒体35に保存する、MPU36に
よる以下のような処理によって行われる。
【0062】撮影者が画像記録開始の入力操作を行う
と、カメラ制御部40からその旨を示す信号がMPU3
6へ送られる。MPU36は、まずプロセス・メモリ3
1a,31bに保持された各画像データを信号処理回路
27を通じて1ラインずつ読み込んでインタレース合成
し、該インタレース合成画像をワーク・メモリ37に一
旦保持させる。その後、ワーク・メモリ37に保持され
たインタレース合成画像を圧縮/伸長回路32へ送る。
圧縮/伸長回路32では、その送出されたインタレース
合成画像に対して既知の圧縮処理が行われる。圧縮処理
が完了すると、MPU36はその圧縮された画像データ
を再びワーク・メモリ37に保持させる。
【0063】ワーク・メモリ37にプロセス・メモリ3
1a,31bに保持された左右の画像データに関するイ
ンタレース合成画像(圧縮データ)が保持されると、M
PU36はその保持されたインタレース合成画像をメモ
リ・インターフェース34を通じて記録媒体35へ保存
させる。このデータ保存の際、メモリ・インターフェー
ス34は、記録媒体35の空き領域にプロセス・メモリ
31a,31bに保持された映像信号をデジタル形式の
ままファイルととして保存するとともに、ファイル管理
領域への登録を行う。例えば、左側画像には「s001
L.jpg」、右側画像には「s001R.jpg」と
いったファイル名を付けて、左右圧縮画像をペアとして
登録を行い、ファイル管理領域にそのペアを識別するた
めの識別情報を同時に登録する。
【0064】次に、記録画像の再生について説明する。
この記録画像の再生は、撮影者がカメラ制御部40に対
して記録画像再生開始の入力操作を行うことにより開始
され、上述の記録媒体35に保存された圧縮データをL
CD30に表示させる、MPU36による以下のような
処理によって行われる。
【0065】撮影者が記録画像再生開始の入力操作を行
うと、MPU36はメモリ・インターフェース34を通
じて記録媒体35に保存されたファイル登録データの読
み出しを行わせる。このデータ読み出しの際、メモリ・
インターフェース34は、まず記録媒体35の管理領域
を調べ、全ファイル登録データをMPU36へ送る。
【0066】メモリ・インターフェース34からファイ
ル登録データが送られると、MPU36はその送られた
全ファイル登録データのうちから立体映像として再生可
能なファイルを選択し、その選択したファイル名の一覧
を任意の表示フォーマットに整え、信号処理回路27へ
表示データとして送る。
【0067】ファイル名データの一覧が送られると、信
号処理回路27によってそのファイル名データの一覧が
VRAM28に書き込まれ、その書き込まれたファイル
名データの一覧がLCD制御部29によってLCD30
に表示される。
【0068】ここで、撮影者がその表示されたファイル
名データの一覧から再生したいファイルを選択し、その
選択したファイルに関する画像を表示するようカメラ制
御部40にて入力操作すると、カメラ制御部40からそ
の旨を示す信号がMPU36へ送出される。MPU36
は、その選択されたファイルに関するデータをメモリ・
インターフェース34を通じて記録媒体35から読み出
し、読み出したファイル・データをワーク・メモリ37
へ転送する。
【0069】ワーク・メモリ37に転送されたファイル
・データは、圧縮/伸長回路32に転送されて伸長処理
が施された後、左右の画像データに分けられてそれぞれ
プロセス・メモリ31a,31bに送られる。プロセス
・メモリ31a,31bに送られた画像データは、信号
処理回路27によって上述したLCD30の表示サイズ
に合わせのための圧縮処理が施された後、さらに画像合
成処理が施されてVRAM28に書き込まれる。そし
て、このVRAM28への書き込まれた内容が、上述し
た立体表示と同様にしてLCD制御部29によってLC
D30に表示される。
【0070】(2)パノラマ映像撮影モード パノラマ映像撮影モードの場合には撮像光学系2,3の
配置が上述した立体映像撮影モードにおける配置と異な
る。すなわち、撮像光学系2,3はオーバーラップした
左右2枚の画像が撮影されるような配置とされる。
【0071】撮影者がカメラ制御部40に対してパノラ
マ映像撮影モードを設定し、映像の記録・再生等の入力
を行うと、この入力に対する信号がカメラ制御部40か
らMPU36へ送出され、MPU36により各部の制御
が行われる。
【0072】まず、撮影した画像の立体表示について説
明する。
【0073】撮像光学系2,3により撮影した2つの画
像をそれぞれの色処理回路26a,26bへ入力するま
では、上述した立体映像撮影モードにおける立体表示の
場合と同じ手順で信号処理が行われる。
【0074】色変換が施された左右の画像が信号処理回
路27に入力されると、信号処理回路27は、その色変
換が施された左右の画像に関する画像データをプロセス
・メモリ31a,31bに保存するとともに、その左右
の画像のオーバーラプ部分が重なるように横に並べて合
成したパノラマ画像をさらにLCD30の画素サイズに
合うように変換してVRAM28に書き込む。このLC
D30の画素サイズに合わせる変換では、縦方向に縮小
された画像となる。例えばオーバーラップ量が0の場
合、左右それぞれの画像を例えば160×120のサイ
ズに縮小し、横に並べるように合成して320×120
のパノラマ画像を生成する。ここで、パノラマ画像生成
の際の左右の画像のオーバーラップ量の検出は、信号処
理回路27によって行われる。
【0075】上述のようにして左右の画像に関するパノ
ラマ画像がVRAM28に書き込まれると、LCD制御
部29によってそのVRAM28に書き込まれたパノラ
マ画像がLCD30(表示デバイス4)上に表示され
る。この表示の際、LCD制御部29は、カメラ制御部
40における撮影モードがパノラマ映像撮影モードに設
定されていることから、前述した立体表示のときとは異
なり、PDLC9には電界をかけない。このようにPD
LC9に電界がかけられていないと、PDLC9を通過
する前に指向性を持たされた光は、通過の際にこのPD
LC9内の液晶分子により散乱し、指向性がくずれた状
態で液晶表示画素部10を照明することになる。これに
より、撮影者はLCD30に表示された画像を、左右が
分離して観察されるのではなく、2次元のディスプレイ
としてパノラマ画像を観察することにができ、撮影をし
ながらそのパノラマ画像を見ることができる。
【0076】パノラマ映像撮影モードにおける撮影画像
の記録および再生については、信号処理回路27におけ
るインタレース合成画像を得る処理に代えてパノラマ画
像を得る処理が行われる以外は、立体映像撮影モードに
おける処理とほとんど同じ処理が行われるので、ここで
はその処理についての説明は省略する。
【0077】上述した実施形態では、インタレース合成
は左側画像の奇数ラインを合成画像の奇数ラインとし、
右側画像の偶数ラインを合成画像の偶数ラインとした合
成となっているが、これ以外にも種々の組み合せにより
インタレース合成を行うことができる。例えば、図5に
示す例1のように、左側画像の奇数ラインを合成画像の
奇数ラインとし、右側画像の奇数ラインを合成画像の偶
数ラインとしてインタレース合成することもできる。こ
の他、インタレース合成の例としては、左側画像の偶数
ラインを合成画像の奇数ラインとし、右側画像の偶数ラ
インを合成画像の偶数ラインとして合成する場合(図5
の例2)、左側画像の奇数ラインを合成画像の偶数ライ
ンとし、右側画像の偶数ラインを合成画像の奇数ライン
として合成する場合(図5の例3)、左側画像の奇数ラ
インを合成画像の偶数ラインとし、右側画像の奇数ライ
ンを合成画像の奇数ラインとして合成する場合(図5の
例4)などがあり、いずれも適用可能である。但し、右
側画像が合成画像の奇数ラインとなる場合(図5の例
3、例4、例5)においては、右画像が観察者の右眼で
観察されるように、開口マスク6の市松状の開口が逆に
なったものを使用する。
【0078】以上説明した複眼カメラにおいて、各撮像
光学系2,3と一緒にマイクを左右に設ければ、映像の
表示とともに立体的な音声の再生が可能となる。
【0079】<実施形態2>上述した実施形態1の説明
では、CCD20a,20bによる画像の蓄積をフレー
ム単位で蓄積を行うフレーム蓄積モードとして説明した
が、これに代えてフィールド(1つのフレームは2つの
フィールドで構成される)単位で蓄積を行うフィールド
蓄積モードとすることもできる。フィールド蓄積モード
の場合の信号処理回路27における画像合成を図6に摸
式的に示す。
【0080】フィールド蓄積モードの場合は、色信号処
理回路26aにて色変換された視差画像のうち左側画像
は、図6に示す左側画像(a)のように640×240
(L0〜L239のライン)の有効画素を持ち、右側画
像は、図6に示す右側画像(b)のように640×24
0(R0〜R239のライン)の有効画素を持つ。本形
態では、これら左側画像(a)と右側画像(b)が、上
述のフレーム蓄積モードの場合と同様に一方ではそのま
ま画像データとして信号処理回路27を介してプロセス
・メモリ31a,31bに保存されるが、その一方では
信号処理回路27にて以下の画像圧縮が施される。
【0081】まず、左側画像(a)と右側画像(b)を
LCD30の表示サイズに合わせて水平方向のみ1/2
圧縮した、320×240(L’0〜L’239,R’
0〜R’239のライン)の圧縮画像(c),(d)に
変換する。このような画像変換は、単純な間引きや補間
処理により行うことができる。続いて、これら圧縮画像
(c),(d)を「L’0,R’1,L’2,...,
R’237,L’238,R’239」の順で1ライン
毎に交互に合成(インタレース合成)して合成画像
(e)を生成する。この生成された合成画像(e)が、
VRAM28に書き込まれる。このVRAM28に書き
込まれた合成画像(e)に基づく立体表示は上述のフレ
ーム蓄積モードの場合と同様である。
【0082】<実施形態3>上述した各実施形態の複眼
カメラにおいて、VRAM28に2倍の容量を持たせ、
信号処理回路27におけるインターレース合成を、例え
ば図7に示すように、「L0,R0,L1,R1,L
2,R2,...L479,R479」の順で左右の画
像から1ラインずつ間引きされることなく交互に合成す
るようにすることもできる。この場合、合成画像のサイ
ズは撮像した片方の画像(640×480)の2倍の大
きさ(640×960)を持つ合成画像を得る。
【0083】<実施形態4>ここでは、上述した各実施
形態の複眼カメラにインターフェースケーブルを介して
パーソナルコンピュータが接続された映像表示システム
について説明する。図8はその映像表示システムの一実
施形態を示す構成図である。
【0084】図8において、映像表示システムは、左右
に設けられた撮像光学系2,3と立体表示可能な表示デ
バイス4とが一体的に設けられた複眼カメラ1が、中央
処理装置(CPU)や記憶装置をもつパーソナルコンピ
ュータ本体13と周辺機器である立体ディスプレイ12
とからなるパーソナルコンピュータと接続された構成と
なっている。ここで、複眼カメラ1は、前述の図1に示
した複眼カメラと同じ構成のものである。
【0085】立体ディスプレイ12は、複眼カメラ1の
表示デバイス4と同じ構成になっている。すなわち、照
明光源となるバックライト5’、光が透過する市松状の
開口を有するマスクパターンが形成された開口マスク
6’、レンチキュラーレンズ7’,8’、PDLC
9’、液晶層などからなる表示画素部10’、ガラス基
板11’が順次重ねられた構成になっている。
【0086】この映像撮影・表示システムでは、複眼カ
メラ1内にてインターレース合成された合成画像または
パノラマ画像がパーソナルコンピュータ本体13に転送
され、その転送データがパーソナルコンピュータ本体1
3によって立体ディスプレイ12へ表示される。この立
体ディスプレイ12への表示においても、前述した複眼
カメラ1の表示デバイス4におけるリアバリアレンチ方
式を用いた表示が行われ、設定モードに応じて立体映像
またはパノラマ映像の表示が行われる。すなわち、立体
映像の表示の場合は、PDLC9’に電界をかけて、上
下方向に交互に横ストライプ状に配列され合成された画
像を1走査線毎に表示し、パノラマ映像の表示の場合
は、PDLC9’には電界をかけずに、転送されたパノ
ラマ画像を表示する。
【0087】次に、この立体映像表示システムの具体的
な構成について詳細に説明する。図9は、図8に示した
立体映像表示システムの具体的な構成を示すブロック図
である。
【0088】図9において、複眼カメラ1の各構成は前
述の図3に示したものと同様の構成となっているので、
ここではその構成の説明については省略する。複眼カメ
ラ1のデジタル・インタフェース(USB)33とパー
ソナルコンピュータのデジタル・インタフェース(US
B)41とインタフェースケーブルを介して接続されて
いる。デジタル・インタフェース41はISAバス50
に接続されており、このISAバス50はISA-PCIブリ
ッジ回路42を介してPCIバス51と接続されてい
る。このPCIバス51には、メモリ43、MPU4
4、VRAM45がそれぞれ接続されている。
【0089】LCD47は、図8に示すパーソナルコン
ピュータの立体ディスプレイ12を構成するもので、L
CD制御部46により表示制御行われる。VRAM45
は複眼カメラ1のVRAM28と同様の表示用メモリ
で、画像表示のための十分な容量を有しており、LCD
制御部46による表示制御によって、そのVRAM45
に書き込まれた内容がLCD47上に表示される。この
LCD制御部46による表示制御では、前述した複眼カ
メラ1におけるLCD制御部29による表示制御の場合
と同様、設定モードに応じて立体映像またはパノラマ映
像の表示が行われる。
【0090】以下、この映像表示システムにおける表示
制御について説明する。なお、複眼カメラ1における立
体映像およびパノラマ映像の撮影、記録、再生、および
表示は前述した通りなので、ここではその説明は省略
し、パーソナルコンピュータにおける表示制御について
のみ説明する。
【0091】前述した立体映像撮影モードでは、複眼カ
メラ1のワークメモリ37にはインタレース合成された
画像が保持されており、MPU36による制御によりそ
の保持された合成画像がデジタル・インタフェース33
を介してパーソナルコンピュータへ送出される。
【0092】パーソナルコンピュータでは、複眼カメラ
1から送出されたインタレース合成画像がデジタル・イ
ンタフェース41を介して受信され、ISA-PCIブリッジ
回路42を介してメモリ43に記録される。このメモリ
43に記録されたインタレース合成画像は、MPU44
による制御によりVRAM45に転送される。このMP
U44によるVRAM45への転送の際に、インタレー
ス合成画像を立体ディスプレイ12の表示サイズに合わ
せる変換処理が行われる。なお、複眼カメラ1側で転送
されるインタレース合成画像に圧縮処理が施される場合
には、パーソナルコンピュータ側で、表示サイズ合わせ
の処理の前に、転送されたインタレース合成画像に対す
る伸長処理が行われる。
【0093】VRAM45にインタレース合成画像が転
送されると、LCD46はそのVRAM45に書き込ま
れたインタレース合成画像を、前述した複眼カメラ1の
表示デバイス4における立体表示制御と同様の制御によ
り立体ディスプレイ12上に表示する。これにより、撮
影者は複眼カメラ1で撮影された画像をパーソナルコン
ピュータに取り込んで、立体ディスプレイ12上で立体
的に画像を観察することができる。
【0094】次に、複眼カメラ1の記録媒体36に記録
された画像データをパーソナルコンピュータに取り込ん
で立体ディスプレイ12上で観察する場合について説明
する。
【0095】撮影者が記録画像再生をパーソナルコンピ
ュータに取り込んで表示する旨の入力操作を行うと、M
PU36はメモリ・インターフェース34を通じて記録
媒体35に保存されたファイル登録データの読み出しを
行わせる。このデータ読み出しの際、メモリ・インター
フェース34は、まず記録媒体35の管理領域を調べ、
全ファイル登録データをMPU36へ送る。
【0096】メモリ・インターフェース34からファイ
ル登録データが送られると、MPU36はその送られた
全ファイル登録データのうちから立体映像として再生可
能なファイルを選択し、その選択したファイル名の一覧
を任意の表示フォーマットに整え、信号処理回路27へ
表示データとして送る。
【0097】ファイル名データの一覧が送られると、信
号処理回路27によってそのファイル名データの一覧が
VRAM28に書き込まれ、その書き込まれたファイル
名データの一覧がLCD制御部29によってLCD30
に表示される。
【0098】ここで、撮影者がその表示されたファイル
名データの一覧から再生したいファイルを選択し、その
選択したファイルに関する画像を表示するようカメラ制
御部40にて入力操作すると、MPU36は、その選択
されたファイルに関するデータをメモリ・インターフェ
ース34を通じて記録媒体35から読み出し、読み出し
たファイル・データをワーク・メモリ37へ転送する。
このワーク・メモリ37に転送されたファイル・データ
が、MPU36による制御によりデジタル・インタフェ
ース33を介してパーソナルコンピュータへ送出され、
上述の立体表示と同様の制御により立体表示がなされ
る。
【0099】次に、複眼カメラ1にて撮影されたパノラ
マ画像をパーソナルコンピュータへ転送して、表示する
場合について説明する。
【0100】パノラマ映像撮影モードでは、複眼カメラ
1のワークメモリ37には左右の画像がパノラマ画像と
なるように合成された画像が保持されており、MPU3
6による制御によりその保持された合成画像がデジタル
・インタフェース33を介してパーソナルコンピュータ
へ送出される。パーソナルコンピュータでは、複眼カメ
ラ1から送出されたパノラマ合成画像がデジタル・イン
タフェース41を介して受信され、ISA-PCIブリッジ回
路42を介してメモリ43に一旦記録された後、MPU
44による制御によりVRAM45に転送される。この
MPU44によるVRAM45への転送の際に、パノラ
マ合成画像を立体ディスプレイ12の表示サイズに合わ
せる変換処理が行われる。
【0101】VRAM45にパノラマ合成画像が転送さ
れると、LCD制御部46はそのVRAM45に書き込
まれたパノラマ合成画像を、前述した複眼カメラ1の表
示デバイス4におけるパノラマ映像表示制御と同様の制
御により立体ディスプレイ12上に表示する。これによ
り、撮影者は複眼カメラ1で撮影された画像をパーソナ
ルコンピュータに取り込んで、立体ディスプレイ12上
でパノラマ画像を観察することができる。
【0102】以上にのように本実施形態の映像表示シス
テムでは、複眼カメラ1で撮影した映像(立体映像また
はパノラマ映像)をその場で複眼カメラ1に設けられた
表示デバイス4にて観察したり、パーソナルコンピュー
タに取り込んで立体ディスプレイ12上で観察したする
ことができる。
【0103】<実施形態5>上述した映像撮影・表示シ
ステムでは、複眼カメラ1内にてインタレース合成され
た画像がパーソナルコンピュータに転送されるようにな
っているが、アダプタを設けてインタレース合成を行わ
せるようにしてもよい。その具体的な構成を図10に示
す。
【0104】図10において、映像撮影・表示システム
は図9に示した構成に3Dアダプタ80を設けた以外は
同様の構成となっている。図中、同じ構成には同じ符号
を付してある。
【0105】3Dアダプタ80は、複眼カメラ1のデジ
タル・インタフェース(USB)33およびパーソナル
コンピュータのデジタル・インタフェース(USB)4
1とそれぞれインタフェースケーブルを介して接続され
たデジタル・インタフェース(USB)81と、このデ
ジタル・インタフェース81を介して受信される画像デ
ータを保持するメモリ82と、このメモリ82に記録さ
れた画像データに対してインタレース合成またはパノラ
マ画像に合成する処理を行う画像合成回路83とから構
成されている。
【0106】本形態の映像撮影・表示システムでは、撮
影者が映像記録の開始の旨の入力操作をカメラ制御部4
0にて行うと、MPU36は、まずプロセス・メモリ3
1aから画像データをインタレース合成することなくデ
ジタル・インタフェース(USB)33を介して3Dア
ダプタ80へ送出する。3Dアダプタ80では、複眼カ
メラ1から送出された画像データ(インタレース合成さ
れていない)がデジタル・インタフェース81を介して
受信され、その画像データがメモリ82に保持される。
メモリ82にプロセス・メモリ31aから画像データが
保持されると、MPU36は、続いてプロセス・メモリ
31bから画像データをインタレース合成することなく
デジタル・インタフェース(USB)33を介して3D
アダプタ80へ送出する。3Dアダプタ80では、その
送出された画像データがデジタル・インタフェース81
を介して受信され、その画像データがメモリ82に保持
される。メモリ82に保持された各画像データは画像合
成回路83に送られ、画像合成回路83によってインタ
レース合成された後、再びメモリ82に保持される。メ
モリ82にに保持されたインタレース合成画像は、デジ
タル・インタフェース81を介してパーソナルコンピュ
ータへ送出される。
【0107】パーソナルコンピュータ側では、3Dアダ
プタ80から送出された画像データ(インタレース合成
画像)がデジタル・インタフェース81を介して受信さ
れ、上述した実施形態4の場合と同様にして立体表示が
行われる。
【0108】なお、パノラマ映像撮影モードの場合に
は、3Dアダプタ80のメモリ82にはプロセス・メモ
リ31a,31bからオーバーラップした左右の画像デ
ータが送出され、画像合成回路83では、その左右の画
像を合成してパノラマ画像とする処理が行われる。パー
ソナルコンピュータ側では、3Dアダプタ80から送出
された画像データ(パノラマ画像)がデジタル・インタ
フェース81を介して受信され、上述した実施形態4の
場合と同様にしてパノラマ映像の表示が行われる。
【0109】
【発明の効果】以上説明したように構成された本発明に
よれば、撮影しながらその場で立体映像を確認して、視
差の調整など種々の調整を行えるので、良好な立体映像
を簡単に得ることができるという効果がある。
【0110】加えて、立体表示の際に、レンズなどから
の表面反射で画質が損なわれたり、液晶ディスプレイの
ブラックマトリクスがモアレ縞となって見えたりするこ
とはないので、品質の高い立体映像を得られるという効
果がある。
【0111】さらに、立体映像の表示速度(フレームレ
ート)は、従来の視差画像を時分割で表示するものに比
べて1/2と遅いので、高速表示のできる表示デバイス
を必要としないという効果がある。
【0112】さらに、2次元画像の表示が可能になって
いるので、2次元画像と立体画像の互換性を有した複眼
カメラおよび映像表示システムを提供することができ
る。
【0113】また、複眼カメラで撮影した立体映像をパ
ーソナルコンピュータに取り込んで表示することができ
る、上述の各効果を有する映像表示システムを実現でき
る。
【図面の簡単な説明】
【図1】本発明の複眼カメラの一実施形態を示す構成図
である。
【図2】(a)はリアバリアレンチ方式のディスプレイ
の表示原理説明図、(b)はPDLCの動作原理説明図
である。
【図3】図1に示した複眼カメラの具体的な構成を示す
ブロック図である。
【図4】(a)〜(e)は信号処理回路による画像合成
を説明するための摸式図である。
【図5】インタレース合成例を示す図である。
【図6】(a)〜(e)はフィールド蓄積モードの場合
の信号処理回路における画像合成を説明するための摸式
図である。
【図7】信号処理回路による画像合成の他の例を説明す
るための摸式図である。
【図8】本発明の映像表示システムの一実施形態を示す
構成図である。
【図9】図8に示した立体映像表示システムの具体的な
構成を示すブロック図である。
【図10】アダプタを用いたインタレース合成の一例を
示すブロック図である。
【図11】レンチキュラーレンズを用いた立体表示方式
の説明図で、(a)は観察者の頭上方向からみた液晶デ
ィスプレイの表示画素部の断面図、(b)は表示画素部
のフィルタ構成を示す図である。
【図12】(a)〜(c)は特開平7-234459号公報に開
示されている立体画像表示装置の基本構成を示す図であ
る。
【符号の説明】
1 複眼カメラ 2 撮像光学系 3 撮像光学系 4 表示デバイス 5 バックライト 6 開口マスク 7 レンチキュラーレンズ 8 レンチキュラーレンズ 9 PDLC 10 表示画素部 11 ガラス基板
───────────────────────────────────────────────────── フロントページの続き (72)発明者 倉橋 直 東京都大田区下丸子3丁目30番2号 キヤ ノン株式会社内

Claims (15)

    【特許請求の範囲】
  1. 【請求項1】 複数の撮像手段と、1つまたは複数の走
    査線毎に画像が分割されてストライプ状に表示され、該
    ストライプ画像の奇数ラインの表示と偶数ラインの表示
    とに異なる指向性を持ち、所定の観察位置において立体
    表示を得られる表示手段と、が一体的に構成された複眼
    カメラであって、 前記複数の撮像手段により撮影された視差を有する2枚
    の画像をそれぞれ水平方向にストライプ状に分割し、1
    ラインづつ交互に配列してストライプ状の画像に合成
    し、該ストライプ状の合成画像を前記表示手段に表示さ
    せる表示制御手段が内蔵されたことを特徴とする複眼カ
    メラ。
  2. 【請求項2】 請求項1に記載の複眼カメラにおいて、 前記表示手段は自発光型の表示素子を有し、前記表示素
    子により前記ストライプ画像の奇数ラインの表示と偶数
    ラインの表示とに異なる指向性を持たせる発光パターン
    を形成することを特徴とする複眼カメラ。
  3. 【請求項3】 請求項1に記載の複眼カメラにおいて、 前記表示手段は、 照明光源と、 前記照明光源からの光を透過する市松状の開口を有する
    開口マスクと、 前記開口マスクを透過した光束に対して、前記ストライ
    プ画像の奇数ラインと偶数ラインとに対応して異なる指
    向性を持たせる第1のレンチキュラーレンズと、 前記第1のレンチキュラーレンズを透過した光束に対し
    て、前記ストライプ画像の各ラインに対応する視域を持
    たせる第2のレンチキュラーレンズと、 前記ストライプ画像を表示する液晶表示手段と、を有す
    ること特徴とする複眼カメラ。
  4. 【請求項4】 請求項1に記載の複眼カメラにおいて、 前記複数の撮像手段により撮影された視差画像が保持さ
    れる記憶手段がさらに内蔵され、 前記表示制御手段は、前記記憶手段に保持された視差画
    像をストライプ状に合成して前記表示手段に表示させる
    ことを特徴とする複眼カメラ。
  5. 【請求項5】 請求項1に記載の複眼カメラにおいて、 立体映像撮影モードと2次元映像撮影モードとを選択的
    に設定するモード設定手段を有し、 前記表示手段は、奇数ラインの表示と偶数ラインの表示
    とに異なる指向性を持たせた立体映像表示と、各ライン
    の表示には指向性を持せない2次元映像表示が可能に構
    成され、 前記表示制御手段は、立体映像撮影モードが設定された
    場合は、前記複数の撮像手段により撮影された視差画像
    をストライプ状に合成して前記表示手段に立体映像表示
    させ、2次元映像撮影モードが設定された場合は、前記
    複数の撮像手段により撮影された2次元の画像を前記表
    示手段に2次元映像表示させることを特徴とする複眼カ
    メラ。
  6. 【請求項6】 請求項5に記載の複眼カメラにおいて、 前記2次元映像撮影モードがパノラマ映像撮影モードで
    あり、 前記表示制御手段は、パノラマ映像撮影モードが設定さ
    れた場合は、前記複数の撮像手段により撮影されたオー
    バラップ部分を有する左右の画像を、そのオーバーラプ
    部分が重なるように横方向に合わせてパノラマ画像と
    し、該パノラマ画像を前記表示手段に2次元映像表示さ
    せることを特徴とする複眼カメラ。
  7. 【請求項7】 請求項5に記載の複眼カメラにおいて、 前記モード設定手段は記録モードと再生モードを選択的
    に設定する機能をさらに有し、 前記複数の撮像手段により撮影された画像が保持される
    記憶手段と、 記録モードが設定されると、前記記憶手段に前記複数の
    撮像手段により撮影された視差画像または2次元の画像
    を保持させ、再生モードが設定されると、前記記憶手段
    に保持された視差画像または2次元の画像を読み出す制
    御手段と、がさらに内蔵され、 前記表示制御手段は、前記記憶手段から読み出された視
    差画像または2次元の画像を合成して前記表示手段に表
    示させることを特徴とする複眼カメラ。
  8. 【請求項8】 請求項7に記載の複眼カメラにおいて、 前記記憶手段に保持される2次元の画像が前記複数の撮
    像手段により撮影されたオーバラップ部分を有する左右
    の画像であり、 前記表示制御手段は、前記記憶手段から前記オーバラッ
    プ部分を有する左右の画像が読み出された場合には、左
    右の画像をそのオーバーラプ部分が重なるように横方向
    に合わせてパノラマ画像とし、該パノラマ画像を前記表
    示手段に2次元映像表示させることを特徴とする複眼カ
    メラ。
  9. 【請求項9】 請求項1乃至請求項8に記載の複眼カメ
    ラにおいて、 インタフェースケーブルを介して外部装置と接続される
    デジタル・インタフェースがさらに内蔵され、 前記制御手段は、前記表示制御手段により合成された画
    像を前記デジタル・インタフェースを介して送出するこ
    とを特徴とする複眼カメラ。
  10. 【請求項10】 複数の撮像手段を備え、前記撮像手段
    により視差を有する画像が撮影される複眼カメラにおい
    て、 前記撮像手段により撮影された視差を有する画像をそれ
    ぞれ水平方向にストライプ状に分割し、交互に配列して
    ストライプ状の画像を合成する画像合成手段と、インタ
    フェースケーブルを介して外部装置と接続されるデジタ
    ル・インタフェースと、前記画像合成手段により合成さ
    れた画像を前記デジタル・インタフェースを介して送出
    する制御手段と、が内蔵されたことを特徴とする複眼カ
    メラ。
  11. 【請求項11】 請求項10に記載の複眼カメラにおい
    て、 立体映像撮影モードと2次元映像撮影モードとを選択的
    に設定するモード設定手段を有し、 前記画像合成手段は、立体映像撮影モードが設定された
    場合は、前記複数の撮像手段により撮影された視差画像
    をストライプ状に合成し、2次元映像撮影モードが設定
    された場合は、前記複数の撮像手段により撮影された画
    像から2次元の合成画像を得ることを特徴とする複眼カ
    メラ。
  12. 【請求項12】 請求項11に記載の複眼カメラにおい
    て、 前記2次元映像撮影モードがパノラマ映像撮影モードで
    あり、 前記画像合成手段は、パノラマ映像撮影モードが設定さ
    れた場合は、前記複数の撮像手段により撮影されたオー
    バラップ部分を有する左右の画像を、そのオーバーラプ
    部分が重なるように横方向に合わせてパノラマ画像とす
    ることを特徴とする複眼カメラ。
  13. 【請求項13】 請求項10または請求項11に記載の
    複眼カメラにおいて、 前記複数の撮像手段により撮影された画像が保持される
    記憶手段がさらに内蔵され、 前記制御手段は、前記記憶手段から画像を読み出し、該
    読み出した画像を前記画像合成手段により合成させ、該
    合成画像を前記デジタル・インタフェースを介して送出
    することを特徴とする複眼カメラ。
  14. 【請求項14】 請求項9、請求項10乃至請求項13
    のいずれか1項に記載の複眼カメラとパーソナルコンピ
    ュータとがインタフェースケーブルを介して接続された
    映像表示システムであって、 前記パーソナルコンピュータは、1つまたは複数の走査
    線毎に画像が分割されてストライプ状に表示され、該ス
    トライプ画像の奇数ラインの表示と偶数ラインの表示と
    に異なる指向性を持ち、所定の観察位置において立体表
    示が得られる立体ディスプレイを備え、前記複眼カメラ
    から送出された合成画像を前記立体ディスプレイに表示
    させることを特徴とする映像表示システム。
  15. 【請求項15】 請求項14に記載の映像表示システム
    において、 前記複眼カメラは、撮影された画像または記憶装置から
    読み出した画像をインタフェースケーブルを介して送出
    する機能を備え、 前記複眼カメラとインタフェースケーブルを介して接続
    され、視差を有する2枚の画像が送出された場合は、各
    画像をそれぞれ水平方向にストライプ状に分割し、1ラ
    インづつ交互に配列してストライプ状の画像に合成し、
    オーバラップ部分を有する左右の画像が送出された場合
    には、各画像をそのオーバーラプ部分が重なるように横
    方向に合わせてパノラマ画像に合成するアダプタ手段を
    有し、 前記パーソナルコンピュータが前記アダプタ手段とイン
    タフェースケーブルを介して接続され、前記アダプタ手
    段から送出された合成画像を前記立体ディスプレイに表
    示することを特徴とする映像表示システム。
JP9025242A 1997-02-07 1997-02-07 複眼カメラおよびその複眼カメラを用いた映像表示システム Pending JPH10224821A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP9025242A JPH10224821A (ja) 1997-02-07 1997-02-07 複眼カメラおよびその複眼カメラを用いた映像表示システム
US09/018,652 US6278480B1 (en) 1997-02-07 1998-02-04 Compound eye camera system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9025242A JPH10224821A (ja) 1997-02-07 1997-02-07 複眼カメラおよびその複眼カメラを用いた映像表示システム

Publications (1)

Publication Number Publication Date
JPH10224821A true JPH10224821A (ja) 1998-08-21

Family

ID=12160525

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9025242A Pending JPH10224821A (ja) 1997-02-07 1997-02-07 複眼カメラおよびその複眼カメラを用いた映像表示システム

Country Status (1)

Country Link
JP (1) JPH10224821A (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006510953A (ja) * 2002-12-13 2006-03-30 ヘンツェ−リソチェンコ パテントフェルヴァルトゥングス ゲーエムベーハー ウント コー.カーゲー 対象物の3次元画像情報を取得するための装置および再生するための装置
WO2012002430A1 (ja) * 2010-06-30 2012-01-05 富士フイルム株式会社 立体画像撮像装置
CN105049823A (zh) * 2014-12-23 2015-11-11 江阴新晟电子有限公司 一种利用双眼摄像模组采集处理输出3d图像的方法
US9989762B2 (en) 2014-03-19 2018-06-05 Perceptoscope Optically composited augmented reality pedestal viewer
CN116977449A (zh) * 2023-09-25 2023-10-31 安徽大学 一种基于闪烁棋盘格的复眼事件相机主动标定方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006510953A (ja) * 2002-12-13 2006-03-30 ヘンツェ−リソチェンコ パテントフェルヴァルトゥングス ゲーエムベーハー ウント コー.カーゲー 対象物の3次元画像情報を取得するための装置および再生するための装置
WO2012002430A1 (ja) * 2010-06-30 2012-01-05 富士フイルム株式会社 立体画像撮像装置
US9989762B2 (en) 2014-03-19 2018-06-05 Perceptoscope Optically composited augmented reality pedestal viewer
CN105049823A (zh) * 2014-12-23 2015-11-11 江阴新晟电子有限公司 一种利用双眼摄像模组采集处理输出3d图像的方法
CN116977449A (zh) * 2023-09-25 2023-10-31 安徽大学 一种基于闪烁棋盘格的复眼事件相机主动标定方法
CN116977449B (zh) * 2023-09-25 2024-03-15 安徽大学 一种基于闪烁棋盘格的复眼事件相机主动标定方法

Similar Documents

Publication Publication Date Title
JPH10336705A (ja) 複眼カメラ
US6278480B1 (en) Compound eye camera system
US8077964B2 (en) Two dimensional/three dimensional digital information acquisition and display device
JP2001061165A (ja) レンズ装置及びカメラ
JPH10224820A (ja) 複眼カメラ装置
JP5638791B2 (ja) 撮像装置
JP3612865B2 (ja) ビデオカメラ装置
US6674462B1 (en) Videoscope and its display unit
JPH10221775A (ja) 立体視撮像表示プログラムを記録した媒体及び複眼画像入出力装置
JP3676916B2 (ja) 立体撮像装置および立体表示装置
JP2002228974A (ja) 立体画像表示装置
JP2000036968A (ja) 複眼撮像装置及び複眼撮像方法
JP2004297540A (ja) 立体映像記録再生装置
JPH0784326A (ja) 立体画像撮影像・表示システム
JPH11187425A (ja) 立体映像装置及び方法
JP2002209232A (ja) 複眼カメラ
JP2003134534A (ja) 撮像装置
JP4588439B2 (ja) 立体視画像撮影装置および方法
JP2012134885A (ja) 画像処理装置及び画像処理方法
JP2006129225A (ja) 立体映像表示装置及び立体映像表示方法
JP2600693B2 (ja) 立体画像再生装置
JP4573496B2 (ja) 情報機器
JP2004241798A (ja) 立体映像記録再生装置
JP3323575B2 (ja) 眼鏡なし3次元画像表示装置
JP2005020079A (ja) 撮像装置