JPH09107561A - ２つのカメラの自動選択装置および２つのカメラの自動選択方法およびその用途 - Google Patents

２つのカメラの自動選択装置および２つのカメラの自動選択方法およびその用途

Info

Publication number
JPH09107561A
JPH09107561A JP8203731A JP20373196A JPH09107561A JP H09107561 A JPH09107561 A JP H09107561A JP 8203731 A JP8203731 A JP 8203731A JP 20373196 A JP20373196 A JP 20373196A JP H09107561 A JPH09107561 A JP H09107561A
Authority
JP
Japan
Prior art keywords
unit
cameras
camera
camera signals
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP8203731A
Other languages
English (en)
Inventor
Thomas Riegel
リーゲル トーマス
Manfred Ziegler
ツィークラー マンフレート
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Corp
Original Assignee
Siemens Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Corp filed Critical Siemens Corp
Publication of JPH09107561A publication Critical patent/JPH09107561A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/158—Switching image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two two-dimensional [2D] image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more two-dimensional [2D] image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from three-dimensional [3D] object models, e.g. computer-generated stereoscopic image signals
    • H04N13/279—Image signal generators from three-dimensional [3D] object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/368—Image reproducers using viewer tracking for two or more viewers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/373—Image reproducers using viewer tracking for tracking forward-backward translational head movements, i.e. longitudinal movements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/376—Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
    • H04N13/289—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

(57)【要約】 【課題】 １シーンを複数の光景から撮影するｎ個のカ
メラによって生成されるカメラ信号から２つのカメラ信
号を自動的に選択する簡単な手法。 【解決手段】 ヘッド追跡ユニットＫＶＥが観察者Ｂの
ヘッド位置Ｐｊを決定し、２つのカメラ信号を選択し、
送信ユニットＳＥに要求し、そこでスイッチユニットＳ
を介して要求されたカメラが立体写真コーディングユニ
ットＳＣに通し接続されそこでビデオデータ流ＣＶが形
成され、受信機ユニットＥＥに伝送され、デコーディン
グされ、立体写真画像スクリーンＤＩＳにて表示され
る。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、観察者のヘッド位
置の決定によって複数のカメラ信号から２つのカメラ信
号を自動的に選択するための装置および方法に関する。
【０００２】
【従来の技術】２つカメラより多くのカメラが１つのシ
ーンを撮影する所謂マルチビューステレオ画像シーケン
スの伝送の際、撮影されたシーンを表すカメラ信号の伝
送に際して多数の問題がある。マルチビューステレオ画
像シーケンスでは、受信機は、異なった光景（視点）か
ら成る同一シーンを表す２つのカメラ信号を必要とす
る。撮影されたカメラ信号の画像の存在する不同性によ
って、即ち受信機において立体写真画像スクリーンにお
いて表示される２つのカメラ信号の画像間の相応の画素
の位置的なずれによって、観察者にとって、奥行き効果
が得られ、即ち観察者は、３次元の画像を観察している
という印象を受ける。
【０００３】１つのシーンが複数のカメラによって撮影
され、かつすべてのカメラからのすべてのカメラ信号が
受信機に伝送されかつ２つの必要とされるカメラ信号の
選択が受信機において行われるとすれば、不必要なほど
多くの冗長性を含むことになる非常に膨大な伝送容量が
必要になる。
【０００４】受信機ユニットにおいては、僅か２つの、
しかも観察者にとって“正しい”カメラ信号が必要とさ
れるので、実際に必要とされる２つのカメラ信号のみを
伝送することが望ましい。更に、このために大したコス
トをかける必要なく、シーンの光景（視点）を変化でき
るようにすることが望まれる。
【０００５】更に、ヨーロッパ特許出願公開第０６５３
０１号公報から、立体写真画像撮影において、２つのカ
メラより多くのカメラを使用することが公知である。更
に、ドイツ連邦共和国第４０２７４７１号明細書は、観
察者の、センサにより検出される位置に依存した、画像
の空間的な表示に係っている。
【０００６】
【発明が解決しようとする課題】従って本発明の課題
は、簡単な手法で、１つのシーンを複数の光景（視点）
から撮影する、ｎ個のカメラによって生成される複数の
カメラ信号から２つのカメラ信号を、受信機において存
在する、シーンの観察者によって自動的に選択する装置
および方法を提供することである。
【０００７】
【課題を解決するための手段】この課題は本発明によれ
ば、請求項１記載の装置によっておよび請求項３記載の
方法によって解決される。
【０００８】本発明の装置の利点はとりわけ次の点にあ
る：即ち、装置が非常に簡素でありかつ従って、１つの
シーンを撮影する２つの固定接続されたカメラに基づい
て立体写真ビデオデータ流を実現するためにいずれにせ
よ必要とされる装置に比べてほんの僅かな拡張しか必要
でないということである。
【０００９】本発明の方法もその簡潔さによって特徴付
けられており、そのために本発明の方法は非常に迅速に
実施され、これにより本発明の方法のリアルタイムの実
施が可能になり、その際観察されるシーンの別の光景
（視点）の選択の際観察者に対して障害となる遅延効果
は生じない。
【００１０】請求項４に記載の本発明の方法の用途は、
障害発生時における例外処理、即ちビデオデータ流のコ
ーディングのためのモデルに基づいたコーディング方法
の使用の際の、所謂フォールバック解決法であって、こ
れによりモデルに基づいたコーディング方法の信頼性が
著しく高められる。
【００１１】本発明の実施例はその他の請求項に記載さ
れている。
【００１２】
【発明の実施の形態】次に本発明の図示の実施例につき
図面を用いて詳細に説明する。
【００１３】図１には、少なくとも次の構成要素を有す
る本発明の装置が図示されている：少なくとも次の構成
要素を有する送信ユニットＳＥ：１つのシーンを複数の
光景（視点）、即ち種々異なった視角から撮影する複数
のカメラＫａｉ。それぞれのカメラを一義的に識別する
第１のインデックスｉは、１およびｎの間の領域にある
数であり、その際値１およびｎはこの領域に含まれてい
る。
【００１４】ｎ個の入力側および２つの出力側を有する
スイッチユニットＳ、その際スイッチユニットＳの入力
側はそれぞれ、１つのカメラＫａｉに接続されている。
【００１５】コーディングされて送出すべきビデオデー
タ流ＣＶをコーディングするための立体写真コーディン
グユニットＳＣ。
【００１６】少なくとも次の構成要素を有する受信ユニ
ットＥＥ：受信されたコーディングされたビデオデータ
流ＣＶのデコーディングを実施する立体写真デコーディ
ングユニットＳＤ。
【００１７】観察者Ｂのヘッド位置Ｐｊを決定するヘッ
ド追跡ユニットＫＶＥ。ここではヘッド位置の所定の座
標から、必要とされる２つの光景、即ち２つの必要とさ
れるカメラ信号Ｋｉが選択され、その際第１のインデッ
クスｉはｉ番目のカメラＫａｉから取り出すことができ
るカメラ信号とも称し、観察者Ｂのその都度のヘッド位
置Ｐｊを識別する第２のインデックスｊは、１とｎ−１
との間の領域にある数であり、値１およびｎ−１はこの
領域内に含まれている。
【００１８】デコーディングされたビデオデータ流ＤＣ
Ｖを観察者Ｂに、観察者Ｂにとって立体写真効果、即ち
画像の観察の際に奥行きの印象が生じるように表示する
立体写真画像スクリーンＤＩＳ。
【００１９】カメラＫａｉはシーンＳＺを撮影する。カ
メラＫａｉは任意の手法で配置されている。
【００２０】このことは、２つのカメラＫａｉおよびＫ
ａｉ＋ｘの任意の選択において、観察者Ｂに対して立体
写真効果を実現することができることに対する前提であ
り、ここにおいて数ｘは領域１ないしｎ−１内にある。
【００２１】送信ユニットＳＥは、少なくともｎ個のカ
メラＫａｉ、１つのスイッチユニットＳおよび立体写真
コーディングユニットＳＣを有している。
【００２２】スイッチユニットＳは、２つの出力側が立
体写真コーディングユニットＳＣに接続されている。立
体写真コーディングユニットＳＣの構成は当業者には公
知であり、例えば（R. ter Horst, A Demonstrator for
Codings and Transmissionof Stereoscopic Video Sig
nals, Proceedings of Steroscopic Video Signals,Pro
ceedings of 4-th European Workshop on Three-Dimens
ional Television,Rom, 20.- 21. １９９３年１０月、
第２７３頁ないし２９０頁）に記載されている。
【００２３】送出すべき、立体写真コーディングユニッ
トＳＣにおいてコーディングされたビデオデータ流ＣＶ
は、受信機ユニットＥＥに伝送される。スイッチユニッ
トＳのｎ個の入力側はそれぞれ１つのカメラＫａｉに接
続されている。
【００２４】以下に説明するカメラ要求情報ＫＡＮに相
応して、スイッチユニットＳにおいて、カメラ要求情報
ＫＡＮによって要求されたカメラＫａｉおよびＫａｉ＋
１が選択され、その結果その都度カメラＫａｉおよびＫ
ａｉ＋１の要求されたカメラ信号ＫｉおよびＫｉ＋１が
コーディングされかつ伝送される。
【００２５】従って常に、要求されたカメラ信号のみが
選択されかつ立体写真コーディングユニットＳＣに通し
接続され（図２の３）、ここにおいてこれらはコーディ
ングされたビデオデータ流ＣＶにコーディングされ（図
２の４）かつ受信機ユニットＥＥに伝送される。
【００２６】受信機ユニットＥＥにおいてコーディング
されたビデオデータ流ＣＶが受信されかつデコーディン
グされる（図２の５）。引き続いて、デコーディングさ
れたビデオデータ流は立体写真画像スクリーンＤＩＳに
おいて観察者Ｂに表示される。
【００２７】受信機ユニットＥＥは少なくとも、立体写
真デコーディングユニットＳＤ、ヘッド追跡ユニットＫ
ＶＥ並びに立体写真画像スクリーンＤＩＳ（図２の６）
を有している。
【００２８】立体写真デコーディングユニットＳＤは立
体写真画像スクリーンＤＩＳに接続されている。ヘッド
追跡ユニットＫＶＥにおいて、観察者Ｂのヘッド位置
が、別のカメラによって観察者Ｂのヘッド位置を撮影
し、検出しかつ観察者Ｂのヘッドの空間位置、即ち観察
者Ｂのヘッド位置Ｐｊを決定することによって決定され
る。
【００２９】このヘッド位置Ｐｊ（第２のインデックス
ルｊは１とｎ−１との間の領域にある）に基づいて、ヘ
ッド位置Ｐｊに対応するカメラ信号ＫｉおよびＫｉ＋１
が選択されかつヘッド追跡ユニットＫＶＥによって要求
される。
【００３０】ヘッド追跡ユニットＫＶＥにおいて、観察
者Ｂのヘッド位置Ｐｊが決定され（図２の１）かつ観察
者Ｂの、画像スクリーンに対する水平方向の動きが追跡
される。このために、観察者Ｂのヘッドを撮影する少な
くとも１つのカメラが使用される。ヘッド追跡ユニット
ＫＶＥは例えば、ドイツ連邦共和国特許出願第１９５１
６６６４．７号明細書に記載されている方法に従って動
作する。
【００３１】そこに記載の方法では、そこに記載の方法
の期間に分類される被撮影目標物に対する空間的な位置
が決定される。この方法は本発明の方法では、観察者Ｂ
のヘッドを検出しかつヘッドの動きを追跡するために使
用される。これにより、ドイツ連邦共和国特許出願第１
９５１６６６４．７号明細書に記載されている方法は、
立体写真画像スクリーンＤＩＳの観察者Ｂのヘッドの空
間位置を求める。
【００３２】しかし本発明においては水平方向の動きを
表す座標のみが使用される。２つの別の空間座標は、本
発明の方法にとって重要でなく、この理由から必要とさ
れない。
【００３３】図２には、２つの必要とされるカメラ信号
ＫｉおよびＫｉ＋１を選択するための方法が記載されて
いる。
【００３４】まず、観察者Ｂのヘッド位置Ｐｊに対する
２つの許容極限位置、即ちヘッド位置Ｐ１およびヘッド
位置Ｐｎ−１が定義される。
【００３５】所望の自然に忠実な伝送の場合、カメラＫ
ａｉを等間隔に目の間隔において設置すると有利であ
り、即ちこの場合、ヘッド位置Ｐ１およびヘッド位置Ｐ
ｎ−１の間の距離はカメラＫａ１とカメラＫａｎ−１と
の間のカメラ間隔と同じになるはずである。その場合観
察者Ｂの位置に依存して、必要なカメラ信号が選択され
かつ伝送される。
【００３６】観察者のヘッドがヘッド位置Ｐ１にある、
即ち図１に示された配置において、１番左側またはそれ
より更に左側にあるとき、ヘッド追跡ユニットＫＶＥに
よって２つのカメラ信号Ｋ１およびＫ２、すなわち２つ
の左側にあるカメラＫａ１およびＫａ２によって生成さ
れるカメラ信号が選択され（２）かつヘッド追跡ユニッ
トＫＶＥによって要求される。
【００３７】カメラ信号Ｋ１およびＫ２は選択されず、
例えば１番左側に位置決めされたカメラＫａ１および別
のカメラＫａ１＋ｘおよびこれらのカメラによって生成
されるカメラ信号Ｋ１およびＫ１＋ｘを選択することも
できるようにも設定されている。カメラの選択は常時、
立体写真画像スクリーンＤＩＳの構成に依存している。
【００３８】観察者Ｂのヘッドがヘッド位置Ｐｎ−１ま
たはそれより右側にあるとき、ヘッド追跡ユニットＫＶ
Ｅはヘッド位置Ｐｎ−１にカメラ信号Ｋｎ−１およびＫ
ｎを割り当て、かつこれらカメラ信号を送信ユニットＳ
Ｅから要求する。
【００３９】カメラ信号Ｋｎ−１およびＫｎは選択され
ず、例えば１番左側に位置決めされたカメラＫａ１およ
び別のカメラＫａ１＋ｘおよびこれらのカメラによって
生成されるカメラ信号ＫｎおよびＫｎ−ｘを選択するこ
ともできるようにも設定されている。カメラの選択はこ
の場合も常時、立体写真画像スクリーンＤＩＳの構成に
依存している。
【００４０】観察者Ｂのヘッドが別個のヘッド位置Ｐｊ
間にあるとき、観察者Ｂの実際のヘッド位置に最も近く
に存在する、観察者Ｂのヘッド位置Ｐｊがその都度割り
当てられる。
【００４１】即ち一般に、観察者のヘッド位置Ｐｊに対
するヘッド追跡ユニットＫＶＥによって左側の画像とし
てのカメラ信号Ｋｉおよび右側の画像としてのカメラ信
号Ｋｉ＋ｘが提供される。
【００４２】観察者Ｂのｎ−１個のヘッド位置Ｐｊをカ
メラ構成に依存して定義することが重要である。このこ
とは、立体写真画像スクリーンＤＩＳの構成および観察
者Ｂに対する意図される効果に依存して行われる。
【００４３】このことは、カメラ追跡ユニットＫＶＥに
よって２つの新たなカメラ信号が要求されることを意味
する。立体写真効果、即ち観察者Ｂに対する奥行きの印
象を改善ないし強調するために、カメラの間隔を拡張す
ることもできる。
【００４４】立体写真効果が低減されるべきときは、当
然、カメラの間隔も低減することができる。
【００４５】ヘッド追跡ユニットＫＶＥによってヘッド
位置が上述したように決定された（図２の１）後、ヘッ
ド追跡ユニットＫＶＥは必要とされる２つの光景、即ち
必要とされるカメラ信号ＫｉおよびＫｉ＋ｘを選択し
（図２の２）かつ送信ユニットＳＥからこれらを要求す
る。
【００４６】このことは、受信機ユニットＥＥから送信
ユニットＳＥに伝送されるカメラ要求情報ＫＡＮの形に
おいて行われる。
【００４７】送信ユニットＳＥがカメラ要求情報ＫＡＮ
を受信した後、スイッチユニットＳは、該スイッチユニ
ットＳの２つの入力側が要求されたカメラＫａｉおよび
Ｋａｉ＋ｘに接続され、その結果要求されたカメラ信号
ＫｉおよびＫｉ＋ｘが立体写真コーディングユニットＳ
Ｃに通し接続される（図２の３）ように、切り替わる。
【００４８】立体写真コーディングユニットＳＣにおい
て、通し接続されたカメラ信号ＫｉおよびＫｉ＋ｘはコ
ーディングされて送出すべきビデオデータ流ＣＶにコー
ディングされる（図２の４）。
【００４９】それからこのコーディングされたビデオデ
ータ流ＣＶは受信機ユニットＥＥに伝送される。
【００５０】この受信された、コーディングされたビデ
オデータ流ＣＶは受信機ユニットＥＥにおいて立体写真
デコーディングユニットＳＤにおいてデコーディングさ
れ（図２の５）かつ観察者Ｂに立体写真画像スクリーン
ＤＩＳを介して表示される（図２の６）。
【００５１】図３には、本発明の方法の有利な用途が図
示されている。
【００５２】モデルに基づいたコーディング方法ＭＣの
使用の際の難点は、コーディング方法ＭＣにおいて発生
する障害状況の処理にある。即ち、モデルに基づいたコ
ーディング方法が障害を有するとき、即ち画像がモデル
に基づいたコーディング方法ＭＣによって誤ってモデル
化されたときの手法にある。
【００５３】本明細書の枠内において、モデルに基づい
たコーディング方法ＭＣとは、ｎ個のカメラによって撮
影されたシーンＳＺを３次元のモデルによって表示する
方法の謂である。これにより、撮影されたシーンＳＺの
画像データの一層のデータ低減が可能になる。
【００５４】この場合、ビデオデータ流の画像に対して
再び正しいモデルが生成される、即ち計算されるまで、
ビデオデータ流の正しい伝送を可能にする例外処理が必
要である。この例外処理のために、上述した方法が提供
される。
【００５５】このことは、ビデオデータ流ＣＶに対する
モデルが劣った品質で作成されたことが検出されると
き、画像データの比較大きな圧縮を可能にする、ビデオ
データ流ＣＶのモデルに基づいたコーディング方法ＭＣ
は中断されかつ本発明の方法が実施される（図３の１
０）、即ちシーンはその都度、観察者Ｂのヘッド位置Ｐ
ｊによって選択される２つのカメラＫａｉおよびＫａｉ
＋１によって撮影されることを意味する。
【００５６】画像データを再び正しく表す新しいモデル
が作成されたとき（図３の９）、再びモデルに基づいた
コーディング方法ＭＣを実施することができる（図３の
７）。
【００５７】従って、本発明の方法は、ビデオデータ流
のモデルに基づいたコーディング方法ＭＣと関連して、
モデルに基づいたコーディング方法ＭＣのフォールバッ
ク解決法として使用することができる。
【図面の簡単な説明】
【図１】受信機ユニットおよび送信ユニットおよび観察
者のヘッド位置に基づいて選択される複数のカメラを備
えた装置の概略図である。
【図２】請求項３に記載の本発明の方法を記述するシー
ケンス図である。
【図３】モデルに基づいたコーディングにおけるフォー
ルバック解決法としての本発明の方法の使用を説明する
シーケンス図である。
【符号の説明】
ＳＺ シーン、ＳＥ 送信ユニット、 Ｋａ１〜Ｋａｎ
カメラ、 Ｋ１〜Ｋｎ カメラ信号、 Ｓ スイッチ
ユニット、 ＳＣ コーディングユニット、ＣＶ ビデ
オデータ流、 ＥＥ 受信機ユニット、 ＳＤ デコー
ディングユニット、 ＤＩＳ スクリーン、 Ｂ 観察
者、 Ｐ１〜Ｐｎ−１ ヘッド位置

Claims (4)

    【特許請求の範囲】
  1. 【請求項１】 ｎ個のカメラ（Ｋａｉ；ｉ＝１‥ｎ ）
    によって発生される、複数のカメラ信号（Ｋｉ；ｉ＝１
    ‥ｎ）から、まとめて１つの立体写真画像列を形成する
    ２つのカメラ信号を生成する２つのカメラを自動的に選
    択するための装置において、送信ユニット（ＳＥ）にお
    いて、ｎ個のカメラ（Ｋａｉ）が任意の手法で配設され
    ており、該ｎ個のカメラは１つのシーンの複数の光景を
    撮影しかつスイッチユニット（Ｓ）を介して使用するこ
    とができ、前記送信ユニット（ＳＥ）において、立体写
    真コーディングユニット（ＳＣ）が設けられており、該
    コーディングユニットは、コーディングされて送信すべ
    きビデオデータ流（ＣＶ）をコーディングするためのも
    のであり、前記送信ユニット（ＳＥ）において、前記ス
    イッチユニット（Ｓ）が設けられており、その際該スイ
    ッチユニット（Ｓ）の２つの出力側は前記立体写真コー
    ディングユニット（ＳＣ）に接続されており、かつ前記
    スイッチユニット（Ｓ）のｎ個の入力側は前記ｎ個のカ
    メラ（Ｋａｉ‥Ｋａｎ）に接続されており、該スイッチ
    ユニットは、受信機ユニット（ＥＥ）のヘッド追跡ユニ
    ット（ＫＶＥ）によって選択された２つのカメラ信号
    （Ｋｉ；Ｋｉ＋ｘ）を使用することができ、ここにおい
    て数（ｘ）は１ないしｎの領域にある任意の数であり、
    前記受信機ユニット（ＥＥ）において、前記ヘッド追跡
    ユニット（ＫＶＥ）が設けられており、該ヘッド追跡ユ
    ニットは、ヘッド位置（Ｐｊ；ｊ＝１‥ｎ−１）を決定
    しかつ該ヘッド位置（Ｐｊ）に対応する２つのカメラ信
    号（Ｋｉ；Ｋｉ＋ｘ）を選択するためのものであり、前
    記受信機ユニット（ＥＥ）において、立体写真デコーデ
    ィング装置（ＳＤ）が設けられており、該立体写真デコ
    ーディング装置は、受信された、コーディングされてい
    るビデオデータ流（ＣＶ）をデコーディングするための
    ものであり、かつ前記受信機ユニット（ＥＥ）におい
    て、前記立体写真デコーディング装置（ＳＤ）の出力側
    に接続されている立体写真画像スクリーン（ＤＩＳ）が
    設けられていることを特徴とする２つのカメラの自動選
    択装置。
  2. 【請求項２】 前記ｎ個のカメラ（Ｋａｉ）の間隔は等
    間隔である請求項１記載の装置。
  3. 【請求項３】 ｎ個のカメラ（Ｋａｉ；ｉ＝１‥ｎ ）
    によって発生される、複数のカメラ信号（Ｋｉ；ｉ＝１
    ‥ｎ）から、まとめて１つの立体写真画像列を形成する
    ２つのカメラ信号を生成する２つのカメラを自動的に選
    択するための方法において、受信機ユニット（ＥＥ）に
    おいて、ヘッド追跡ユニット（ＫＶＥ）によって観察者
    （Ｂ）のヘッド位置（Ｐｊ；ｊ＝１‥ｎ−１）を決定
    し、前記ヘッド追跡ユニット（ＫＶＥ）によって、前記
    ヘッド位置（Ｐｊ）に対応する、２つのカメラ（Ｋａ
    ｉ；Ｋａｉ＋ｘ）によって生成される２つのカメラ信号
    （Ｋｉ；Ｋｉ＋ｘ）を選択し、ここにおいて前記ヘッド
    位置（Ｐｊ）に２つのカメラ信号（Ｋｉ）および（Ｋｉ
    ＋ｘ）が対応付けられ、かつ数（ｘ）は１ないしｎの領
    域にある任意の数であり、前記受信機ユニット（ＥＥ）
    は、カメラ要求情報（ＫＡＮ）を送信ユニット（ＳＥ）
    に送出し、該カメラ要求情報によって２つの必要とされ
    るカメラ信号（Ｋｉ；Ｋｉ＋ｘ）が要求され、前記送信
    ユニット（ＳＥ）は前記カメラ要求情報（ＫＡＮ）を受
    信しかつ記憶し、前記送信ユニット（ＳＥ）において、
    スイッチユニット（Ｓ）を介して、前記ヘッド追跡ユニ
    ット（ＫＶＥ）によって選択された２つのカメラ信号
    （Ｋｉ；Ｋｉ＋ｘ）を立体写真コーディングユニット
    （ＳＣ）に通し接続し、前記送信ユニット（ＳＥ）にお
    いて、前記立体写真コーディングユニット（ＳＣ）にお
    いて、コーディングされて送出すべきビデオデータ流
    （ＣＶ）をコーディングし、該送出すべきコーディング
    されたビデオデータ流（ＣＶ）を前記受信機ユニット
    （ＥＥ）に伝送し、該受信されたコーディングされたビ
    デオデータ流（ＣＶ）を前記受信機ユニット（ＥＥ）に
    おいて記憶し、かつ前記受信機ユニット（ＥＥ）におい
    て前記受信されたコーディングされたビデオデータ流
    （ＣＶ）を立体写真デコーディングユニット（ＳＤ）に
    おいてデコーディングすることを特徴とする２つのカメ
    ラの自動選択方法。
  4. 【請求項４】 ビデオデータ流（ＣＶ）のコーディング
    のためのモデルに基づいているコーディング方法（Ｍ
    Ｃ）の実施に際して、モデルに基づいているコーディン
    グ（ＭＣ）が不調であるとき、該モデルに基づいている
    コーディング（ＭＣ）を再び使用することができるよう
    になるまで、請求項３に記載の方法を使用する用途。
JP8203731A 1995-08-02 1996-08-01 ２つのカメラの自動選択装置および２つのカメラの自動選択方法およびその用途 Withdrawn JPH09107561A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE19528425A DE19528425C1 (de) 1995-08-02 1995-08-02 Anordnung und Verfahren zur automatischen Auswahl zweier Kamerasignale aus einer Vielzahl von Kamerasignale durch Bestimmung der Kopfposition eines Betrachters
DE19528425.9 1995-08-02

Publications (1)

Publication Number Publication Date
JPH09107561A true JPH09107561A (ja) 1997-04-22

Family

ID=7768533

Family Applications (1)

Application Number Title Priority Date Filing Date
JP8203731A Withdrawn JPH09107561A (ja) 1995-08-02 1996-08-01 ２つのカメラの自動選択装置および２つのカメラの自動選択方法およびその用途

Country Status (2)

Country Link
JP (1) JPH09107561A (ja)
DE (1) DE19528425C1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9908545D0 (en) * 1999-04-14 1999-06-09 Canon Kk Image processing apparatus
WO2005009052A1 (en) * 2003-07-16 2005-01-27 Koninklijke Philips Electronics N.V. Head tracked autostereoscopic display
CN101472190B (zh) * 2007-12-28 2013-01-23 华为终端有限公司 多视角摄像及图像处理装置、系统
GB2471137B (en) * 2009-06-19 2011-11-30 Sony Comp Entertainment Europe 3D image processing method and apparatus
GB2556910A (en) * 2016-11-25 2018-06-13 Nokia Technologies Oy Virtual reality display

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4027471C2 (de) * 1990-08-30 1994-10-13 Drescher Ruediger Gerät zur räumlichen Darstellung von Bildern
EP0650301B1 (en) * 1993-10-26 2000-05-31 Matsushita Electric Industrial Co., Ltd. Three-dimensional picture image display apparatus

Also Published As

Publication number Publication date
DE19528425C1 (de) 1996-05-15

Similar Documents

Publication Publication Date Title
JP3157384B2 (ja) 立体映像装置
JP2883265B2 (ja) 画像処理装置
US5835133A (en) Optical system for single camera stereo video
US5359362A (en) Videoconference system using a virtual camera image
KR100739275B1 (ko) 입체시용 영상 제공 방법 및 입체 영상 표시 장치
US8063930B2 (en) Automatic conversion from monoscopic video to stereoscopic video
US20100134599A1 (en) Arrangement and method for the recording and display of images of a scene and/or an object
EP0282966A2 (en) Method and apparatus for threedimensional imaging
JP2002095018A (ja) 画像表示制御装置及び画像表示システム、並びに画像データの表示方法
JP2006128818A (ja) 立体映像・立体音響対応記録プログラム、再生プログラム、記録装置、再生装置及び記録メディア
JPH10155104A (ja) 複眼撮像方法及び装置並びに記憶媒体
JPH08115439A (ja) 画像データ処理装置及び画像再生装置
JPS60264194A (ja) 立体テレビジヨンの信号処理方法及びその送受信側装置
US20110193937A1 (en) Image processing apparatus and method, and image producing apparatus, method and program
JP2006128816A (ja) 立体映像・立体音響対応記録プログラム、再生プログラム、記録装置、再生装置及び記録メディア
JPH07129792A (ja) 画像処理方法および画像処理装置
JP3096612B2 (ja) 時分割方式立体映像信号検出方法、時分割方式立体映像信号検出装置および立体映像表示装置
JPH09107561A (ja) ２つのカメラの自動選択装置および２つのカメラの自動選択方法およびその用途
KR101960577B1 (ko) 뷰 공간에 관한 스테레오 정보를 송수신하는 방법
KR102298047B1 (ko) 디지털 콘텐츠를 녹화하여 3d 영상을 생성하는 방법 및 장치
JP4270695B2 (ja) 立体画像表示装置用２ｄー３ｄ画像変換方式および装置
CN113900572A (zh) 视频数据处理方法、解码设备、编码设备及存储介质
JP3249335B2 (ja) ３次元映像変換方法
JP2842740B2 (ja) 複数視点３次元画像入力装置
JP2007288229A (ja) 画像撮影装置

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20031007