JP5072996B2 - 三次元ビデオ符号化に関するシステム及び方法 - Google Patents

Description

本発明は、一般に、ビデオ圧縮に関し、詳しくは、三次元及びステレオ表示のために圧縮ビデオを符号化／復号するシステム及び方法に関する。

従来のビデオ圧縮手法は、通常、三次元（３Ｄ）又はステレオビュービデオをフレーム単位で取り扱う。最も単純な方法は、二つのビューを独立したビデオシーケンスとして別個に符号化することである。しかしながら、この単純な方法は、符号化効率が悪い。更に、符号化／デコーダ、多重化／逆多重化、及び二本のビットストリームの同期が必要となるため、高い複雑性を有する。ビットストリーム処理の複雑性を低減するために、各ビューからの同期フレームを共にグループ化してコンポジットフレームを形成し、その後、一本の単一ビットストリームへと符号化することができる。このコンポジットフレームの方法でも、依然として符号化効率は悪い。更に、ビュースケーラブル機能が失われ、即ち、デコーダが選択できるのは、一つのみのビューの復号及び表示となる。

また、特許文献１に記載されるように、一方のビューをベース層のビットストリームへ符号化し、他方のビューをエンハンスメント層に符号化することができる。この層によるアプローチでは、符号化効率が高まるだけでなく、ビュースケーラブル機能も維持される。しかしながら、この方法も、多重ビットストリーム（ベース層及びエンハンスメント層のビットストリーム）を処理する必要があるため、複雑性が高い。

米国特許出願第２００２／０００９１３７号明細書

圧縮３Ｄビデオを、より高い効率で通信できれば有利である。
旧来の２Ｄディスプレイ上で表示できるように、圧縮３Ｄ又はステレオビューの一方のビューのみを復号可能であれば有利である。

本発明は、上述のごとき課題を解決するために、以下の各技術手段により構成される。
第１の技術手段は、第１の視点の画像であるトップフィールド、及び第２の視点の画像であるボトムフィールドが２つのインタレースフィールドとして符号化されたビデオフレームをともなうビットストリームを受け入れる受け入れステップと、前記受け入れステップで受け入れたビットストリームにともなう第１のビデオフレームのトップフィールド、もしくはボトムフィールドのいずれか一方を復号して第１のフィールドを導くステップと、前記受け入れステップで受け入れたビットストリームにともなう現行ビデオフレームのトップフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号するステップと、前記受け入れステップで受け入れたビットストリームにともなう現行ビデオフレームのボトムフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号するステップとを含むことを特徴とした三次元ビデオ復号方法である。

第２の技術手段は、第１の視点の画像であるトップフィールド、及び第２の視点の画像であるボトムフィールドが２つのインタレースフィールドとして符号化されたビデオフレームをともなうビットストリームを受け入れる受け入れ手段と、前記受け入れ手段で受け入れたビデオストリームのビデオフレームを復号する復号手段とを備え、前記復号手段は、前記受け入れ手段で受け入れたビットストリームにともなう第１のビデオフレームのトップフィールド、もしくはボトムフィールドのいずれか一方を復号した第１のフィールドを導き、前記受け入れ手段で受け入れたビットストリームにともなう現行ビデオフレームのトップフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号し、前記受け入れ手段で受け入れたビットストリームにともなう現行ビデオフレームのボトムフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号することを特徴とした三次元ビデオ復号装置である。

本発明の３Ｄビデオレシーバシステムの概略ブロック図である。 本発明の３Ｄビデオ符号化システムの概略ブロック図である。 本発明の３Ｄビューフィールドのインタレース処理を例示する図である。 符号化性能の比較を例示するグラフである。 ３Ｄビデオを受信する本発明の方法を例示するフローチャートである。 ３Ｄビデオを符号化する本発明の方法を例示するフローチャートである。

本発明は、３Ｄビデオフレームをインタレース済みデータとして扱う。そのため、３Ｄビューは、より優れた圧縮を可能にするＨ．２６４におけるもの等、既存のインタレース符号化方法を使用して符号化できる。更に、本発明は、エンコーダ側での最小限の制約と共に、スケーラブル符号化（二次元ビュー）機能をサポートする。スケーラブル復号化オプションは、例えば、単純なＳＥＩメッセージにおいて信号を送ることができる。

したがって、３Ｄビデオを受信するための方法が提供される。この方法は、Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ−２（ＭＰＥＧ−２）、ＭＰＥＧ−４、又はＩＴＵ−Ｔ Ｈ．２６４規格において、二つのインタレースフィールドで符号化された現行ビデオフレームを伴うビットストリームを受け入れるステップと、現行フレームのトップフィールドを復号するステップと、現行フレームのボトムフィールドを復号するステップと、復号済みのトップ及びボトムフィールドを３Ｄフレーム画像として提示するステップとを含む。一部の態様において、この方法は、復号済みのトップ及びボトムフィールドを、ステレオビュー画像として提示する。

一部の態様において、この方法は、補足エンハンスメント情報（ＳＥＩ）メッセージを受信するといったトリガに応じて、２Ｄ選択コマンドを受け入れる。その他のトリガには、ディスプレイのケーパビリティ（機能）の分析、手動選択、又はレシーバシステム構成が含まれる。その後、現行フレームのインタレースフィールドの一方のみが復号され、２Ｄフレーム画像が提示される。

この方法の一態様では、現行フレームを受け入れる前に、第一の符号化済みビデオフレームが受け入れられる。その後、この方法は、予測的な第一のフレームのトップフィールドを導き、更に、予測的な第一のフレームのボトムフィールドを導く。次に、現行フレームのトップ及びボトムフィールドが、予測的な第一のフレームのトップフィールドと予測的な第一のフレームのボトムフィールドとに応じて、それぞれ復号される。

同様に、３Ｄビデオを符号化する方法が提供され、この方法は、画像の第一のビュー及び画像の第二の３Ｄビューを含む現行３Ｄビデオ画像を受け入れるステップと、第一のビューをフレームのトップフィールドとして符号化するステップと、第二のビューをフレームのボトムフィールドとして符号化するステップと、トップフィールドがボトムフィールドにインタレースされた現行ビデオフレームを伴うビットストリームを、チャネルへ送信するステップとを含む。

上記の方法と３Ｄビデオエンコーダ及びレシーバシステムとの更なる詳細は、以下に記載する。

図１は、本発明の３Ｄビデオレシーバシステムの概略ブロック図である。システム１００は、二つのインタレースフィールドにより符号化された現行ビデオフレームを伴うビットストリームを受け入れるために、ライン１０４上のチャネルに接続された入力を有する、復号手段の一例としてのデコーダ１０２を備える。例えば、ライン１０４は、インターネット、衛星放送受信機、又はデジタルケーブルネットワークに接続してよい。デコーダ１０２は、ＭＰＥＧ−２、ＭＰＥＧ−４、又はＩＴＵ−Ｔ Ｈ．２６４のような規格のビットストリームを受け入れる。デコーダ１０２は、復号済みの現行フレームのトップフィールドと現行フレームのボトムフィールドとを供給するために、ライン１０６上に出力を有する。表示手段の一例としてのディスプレイ１０８は、ライン１０６上の復号済みフィールドを受け入れるための入力を有する。ディスプレイ１０８は、復号済みのトップ及びボトムフィールドを、３Ｄフレーム画像として、視覚的に提示する。例えば、ディスプレイ１０８は、高品位テレビにすることができる。システムの他の態様において、ディスプレイ１０８は、復号済みのトップ及びボトムフィールドを、ステレオビュー画像として、視覚的に提示する。

一般に、ディスプレイ１０８は、復号済みの現行フレームのインタレースフィールドの一方のみを使用することに応じて、二次元（２Ｄ）画像を視覚的に提示する。更に、３Ｄ画像の提示に対して選択されたものとして、ディスプレイ１０８は、復号済みの現行フレームのインタレースフィールドの一方のみを使用することに応じて、２Ｄ画像を提示してもよい。例えば、ユーザは、３Ｄ画像が利用可能な場合であっても、２Ｄ画像の表示を手動で選択してよい。

その他の態様において、デコーダ１０２は、ディスプレイ機能を分析し、非３Ｄディスプレイ機能が検出された場合、現行フレームのインタレースフィールドの一方のみを復号してよい。例えば、デコーダは、ディスプレイ１０８が旧来のテレビであることを検出してもよい。この状況において、ディスプレイ１０８は、二次元（２Ｄ）画像を視覚的に提示する。

一部の態様において、デコーダ１０２は、補足エンハンスメント情報（ＳＥＩ）３Ｄコンテンツメッセージを現行ビデオフレームと共に受信する。従来のＳＥＩメッセージには多くのタイプが存在する。３ＤコンテンツＳＥＩメッセージは、（複数の）参照フレームがフレーム内のトップ及びボトムフィールドとして編成された３Ｄコンテンツを含むことの信号として機能するメッセージである。３ＤコンテンツＳＥＩメッセージは、デコーダ１０２がディスプレイ機能を分析するのをトリガしてもよい。この分析は、ディスプレイ１０８に向けられたクエリの結果としてよく、或いはディスプレイ機能に関するメモリ内の事前に構成した情報にアクセスした結果としてもよい。非３Ｄディスプレイ機能が検出された場合、デコーダは、３ＤオプションＳＥＩメッセージに応じて、現行フレームのインタレースフィールドの一方のみを復号することを選択してよい。一方のみのフィールドがデコーダ１０２によって供給されるため、ディスプレイ１０８は、二次元（２Ｄ）画像を視覚的に提示する。なお、デコーダ１０２は、ディスプレイが３Ｄ画像を提示できない場合であっても、ディスプレイ１０８に３Ｄビューの両方のフィールドを提供してもよい。

一部の態様において、デコーダ１０２は、ライン１１２に２Ｄ選択コマンドを供給する２Ｄ決定ユニット１１０を含む。デコーダ１０２は、２Ｄ選択コマンドに応じて、現行フレームのインタレースフィールドの一方のみを復号する。これに応じて、ディスプレイ１０８は、２Ｄ画像を視覚的に提示する。デコーダ２Ｄ決定ユニット１１０は、ライン１０４上でＳＥＩメッセージを受信すること等のトリガに応じて、２Ｄ選択コマンドを供給する。トリガは、ディスプレイ機能の分析にしてよい。例えば、ライン１０６上でのディスプレイとの通信において、機能を調査してよい。他の態様において、トリガは、ユーザによって行われた手動選択に対応し、ライン１１４上で受信される。別の態様において、トリガは、メモリ１１６に格納されるレシーバシステム構成に対応可能である。

トップ及びボトムフィールドの相補的な３Ｄビューとしての編成は、予測的な符号化及び復号処理に対応する。ＭＰＥＧ規格に関して、イントラ符号化フレーム（Ｉフレーム）は、一連の後続フレームにおける基盤として使用可能な情報を伝達するのに使用される。Ｈ．２６４に関して、予測フレームは、独立デコーダリフレッシュ（ＩＤＲ）ピクチャと呼ばれる。一部の態様において、デコーダは、現行フレームを受け入れる前に、第一の符号化済みビデオフレームを受け入れる。デコーダ１０２は、第一のフレームから、予測的な第一のフレームのトップフィールド及び予測的な第一のフレームのボトムフィールドを導く。次に、デコーダ１０２は、予測的な第一のフレームのトップフィールドに応じて、現行フレームのトップフィールドを復号する。同様に、現行フレームのボトムフィールドは、予測的な第一のフレームのボトムフィールドに応じて復号される。

また、デコーダ１０２は、予測的な第一のフレームの第一のフィールドを、第一のフレームから導く。第一のフィールドは、トップフィールド又はボトムフィールドのいずれかにしてよい。デコーダ１０２は、予測的な第一のフレームの第一のフィールドに応じて、現行フレームのトップフィールドを復号し、予測的な第一のフレームの第一のフィールドに応じて、現行フレームのボトムフィールドを復号する。

図２は、本発明の３Ｄビデオ符号化システムの概略ブロック図である。システム２００は、画像の第一のビューと画像の第二の３Dビューとを含む現行３Dビデオ画像を受け入れるために、ライン２０４上に入力を有する、符号化手段の一例としてのエンコーダ２０２を備える。一部の態様において、エンコーダ２０２は、ステレオ画像を受け入れる。エンコーダ２０２は、第一のビューをフレームのトップフィールドとして符号化し、第二のビューをフレームのボトムフィールドとして符号化する。エンコーダ２０２は、トップフィールドがボトムフィールドにインタレースされた現行ビデオフレームを伴うビットストリームを供給するために、ライン１０４上にチャネル接続出力を有する。エンコーダ２０２は、ＭＰＥＧ−２、ＭＰＥＧ−４、又はＨ．２６４のような規格のビットストリームを送信する。

システムの一態様において、エンコーダ２０２は、接続されたレシーバの機能又はチャネル帯域幅の分析といったトリガに対応する２Ｄコマンドを送信する。レシーバ機能の分析は、レシーバ機能の記録を保持するメモリ２１２にアクセスした結果として発生してもよい。例えば、記録は、接続されたレシーバ又はレシーバのグループに３Ｄディスプレイ機能が欠如していることを示してもよい。チャネル帯域幅の分析は、メモリ２１２にアクセスした結果として、或いは帯域幅のリアルタイム測定値を受信した結果として行われてもよい。一部の状況において、帯域幅は、両方のフィールドを伝送するのが非現実的となるほどに小さくなり得る。こうした理由と、可能性のあるその他の理由とにより、エンコーダ２０２は、現行ビューフレームから、フィールドの一方のみを符号化及び送信することを選択してよい。

別の態様において、エンコーダ２０２は、３Ｄビューが利用可能であることを信号で送り、３Ｄビューがインタレースフィールドにどのようにマッピングされるかを説明し、各フィールドの依存性を説明するために、ＳＥＩ ３Ｄオプションメッセージを送信してもよい。

別の態様において、エンコーダ２０２は、オプションの単一フィールド二次元（２Ｄ）復号化をトリガするために、ＳＥＩ ３Ｄオプションメッセージを現行ビデオフレームと共に送信してもよい。例えば、２Ｄレシーバ機能が見つかった場合、エンコーダ２０２は、ＳＥＩ ３Ｄオプションメッセージを、フィールドの一方のみと共に、送信してよい。

現行ビデオ画像を受け入れる前に、エンコーダ２０２は、第一のビデオ画像を受け入れ、第一の画像のトップフィールドと、第一の画像のボトムフィールドとを符号化してよい。例えば、第一の画像のトップ及びボトムフィールドは、Ｉフレーム（ＭＰＥＧ）又はＩＤＲピクチャ（Ｈ．２６４）のいずれかを形成するのに使用してもよい。その後、エンコーダ２０４は、第一の画像のトップフィールドに応じて現行フレームのトップフィールドを符号化し、第一のフレームのボトムフィールドに応じて現行フレームのボトムフィールドを符号化する。

また、単一のフィールドを使用して、後続のトップ及びボトムフィールドを生成することが可能である。即ち、エンコーダ２０４は、現行画像を受け入れる前に、第一のビデオ画像を受け入れ、第一の画像の第一のフィールドを符号化してよい。第一の画像の第一のフィールドは、トップ又はボトムフィールドのいずれかにしてよい。その後、エンコーダ２０４は、第一の画像の第一のフィールドに応じて現行フレームのトップフィールドを符号化し、第一の画像の第一のフィールドに応じて現行フレームのボトムフィールドを符号化する。

＜機能の説明＞
図３は、本発明の３Ｄビューフィールドインタレース処理を示している。オプション１は、左右（ステレオ又は３Ｄ）のビューを示している。オプション２は、ビューをコンポジットビデオフレームとして示している。

ステレオビュービデオフレームを別個のフレーム又はコンポジットビデオフレームとして扱う代わりに、本発明は、シーケンスをインタレース済みデータとみなす。例えば、オプション３に例示するように、左ビューピクチャはトップフィールドとなり、右ビューピクチャはボトムフィールドとなる。様々なビデオ符号化規格、例えば、ＭＰＥＧ−２、ＭＰＥＧ−４、及びＨ．２６４その他において、既存のインタレース符号化方法を使用して、インタレース済みビデオフレームを符号化するのは簡単である。こうした規格の使用により、優れた圧縮及びビットストリーム処理が可能となる。

上記のビデオ符号化規格のインタレース符号化方法を使用することで、エンコーダ側での最小限の制約と共に、スケーラブル復号化オプションをサポートすることが可能となる。スケーラブルオプションは、少なくとも一方のビュー（又はフィールド）を、他方のビュー（又はフィールド）のビットストリームを参照することなく、独立して復号できることを意味する。このオプションにより、デコーダ及びエンコーダデバイスは、３Ｄディスプレイ機能をサポートしない旧来のデバイスと共に使用することが可能となる。このスケーラブル符号化オプションを可能にするために、全てのピクチャは、フィールドピクチャモードで符号化される。少なくとも一つのフィールド（トップ又はボトムのいずれか）は自己完結型となり、自己完結フィールドに関して、対応するフィールドピクチャは、動き補償の基準として同じパリティを伴う、以前に符号化されたフィールドピクチャのみを使用することができる。

ここで、関連するＨ．２６４符号化ツールについて、非常に簡潔にまとめる。Ｈ．２６４は、最新の国際ビデオ符号化規格である。従来のビデオ符号化方法に関連して、予測の柔軟性及び精度を強化するために、いくつかの新しいフレーム間予測オプションが設計されている。Ｈ．２６４では、相互予測のために多数の基準ピクチャを使用することができる。即ち、二つ以上の事前に符号化されたピクチャを、相互予測の基準として使用できる。インタレース済みデータのより優れた処理を可能にするために、Ｈ．２６４では、フレームピクチャ又は二つのフィールドピクチャとして、ビデオフレームを符号化できる。こうした二つのオプション間での選択は、ピクチャレベル適応フレームフィールド（ＰＡＦＦ）符号化と呼ばれる。この考え方は、マクロブロックレベルに拡張し、マクロブロックレベル適応フレームフィールド（ＭＢＡＦＦ）符号化のオプションを可能にできる。

図４は、符号化性能の比較を例示するグラフである。符号化性能を評価するために、Ｈ．２６４検証モデルＪＭ７．３ソフトウェアを使用して実験を行った。エン符号化パラメータは、五つの基準フレームと、＋／−３２のピクセル動作サーチ範囲と、ＩＰＰＰ（１４Ｐピクチャ前のイントラフレーム）を伴う１５フレームのグループオブピクチャ（ＧＯＰ）と、ＲＤ最適化（ＪＭソフトウェアの符号化オプション）と、ＣＡＶＬＣ（コンテキスト適応可変長符号化――Ｈ．２６４規格のエントロピオプション）と、２８／３２／３６の固定量子化パラメータ（ＱＰ）とである。３００フレームのステレオシーケンスを、以下の三種類の設定で符号化した。

１．全フレーム符号化（図３のオプション２）
２．ＰＡＦＦ符号化（図３のオプション３、基準ピクチャに関する制限なし）
３．スケーラブルフィールド符号化（図３のオプション３、基準ピクチャに関する制限有り）

符号化性能は、図４に表示されている。スケーラブルフィールド符号化（設定＃３）及びＰＡＦＦ符号化（設定＃２）は、本質的に重複する。設定＃２及び設定＃３は、両方とも、設定＃１よりも遙かに優れた符号化性能を有する。格差は、相対的に高品質の側で、約０．８ｄＢである。ピーク信号対雑音比（ＰＳＮＲ）の値が高くなるほど、符号化性能は高くなる。そのため、例えば、設定＃２は、設定＃１よりも優れている（高ビットレート側で０．８ｄＢ）。設定＃２と比較すると、設定＃３は、０．１ｄＢ未満の非常に小さなオーバヘッドを有する。

図５は、３Ｄビデオを受信する本発明の方法を例示するフローチャートである。明確にするために、番号の付いたステップの連続として方法を表しているが、明示的に記載されない限り、番号から順序を推測するべきではない。これらのステップの一部は、省略してよく、並行して実行してよく、或いは連続の厳密な順序を維持する必要を伴わずに実行してよいと理解するべきである。この方法は、ステップ５００で開始される。

ステップ５０２では、二つのインタレースフィールドにより符号化された現行ビデオフレームを伴うビットストリームを受け入れる。例えば、ビットストリームは、ＭＰＥＧ−２、ＭＰＥＧ−４、又はＨ．２６４のような規格である。ステップ５０４では、現行フレームのトップフィールドを復号する。ステップ５０６では、現行フレームのボトムフィールドを復号する。ステップ５０８では、復号済みのトップ及びボトムフィールドを３Ｄフレーム画像として提示する。一部の態様において、ステップ５０８では、復号済みのトップ及びボトムフィールドをステレオビュー画像として提示する。方法の一態様において、ステップ５０３では、２Ｄ選択コマンドを受け入れる。例えば、２Ｄ選択コマンドの受け入れは、補足エンハンスメント情報（ＳＥＩ）メッセージ、ディスプレイ機能の分析、手動選択、又はレシーバのシステム構成のようなトリガに応じて行われてもよい。その後、２Ｄ選択コマンドに応じて、現行フレームのインタレースフィールドの一方のみが使用される。即ち、ステップ５０４又はステップ５０６のいずれかが実行される。表示のように、ステップ５０４が実行される（ステップ５０６は迂回される）。ステップ５１０では、２Ｄフレーム画像を提示する。また、両方のフィールドを復号してもよいが、復号された現行フレームのインタレースフィールドの一方のみを使用することに応じて、ステップ５１０では、２Ｄフレーム画像が提示される。方法の一態様においては、３Ｄ画像の提示（ステップ５０８）と同時に、復号された現行フレームのインタレースフィールドの一方を使用することに応じて、ステップ５１０で２Ｄ画像が提示される。２Ｄ及び３Ｄ画像の同時的な提示は、２Ｄ又は３Ｄビューのいずれかを選択し得ることを意味してもよい。

この方法の別の態様において、ステップ５０３は、図示されないサブステップに分かれる。ステップ５０３ａでは、（ＳＥＩ）３Ｄコンテンツメッセージを、現行ビデオフレームと共に受信する。ステップ５０３ｂでは、ディスプレイ機能を分析する。非３Ｄディスプレイ機能が検出された場合、現行フレームのインタレースフィールドの一方のみが復号される。即ち、ステップ５０４又はステップ５０６のいずれかが実行される。その後、ステップ５１０で、２Ｄフレーム画像が提示される。

別の態様において、ステップ５０３では、３Ｄビューが利用可能であることを信号で送り、３Ｄビューがインタレースフィールドにどのようにマッピングされるかを説明し、各フィールドの依存性を説明するために、ＳＥＩ ３Ｄオプションメッセージを受け入れる。別の態様において、ステップ５０１ａでは、現行フレームを受け入れる前に、第一の符号化済みビデオフレームを受け入れる。ステップ５０１ｂでは、予測的な第一のフレームのトップフィールドを導く。ステップ５０１ｃでは、予測的な第一のフレームのボトムフィールドを導く。その後、現行フレームのトップフィールドを復号するステップ（ステップ５０４）は、予測的な第一のフレームのトップフィールドに応じて、現行フレームのトップフィールドを復号するステップを含む。同様に、現行フレームのボトムフィールドを復号するステップ（ステップ５０６）は、予測的な第一のフレームのボトムフィールドに応じて、現行フレームのボトムフィールドを復号するステップを含む。

また、図示されていないが、ステップ５０１ｂでは、トップフィールド又はボトムフィールドのいずれかである、予測的な第一のフレームの第一のフィールドを導く。この態様において、ステップ５０１ｃは迂回される。その後、ステップ５０４では、予測的な第一のフレームの第一のフィールドに応じて、現行フレームのトップフィールドを復号する。ステップ５０６では、予測的な第一のフレームの第一のフィールドに応じて、現行フレームのボトムフィールドを復号する。

図６は、３Ｄビデオを符号化する本発明の方法を例示するフローチャートである。この方法は、ステップ６００で開始される。ステップ６０２では、画像の第一のビュー及び画像の第二の３Ｄビューを含む現行３Ｄビデオ画像を受け入れる。一態様において、ステップ６０２では、ステレオ画像の第一及び第二のビューを受け入れる。ステップ６０４では、第一のビューをフレームのトップフィールドとして符号化する。ステップ６０６では、第二のビューをフレームのボトムフィールドとして符号化する。ステップ６０８では、トップフィールドがボトムフィールドにインタレースされた現行ビデオフレームを伴うビットストリームを、チャネルへ送信する。例えば、ステップ６０８では、ＭＰＥＧ−２、ＭＰＥＧ−４、又はＩＴＵ−Ｔ Ｈ．２６４のような規格でビットストリームを送信する。

一態様において、ステップ６０７では、レシーバ機能又はチャネル帯域幅の分析といったトリガに対応する２Ｄコマンドを受け入れる。その後、ステップ６１０では、２Ｄコマンドをレシーバに送信する。一態様において、ステップ６１０では、オプションの単一フィールド二次元（２Ｄ）復号化をトリガするために、補足エンハンスメント情報（ＳＥＩ）３Ｄオプションメッセージを現行ビデオフレームと共に送信する。別の態様では、ステップ６１０において２Ｄコマンドが送信された場合、ステップ６１２では、現行ビューフレームからのフィールドの一方のみを送信する。

一態様において、ステップ６０１ａでは、現行ビデオ画像を受け入れる前に、第一のビデオ画像を受け入れる。ステップ６０１ｂでは、第一の画像のトップフィールドを符号化する。ステップ６０１ｃでは、第一の画像のボトムフィールドを符号化する。例えば、ＭＰＥＧ規格の送信では、Ｉフレームを符号化してよい。その後、ステップ６０４では、第一の画像のトップフィールドに応じて、現行フレームのトップフィールドを符号化し、ステップ６０６では、第一の画像のボトムフィールドに応じて、現行フレームのボトムフィールドを符号化する。

また、ステップ６０１ｂでは、トップフィールド又はボトムフィールドのいずれかである、第一の画像の第一のフィールドを符号化し、ステップ６０１ｃは迂回される。その後、ステップ６０４では、第一の画像の第一のフィールドに応じて、現行フレームのトップフィールドを符号化し、ステップ６０６では、第一の画像の第一のフィールドに応じて、現行フレームのボトムフィールドを符号化する。

３Ｄ符号化及び復号のためのシステム及び方法を提示した。処理が２Ｄアプリケーション用にどのようにスケーリングされるかについて、例を提供した。更に、予測符号化により処理をどのように有効にし得るかについて、例を提供した。しかしながら、本発明は、こうした例のみに限定されない。本発明のその他のバリエーション及び実施形態は、当業者により想到されよう。

１０２…デコーダ、１０６…復号済みフィールド、１０８…ディスプレイ、１１０…２Ｄ決定ユニット、１１２…２Ｄ選択コマンド、２０２…エンコーダ。

Claims (2)

1. 第１の視点の画像であるトップフィールド、及び第２の視点の画像であるボトムフィールドが２つのインタレースフィールドとして符号化されたビデオフレームをともなうビットストリームを受け入れる受け入れステップと、
   前記受け入れステップで受け入れたビットストリームにともなう第１のビデオフレームのトップフィールド、もしくはボトムフィールドのいずれか一方を復号して第１のフィールドを導くステップと、
   前記受け入れステップで受け入れたビットストリームにともなう現行ビデオフレームのトップフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号するステップと、
   前記受け入れステップで受け入れたビットストリームにともなう現行ビデオフレームのボトムフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号するステップと
   を含むことを特徴とする三次元ビデオ復号方法。
2. 第１の視点の画像であるトップフィールド、及び第２の視点の画像であるボトムフィールドが２つのインタレースフィールドとして符号化されたビデオフレームをともなうビットストリームを受け入れる受け入れ手段と、
   前記受け入れ手段で受け入れたビデオストリームのビデオフレームを復号する復号手段とを備え、
   前記復号手段は、
   前記受け入れ手段で受け入れたビットストリームにともなう第１のビデオフレームのトップフィールド、もしくはボトムフィールドのいずれか一方を復号した第１のフィールドを導き、
   前記受け入れ手段で受け入れたビットストリームにともなう現行ビデオフレームのトップフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号し、
   前記受け入れ手段で受け入れたビットストリームにともなう現行ビデオフレームのボトムフィールドを、前記第１のフィールドのみを参照フィールドとして参照して、復号する
   ことを特徴とする三次元ビデオ復号装置。

Images