JPH0937301A - 立体映像変換回路 - Google Patents
立体映像変換回路Info
- Publication number
- JPH0937301A JPH0937301A JP7180149A JP18014995A JPH0937301A JP H0937301 A JPH0937301 A JP H0937301A JP 7180149 A JP7180149 A JP 7180149A JP 18014995 A JP18014995 A JP 18014995A JP H0937301 A JPH0937301 A JP H0937301A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- circuit
- video signal
- motion
- dimensional video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000006243 chemical reaction Methods 0.000 title claims abstract description 20
- 239000013598 vector Substances 0.000 claims abstract description 110
- 230000033001 locomotion Effects 0.000 claims description 147
- 238000001514 detection method Methods 0.000 claims description 11
- 230000003111 delayed effect Effects 0.000 abstract description 4
- 239000000284 extract Substances 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 8
- 238000000034 method Methods 0.000 description 7
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 5
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Landscapes
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereoscopic And Panoramic Photography (AREA)
Abstract
(57)【要約】 （修正有）
【課題】 ＭＰＥＧのアルゴリズムにより２次元映像信
号に多重された動きベクトルを利用した立体映像変換回
路の提供。 【解決手段】 ２次元映像信号の一方が、動きベクトル
決定回路１２に供給され、ＭＰＥＧのビットストリーム
から各マクロブロックの動きベクトルデータを抽出し、
この動きベクトルデータをＣＰＵ３に供給する。このＣ
ＰＵ３は、動きベクトルデータに応じてメモリ制御回路
５を制御する。更に、ＣＰＵ３は動きベクトルの方向が
左から右の場合は２次元映像信号を左目映像信号とし、
逆の場合は遅延させた２次元映像信号を右目映像信号と
するように映像切換回路６を制御する。
号に多重された動きベクトルを利用した立体映像変換回
路の提供。 【解決手段】 ２次元映像信号の一方が、動きベクトル
決定回路１２に供給され、ＭＰＥＧのビットストリーム
から各マクロブロックの動きベクトルデータを抽出し、
この動きベクトルデータをＣＰＵ３に供給する。このＣ
ＰＵ３は、動きベクトルデータに応じてメモリ制御回路
５を制御する。更に、ＣＰＵ３は動きベクトルの方向が
左から右の場合は２次元映像信号を左目映像信号とし、
逆の場合は遅延させた２次元映像信号を右目映像信号と
するように映像切換回路６を制御する。
Description
【０００１】
【産業上の利用分野】本発明は、２次元映像ソフトから
視差を有する３次元映像ソフトに変換する立体映像変換
回路に関するものである。
視差を有する３次元映像ソフトに変換する立体映像変換
回路に関するものである。
【０００２】
【従来の技術】２次元映像から右目用映像と左目用映像
を生成することにより、疑似的に３次元映像に変換する
技術として、本願出願人は特願平６−１０５８３号を提
案している。
を生成することにより、疑似的に３次元映像に変換する
技術として、本願出願人は特願平６−１０５８３号を提
案している。
【０００３】この技術は、２次元映像から動きベクトル
を作成し、この作成された動きベクトルの水平方向の成
分に応じて右目用映像と左目用映像との間に相対的な時
間差あるいは輝度差を付加することにより３次元映像を
作成するものである。
を作成し、この作成された動きベクトルの水平方向の成
分に応じて右目用映像と左目用映像との間に相対的な時
間差あるいは輝度差を付加することにより３次元映像を
作成するものである。
【０００４】以下、図４〜図６を用いてその原理及び回
路構成を説明する。
路構成を説明する。
【０００５】尚、図４は本発明の原理を示す図、図５及
び図６は従来の立体映像変換回路のブロック図である。
び図６は従来の立体映像変換回路のブロック図である。
【０００６】まず、本発明の原理について説明する。
【０００７】図１Ａのように背景は変化せず被写体が左
から右へ移動する映像シーンにおいて、同図Ｂのように
再生された右目映像と左目映像との間に一定の時間差を
設けた場合、被写体の動きの分だけ位置が異なり、これ
が同図Ｃのように視差となり、立体視が可能となる。
から右へ移動する映像シーンにおいて、同図Ｂのように
再生された右目映像と左目映像との間に一定の時間差を
設けた場合、被写体の動きの分だけ位置が異なり、これ
が同図Ｃのように視差となり、立体視が可能となる。
【０００８】尚、図１Ｂ及びＣの数字はフィールド番号
を表している。
を表している。
【０００９】次に、図５に従って従来技術の一例を説明
する。
する。
【００１０】図５において、入力端子１からの２次元映
像信号の一方はそのまま出力され、他方はフィールドメ
モリ４で所定フィールド遅延されて疑似的に３次元映像
信号が出力端子７及び８に得られる。また、２次元映像
信号の一部は、動きベクトル検出回路２で動きベクトル
が検出され、ＣＰＵ３はこの動きベクトルの大きさに応
じてメモリ制御回路５が制御され、フィールドメモリ４
の遅延量が制御される。
像信号の一方はそのまま出力され、他方はフィールドメ
モリ４で所定フィールド遅延されて疑似的に３次元映像
信号が出力端子７及び８に得られる。また、２次元映像
信号の一部は、動きベクトル検出回路２で動きベクトル
が検出され、ＣＰＵ３はこの動きベクトルの大きさに応
じてメモリ制御回路５が制御され、フィールドメモリ４
の遅延量が制御される。
【００１１】このように作成された右目用映像信号と左
目用映像信号はディスプレイに入力され、液晶シャッタ
眼鏡等により立体視が可能となる。
目用映像信号はディスプレイに入力され、液晶シャッタ
眼鏡等により立体視が可能となる。
【００１２】また、ディスプレイとしてレンチキュラ方
式のディスプレイを使用すれば、液晶シャッタ眼鏡等を
使用することなく、立体視が可能となる。
式のディスプレイを使用すれば、液晶シャッタ眼鏡等を
使用することなく、立体視が可能となる。
【００１３】上記従来技術では、左右の視差を付ける方
法として２次元映像信号に時間差を発生させるようにし
たが、時間差に代えて輝度差を発生するように構成すれ
ば、プルフリッヒ効果により立体視が可能である。
法として２次元映像信号に時間差を発生させるようにし
たが、時間差に代えて輝度差を発生するように構成すれ
ば、プルフリッヒ効果により立体視が可能である。
【００１４】図６は輝度差を利用した従来技術であり、
図６においてフィールドメモリ４及びメモリ制御回路５
の代わりに輝度レベル０ｄｂ〜−１０ｄｂの間で減衰す
るアッテネータ９及びゲイン制御回路１０は動きベクト
ルの大きさに基づき制御される。即ち、被写体の動きが
大きく動きベクトルが大きい場合、アッテネータ９の輝
度減衰量が少なくなるよう制御され、被写体の動きが小
さいか、あるいはスローモーション再生時のように動き
ベクトルが小さい場合、輝度減衰量が多くなるように制
御される。
図６においてフィールドメモリ４及びメモリ制御回路５
の代わりに輝度レベル０ｄｂ〜−１０ｄｂの間で減衰す
るアッテネータ９及びゲイン制御回路１０は動きベクト
ルの大きさに基づき制御される。即ち、被写体の動きが
大きく動きベクトルが大きい場合、アッテネータ９の輝
度減衰量が少なくなるよう制御され、被写体の動きが小
さいか、あるいはスローモーション再生時のように動き
ベクトルが小さい場合、輝度減衰量が多くなるように制
御される。
【００１５】
【発明が解決しようとする課題】しかしながら、上述の
従来技術においては２次元映像信号から動きベクトルを
作成、検出するための動き検出回路を別途必要としてい
た。
従来技術においては２次元映像信号から動きベクトルを
作成、検出するための動き検出回路を別途必要としてい
た。
【００１６】本発明は、上述の欠点に鑑みなされたもの
であり、ＭＰＥＧのアルゴリズムにより２次元映像信号
に多重された動きベクトルを利用した立体映像変換回路
を提案することを目的とする。
であり、ＭＰＥＧのアルゴリズムにより２次元映像信号
に多重された動きベクトルを利用した立体映像変換回路
を提案することを目的とする。
【００１７】
【課題を解決するための手段】本発明は、動きベクトル
が多重された２次元映像信号を記憶するフィールドメモ
リと、前記２次元映像信号に多重された動きベクトルを
検出する動きベクトル決定回路と、該動きベクトル決定
回路からの検出出力を入力として動き量を作成するＣＰ
Ｕと、該ＣＰＵによる動き量を入力とし、前記動き量に
基づき前記フィールドメモリの遅延量を制御するメモリ
制御回路とからなることを特徴とする立体映像変換回路
である。
が多重された２次元映像信号を記憶するフィールドメモ
リと、前記２次元映像信号に多重された動きベクトルを
検出する動きベクトル決定回路と、該動きベクトル決定
回路からの検出出力を入力として動き量を作成するＣＰ
Ｕと、該ＣＰＵによる動き量を入力とし、前記動き量に
基づき前記フィールドメモリの遅延量を制御するメモリ
制御回路とからなることを特徴とする立体映像変換回路
である。
【００１８】また、本発明は、動きベクトルが多重され
た２次元映像信号を復号処理する復号回路と、該復号回
路により復号された２次元映像信号を記憶するフィール
ドメモリと、前記２次元映像信号に多重された動きベク
トルを検出する動きベクトル決定回路と、該動きベクト
ル決定回路からの検出出力を入力として動き量を作成す
るＣＰＵと、該ＣＰＵによる動き量を入力とし、前記動
き量に基づき前記フィールドメモリの遅延量を制御する
メモリ制御回路とからなることを特徴とする立体映像変
換回路である。
た２次元映像信号を復号処理する復号回路と、該復号回
路により復号された２次元映像信号を記憶するフィール
ドメモリと、前記２次元映像信号に多重された動きベク
トルを検出する動きベクトル決定回路と、該動きベクト
ル決定回路からの検出出力を入力として動き量を作成す
るＣＰＵと、該ＣＰＵによる動き量を入力とし、前記動
き量に基づき前記フィールドメモリの遅延量を制御する
メモリ制御回路とからなることを特徴とする立体映像変
換回路である。
【００１９】また、本発明は、動きベクトルが多重され
た２次元映像信号の輝度成分を減衰する減衰回路と、前
記２次元映像信号に多重された動きベクトルを検出する
動きベクトル決定回路と、該動きベクトル決定回路から
の検出出力を入力として動き量を作成するＣＰＵと、該
ＣＰＵによる動き量を入力とし、前記動き量に基づき前
記減衰回路の減衰量を制御するレベル制御回路とからな
ることを特徴とする立体映像変換回路である。
た２次元映像信号の輝度成分を減衰する減衰回路と、前
記２次元映像信号に多重された動きベクトルを検出する
動きベクトル決定回路と、該動きベクトル決定回路から
の検出出力を入力として動き量を作成するＣＰＵと、該
ＣＰＵによる動き量を入力とし、前記動き量に基づき前
記減衰回路の減衰量を制御するレベル制御回路とからな
ることを特徴とする立体映像変換回路である。
【００２０】また、本発明は、動きベクトルが多重され
た２次元映像信号を復号処理する復号回路と、該復号回
路により復号された２次元映像信号の輝度成分を減衰す
る減衰回路と、前記２次元映像信号に多重された動きベ
クトルを検出する動きベクトル決定回路と、該動きベク
トル決定回路からの検出出力を入力として動き量を作成
するＣＰＵと、該ＣＰＵによる動き量を入力とし、前記
動き量に基づき前記減衰回路の減衰量を制御するレベル
制御回路とからなることを特徴とする立体映像変換回路
である。
た２次元映像信号を復号処理する復号回路と、該復号回
路により復号された２次元映像信号の輝度成分を減衰す
る減衰回路と、前記２次元映像信号に多重された動きベ
クトルを検出する動きベクトル決定回路と、該動きベク
トル決定回路からの検出出力を入力として動き量を作成
するＣＰＵと、該ＣＰＵによる動き量を入力とし、前記
動き量に基づき前記減衰回路の減衰量を制御するレベル
制御回路とからなることを特徴とする立体映像変換回路
である。
【００２１】
【作用】ＭＰＥＧ入力端子１１には、ＭＰＥＧのアルゴ
リズムで圧縮されたデジタルデータのビットストリーム
を構成している２次元映像信号が入力される。
リズムで圧縮されたデジタルデータのビットストリーム
を構成している２次元映像信号が入力される。
【００２２】この２次元映像信号の一方は、ＭＰＥＧデ
コーダ回路１３にて復号化処理され、映像切換回路６に
供給される。
コーダ回路１３にて復号化処理され、映像切換回路６に
供給される。
【００２３】また、２次元映像信号の他方は、フィール
ドメモリ４に供給される。このフィールドメモリ４はメ
モリ制御回路５により遅延量０から最大６０フィールド
（ＮＴＳＣ方式で約１秒）までの範囲でフィールド単位
で可変制御される。
ドメモリ４に供給される。このフィールドメモリ４はメ
モリ制御回路５により遅延量０から最大６０フィールド
（ＮＴＳＣ方式で約１秒）までの範囲でフィールド単位
で可変制御される。
【００２４】そして、このフィールドメモリ出力は、映
像切換回路６に供給される。この映像切換回路６は、そ
れぞれ左目映像信号Ｌを出力する出力端子７及び右目映
像信号Ｒを出力する出力端子８に接続されており、被写
体の動き方向に応じて出力状態が切り換わるように制御
される。
像切換回路６に供給される。この映像切換回路６は、そ
れぞれ左目映像信号Ｌを出力する出力端子７及び右目映
像信号Ｒを出力する出力端子８に接続されており、被写
体の動き方向に応じて出力状態が切り換わるように制御
される。
【００２５】２次元映像信号の更に他方は、動きベクト
ル決定回路１２に供給され、ＭＰＥＧのビットストリー
ムから各マクロブロックの動きベクトルデータを抽出
し、この動きベクトルデータをＣＰＵ３に供給する。
ル決定回路１２に供給され、ＭＰＥＧのビットストリー
ムから各マクロブロックの動きベクトルデータを抽出
し、この動きベクトルデータをＣＰＵ３に供給する。
【００２６】このＣＰＵ３は、動きベクトルデータに応
じてメモリ制御回路５を制御する。
じてメモリ制御回路５を制御する。
【００２７】更に、ＣＰＵ３は動きベクトルの方向が左
から右の場合は２次元映像信号を左目映像信号とし、逆
の場合は遅延させた２次元映像信号を右目映像信号とす
るように映像切換回路６を制御する。
から右の場合は２次元映像信号を左目映像信号とし、逆
の場合は遅延させた２次元映像信号を右目映像信号とす
るように映像切換回路６を制御する。
【００２８】
【実施例】近年、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉ
ｎｅ Ｔｒａｎｓｆｏｒｍ）を利用した動画像のデジタ
ル圧縮アルゴリズムがＭＰＥＧとしてＩＳＯ／ＩＥＣで
標準化され、蓄積メディアや放送、通信へ採用されつつ
ある。
ｎｅ Ｔｒａｎｓｆｏｒｍ）を利用した動画像のデジタ
ル圧縮アルゴリズムがＭＰＥＧとしてＩＳＯ／ＩＥＣで
標準化され、蓄積メディアや放送、通信へ採用されつつ
ある。
【００２９】ＭＰＥＧは現在２種類の標準化が終了して
おり、ビットレートが１．５ＭｂｐｓのＭＰＥＧ１と、
ビットレートが５Ｍｂｐｓ以上でプロファイル及びレベ
ルという概念を導入し、放送、通信へ幅広く対応できる
ＭＰＥＧ２がある。ＭＰＥＧ１及びＭＰＥＧ２の圧縮ア
ルゴリズムの詳細については、それぞれＩＳＯ／ＩＥＣ
１１１７２及び１３８１８に示されているのでここで
は省略するが、本発明に関連する部分についてＭＰＥＧ
１を中心に以下に述べる。
おり、ビットレートが１．５ＭｂｐｓのＭＰＥＧ１と、
ビットレートが５Ｍｂｐｓ以上でプロファイル及びレベ
ルという概念を導入し、放送、通信へ幅広く対応できる
ＭＰＥＧ２がある。ＭＰＥＧ１及びＭＰＥＧ２の圧縮ア
ルゴリズムの詳細については、それぞれＩＳＯ／ＩＥＣ
１１１７２及び１３８１８に示されているのでここで
は省略するが、本発明に関連する部分についてＭＰＥＧ
１を中心に以下に述べる。
【００３０】ＭＰＥＧ１は動き補償フレーム間／フレー
ム内適応予測符号化方式によるデジタル圧縮方式であ
り、動き補償を行うために動きベクトルが使用される。
動きベクトルは１６×１６画素のマクロブロック単位で
検出され、圧縮された映像データと一緒に多重され、受
信側へ送信される。
ム内適応予測符号化方式によるデジタル圧縮方式であ
り、動き補償を行うために動きベクトルが使用される。
動きベクトルは１６×１６画素のマクロブロック単位で
検出され、圧縮された映像データと一緒に多重され、受
信側へ送信される。
【００３１】受信側では、送信された動きベクトルを基
にフレーム間処理を行う。但し、全ての映像フレームに
ついて同様に動き補償による適応予測が行われるわけで
はなく、蓄積メディアによる早送り／巻戻し等の特殊再
生を考慮し、後述するＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉ
ｃｔｕｒｅ）構造によって定期的に強制的なフレーム内
符号化を行っている。
にフレーム間処理を行う。但し、全ての映像フレームに
ついて同様に動き補償による適応予測が行われるわけで
はなく、蓄積メディアによる早送り／巻戻し等の特殊再
生を考慮し、後述するＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉ
ｃｔｕｒｅ）構造によって定期的に強制的なフレーム内
符号化を行っている。
【００３２】ＧＯＰ構造について説明するために、ＧＯ
Ｐの一例を図３に示す。
Ｐの一例を図３に示す。
【００３３】ＭＰＥＧ１には、Ｉピクチャ、Ｐピクチ
ャ、及びＢピクチャの３種類の画像タイプがあり、Ｉピ
クチャから次のＩピクチャまでがグループ化され、ＧＯ
Ｐと呼ばれている。
ャ、及びＢピクチャの３種類の画像タイプがあり、Ｉピ
クチャから次のＩピクチャまでがグループ化され、ＧＯ
Ｐと呼ばれている。
【００３４】次に、ＧＯＰ内の各画像タイプについて説
明する。
明する。
【００３５】Ｉピクチャ（図中Ｉ０、Ｉ１）はフレーム
内符号化され、全てのマクロブロックがフレーム内符号
化される。Ｐピクチャ（図中Ｐ０〜Ｐ２）は直前のＩピ
クチャ若しくはＰピクチャからの順方向予測が可能なフ
レームであり、各マクロブロックはフレーム内／順方向
フレーム間予測符号化処理が行われる。Ｂピクチャ（図
中Ｂ０〜Ｂ７）は順方向予測に加えて未来のフレームか
らの逆方向予測も可能なフレームであり、Ｂピクチャ内
の各マクロブロックは、フレーム内符号化、直前のＩピ
クチャ若しくはＰピクチャからの順方向予測符号化、直
前のＩピクチャ若しくはＰピクチャからの逆方向予測符
号化、または順方向及び逆方向の両方の予測による双方
向予測符号化処理が行われる。
内符号化され、全てのマクロブロックがフレーム内符号
化される。Ｐピクチャ（図中Ｐ０〜Ｐ２）は直前のＩピ
クチャ若しくはＰピクチャからの順方向予測が可能なフ
レームであり、各マクロブロックはフレーム内／順方向
フレーム間予測符号化処理が行われる。Ｂピクチャ（図
中Ｂ０〜Ｂ７）は順方向予測に加えて未来のフレームか
らの逆方向予測も可能なフレームであり、Ｂピクチャ内
の各マクロブロックは、フレーム内符号化、直前のＩピ
クチャ若しくはＰピクチャからの順方向予測符号化、直
前のＩピクチャ若しくはＰピクチャからの逆方向予測符
号化、または順方向及び逆方向の両方の予測による双方
向予測符号化処理が行われる。
【００３６】図中のＶP1、ＶP2、ＶB1F 、ＶB1B 、ＶB2
F 、ＶB3F 、ＶB3B は参照画像からの動きベクトルの関
係を示すものであり、例えばＢ2 ピクチャが双方向予測
される場合、Ｉ0 ピクチャからの動きベクトルＶB2F と
Ｐ1 ピクチャからの動きベクトルＶB2B が用いられる。
F 、ＶB3F 、ＶB3B は参照画像からの動きベクトルの関
係を示すものであり、例えばＢ2 ピクチャが双方向予測
される場合、Ｉ0 ピクチャからの動きベクトルＶB2F と
Ｐ1 ピクチャからの動きベクトルＶB2B が用いられる。
【００３７】各マクロブロックの処理において、フレー
ム間の予測符号化された場合には、動き補償のための動
きベクトルがデータとして映像データの多重されて伝送
される。ここでは、ＧＯＰ構造の一例を示したが、Ｉピ
クチャとＰピクチャとの間隔等は可変であるし、プロフ
ァイルによってはＢピクチャを使用しないこともある。
ＭＰＥＧ２の場合は、３種類の画像タイプ（Ｉ、Ｐ、
Ｂ）は同じであるが、フィールドベースの予測が可能と
なっており、参照する画像がＭＰＥＧ１と異なるが、本
発明に関しては同様の考え方で実現できる。
ム間の予測符号化された場合には、動き補償のための動
きベクトルがデータとして映像データの多重されて伝送
される。ここでは、ＧＯＰ構造の一例を示したが、Ｉピ
クチャとＰピクチャとの間隔等は可変であるし、プロフ
ァイルによってはＢピクチャを使用しないこともある。
ＭＰＥＧ２の場合は、３種類の画像タイプ（Ｉ、Ｐ、
Ｂ）は同じであるが、フィールドベースの予測が可能と
なっており、参照する画像がＭＰＥＧ１と異なるが、本
発明に関しては同様の考え方で実現できる。
【００３８】本発明の特徴は、ＭＰＥＧ等のように動き
ベクトルが既に多重されている場合に、その動きベクト
ルを利用して２次元映像を３次元映像に変換する点であ
る。
ベクトルが既に多重されている場合に、その動きベクト
ルを利用して２次元映像を３次元映像に変換する点であ
る。
【００３９】以下、図１を用いて本発明の一実施例を説
明する。
明する。
【００４０】図１において、ＭＰＥＧ入力端子１１に
は、ＭＰＥＧのアルゴリズムで圧縮されたデジタルデー
タのビットストリームを構成している２次元映像信号が
入力される。
は、ＭＰＥＧのアルゴリズムで圧縮されたデジタルデー
タのビットストリームを構成している２次元映像信号が
入力される。
【００４１】この２次元映像信号の一方は、ＭＰＥＧデ
コーダ回路１３にて復号化処理され、映像切換回路６に
供給される。
コーダ回路１３にて復号化処理され、映像切換回路６に
供給される。
【００４２】また、２次元映像信号の他方は、フィール
ドメモリ４に供給される。このフィールドメモリ４はメ
モリ制御回路５により遅延量０から最大６０フィールド
（ＮＴＳＣ方式で約１秒）までの範囲でフィールド単位
で可変制御される。また、可変単位は１フィールド以下
の小さい単位でもかまわない。
ドメモリ４に供給される。このフィールドメモリ４はメ
モリ制御回路５により遅延量０から最大６０フィールド
（ＮＴＳＣ方式で約１秒）までの範囲でフィールド単位
で可変制御される。また、可変単位は１フィールド以下
の小さい単位でもかまわない。
【００４３】そして、このフィールドメモリ出力は、映
像切換回路６に供給される。この映像切換回路６は、そ
れぞれ左目映像信号Ｌを出力する出力端子７及び右目映
像信号Ｒを出力する出力端子８に接続されており、被写
体の動き方向に応じて出力状態が切り換わるように制御
される。
像切換回路６に供給される。この映像切換回路６は、そ
れぞれ左目映像信号Ｌを出力する出力端子７及び右目映
像信号Ｒを出力する出力端子８に接続されており、被写
体の動き方向に応じて出力状態が切り換わるように制御
される。
【００４４】２次元映像信号の更に他方は、動きベクト
ル決定回路１２に供給され、ＭＰＥＧのビットストリー
ムから各マクロブロックの動きベクトルデータを抽出
し、この動きベクトルデータをＣＰＵ３に供給する。
ル決定回路１２に供給され、ＭＰＥＧのビットストリー
ムから各マクロブロックの動きベクトルデータを抽出
し、この動きベクトルデータをＣＰＵ３に供給する。
【００４５】このＣＰＵ３は、動きベクトルデータに応
じてメモリ制御回路５を制御する。即ち、被写体の動き
が大きく動きベクトルが大きい場合、フィールドメモリ
４の遅延量が少なくなるよう制御し、被写体の動きが小
さいか、あるいはスローモーション再生時のように動き
ベクトルが小さい場合、遅延量が大きくなるように制御
される。
じてメモリ制御回路５を制御する。即ち、被写体の動き
が大きく動きベクトルが大きい場合、フィールドメモリ
４の遅延量が少なくなるよう制御し、被写体の動きが小
さいか、あるいはスローモーション再生時のように動き
ベクトルが小さい場合、遅延量が大きくなるように制御
される。
【００４６】尚、フィールドメモリ４の遅延フィールド
数は最大６０フィールドであり、これはＮＴＳＣ方式の
１秒間に相当し、通常の映像シーンにほぼ対応できる時
間であるが、より低速のスローモーション再生に使用す
る場合は６０フィールド以上の大容量のメモリを使用す
ればよい。また、超低速のスローモーション再生には数
１００フィールド遅延させればよい。
数は最大６０フィールドであり、これはＮＴＳＣ方式の
１秒間に相当し、通常の映像シーンにほぼ対応できる時
間であるが、より低速のスローモーション再生に使用す
る場合は６０フィールド以上の大容量のメモリを使用す
ればよい。また、超低速のスローモーション再生には数
１００フィールド遅延させればよい。
【００４７】更に、ＣＰＵ３は動きベクトルの方向が左
から右の場合は２次元映像信号を左目映像信号とし、逆
の場合は遅延させた２次元映像信号を右目映像信号とす
るように映像切換回路６を制御する。
から右の場合は２次元映像信号を左目映像信号とし、逆
の場合は遅延させた２次元映像信号を右目映像信号とす
るように映像切換回路６を制御する。
【００４８】従って、２次元映像信号において被写体が
水平方向に移動するようなシーンについては動きの速さ
に応じた視差が発生する。
水平方向に移動するようなシーンについては動きの速さ
に応じた視差が発生する。
【００４９】そして、この出力端子７、８からの左右映
像信号は、レンチキュラ方式の眼鏡なしディスプレイに
供給すれば、２次元映像信号であっても部分的に立体感
のある立体画像が疑似的に再現できる。
像信号は、レンチキュラ方式の眼鏡なしディスプレイに
供給すれば、２次元映像信号であっても部分的に立体感
のある立体画像が疑似的に再現できる。
【００５０】次に、動きベクトル決定回路１２の動作に
ついて詳説する。
ついて詳説する。
【００５１】動きベクトル決定回路１２は、従来技術の
動き検出回路に相当するものであるが、従来回路と異な
る点は、動き検出回路が２次元映像信号から動きベクト
ルを作成し、この作成された動きベクトルから３次元映
像のための動きベクトルを決定していたのに対し、本発
明回路の動きベクトル決定回路１２は、動きベクトルデ
ータを抽出している点である。
動き検出回路に相当するものであるが、従来回路と異な
る点は、動き検出回路が２次元映像信号から動きベクト
ルを作成し、この作成された動きベクトルから３次元映
像のための動きベクトルを決定していたのに対し、本発
明回路の動きベクトル決定回路１２は、動きベクトルデ
ータを抽出している点である。
【００５２】従って、送信側でデータとして多重されて
いるので動きベクトルデータを利用しているため、従来
回路のように２次元映像信号から動きベクトルを作成
し、この動きベクトルから３次元映像のための動きベク
トルを決定する回路が不要となる。
いるので動きベクトルデータを利用しているため、従来
回路のように２次元映像信号から動きベクトルを作成
し、この動きベクトルから３次元映像のための動きベク
トルを決定する回路が不要となる。
【００５３】ここで、本実施例では、動きベクトル決定
回路１２は、ＣＰＵ３とは独立した構成となっている
が、ＣＰＵ内のソフト処理にても対応可能である。
回路１２は、ＣＰＵ３とは独立した構成となっている
が、ＣＰＵ内のソフト処理にても対応可能である。
【００５４】尚、本実施例では、３次元化のための動き
ベクトルは、基本的に過去の画像からの動きベクトルを
利用するものとし、例えば前述のＢピクチャのように未
来の画像からの逆方向予測のための動きベクトルは、後
述する特殊な場合を除いて利用しないものとする。
ベクトルは、基本的に過去の画像からの動きベクトルを
利用するものとし、例えば前述のＢピクチャのように未
来の画像からの逆方向予測のための動きベクトルは、後
述する特殊な場合を除いて利用しないものとする。
【００５５】また、ＭＰＥＧデコード用の動きベクトル
を３次元化のために使用する場合、動きベクトルがマク
ロブロック単位である点、Ｉピクチャが強制的にフレー
ム内符号化処理されている点、及び各ベクトルのフレー
ム間隔が異なる点を高漁する必要がある。
を３次元化のために使用する場合、動きベクトルがマク
ロブロック単位である点、Ｉピクチャが強制的にフレー
ム内符号化処理されている点、及び各ベクトルのフレー
ム間隔が異なる点を高漁する必要がある。
【００５６】以下、各項目について処理方法を示す。
【００５７】ＭＰＥＧのアルゴリズムでは、動きベクト
ルは各マクロブロックに存在しているのに対し、２次元
映像から３次元映像への変換においては、１フレームに
１個の動きベクトルを抽出すれば良いため、どの動きベ
クトルを抽出するかが問題となる。そこで、本実施例で
は多数決処理にて動きベクトルの決定を行っている。
ルは各マクロブロックに存在しているのに対し、２次元
映像から３次元映像への変換においては、１フレームに
１個の動きベクトルを抽出すれば良いため、どの動きベ
クトルを抽出するかが問題となる。そこで、本実施例で
は多数決処理にて動きベクトルの決定を行っている。
【００５８】また、Ｉピクチャはフレーム内符号化処理
されているため、Ｉピクチャには動きベクトルが多重さ
れていない。
されているため、Ｉピクチャには動きベクトルが多重さ
れていない。
【００５９】このため、本実施例では、Ｂピクチャが存
在する場合、直前のＢピクチャの逆方向予測符号化用の
動きベクトルを利用している。つまり、図３において、
Ｉ０ピクチャの動きベクトルとしてＢ１ピクチャの動き
ベクトルＶB1B を利用する。尚、この際、ピクチャＩ０
から見ると、方向が逆になっている点に注意することが
必要である。
在する場合、直前のＢピクチャの逆方向予測符号化用の
動きベクトルを利用している。つまり、図３において、
Ｉ０ピクチャの動きベクトルとしてＢ１ピクチャの動き
ベクトルＶB1B を利用する。尚、この際、ピクチャＩ０
から見ると、方向が逆になっている点に注意することが
必要である。
【００６０】これとは別に、ピクチャＩ０の前後にある
ピクチャＢ１及びピクチャＢ２に存在する動きベクトル
を平均化して利用することも可能である。
ピクチャＢ１及びピクチャＢ２に存在する動きベクトル
を平均化して利用することも可能である。
【００６１】更に、各ベクトルのフレーム間隔が異なっ
ている点については、動きベクトルのフレーム間隔を同
じ値にする必要がある。本実施例では、フレーム間隔を
１フレームに統一し、例えば図３における動きベクトル
ＶP1（３フレーム間隔）を利用する場合は、この動きベ
クトルＶP1を１／３にすればよい。
ている点については、動きベクトルのフレーム間隔を同
じ値にする必要がある。本実施例では、フレーム間隔を
１フレームに統一し、例えば図３における動きベクトル
ＶP1（３フレーム間隔）を利用する場合は、この動きベ
クトルＶP1を１／３にすればよい。
【００６２】尚、上記実施例では、左右の視差を付ける
方法として２次元映像信号に時間差を発生させるように
したが、時間差に代えて輝度差を発生するように構成す
れば、プルフリッヒ効果により立体視が可能である。
方法として２次元映像信号に時間差を発生させるように
したが、時間差に代えて輝度差を発生するように構成す
れば、プルフリッヒ効果により立体視が可能である。
【００６３】図２にこの実施例を示す。
【００６４】即ち、本実施例においては、フィールドメ
モリ４及びメモリ制御回路５の代わりに輝度レベル０ｄ
ｂ〜−１０ｄｂの間で減衰するアッテネータ９及びゲイ
ン制御回路１０を使用している。このアッテネータ９及
びゲイン制御回路１０は上述の実施例と同様に動きベク
トルの大きさに基づき制御される。即ち、被写体の動き
が大きく動きベクトルが大きい場合、アッテネータ９の
輝度減衰量が少なくなるよう制御され、被写体の動きが
小さいか、あるいはスローモーション再生時のように動
きベクトルが小さい場合、輝度減衰量が多くなるように
制御される。
モリ４及びメモリ制御回路５の代わりに輝度レベル０ｄ
ｂ〜−１０ｄｂの間で減衰するアッテネータ９及びゲイ
ン制御回路１０を使用している。このアッテネータ９及
びゲイン制御回路１０は上述の実施例と同様に動きベク
トルの大きさに基づき制御される。即ち、被写体の動き
が大きく動きベクトルが大きい場合、アッテネータ９の
輝度減衰量が少なくなるよう制御され、被写体の動きが
小さいか、あるいはスローモーション再生時のように動
きベクトルが小さい場合、輝度減衰量が多くなるように
制御される。
【００６５】尚、アッテネータ９の減衰量は０〜１０ｄ
ｂに限らず、より低速のスローモーション再生に使用す
る場合は、−数１０ｄｂの減衰量を与えるようにすれべ
よい。
ｂに限らず、より低速のスローモーション再生に使用す
る場合は、−数１０ｄｂの減衰量を与えるようにすれべ
よい。
【００６６】また、アッテネータ９の代わりに利得可変
アンプを使用してもよい。
アンプを使用してもよい。
【００６７】
【発明の効果】本発明は、上述の如く構成することによ
り、２次元映像信号から動きベクトルを作成する回路、
及び作成された動きベクトルから３次元映像のための動
きベクトルを決定する回路が不要となり、立体映像変換
回路の構成を簡略化することができる。
り、２次元映像信号から動きベクトルを作成する回路、
及び作成された動きベクトルから３次元映像のための動
きベクトルを決定する回路が不要となり、立体映像変換
回路の構成を簡略化することができる。
【図１】本発明立体映像変換回路の１実施例を示すブロ
ック図である。
ック図である。
【図２】本発明立体映像変換回路の他の実施例を示すブ
ロック図である。
ロック図である。
【図３】本発明立体映像変換回路に入力される２次元映
像信号のフォーマットを示す図である。
像信号のフォーマットを示す図である。
【図４】３次元映像を作成する為の原理を説明する図で
ある。
ある。
【図５】従来の立体映像変換回路のブロック図である。
【図６】従来の立体映像変換回路のブロック図である。
３ ＣＰＵ ４ フィールドメモリ ５ メモリ制御回路 ６ 映像切換回路 ７ 出力端子 ８ 出力端子 １１ 入力端子 １２ 動き決定回路 １３ ＭＰＥＧデコーダ回路
Claims (5)
- 【請求項１】 動きベクトルが多重された２次元映像信
号を記憶するフィールドメモリと、前記２次元映像信号
に多重された動きベクトルを検出する動きベクトル決定
回路と、該動きベクトル決定回路からの検出出力を入力
として動き量を作成するＣＰＵと、該ＣＰＵによる動き
量を入力とし、前記動き量に基づき前記フィールドメモ
リの遅延量を制御するメモリ制御回路とからなることを
特徴とする立体映像変換回路。 - 【請求項２】 動きベクトルが多重された２次元映像信
号を復号処理する復号回路と、該復号回路により復号さ
れた２次元映像信号を記憶するフィールドメモリと、前
記２次元映像信号に多重された動きベクトルを検出する
動きベクトル決定回路と、該動きベクトル決定回路から
の検出出力を入力として動き量を作成するＣＰＵと、該
ＣＰＵによる動き量を入力とし、前記動き量に基づき前
記フィールドメモリの遅延量を制御するメモリ制御回路
とからなることを特徴とする立体映像変換回路。 - 【請求項３】 動きベクトルが多重された２次元映像信
号の輝度成分を減衰する減衰回路と、前記２次元映像信
号に多重された動きベクトルを検出する動きベクトル決
定回路と、該動きベクトル決定回路からの検出出力を入
力として動き量を作成するＣＰＵと、該ＣＰＵによる動
き量を入力とし、前記動き量に基づき前記減衰回路の減
衰量を制御するレベル制御回路とからなることを特徴と
する立体映像変換回路。 - 【請求項４】 動きベクトルが多重された２次元映像信
号を復号処理する復号回路と、該復号回路により復号さ
れた２次元映像信号の輝度成分を減衰する減衰回路と、
前記２次元映像信号に多重された動きベクトルを検出す
る動きベクトル決定回路と、該動きベクトル決定回路か
らの検出出力を入力として動き量を作成するＣＰＵと、
該ＣＰＵによる動き量を入力とし、前記動き量に基づき
前記減衰回路の減衰量を制御するレベル制御回路とから
なることを特徴とする立体映像変換回路。 - 【請求項５】 前記２次元映像信号に多重された動きベ
クトルは、ＭＰＥＧのアルゴリズムによってデジタル圧
縮された動きベクトルであることを特徴とする請求項１
乃至４記載の立体映像変換回路。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7180149A JPH0937301A (ja) | 1995-07-17 | 1995-07-17 | 立体映像変換回路 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7180149A JPH0937301A (ja) | 1995-07-17 | 1995-07-17 | 立体映像変換回路 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0937301A true JPH0937301A (ja) | 1997-02-07 |
Family
ID=16078262
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7180149A Pending JPH0937301A (ja) | 1995-07-17 | 1995-07-17 | 立体映像変換回路 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0937301A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004008768A1 (en) * | 2002-07-16 | 2004-01-22 | Electronics And Telecommunications Research Institute | Apparatus and method for adapting 2d and 3d stereoscopic video signal |
| JP2009516864A (ja) * | 2005-11-23 | 2009-04-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | マルチビューディスプレイ装置のためのビューの描画 |
| US9137512B2 (en) | 2008-12-04 | 2015-09-15 | Samsung Electronics Co., Ltd. | Method and apparatus for estimating depth, and method and apparatus for converting 2D video to 3D video |
-
1995
- 1995-07-17 JP JP7180149A patent/JPH0937301A/ja active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004008768A1 (en) * | 2002-07-16 | 2004-01-22 | Electronics And Telecommunications Research Institute | Apparatus and method for adapting 2d and 3d stereoscopic video signal |
| JP2009516864A (ja) * | 2005-11-23 | 2009-04-23 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | マルチビューディスプレイ装置のためのビューの描画 |
| US9137512B2 (en) | 2008-12-04 | 2015-09-15 | Samsung Electronics Co., Ltd. | Method and apparatus for estimating depth, and method and apparatus for converting 2D video to 3D video |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US5510840A (en) | Methods and devices for encoding and decoding frame signals and recording medium therefor | |
| JP4014263B2 (ja) | 映像信号変換装置及び映像信号変換方法 | |
| US6057893A (en) | Picture encoding method, picture encoding apparatus, picture transmitting method and picture recording medium | |
| US6072831A (en) | Rate control for stereoscopic digital video encoding | |
| US5543847A (en) | Picture coding and decoding method for random accessing | |
| KR100504641B1 (ko) | 화상 부호화 장치 및 화상 부호화 방법 | |
| JP2009505607A (ja) | 多視点動映像を符号化する方法及び装置 | |
| JP3092280B2 (ja) | 画像信号の高能率符号化及び復号化装置 | |
| EP0573665B1 (en) | Image data coding method, image data decoding method, image data coding device, image data decoding device | |
| JP4755093B2 (ja) | 画像符号化方法および画像符号化装置 | |
| KR20010095106A (ko) | 화상 인코딩 장치 및 방법, 비디오 카메라, 화상 기록장치, 및 화상 전송 장치 | |
| US6256349B1 (en) | Picture signal encoding method and apparatus, picture signal transmitting method, picture signal decoding method and apparatus and recording medium | |
| EP0577365A2 (en) | Encoding and decoding of picture signals | |
| US20130202044A1 (en) | Image reproducing method, image reproducing device, image reproducing program, imaging system, and reproducing system | |
| WO1993003578A1 (fr) | Appareil de haute performance pour le codage et le decodage d'un signal d'image | |
| US6205286B1 (en) | Image pickup apparatus having image information compressing function | |
| US5905534A (en) | Picture decoding and encoding method and apparatus for controlling processing speeds | |
| EP1747536B1 (en) | Method and apparatus for encoding a picture sequence using predicted and non-predicted pictures which each include multiple macroblocks | |
| JPH0937301A (ja) | 立体映像変換回路 | |
| JPH07236163A (ja) | 立体動画像再生装置 | |
| JP3428332B2 (ja) | 画像符号化方法及び装置、並びに画像伝送方法 | |
| JPH0678289A (ja) | 画像信号の高能率符号化、復号化装置及び記録媒体 | |
| WO1996033573A1 (fr) | Procede et dispositif de codage d'image animee | |
| JP3507532B2 (ja) | 動画像符号化方法及び装置 | |
| JPH1084545A (ja) | ディジタルビデオ信号の符号化方法及び装置 |