JPH1032841A - 2次元映像を3次元映像に変換する装置および方法 - Google Patents

2次元映像を3次元映像に変換する装置および方法

Info

Publication number
JPH1032841A
JPH1032841A JP8189629A JP18962996A JPH1032841A JP H1032841 A JPH1032841 A JP H1032841A JP 8189629 A JP8189629 A JP 8189629A JP 18962996 A JP18962996 A JP 18962996A JP H1032841 A JPH1032841 A JP H1032841A
Authority
JP
Japan
Prior art keywords
motion vector
video signal
horizontal
area
read address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8189629A
Other languages
English (en)
Other versions
JP3957343B2 (ja
Inventor
Yukio Mori
幸夫 森
Seiji Okada
誠司 岡田
Akihiro Maenaka
章弘 前中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP18962996A priority Critical patent/JP3957343B2/ja
Priority to US09/147,518 priority patent/US6445833B1/en
Priority to PCT/JP1997/002471 priority patent/WO1998004087A1/ja
Priority to DE69739179T priority patent/DE69739179D1/de
Priority to EP97930812A priority patent/EP0918439B1/en
Priority to KR10-1999-7000337A priority patent/KR100445619B1/ko
Publication of JPH1032841A publication Critical patent/JPH1032841A/ja
Application granted granted Critical
Publication of JP3957343B2 publication Critical patent/JP3957343B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

(57)【要約】 【課題】 この発明は、元の2次元映像信号に対して時
間的に遅延された映像信号を生成するためのフィールド
メモリが不要となり、コストの低廉化が図れる2次元映
像を3次元映像に変換する装置および方法を提供するこ
とを目的とする。 【解決手段】 2次元入力映像信号に基づいて、各フィ
ールドごとに、1フィールド画面内に設定された複数の
動きベクトル検出領域のそれぞれに対する動きベクトル
を検出する動きベクトル検出手段2、各動きベクトル検
出領域ごとに検出された動きベクトルの水平方向成分に
基づいて、1フィールド画面内の所定単位領域ごとの視
差情報を生成する視差情報生成手段3、4、ならびに2
次元入力映像信号の各所定単位領域内の信号から、その
所定単位領域に対応する視差情報に応じた水平位相差を
有する第1映像信号と第2映像信号とをそれぞれ生成す
る位相制御手段4、11〜13、21〜23を備えてい
ることを特徴とする。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、2次元映像を3
次元映像に変換する装置および方法に関する。
【0002】
【従来の技術】2次元映像を3次元映像に変換する方法
として、フィールドメモリを用いて、元の2次元映像信
号に対して、時間的に遅延された映像信号(以下、遅延
映像信号という)を生成し、元の2次元映像信号と遅延
映像信号のうち、一方を左目用映像信号として出力し、
他方を右目用映像信号として出力する方法が知られてい
る。しかしながら、この方法では、元の2次元映像信号
に対して時間的に遅延された映像信号を生成するために
フィールドメモリが必要となるため、コストが高いとい
う問題がある。
【0003】
【発明が解決しようとする課題】この発明は、元の2次
元映像信号に対して時間的に遅延された映像信号を生成
するためのフィールドメモリが不要となり、コストの低
廉化が図れる2次元映像を3次元映像に変換する装置お
よび方法を提供することを目的とする。
【0004】
【課題を解決するための手段】この発明による2次元映
像を3次元映像に変換する装置は、2次元入力映像信号
に基づいて、各フィールドごとに、1フィールド画面内
に設定された複数の動きベクトル検出領域のそれぞれに
対する動きベクトルを検出する動きベクトル検出手段、
各動きベクトル検出領域ごとに検出された動きベクトル
の水平方向成分に基づいて、1フィールド画面内の所定
単位領域ごとの視差情報を生成する視差情報生成手段、
ならびに2次元入力映像信号の各所定単位領域内の信号
から、その所定単位領域に対応する視差情報に応じた水
平位相差を有する第1映像信号と第2映像信号とをそれ
ぞれ生成する位相制御手段を備えていることを特徴とす
る。
【0005】視差情報生成手段としては、たとえば、各
動きベクトル検出領域ごとに検出された動きベクトルの
水平方向成分、水平方向成分の最大値、水平方向成分が
最大値である動きベクトル検出領域、水平方向成分の最
小値、水平方向成分が最小値である動きベクトル検出領
域および各動きベクトル検出領域の映像が背景であるか
被写体であるかを示す情報に基づいて、1フィールド画
面内の所定単位領域ごとの視差情報を生成するものが用
いられる。
【0006】位相制御手段としては、たとえば、2次元
入力映像信号を1水平ライン分以下の複数画素数分記憶
できる容量を有し、かつ2次元入力映像信号を一次的に
記憶する第1の記憶手段、2次元入力映像信号を1水平
ライン分以下の複数画素数分記憶できる容量を有し、か
つ2次元入力映像信号を一次的に記憶する第2の記憶手
段、第1の記憶手段の読み出しアドレスを、2次元入力
映像信号の水平垂直位置に応じて決定された標準読み出
しアドレスに対して、2次元入力映像信号の水平垂直位
置が属する所定単位領域に対応する視差情報に基づいて
制御することにより、上記標準読み出しアドレスによっ
て規定される基準水平位相に対して上記視差情報に応じ
た量だけ水平位相が進んだ第1映像信号を生成する第1
の読み出しアドレス制御手段、ならびに第2の記憶手段
の読み出しアドレスを、上記標準読み出しアドレスに対
して、2次元入力映像信号の水平垂直位置が属する所定
単位領域に対応する視差情報に基づいて制御することに
より、上記標準読み出しアドレスによって規定される基
準水平位相に対して上記視差情報に応じた量だけ水平位
相が遅れた第2映像信号を生成する第2の読み出しアド
レス制御手段を備えているものが用いられる。
【0007】上記所定単位領域は、たとえば、1画素単
位の領域である。
【0008】この発明による2次元映像を3次元映像に
変換する方法は、2次元入力映像信号に基づいて、各フ
ィールドごとに、1フィールド画面内に設定された複数
の動きベクトル検出領域のそれぞれに対する動きベクト
ルを検出する第1ステップ、各動きベクトル検出領域ご
とに検出された動きベクトルの水平方向成分に基づい
て、1フィールド画面内の所定単位領域ごとの視差情報
を生成する第2ステップ、ならびに2次元入力映像信号
の各所定単位領域内の信号から、その所定単位領域に対
応する視差情報に応じた水平位相差を有する第1映像信
号と第2映像信号とをそれぞれ生成する第3ステップを
備えていることを特徴とする。
【0009】第2ステップでは、たとえば、各動きベク
トル検出領域ごとに検出された動きベクトルの水平方向
成分、水平方向成分の最大値、水平方向成分が最大値で
ある動きベクトル検出領域、水平方向成分の最小値、水
平方向成分が最小値である動きベクトル検出領域および
各動きベクトル検出領域の映像が背景であるか被写体で
あるかを示す情報に基づいて、1フィールド画面内の所
定単位領域ごとの視差情報が生成される。
【0010】第3ステップとしては、たとえば、2次元
入力映像信号を1水平ライン分以下の複数画素数分記憶
できる容量を有する第1の記憶手段および第2の記憶手
段に、2次元入力映像信号を一次的に記憶するステッ
プ、第1の記憶手段の読み出しアドレスを、2次元入力
映像信号の水平垂直位置に応じて決定された標準読み出
しアドレスに対して、2次元入力映像信号の水平垂直位
置が属する所定単位領域に対応する視差情報に基づいて
制御することにより、上記標準読み出しアドレスによっ
て規定される基準水平位相に対して上記視差情報に応じ
た量だけ水平位相が進んだ第1映像信号を生成するステ
ップ、ならびに第2の記憶手段の読み出しアドレスを、
上記標準読み出しアドレスに対して、2次元入力映像信
号の水平垂直位置が属する所定単位領域に対応する視差
情報に基づいて制御することにより、上記標準読み出し
アドレスによって規定される基準水平位相に対して上記
視差情報に応じた量だけ水平位相が遅れた第2映像信号
を生成するステップを備えているものが用いられる。
【0011】所定単位領域は、たとえば1画素単位の領
域である。
【0012】
【発明の実施の形態】以下、図面を参照して、この発明
の実施の形態について説明する。
【0013】図1は、2次元映像を3次元映像に変換す
るための2D/3D映像変換装置の全体的な構成を示し
ている。
【0014】2次元映像信号を構成する輝度信号Y、色
差信号R−Yおよび色差信号B−Yは、AD変換回路1
(ADC)によってそれぞれディジタルのY信号、R−
Y信号およびB−Y信号に変換される。
【0015】Y信号は、動きベクトル検出回路2に送ら
れるとともに、第1の左映像用任意画素遅延FIFO1
1および第1の右映像用任意画素遅延FIFO21に送
られる。R−Y信号は、第2の左映像用任意画素遅延F
IFO12および第2の右映像用任意画素遅延FIFO
22に送られる。B−Y信号は、第3の左映像用任意画
素遅延FIFO13および第3の右映像用任意画素遅延
FIFO23に送られる。
【0016】動きベクトル検出回路2は、1フィールド
毎に、図2に示すように1フィールド画面内に設定され
た12個の動きベクトル検出領域E1〜E12それぞれ
に対する動きベクトルを算出する。そして、動きベクト
ル検出回路2は、算出された動きベクトルの信頼性が低
い領域(以下、NG領域という)を示すデータ、NG領
域以外の各領域E1〜E12ごとのX方向の動きベクト
ル、NG領域以外の各領域E1〜E12のX方向の動き
ベクトルのうちの最大値(X方向の動きベクトルが最大
値である領域のデータを含む)、NG領域以外の各領域
E1〜E12のX方向の動きベクトルのうちの最小値
(X方向の動きベクトルが最小値である領域のデータを
含む)ならびにNG領域以外の各領域E1〜E12のX
方向の動きベクトルの絶対値の積算値を、各フィールド
ごとにCPU3に送る。
【0017】CPU3は、動きベクトル検出回路2から
送られてきた情報に基づいて、各領域E1〜E12に対
する奥行き量または飛び出し量を算出する。この例で
は、背景が存在する領域については奥行き量が大きくな
り、被写体が存在する領域では奥行き量が小さくなるよ
うに、各領域E1〜E12に対する奥行き量が算出され
る。この奥行き量の算出方法の詳細については、後述す
る。
【0018】CPU3によって算出された各領域E1〜
E12に対する奥行き量は、視差制御回路4に送られ
る。視差制御回路4は、各領域E1〜E12に対する奥
行き量に基づいて、各フィールドの各画素位置ごとの視
差情報を生成する。そして、得られた各画素位置ごとの
視差情報に基づいて、各FIFO11〜13、21〜2
3から映像信号(Y信号、R−Y信号、B−Y信号)を
読み出す際の読み出しアドレスが左映像用任意画素遅延
FIFO11〜13と右映像用任意画素遅延FIFO2
1〜23との間でずれるように、各FIFO11〜1
3、21〜23の読み出しアドレスを制御する。したが
って、左映像用任意画素遅延FIFO11〜13から読
み出された左映像信号の水平位相と、右映像用任意画素
遅延FIFO21〜23から読み出された右映像信号の
水平位相が異なるようになる。
【0019】左映像用任意画素遅延FIFO11〜13
から読み出された左映像信号(YL信号、(R−Y)L
信号、(B−Y)L信号)は、DA変換回路(DAC)
5によってアナログ信号に変換された後、図示しない立
体表示装置に送られる。右映像用任意画素遅延FIFO
21〜23から読み出された右映像信号(YR信号、
(R−Y)R信号、(B−Y)R信号)は、DA変換回
路(DAC)6によってアナログ信号に変換された後、
図示しない立体表示装置に送られる。
【0020】左映像信号の水平位相と、右映像信号の水
平位相は異なっているので、左映像と右映像との間に視
差が発生する。この結果、左映像を左目のみで観察し、
右映像を右目のみで観察すると、被写体が背景に対して
前方位置にあるような立体映像が得られる。
【0021】図3は、CPU3によって行なわれる奥行
き量の算出方法を示している。
【0022】被写体/背景判別手段31は、NG領域以
外の各領域E1〜E12のX方向の動きベクトルに基づ
いて、NG領域以外の各領域ごとにその領域の映像が被
写体であるか背景であるかを判別する。この判別方法と
しては、たとえば、特開平8−149517号公報に示
されている方法が用いられる。
【0023】奥行き情報生成手段32は、NG領域以外
の各領域E1〜E12ごとのX方向の動きベクトル、N
G領域以外の各領域E1〜E12のX方向の動きベクト
ルのうちの最大値(X方向の動きベクトルが最大値であ
る領域のデータを含む)、NG領域以外の各領域E1〜
E12のX方向の動きベクトルのうちの最小値(X方向
の動きベクトルが最小値である領域のデータを含む)お
よびNG領域を示すデータに基づいて、各領域E1〜E
12ごとに奥行き量(奥行き情報)を決定する。
【0024】つまり、被写体/背景判別手段31による
NG領域以外の各領域E1〜E12ごとの判別結果と、
NG領域以外の各領域E1〜E12のX方向の動きベク
トルのうちの最大値(X方向の動きベクトルが最大値で
ある領域のデータを含む)と、NG領域以外の各領域E
1〜E12のX方向の動きベクトルのうちの最小値(X
方向の動きベクトルが最小値である領域のデータを含
む)とに基づいて、X方向の動きベクトルが最大値であ
る領域およびX方向の動きベクトルが最小値である領域
のうちの一方の立体視位置を管面位置PFに決定し、他
方の領域の立体視位置を最も奥の位置PRに決定する。
【0025】たとえば、X方向の動きベクトルが最大値
である領域の映像が被写体であり、X方向の動きベクト
ルが最小値である領域の映像が背景である場合には、図
4に示すように、X方向の動きベクトルが最大値である
領域の立体視位置が管面位置PFに決定され、X方向の
動きベクトルが最小値である領域の立体視位置が最も奥
の位置PRに決定される。
【0026】X方向の動きベクトルが最大値である領域
の映像が背景であり、X方向の動きベクトルが最小値で
ある領域の映像が被写体である場合には、X方向の動き
ベクトルが最大値である領域の立体視位置が最も奥の位
置PRに決定され、X方向の動きベクトルが最小値であ
る領域の立体視位置が管面位置PFに決定される。
【0027】ここでは、X方向の動きベクトルが最大値
である領域の映像が被写体であり、X方向の動きベクト
ルが最小値である領域の映像が背景であり、図4に示す
ように、X方向の動きベクトルが最大値である領域の立
体視位置が管面位置PFに決定され、X方向の動きベク
トルが最小値である領域の立体視位置が最も奥の位置P
Rに決定されたとして、各領域E1〜E12の奥行き量
の決定方法について説明する。
【0028】X方向の動きベクトルが最大値の領域およ
び最小値の領域以外の領域のうち、NG領域以外の各領
域の立体視位置は、管面位置PFと最も奥の位置PRの
間において、その領域のX方向の動きベクトルに応じた
位置に決定される。この例では、X方向の動きベクトル
が大きい領域ほど、その立体視位置が管面位置PFに近
い位置に決定され、X方向の動きベクトルが小さい領域
ほど、その立体視位置が最も奥の位置PRに近い位置に
決定される。
【0029】各NG領域の立体視位置は、そのNG領域
が画面の上段(領域E1〜E4)にあるか、中段(領域
E5〜E8)にあるか、画面の下段(領域E9〜E1
2)にあるかに応じて決定される。
【0030】画面の下段にあるNG領域の立体視位置
は、管面位置PFと最も奥の位置PRとの間の中央位置
Paに決定される。画面の上段にあるNG領域の立体視
位置は、最も奥の位置PRと同じ位置Pcに決定され
る。画面の中段にあるNG領域の立体視位置は、画面の
下段にあるNG領域の立体視位置Paと、画面の上段に
あるNG領域の立体視位置Pcとの間の中央位置Pbに
決定される。
【0031】NG領域の立体視位置を上記のようにして
決定している理由について説明する。NG領域は、その
映像が背景であると推定される。そして、通常、背景は
画面下側にあるものほど近い背景であり、画面上側にあ
るものほど遠い背景である。したがって、画面の上側の
NG領域ほどその立体視位置が管面位置PFからより奥
の位置となるように、各NG位置の立体視位置が決定さ
れているのである。また、NG領域の映像が背景である
と推定しているため、画面の下側のNG領域の立体視位
置が、被写体が存在する領域の立体視位置より奥の位置
に決定されているのである。
【0032】このようにして、各領域E1〜E12の立
体視位置が決定されることにより、各領域E1〜E12
の管面位置PFからの奥行き量(奥行き情報)が決定さ
れる。
【0033】奥行き情報選択手段33には、奥行き情報
生成手段32によって生成された現フィールドの各領域
E1〜E12に対する奥行き情報と、前回において奥行
き情報選択手段33によって選択された前フィールドの
各領域E1〜E12に対する奥行き情報とが入力してい
る。また、奥行き情報選択手段33には、NG領域以外
の各領域E1〜E12のX方向の動きベクトルの絶対値
の積算値を示すデータが送られている。
【0034】奥行き情報選択手段33は、NG領域以外
の各領域E1〜E12のX方向の動きベクトルの絶対値
の積算値が所定値以上である場合、つまり、前フィール
ドに対する現フィールドの映像の動きが大きい場合に
は、現フィールドの奥行き情報を選択して出力する。N
G領域以外の各領域E1〜E12のX方向の動きベクト
ルの絶対値の積算値が所定値より小さい場合、つまり、
前フィールドに対する現フィールドの映像の動きが小さ
い場合には、奥行き情報選択手段33は、前フィールド
の奥行き情報を選択して出力する。
【0035】奥行き情報選択手段33から出力された各
領域E1〜E12ごとの奥行き情報(以下、各領域E1
〜E12ごとの第1奥行き情報という)は、奥行き情報
が隣接するフィールド間において急激に変化するのを防
止するための平滑化処理手段40に送られ、平滑化され
る。平滑化処理手段40は、第1乗算手段34、加算手
段35および第2乗算手段36から構成されている。
【0036】各領域E1〜E12ごとの第1奥行き情報
は、第1乗算手段34によって係数αが乗算される。係
数αは、通常はたとえば1/8に設定されている。ただ
し、現フィールドのシーンが、前フィールドのシーンか
ら変化(シーンチェンジ)したときには、係数αは1に
設定される。このようなシーンチェンジの検出方法とし
ては、たとえば、特開平8−149514号公報に開示
されている方法が用いられる。
【0037】第1乗算手段34の出力(以下、各領域E
1〜E12ごとの第2奥行き情報という)は、加算手段
35に送られる。加算手段35には、第2乗算手段36
の出力(以下、各領域E1〜E12ごとの第4奥行き情
報という)も送られており、各領域E1〜E12ごとの
第1奥行き情報と、対応する領域の第4奥行き情報との
和が算出される。
【0038】第2乗算手段36では、前回の加算手段3
5の出力(以下、各領域E1〜E12ごとの第3奥行き
情報という)に係数βが乗算される。係数βは、通常は
たとえば7/8に設定されている。ただし、現フィール
ドのシーンが、前フィールドのシーンから変化(シーン
チェンジ)したときには、係数βは0に設定される。
【0039】したがって、現フィールドのシーンが、前
フィールドのシーンから変化していない場合には、第1
乗算手段34によって、奥行き情報選択手段33から出
力された各領域E1〜E12ごとの第1奥行き情報に1
/8がそれぞれ乗算される。これにより、各領域E1〜
E12ごとの第2奥行き情報が得られる。
【0040】各領域E1〜E12ごとの第2奥行き情報
は、加算手段35に送られる。加算手段35には、さら
に、加算手段35から前回出力された各領域E1〜E1
2ごとの第3奥行き情報に第2乗算手段36によって7
/8が乗算されることによって得られた各領域E1〜E
12ごとの第4奥行き情報も入力している。
【0041】加算手段35では、各領域E1〜E12の
第2奥行き情報と、対応する領域の第4奥行き情報との
和がそれぞれ算出される。これにより、各領域E1〜E
12ごとの第3奥行き情報が得られる。この各領域E1
〜E12ごとの第3奥行き情報が、視差情報として、視
差制御回路4(図1参照)に送られる。
【0042】現フィールドのシーンが、前フィールドの
シーンから変化している場合には、第1乗算手段34に
よって、奥行き情報選択手段33から出力された各領域
E1〜E12ごとの奥行き情報に1がそれぞれ乗算され
る。したがって、第1乗算手段34からは、奥行き情報
選択手段33から出力された各領域E1〜E12ごとの
奥行き情報がそのまま出力される。
【0043】第2乗算手段36の係数は0であるので、
第2乗算手段36の出力は0である。したがって、加算
手段35からは、奥行き情報選択手段33から出力され
た各領域E1〜E12ごとの奥行き情報がそのまま出力
される。つまり、現フィールドのシーンが、前フィール
ドのシーンから変化している場合には、奥行き情報選択
手段33から出力された各領域E1〜E12ごとの奥行
き情報が、視差情報として、視差制御回路4(図1参
照)に送られる。
【0044】図5は、主として、図1の視差制御回路お
よび任意画素遅延FIFOの構成を示している。
【0045】図5には、任意画素遅延FIFO11〜1
3、21〜23のうち、Y信号に対する左映像用任意画
素遅延FIFO11および右映像用任意画素遅延FIF
O21しか示されていないが、他の任意画素遅延FIF
O12、13、22、23も同様な構成でありかつ同様
な制御が行なわれるので、他の任意画素遅延FIFO1
2、13、22、23の構成および制御方法について
は、その説明を省略する。
【0046】ところで、CPU3によって算出された視
差情報は、各領域E1〜E12の中心位置に対する視差
情報である。視差制御回路4では、各領域E1〜E12
の中心位置に対する視差情報に基づいて、1フィールド
画面の各画素位置に対する視差情報が求められる。そし
て、各画素位置に対する2次元映像信号から、その画素
位置に対する視差情報に応じた視差を有する左映像と右
映像とを生成するために、各画素位置に対する視差情報
に基づいて、左映像用任意画素遅延FIFO11〜13
および右映像用任意画素遅延FIFO21〜23の読み
出しアドレスが制御される。
【0047】1フィールド画面の各画素位置に対する視
差情報は、タイミング信号発生回路51、視差補間係数
発生回路52、視差情報記憶手段60、視差選択回路8
0、第1〜第4乗算器81〜84および加算回路85に
よって、生成される。
【0048】入力映像信号の水平同期信号Hsyncお
よび垂直同期信号Vsyncは、タイミング信号発生回
路51に入力している。また、各水平期間の水平アドレ
スを検出するためのクロック信号CLKもタイミング信
号発生回路51に入力している。
【0049】タイミング信号発生回路51は、水平同期
信号Hsync、垂直同期信号Vsyncおよびクロッ
ク信号CLKに基づいて、入力映像信号の絶対的水平位
置を表す水平アドレス信号HAD、入力映像信号の絶対
的垂直位置を表す垂直アドレス信号VAD、入力映像信
号の相対的水平位置を表す相対的水平位置信号HPOS
および入力映像信号の相対的垂直位置を表す相対的垂直
位置信号VPOSを生成して出力する。
【0050】入力映像信号の相対的水平位置および相対
的垂直位置について説明する。図2に示されている動き
ベクトル検出領域E1〜E12は、次のように設定され
ている。画面全体が図2に点線で示すように、4行5列
の20個の領域(以下、第1分割領域という)に分割さ
れている。そして、左上端の第1分割領域の中心、右上
端の第1分割領域の中心、左下端の第1分割領域の中心
および右下端の第1分割領域の中心を4頂点とする四角
形領域が3行4列の12個の領域(以下、第2分割領域
という)に分割され、各第2分割領域が動きベクトル検
出領域E1〜E12として設定されている。
【0051】第1分割領域の水平方向の画素数がmで表
され、第1分割領域の垂直方向の画素数がnとして表さ
れている。入力映像信号の相対的水平位置は、各第1分
割領域の左端を0とし、右端をmとして、0〜(m−
1)で表される。入力映像信号の相対的垂直位置は、各
第1分割領域の上端を0とし、下端をnとして、0〜
(n−1)で表される。
【0052】入力映像信号の相対的水平位置信号HPO
Sおよび相対的垂直位置VPOSは、視差補間係数発生
回路52に送られる。視差補間係数発生回路52は、相
対的水平位置信号HPOS、相対的垂直位置VPOSお
よび次の数式1に基づいて、第1視差補間係数KUL、
第2視差補間係数KUR、第3視差補間係数KDLおよ
び第4視差補間係数KDRを生成して出力する。
【0053】
【数1】
【0054】1フィールド画面の各画素位置に対する視
差情報を生成する方法の基本的な考え方について、図6
を用いて説明する。水平アドレス信号HADおよび垂直
アドレス信号VADによって表されている水平垂直位置
(以下、注目位置という)が図6のPxyであるとす
る。注目位置Pxyに対する視差情報を求める場合につ
いて説明する。
【0055】(1)まず、CPU3によって算出された
各領域E1〜E12に対する視差情報のうちから、注目
位置Pxyが含まれる第1分割領域の4頂点、この例で
はPE1、PE2、PE5、PE6を中心とする動きベ
クトル検出領域E1、E2、E5、E6に対する視差情
報が、それぞれUL、UR、DL、DRとして抽出され
る。つまり、注目位置Pxyが含まれる第1分割領域の
4頂点のうち、左上の頂点を中心とする領域E1の視差
情報が第1視差情報ULとして、右上の頂点を中心とす
る領域E2の視差情報が第2視差情報URとして、左下
の頂点を中心とする領域E5の視差情報が第3視差情報
DLとして、右下の頂点を中心とする領域E6の視差情
報が第4視差情報DRとして抽出される。
【0056】ただし、注目位置が含まれる第1分割領域
が、左上端の第1分割領域である場合のように、注目位
置が含まれる第1分割領域の4頂点のうち1つの頂点の
みが動きベクトル検出領域の中心に該当するような場合
には、その動きベクトル検出領域の視差情報が、第1〜
第4の視差情報UL、UR、DL、DRとして抽出され
る。
【0057】また、注目位置が含まれる第1分割領域
が、左上端の第1分割領域の右隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち下側の2つの頂点のみが動きベクトル検出領域
の中心に該当するような場合には、注目位置が含まれる
第1分割領域の4頂点のうち上側の2つの頂点に対応す
る視差情報UL、URとしては、その下側の頂点を中心
とする領域の視差情報が抽出される。
【0058】また、注目位置が含まれる第1分割領域
が、左上端の第1分割領域の下隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち右側の2つの頂点のみが動きベクトル検出領域
の中心に該当するような場合には、注目位置が含まれる
第1分割領域の4頂点のうち左側の2つの頂点に対応す
る視差情報UL、DLとしては、その右側の頂点を中心
とする領域の視差情報が抽出される。
【0059】また、注目位置が含まれる第1分割領域
が、右下端の第1分割領域の左隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち上側の2つの頂点のみが動きベクトル検出領域
の中心に該当するような場合には、注目位置が含まれる
第1分割領域の4頂点のうち下側の2つの頂点に対応す
る視差情報DL、DRとしては、その上側の頂点を中心
とする領域の視差情報が抽出される。
【0060】また、注目位置が含まれる第1分割領域
が、右下端の第1分割領域の上隣の第1分割領域である
場合のように、注目位置が含まれる第1分割領域の4頂
点のうち左側の2つの頂点のみが動きベクトル検出領域
の中心に該当するような場合には、注目位置が含まれる
第1分割領域の4頂点のうち右側の2つの頂点に対応す
る視差情報UR、DRとしては、その左側の頂点を中心
とする領域の視差情報が抽出される。
【0061】(2)次に、第1〜第4の視差補間係数K
UL、KUR、KDLおよびKDRが求められる。
【0062】第1の視差補間係数KULは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの右辺までの距離ΔX
Rとの比{(m−HPOS)/m}と、第1分割領域e
の垂直方向幅nに対する、注目位置Pxyから第1分割
領域eの下辺までの距離ΔYDとの比{(n−VPO
S)/n}との積によって求められる。すなわち、第1
の視差補間係数KULは、注目位置Pxyを含む第1分
割領域eの左上頂点PE1と注目位置Pxyとの距離が
小さいほど大きくなる。
【0063】第2の視差補間係数KURは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの左辺までの距離ΔX
Lとの比(HPOS/m}と、第1分割領域eの垂直方
向幅nに対する、注目位置Pxyから第1分割領域eの
下辺までの距離ΔYDとの比{(n−VPOS)/n}
との積によって求められる。すなわち、第2の視差補間
係数KURは、注目位置Pxyを含む第1分割領域eの
右上頂点PE2と注目位置Pxyとの距離が小さいほど
大きくなる。
【0064】第3の視差補間係数KDLは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの右辺までの距離ΔX
Rとの比{(m−HPOS)/m}と、第1分割領域e
の垂直方向幅nに対する、注目位置Pxyから第1分割
領域eの上辺までの距離ΔYUとの比(VPOS/n)
との積によって求められる。すなわち、第3の視差補間
係数KDLは、注目位置Pxyを含む第1分割領域eの
左下頂点PE5と注目位置Pxyとの距離が小さいほど
大きくなる。
【0065】第4の視差補間係数KDRは、注目位置P
xyを含む第1分割領域eの水平方向幅mに対する、注
目位置Pxyから第1分割領域eの左辺までの距離ΔX
Lとの比(HPOS/m)と、第1分割領域eの垂直方
向幅nに対する、注目位置Pxyから第1分割領域eの
上辺までの距離ΔYUとの比(VPOS/n)との積に
よって求められる。すなわち、第4の視差補間係数KD
Rは、注目位置Pxyを含む第1分割領域eの右下頂点
PE6と注目位置Pxyとの距離が小さいほど大きくな
る。
【0066】(3)上記(1)で抽出された第1〜第4
の視差情報UL、UR、DL、DRに、それぞれ上記
(2)で算出された第1〜第4の視差補間係数KUL、
KUR、KDL、KDRがそれぞれ乗算される。そし
て、得られた4つの乗算値が加算されることにより、注
目位置Pxyに対する視差情報が生成される。
【0067】視差情報記憶手段60は、領域E1〜E1
2にそれぞれ対応して設けられた第1〜第12の視差レ
ジスタ61〜72を備えている。第1〜第12の視差レ
ジスタ61〜72には、CPU3によって生成された各
領域E1〜E12に対する視差情報が格納される。
【0068】視差情報記憶手段60の後段には、視差選
択回路80が設けられている。視差選択回路80には、
各視差レジスタ61〜72から視差情報がそれぞれ送ら
れる。さらに、視差選択回路80には、タイミング信号
発生回路51から水平アドレス信号HADおよび垂直ア
ドレス信号VADが送られている。
【0069】視差選択回路80は、図7(a)に示され
ている規則にしたがって、水平アドレス信号HADおよ
び垂直アドレス信号VADに対応する領域(図6の例で
は、注目位置を含む第1領域の左上頂点を中心とする動
きベクトル検出領域)に対する視差情報を、第1視差情
報ULとして選択して出力する。さらに、視差選択回路
80は、図7(b)に示されている規則にしたがって、
水平アドレス信号HADおよび垂直アドレス信号VAD
に対応する領域(図6の例では、注目位置を含む第1領
域の右上頂点を中心とする動きベクトル検出領域)に対
する視差情報を、第2視差情報URとして選択して出力
する。
【0070】さらに、視差選択回路80は、図7(c)
に示されている規則にしたがって、水平アドレス信号H
ADおよび垂直アドレス信号VADに対応する領域(図
6の例では、注目位置を含む第1領域の左下頂点を中心
とする動きベクトル検出領域)に対する視差情報を、第
3視差情報DLとして選択して出力する。さらに、視差
選択回路80は、図7(d)に示されている規則にした
がって、水平アドレス信号HADおよび垂直アドレス信
号VADに対応する領域(図6の例では、注目位置を含
む第1領域の右下頂点を中心とする動きベクトル検出領
域)に対する視差情報を、第4視差情報DRとして選択
して出力する。図7において、たとえば、0〜mのよう
に、a〜bで表現されている記号”〜”は、a以上b未
満を意味する記号として用いられている。
【0071】視差選択回路80によって選択された第1
視差情報UL、第2視差情報UR、第3視差情報DLお
よび第4視差情報DRは、それぞれ第1、第2、第3お
よび第4の乗算器81、82、83、84に入力する。
【0072】第1、第2、第3および第4の乗算器8
1、82、83、84には、それぞれ視差補間係数発生
回路52からの第1視差補間係数KUL、第2視差補間
係数KUR、第3視差補間係数KDLおよび第4視差補
間係数KDRも入力している。
【0073】第1乗算器81は、第1視差情報ULに第
1視差補間係数KULを乗算する。第2乗算器82は、
第2視差情報URに第2視差補間係数KURを乗算す
る。第3乗算器83は、第3視差情報DLに第3視差補
間係数KDLを乗算する。第4乗算器84は、第4視差
情報DRに第4視差補間係数KDRを乗算する。
【0074】各乗算器81、82、83、84の出力
は、加算回路85によって加算される。これにより、注
目位置に対する視差情報PRが得られる。
【0075】各任意画素遅延FIFO11、21は、1
画素より小さい単位での水平位相制御を行なうために、
ぞれぞれ2つのラインメモリ11a、11b、21a、
21bを備えている。各任意画素遅延FIFO11、2
1内の2つのラインメモリ11a、11b、21a、2
1bには、それぞれY信号が入力されているとともにク
ロック信号CLKが入力している。
【0076】タイミング信号発生回路51から出力され
ている水平アドレス信号HADは、標準アドレス発生回
路90にも入力している。標準アドレス発生回路90
は、各任意画素遅延FIFO11、21内の2つのライ
ンメモリ11a、11b、21a、21bに対する標準
書き込みアドレスWADおよび標準読み出しアドレスR
ADを生成して出力する。また、標準アドレス発生回路
90は、2D/3D変換装置によって得られる左映像信
号および右映像信号に付加される同期信号Csyncを
も出力する。この同期信号Csyncによって表される
水平同期信号は、入力映像信号の水平同期信号Hsyn
cより、所定クロック数分遅れた信号となる。
【0077】標準読み出しアドレスRADは、標準読み
出しアドレスによって規定される基準水平位相に対し
て、各任意画素遅延FIFO11、21に入力される映
像信号の水平位相を進めたり遅らしたりできるようにす
るために、標準書き込みアドレスWADに対して、所定
クロック数分遅れている。タイミング信号発生回路51
から出力される標準書き込みアドレスWADは、各任意
画素遅延FIFO11、21内の2つのラインメモリ1
1a、11b、21a、21bに、書き込みアドレスを
示す書き込み制御信号として入力する。
【0078】タイミング信号発生回路51から出力され
る標準読み出しアドレスRADは、加算器91および減
算器92にそれぞれ入力する。加算器91および減算器
92には、加算回路85から出力される注目位置の視差
情報PRも入力している。
【0079】加算器91では、標準読み出しアドレスR
ADに視差情報PRが加算される。これにより、左映像
用読み出しアドレスPRLが得られる。
【0080】左映像用読み出しアドレスPRLの整数部
PRL1は、左映像用任意画素遅延FIFO11内の第
1のラインメモリ11aに読み出しアドレスRADL1
として入力する。したがって、第1のラインメモリ11
aのアドレスRADL1に対応するアドレスからY信号
が読み出される。読み出されたY信号は、第1の左映像
用乗算器101に入力する。
【0081】左映像用読み出しアドレスPRLの整数部
PRL1に1が加算されたアドレス値は、左映像用任意
画素遅延FIFO11内の第2のラインメモリ11bに
読み出しアドレスRADL2として入力する。したがっ
て、第2のラインメモリ11bのアドレスRADL2に
対応するアドレスからY信号が読み出される。読み出さ
れたY信号は、第2の左映像用乗算器102に入力す
る。
【0082】第1のラインメモリ11aに対する読み出
しアドレスRADL1と、第2のラインメモリ11bに
対する読み出しアドレスRADL2とは、1だけ異なっ
ているので、第1のラインメモリ11aから読み出され
たY信号と、第2のラインメモリ11bから読み出され
たY信号とは、水平位置が1だけずれた信号となる。
【0083】左映像用読み出しアドレスPRLの少数部
PRL2は、第2の左映像補間係数として第2の左映像
用乗算器102に入力する。左映像用読み出しアドレス
PRLの少数部PRL2を1から減算した値(1−PR
L2)は、第1の左映像補間係数として第1の左映像用
乗算器101に入力する。
【0084】したがって、第1の左映像用乗算器101
では、第1のラインメモリ11aから読み出されたY信
号に第1の左映像補間係数(1−PRL2)が乗算され
る。第2の左映像用乗算器102では、第2のラインメ
モリ11bから読み出されたY信号に第2の左映像補間
係数PRL2が乗算される。そして、各乗算器101、
102によって得られたY信号は加算器103で加算さ
れた後、左映像用Y信号YL−OUTとして、出力され
る。
【0085】これにより、標準読み出しアドレスRAD
によって規定される基準水平位相に対して、水平位相量
が注目位置に対する視差情報に応じた量だけ遅れた左映
像用Y信号が得られる。
【0086】減算器92では、標準読み出しアドレスR
ADから視差情報PRが減算される。これにより、右映
像用読み出しアドレスPRRが得られる。
【0087】右映像用読み出しアドレスPRRの整数部
PRR1は、右映像用任意画素遅延FIFO21内の第
1のラインメモリ21aに読み出しアドレスRADR1
として入力する。したがって、第1のラインメモリ21
aのアドレスRADR1に対応するアドレスからY信号
が読み出される。読み出されたY信号は、第1の右映像
用乗算器111に入力する。
【0088】右映像用読み出しアドレスPRRの整数部
PRR1に1が加算されたアドレス値は、右映像用任意
画素遅延FIFO21内の第2のラインメモリ21bに
読み出しアドレスRADR2として入力する。したがっ
て、第2のラインメモリ21bのアドレスRADR2に
対応するアドレスからY信号が読み出される。読み出さ
れたY信号は、第2の右映像用乗算器112に入力す
る。
【0089】第1のラインメモリ21aに対する読み出
しアドレスRADR1と、第2のラインメモリ21bに
対する読み出しアドレスRADR2とは、1だけ異なっ
ているので、第1のラインメモリ21aから読み出され
たY信号と、第2のラインメモリ21bから読み出され
たY信号とは、水平位置が1だけずれた信号となる。
【0090】右映像用読み出しアドレスPRRの少数部
PRR2は、第2の右映像補間係数として第2の右映像
用乗算器112に入力する。右映像用読み出しアドレス
PRRの少数部PRR2を1から減算した値(1−PR
R2)は、第1の右映像補間係数として第1の右映像用
乗算器111に入力する。
【0091】したがって、第1の右映像用乗算器111
では、第1のラインメモリ21aから読み出されたY信
号に第1の右映像補間係数(1−PRR2)が乗算され
る。第2の右映像用乗算器112では、第2のラインメ
モリ21bから読み出されたY信号に第2の右映像補間
係数PRR2が乗算される。そして、各乗算器111、
112によって得られたY信号は加算器113で加算さ
れた後、右映像用Y信号YR−OUTとして、出力され
る。
【0092】これにより、標準読み出しアドレスRAD
によって規定される基準水平位相に対して、水平位相量
が注目位置に対する視差情報に応じた量だけ進んだ右映
像用Y信号が得られる。
【0093】図8は、注目位置に対する視差情報が0の
場合の、各部の信号を示している。
【0094】視差情報が0の場合には、加算器91から
出力される左映像用読み出しアドレスPRLと、減算器
92から出力される右映像用読み出しアドレスPRR
は、ともに標準読み出しアドレスRADと等しい少数部
のない整数部のみからなるアドレスとなる。
【0095】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aに対する読み出し
アドレスRADL1と、右映像用任意画素遅延FIFO
21内の第1のラインメモリ21aに対する読み出しア
ドレスRADR1は、標準読み出しアドレスRADと等
しいアドレスとなる。
【0096】また、左映像用任意画素遅延FIFO11
内の第2のラインメモリ11bに対する読み出しアドレ
スRADL2と、右映像用任意画素遅延FIFO21内
の第2のラインメモリ21bに対する読み出しアドレス
RADR2は、標準読み出しアドレスRADより1だけ
大きい値となる。
【0097】また、第1の左映像補間係数(1−PRL
2)および第1の右映像補間係数(1−PRR2)は1
となり、第2の左映像補間係数PRL2および第2の右
映像補間係数PRR2は0となる。
【0098】この結果、左映像用任意画素遅延FIFO
11内の第1のラインメモリ11aの標準アドレスRA
Dに対応するアドレスから読み出されたY信号が加算器
103から左映像用Y信号YL−OUTとして出力さ
れ、右映像用任意画素遅延FIFO21内の第1のライ
ンメモリ21aの標準アドレスRADに対応するアドレ
スから読み出されたY信号が加算器113から右映像用
Y信号YR−OUTとして出力される。つまり、水平方
向の位相ずれ量が同じ2つのY信号、すなわち視差のな
い2つのY信号が左映像用Y信号および右映像用Y信号
として出力される。
【0099】図9は、ある注目位置に対する標準書き込
みアドレスWADが20であり、上記注目位置に対する
標準読み出しアドレスRADが10であり、上記注目位
置に対する視差情報が1.2の場合の、各アドレス値の
具体例を示している。図10は、その際の各部の信号を
示している。
【0100】この場合には、加算器91から出力される
左映像用読み出しアドレスPRLは、11.2となり、
その整数部PRL1は11となり、その少数部PRL2
は0.2となる。
【0101】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aに対する読み出し
アドレスRADL1は11となり、第2のラインメモリ
11bに対する読み出しアドレスRADL2は12とな
る。また、第1の左映像補間係数KL1{=(1−PR
L2)}は0.8となり、第2の左映像補間係数KL2
(=PRL2)は0.2となる。
【0102】したがって、左映像用任意画素遅延FIF
O11内の第1のラインメモリ11aのアドレス11か
らY信号(Y11)が読み出され、第1乗算器101から
は読み出されたY信号(Y11)の0.8倍の信号(0.
8*Y11)が出力される。
【0103】一方、左映像用任意画素遅延FIFO11
内の第2のラインメモリ11bのアドレス12からY信
号(Y12)が読み出され、第2乗算器102からは読み
出されたY信号(Y12)の0.2倍の信号(0.2*Y
12)が出力される。そして、加算器103からは、0.
8*Y11+0.2*Y12に相当する左映像用Y信号YL
−OUTが出力される。つまり、読み出しアドレス1
1.2に相当するY信号が、左映像用Y信号YL−OU
Tとして出力される。
【0104】減算器92から出力される右映像用読み出
しアドレスPRRは、8.8となり、その整数部PRR
1は8となり、その少数部PRR2は0.8となる。
【0105】したがって、右映像用任意画素遅延FIF
O21内の第1のラインメモリ21aに対する読み出し
アドレスRADR1は8となり、第2のラインメモリ2
1bに対する読み出しアドレスRADR2は9となる。
また、第1の右映像補間係数KR1{=(1−PRR
2)}は0.2となり、第2の右映像補間係数KR2
(=PRR2)は0.8となる。
【0106】したがって、右映像用任意画素遅延FIF
O21内の第1のラインメモリ21aのアドレス8から
Y信号(Y8 )が読み出され、第1乗算器111からは
読み出されたY信号(Y8 )の0.2倍の信号(0.2
*Y8 )が出力される。
【0107】一方、右映像用任意画素遅延FIFO21
内の第2のラインメモリ21bのアドレス9からY信号
(Y9 )が読み出され、第2乗算器112からは読み出
されたY信号(Y9 )の0.8倍の信号(0.8*
9 )が出力される。そして、加算器113からは、
0.2*Y8 +0.8*Y9 に相当する右映像用Y信号
YR−OUTが出力される。つまり、読み出しアドレス
8.8に相当するY信号が、右映像用Y信号YR−OU
Tとして出力される。
【0108】この結果、11.2−8.8=2.4の視
差、つまり、視差情報1.2の2倍の視差を互いに有す
る左映像および右映像が得られる。
【0109】
【発明の効果】この発明によれば、元の2次元映像信号
に対して時間的に遅延された映像信号を生成するための
フィールドメモリが不要となり、コストの低廉化が図れ
る2次元映像を3次元映像に変換する装置および方法が
実現する。
【図面の簡単な説明】
【図1】2D/3D映像変換装置の全体構成を示すブロ
ック図である。
【図2】動きベクトル検出領域を示す模式図である。
【図3】CPUによる奥行き情報の生成処理手順を示す
機能ブロック図である。
【図4】CPUによる奥行き情報の生成方法を説明する
ための説明図である。
【図5】主として、視差制御回路および任意画素遅延F
IFOの構成を示すブロック図である。
【図6】注目画素に対する視差情報を生成する方法を説
明するための説明図である。
【図7】視差選択回路による選択規則を示す図である。
【図8】視差情報が0の場合の各部の信号を示すタイム
チャートである。
【図9】視差情報が1.2の場合の各アドレス値を視差
制御回路に付記したブロック図である。
【図10】視差情報が1.2の場合の各部の信号を示す
タイムチャートである。
【符号の説明】
1 AD変換回路 2 動きベクトル検出回路 3 CPU 4 視差制御回路 5、6 DA変換回路 11、12、13 左映像用任意画素遅延FIFO 21、22、23 右映像用任意画素遅延FIFO 11a、11b、21a、21b ラインメモリ 51 タイミング信号発生回路 52 視差補間係数発生回路 60 視差情報記憶手段 61〜72 視差レジスタ 80 視差選択回路 81〜84 乗算器 85 加算回路 90 標準アドレス発生回路 91 加算器 92 減算器 101、102、111、112 乗算器 103、113 加算器

Claims (8)

    【特許請求の範囲】
  1. 【請求項1】 2次元入力映像信号に基づいて、各フィ
    ールドごとに、1フィールド画面内に設定された複数の
    動きベクトル検出領域のそれぞれに対する動きベクトル
    を検出する動きベクトル検出手段、 各動きベクトル検出領域ごとに検出された動きベクトル
    の水平方向成分に基づいて、1フィールド画面内の所定
    単位領域ごとの視差情報を生成する視差情報生成手段、
    ならびに2次元入力映像信号の各所定単位領域内の信号
    から、その所定単位領域に対応する視差情報に応じた水
    平位相差を有する第1映像信号と第2映像信号とをそれ
    ぞれ生成する位相制御手段、 を備えている2次元映像を3次元映像に変換する装置。
  2. 【請求項2】 視差情報生成手段は、各動きベクトル検
    出領域ごとに検出された動きベクトルの水平方向成分、
    水平方向成分の最大値、水平方向成分が最大値である動
    きベクトル検出領域、水平方向成分の最小値、水平方向
    成分が最小値である動きベクトル検出領域および各動き
    ベクトル検出領域の映像が背景であるか被写体であるか
    を示す情報に基づいて、1フィールド画面内の所定単位
    領域ごとの視差情報を生成するものである請求項1に記
    載の2次元映像を3次元映像に変換する装置。
  3. 【請求項3】 位相制御手段は、 2次元入力映像信号を1水平ライン分以下の複数画素数
    分記憶できる容量を有し、かつ2次元入力映像信号を一
    次的に記憶する第1の記憶手段、 2次元入力映像信号を1水平ライン分以下の複数画素数
    分記憶できる容量を有し、かつ2次元入力映像信号を一
    次的に記憶する第2の記憶手段、 第1の記憶手段の読み出しアドレスを、2次元入力映像
    信号の水平垂直位置に応じて決定された標準読み出しア
    ドレスに対して、2次元入力映像信号の水平垂直位置が
    属する所定単位領域に対応する視差情報に基づいて制御
    することにより、上記標準読み出しアドレスによって規
    定される基準水平位相に対して上記視差情報に応じた量
    だけ水平位相が進んだ第1映像信号を生成する第1の読
    み出しアドレス制御手段、ならびに第2の記憶手段の読
    み出しアドレスを、上記標準読み出しアドレスに対し
    て、2次元入力映像信号の水平垂直位置が属する所定単
    位領域に対応する視差情報に基づいて制御することによ
    り、上記標準読み出しアドレスによって規定される基準
    水平位相に対して上記視差情報に応じた量だけ水平位相
    が遅れた第2映像信号を生成する第2の読み出しアドレ
    ス制御手段、 を備えている請求項1および2のいずれかに記載の2次
    元映像を3次元映像に変換する装置。
  4. 【請求項4】 所定単位領域が1画素単位の領域である
    請求項1、2および3のいずれかに記載の2次元映像を
    3次元映像に変換する装置。
  5. 【請求項5】 2次元入力映像信号に基づいて、各フィ
    ールドごとに、1フィールド画面内に設定された複数の
    動きベクトル検出領域のそれぞれに対する動きベクトル
    を検出する第1ステップ、 各動きベクトル検出領域ごとに検出された動きベクトル
    の水平方向成分に基づいて、1フィールド画面内の所定
    単位領域ごとの視差情報を生成する第2ステップ、なら
    びに2次元入力映像信号の各所定単位領域内の信号か
    ら、その所定単位領域に対応する視差情報に応じた水平
    位相差を有する第1映像信号と第2映像信号とをそれぞ
    れ生成する第3ステップ、 を備えている2次元映像を3次元映像に変換する方法。
  6. 【請求項6】 第2ステップでは、各動きベクトル検出
    領域ごとに検出された動きベクトルの水平方向成分、水
    平方向成分の最大値、水平方向成分が最大値である動き
    ベクトル検出領域、水平方向成分の最小値、水平方向成
    分が最小値である動きベクトル検出領域および各動きベ
    クトル検出領域の映像が背景であるか被写体であるかを
    示す情報に基づいて、1フィールド画面内の所定単位領
    域ごとの視差情報が生成される請求項5に記載の2次元
    映像を3次元映像に変換する方法。
  7. 【請求項7】 第3ステップは、 2次元入力映像信号を1水平ライン分以下の複数画素数
    分記憶できる容量を有する第1の記憶手段および第2の
    記憶手段に、2次元入力映像信号を一次的に記憶するス
    テップ、 第1の記憶手段の読み出しアドレスを、2次元入力映像
    信号の水平垂直位置に応じて決定された標準読み出しア
    ドレスに対して、2次元入力映像信号の水平垂直位置が
    属する所定単位領域に対応する視差情報に基づいて制御
    することにより、上記標準読み出しアドレスによって規
    定される基準水平位相に対して上記視差情報に応じた量
    だけ水平位相が進んだ第1映像信号を生成するステッ
    プ、ならびに第2の記憶手段の読み出しアドレスを、上
    記標準読み出しアドレスに対して、2次元入力映像信号
    の水平垂直位置が属する所定単位領域に対応する視差情
    報に基づいて制御することにより、上記標準読み出しア
    ドレスによって規定される基準水平位相に対して上記視
    差情報に応じた量だけ水平位相が遅れた第2映像信号を
    生成するステップ、 を備えている請求項5および6のいずれかに記載の2次
    元映像を3次元映像に変換する方法。
  8. 【請求項8】 所定単位領域が1画素単位の領域である
    請求項5、6および7のいずれかに記載の2次元映像を
    3次元映像に変換する方法。
JP18962996A 1996-07-18 1996-07-18 2次元映像を3次元映像に変換する装置および方法 Expired - Lifetime JP3957343B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP18962996A JP3957343B2 (ja) 1996-07-18 1996-07-18 2次元映像を3次元映像に変換する装置および方法
US09/147,518 US6445833B1 (en) 1996-07-18 1997-07-16 Device and method for converting two-dimensional video into three-dimensional video
PCT/JP1997/002471 WO1998004087A1 (en) 1996-07-18 1997-07-16 Device and method for converting two-dimensional video into three-dimensional video
DE69739179T DE69739179D1 (de) 1996-07-18 1997-07-16 Eidimensionale bilder
EP97930812A EP0918439B1 (en) 1996-07-18 1997-07-16 Device for converting two-dimensional video into three-dimensional video
KR10-1999-7000337A KR100445619B1 (ko) 1996-07-18 1997-07-16 2차원 영상을 3차원 영상으로 변환하는 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP18962996A JP3957343B2 (ja) 1996-07-18 1996-07-18 2次元映像を3次元映像に変換する装置および方法

Publications (2)

Publication Number Publication Date
JPH1032841A true JPH1032841A (ja) 1998-02-03
JP3957343B2 JP3957343B2 (ja) 2007-08-15

Family

ID=16244501

Family Applications (1)

Application Number Title Priority Date Filing Date
JP18962996A Expired - Lifetime JP3957343B2 (ja) 1996-07-18 1996-07-18 2次元映像を3次元映像に変換する装置および方法

Country Status (1)

Country Link
JP (1) JP3957343B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010136371A (ja) * 2008-12-04 2010-06-17 Samsung Electronics Co Ltd 深さ推定装置および方法、および3dビデオ変換装置および方法
JP2012109788A (ja) * 2010-11-17 2012-06-07 Konica Minolta Holdings Inc 画像処理装置および視差情報生成装置
JP2012217213A (ja) * 2012-08-01 2012-11-08 Toshiba Corp 画像処理装置および画像処理方法
JP2012231508A (ja) * 2006-08-01 2012-11-22 Qualcomm Inc 平面視低電力モバイル装置における立体画像およびビデオのリアルタイム取得および生成
US9113140B2 (en) 2011-08-25 2015-08-18 Panasonic Intellectual Property Management Co., Ltd. Stereoscopic image processing device and method for generating interpolated frame with parallax and motion vector
JP2017525198A (ja) * 2014-06-10 2017-08-31 ビッタニメイト インコーポレイテッド 立体視深度調節及び焦点調節

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012231508A (ja) * 2006-08-01 2012-11-22 Qualcomm Inc 平面視低電力モバイル装置における立体画像およびビデオのリアルタイム取得および生成
US8970680B2 (en) 2006-08-01 2015-03-03 Qualcomm Incorporated Real-time capturing and generating stereo images and videos with a monoscopic low power mobile device
US9509980B2 (en) 2006-08-01 2016-11-29 Qualcomm Incorporated Real-time capturing and generating viewpoint images and videos with a monoscopic low power mobile device
JP2010136371A (ja) * 2008-12-04 2010-06-17 Samsung Electronics Co Ltd 深さ推定装置および方法、および3dビデオ変換装置および方法
US9137512B2 (en) 2008-12-04 2015-09-15 Samsung Electronics Co., Ltd. Method and apparatus for estimating depth, and method and apparatus for converting 2D video to 3D video
JP2012109788A (ja) * 2010-11-17 2012-06-07 Konica Minolta Holdings Inc 画像処理装置および視差情報生成装置
US9113140B2 (en) 2011-08-25 2015-08-18 Panasonic Intellectual Property Management Co., Ltd. Stereoscopic image processing device and method for generating interpolated frame with parallax and motion vector
JP2012217213A (ja) * 2012-08-01 2012-11-08 Toshiba Corp 画像処理装置および画像処理方法
JP2017525198A (ja) * 2014-06-10 2017-08-31 ビッタニメイト インコーポレイテッド 立体視深度調節及び焦点調節

Also Published As

Publication number Publication date
JP3957343B2 (ja) 2007-08-15

Similar Documents

Publication Publication Date Title
KR100445619B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 장치 및 방법
US4672442A (en) Frame rate conversion system in television signal
JP3005474B2 (ja) 2次元映像を3次元映像に変換する装置および方法
JP3226539B2 (ja) ビデオ画像処理
JP2013534742A (ja) デプスマップ情報を利用した立体映像変換方法及び装置
JP4191246B2 (ja) 映像フィールドを順次走査映像フレームへ非飛び越し走査するための方法および装置
JP2005235211A (ja) 中間時点の画像合成方法及びそれを適用した3dディスプレイ装置
JP3276931B2 (ja) 3次元映像の立体感調整方法及び立体感調整装置
JP2947360B2 (ja) 画像の動きを測定する方法および装置
JPH1051811A (ja) 立体感調整方法および立体感調整装置
EP0854438A2 (en) Image processing
JPH1032841A (ja) 2次元映像を3次元映像に変換する装置および方法
JP2951291B2 (ja) 2次元映像を3次元映像に変換する装置および方法
JPH10191397A (ja) 意図適応型の2次元映像を3次元映像に変換する装置
JP3540626B2 (ja) 2次元映像を3次元映像に変換する装置および方法
JPH11146423A (ja) 2次元映像を3次元映像に変換する装置および方法
JP3485764B2 (ja) 2次元映像を3次元映像に変換する装置および方法
JPH10178594A (ja) 3次元映像伝送方法、デジタル放送システムおよびデジタル放送システムにおけるユーザ側端末
JP3454684B2 (ja) 2次元映像を3次元映像に変換する装置
US5488428A (en) Video special effect generating apparatus
JPH09116930A (ja) 2次元映像を3次元映像に変換する方法
JPH0865713A (ja) 立体画像信号変換装置
KR19990084334A (ko) 2차원 연속 영상의 3차원 영상 변환 장치 및 방법
JP2647165B2 (ja) 画像動き検出装置及び画像動き補正装置
JP3157449B2 (ja) 画像表示装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040622

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040921

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20041214

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070508

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110518

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120518

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term