JPH11308577A - 走査線補間回路 - Google Patents

Abstract

(57)【要約】 【課題】 解像度の劣化やインタレース妨害が発生する
ことなく、高画質な走査線補間画像を得ることができる
走査線補間回路を提供する。 【解決手段】 垂直ＨＰＦ３，８は、現フィールド前後
の垂直方向のフィールド高域信号を生成する。垂直ＬＰ
Ｆ７は、現フィールドの垂直方向の現フィールド低域信
号を生成する。動き方向検出部４は画像の動き方向値ｓ
と動き量値ｋとを検出する。画像シフト器９，１０は動
き方向値ｓに従ってフィールド高域信号をシフトする。
フィールド内補間器５はフィールド内補間信号を生成す
る。加算器１３，１４はフィールド高域信号と現フィー
ルド低域信号とを加算して時空間補間信号を生成する。
乗算器１１，１２及び加算器１５は動き量値ｋに従って
フィールド内補間信号と前記時空間補間信号とを適応混
合する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、インタレース画像
をプログレッシブ画像に変換する際等に用いられる走査
線補間回路に関する。

【０００２】

【従来の技術】ＮＴＳＣ信号やハイビジョン信号等の標
準的なテレビジョン信号はインタレース（飛び越し走
査）信号である。図５は走査線構造を示す図であり、
（ａ）はインタレース信号、（ｂ）はプログレッシブ
（順次走査）信号、（ｃ）は走査線補間によってインタ
レース信号をプログレッシブ信号に変換した信号を示し
ている。なお、プログレッシブ信号はノンインタレース
信号と称されることもある。図５中の○は走査線を示
し、×は補間された走査線を示している。

【０００３】この図５において、垂直方向Ｖは画面の垂
直方向であり、水平方向ｔは時間方向である。インタレ
ース信号は、図５（ａ）に示すように、１つのフレーム
が時間及び垂直方向にずれた２つのフィールドで構成さ
れる。これに対し、プログレッシブ信号は、図５（ｂ）
に示すように、走査線構造にずれがない。インタレース
信号においては、画像の垂直方向の高い周波数成分が多
くなると、ラインフリッカを生じる等のインタレース妨
害が存在する。一方、プログレッシブ信号では、インタ
レース妨害は存在しない。

【０００４】そこで、図５（ｃ）に示すように、インタ
レースで間引かれている部分の走査線を周辺の走査線で
補間し、プログレッシブ信号に変換することによって、
インタレース妨害を除去する処理方法がある。このよう
な処理方法は、順次走査変換もしくは倍密変換と称され
る。

【０００５】従来においては、順次走査変換や倍密変換
のための走査線補間は、動き適応処理で行われる。即
ち、図６に示すように、画像が静止している場合は、前
後フィールドの画素Ａ，Ｂの平均値を×で示す新しい画
素Ｑとするフィールド間補間を行うことによって、新し
い走査線を生成する。画像が動いている場合は、上下の
画素Ｃ，Ｄの平均値を×で示す新しい画素Ｑとするフィ
ールド内補間を行うことによって、新しい走査線を生成
する。

【０００６】

【発明が解決しようとする課題】ところで、フィールド
間補間やフィールド内補間による順次走査変換は、入力
信号に対する時間−垂直領域における時空間のフィルタ
とみなすことができ、フィールド間補間は時間ローパス
フィルタ（以下、ローパスフィルタをＬＰＦと略記す
る）、フィールド内補間は垂直ＬＰＦの特性を持つ。

【０００７】図７（ａ）は時間周波数ｆ−垂直空間周波
数νに関する静止画像のスペクトルを示したものであ
る。静止画像では、図７（ａ）に示すように、画像のス
ペクトルはｆ＝０の軸上にしか存在しない。なお、ｆ＝
６０，−６０（Ｈｚ）に存在する●を中心に広がるスペ
クトルは、偶数次の高調波スペクトルである。静止画像
の場合の補間処理であるフィールド間補間の阻止域は、
図７（ａ）に斜線を付した部分で示され、斜線を付して
いない領域のスペクトルが順次走査変換後の出力信号と
なる。

【０００８】従って、静止画像では、フィールド間補間
を行うことによって、偶数次の高調波スペクトルを含む
原スペクトルを損なうことなく、インタレース妨害とな
る破線で示すｆ＝３０，−３０（Ｈｚ）に存在する×を
中心に広がる奇数次の高調波スペクトルのみを除去する
ことができる。これによって、画質劣化のないプログレ
ッシブ信号を得ることができる。

【０００９】一方、図７（ｂ）は時間周波数ｆ−垂直空
間周波数νに関する動画像のスペクトルを示したもので
ある。一般的には、動画像は、図７（ｂ）に示すよう
に、フィールド間相関が小さく、画像のスペクトルが時
間高域にまで広がっていることが多い。動画像に対して
はフィールド間補間を用いることができない理由は、こ
のことから説明できる。即ち、フィールド間補間では、
動画像の大きな特徴である時間高域のスペクトルを除去
してしまうことになるからである。

【００１０】そこで、動画像では時間高域のスペクトル
を除去しないような、図７（ｂ）に斜線を付した部分で
示される阻止域の特性を持つ垂直フィルタ、即ち、フィ
ールド内補間でなければならない。しかし、フィールド
内補間による固定的な垂直ＬＰＦでは、時間高域のスペ
クトルは保存されるが、原スペクトルの一部が欠落し、
奇数次の高調波スペクトルが完全に除去されない。その
ため、従来の走査線補間回路による動き適応処理におい
ては、動き部分では解像度が劣化し、ラインフリッカや
ジャギ等のインタレース妨害が完全には除去されない。

【００１１】本発明はこのような問題点に鑑みなされた
ものであり、走査線補間するに際して画像に動き部分が
存在しても、解像度の劣化やインタレース妨害が発生す
ることなく、高画質な走査線補間画像を得ることができ
る走査線補間回路を提供することを目的とする。

【００１２】

【課題を解決するための手段】本発明は、上述した従来
の技術の課題を解決するため、入力された画像信号の走
査線を補間する走査線補間回路において、被補間フィー
ルドである現フィールドの空間的に上下に位置する走査
線よりフィールド内補間信号を生成するフィールド内補
間手段（５）と、前記現フィールドの垂直方向に低い周
波数成分である現フィールド低域信号を生成する現フィ
ールド低域信号生成手段（７）と、前記現フィールドに
対して時間的に後の垂直方向に高い周波数成分である後
フィールド高域信号を生成する後フィールド高域信号生
成手段（３）と、前記現フィールドに対して時間的に前
の垂直方向に高い周波数成分である前フィールド高域信
号を生成する前フィールド高域信号生成手段（８）と、
前記現フィールドに対して時間的に前後するフィールド
から画像の動き方向と動き量とを検出する動き方向検出
手段（４）と、前記動き方向検出手段によって検出され
た動き方向に従って、前記後フィールド高域信号をシフ
トする第１のシフト手段（９）と、前記動き方向検出手
段によって検出された動き方向に従って、前記前フィー
ルド高域信号をシフトする第２のシフト手段（１０）
と、前記第１及び第２のシフト手段によってシフトされ
た前記後フィールド高域信号及び前記前フィールド高域
信号と、前記現フィールド低域信号とを加算して時空間
補間信号を生成する時空間補間信号生成手段（１３，１
４）と、前記動き方向検出手段によって検出された動き
量に従って、前記フィールド内補間信号と前記時空間補
間信号とを適応混合する適応混合手段（１１，１２，１
５）とを備えて構成したことを特徴とする走査線補間回
路を提供するものである。

【００１３】

【発明の実施の形態】以下、本発明の走査線補間回路に
ついて、添付図面を参照して説明する。図１は本発明の
走査線補間回路の一実施例を示すブロック図、図２は図
１中の動き方向検出器４の具体的構成の一例を示すブロ
ック図、図３は本発明の走査線補間回路を動き適応補間
装置に応用した例を示すブロック図、図４は本発明の走
査線補間回路を順次走査変換装置に応用した例を示すブ
ロック図、図８は本発明の走査線補間回路を説明するた
めの画像スペクトルを示す図である。

【００１４】まず、図８を用いて、本発明の走査線補間
回路の原理について説明する。画像が垂直方向や水平方
向に平行移動しているときの画像のスペクトルは、方向
性を伴って広がるという特徴を持つ。例えば、画像を水
平方向の動き速度Ｖｘ＝０、垂直方向の動き速度Ｖｙ＝
２（走査線／フィールド）で等速移動させた場合、図８
に示すように、画像のスペクトルはｆ−ν平面上の太実
線で示す決まった直線上にのみ存在する。

【００１５】そこで、本発明では、現フィールドに対し
て時間的に前後するフィールドから画像の動き方向と動
き量とを検出する。これによって、複数の特徴的な画像
のスペクトルをそれぞれ区別することが可能となる。ま
た、検出された動き方向に基づき、前及び後フィールド
高域信号を空間的に上下左右にシフトさせ、現フィール
ド低域信号に加算して時空間補間信号を得る。これによ
って、それぞれの特徴的な画像のスペクトルに最適な周
波数特性を持つ補間処理を施すことが可能となる。

【００１６】例えば、図８に示すスペクトルを持つ画像
に対しては、図８に斜線を付した（黒く塗りつぶした）
部分が阻止域となる時空間補間を行うようにすることに
よって、画質劣化のないプログレッシブ信号を得ること
ができる。

【００１７】ここで、本発明の走査線補間回路の構成及
び動作について具体的に説明する。図１において、入力
端子１より入力されたインタレース画像信号は、フィー
ルド遅延器２，垂直ハイパスフィルタ（以下、ハイパス
フィルタをＨＰＦを略記する）３，動き方向検出部４に
入力される。

【００１８】フィールド遅延器２は入力された画像信号
を１フィールド分の時間だけ遅延し、その遅延した画像
信号をフィールド内補間器５とフィールド遅延器６と垂
直ＬＰＦ７に入力する。フィールド遅延器６は入力され
た画像信号を１フィールド分の時間だけ遅延し、その遅
延した画像信号を動き方向検出部４と垂直ＨＰＦ８に入
力する。従って、垂直ＨＰＦ３と、フィールド内補間器
５及び垂直ＬＰＦ７と、垂直ＨＰＦ８には、それぞれ１
フィールドずつ異なった画像信号が入力されることにな
る。なお、フィールド遅延器２より出力された画像信号
を現フィールドとする。

【００１９】垂直ＨＰＦ３は、被補間フィールドである
現フィールドに対して時間的に後のフィールドの高域信
号を取り出し、画像シフト器９に入力する。同様に、垂
直ＨＰＦ８は、被補間フィールドである現フィールドに
対して時間的に前のフィールドの高域信号を取り出し、
画像シフト器１０に入力する。即ち、垂直ＨＰＦ３は、
現フィールドに対して時間的に後の垂直方向に高い周波
数成分である後フィールド高域信号を生成する後フィー
ルド高域信号生成手段であり、垂直ＨＰＦ８は、現フィ
ールドに対して時間的に前の垂直方向に高い周波数成分
である前フィールド高域信号を生成する前フィールド高
域信号生成手段である。

【００２０】動き方向検出部４は、後述するような構成
及び方法によって、２フィールド（１フレーム）間の画
像の動き方向を示す値（以下、動き方向値）ｓと、画像
の動き量を示す値（動き量値）ｋとを求め、画像の動き
方向値ｓを画像シフト器９及び画像シフト器１０に入力
し、画像の動き量値ｋを乗算器１１及び乗算器１２に入
力する。即ち、動き方向検出部４は、現フィールドに対
して時間的に前後するフィールドから画像の動き方向と
動き量とを検出する動き方向検出手段である。

【００２１】画像シフト器９及び画像シフト器１０は、
動き方向値ｓに従って入力された高域信号を空間的に移
動させ、加算器１３に入力する。なお、画像シフト器９
で空間的に移動するフィールドと、画像シフト器１０で
空間的に移動するフィールドとは、被補間フィールドで
ある現フィールドから見て時間関係が逆なので移動方向
も逆にする。加算器１３は、空間的に移動された前後フ
ィールドの高域信号を加算し、加算器１４に入力する。

【００２２】垂直ＬＰＦ７は現フィールドの低域信号を
取り出し、加算器１４に入力する。なお、垂直ＬＰＦ７
は、現フィールドの垂直方向に低い周波数成分である現
フィールド低域信号を生成する現フィールド低域信号生
成手段である。加算器１４は加算器１３より入力された
前後フィールドの高域信号の加算結果と垂直ＬＰＦ７よ
り入力された現フィールドの低域信号とを加算し、時空
間補間信号を生成する。即ち、加算器１３と加算器１４
は、後フィールド高域信号及び前フィールド高域信号と
現フィールド低域信号とを加算して時空間補間信号を生
成する時空間補間信号生成手段である。この時空間補間
信号は、乗算器１１に入力される。

【００２３】さらに、フィールド内補間器５は、被補間
走査線の空間的に上下に位置する走査線を加算し、フィ
ールド内補間信号を生成する。フィールド内補間器５に
おいては、上記の時空間補間信号を生成する際に生じた
遅延分と同等の遅延がなされ、時空間補間信号と同期し
たフィールド内補間信号が乗算器１２に入力される。

【００２４】上記のように、乗算器１１と乗算器１２に
は動き方向検出部４から動き量値ｋが入力されている。
乗算器１１は入力された時空間補間信号に（１−ｋ）を
乗じ、乗算器１２は入力されたフィールド内補間信号に
ｋを乗じ、それぞれの乗算結果を加算器１５に入力す
る。加算器１５は、動き量値ｋによって重み付けされた
時空間補間信号及びフィールド内補間信号を加算し、最
終的な補間信号を出力端子１６より出力する。なお、乗
算器１１，１２及び加算器１５は、動き方向検出手部４
によって検出された動き量値ｋに従って、フィールド内
補間信号と時空間補間信号とを適応混合する適応混合手
段である。

【００２５】次に、図１中の動き方向検出部４の詳細な
構成及び動作について説明する。図２において、入力さ
れたインタレース画像信号は画像シフト器１７に入力さ
れ、フィールド遅延器６より出力された画像信号は画像
シフト器１８に入力される。画像シフト設定器１９は、
予め設定されている探索範囲に応じて画像シフト値を順
次発生し、画像シフト器１７と画像シフト器１８と動き
方向判定器２３に入力する。なお、探索範囲とは、画像
信号の動き方向及び動き量を検出するために、入力信号
をシフトする範囲を意味する。

【００２６】例えば、探索範囲を垂直方向に走査線単位
で±１、水平方向に画素単位で±２とすると、画像シフ
ト設定器１９は、３×５（垂直×水平）で１５個の画像
シフト値を順次発生することになる。画像シフト器１７
と画像シフト器１８は、その画像シフト値に従って入力
された画像信号を空間的に移動させ、減算器２０に入力
する。なお、画像シフト器１７で空間的に移動されるフ
ィールドと、画像シフト器１８で空間的に移動されるフ
ィールドとは、被補間フィールドである現フィールドか
ら見て時間関係が逆なので移動方向も逆にする。

【００２７】減算器２０は、画像シフト器１７の出力と
画像シフト器１８の出力とを減算することによってフレ
ーム間差をとり、その差信号（フレーム間差分値）を絶
対値化器２１に入力する。絶対値化器２１は入力された
フレーム間差分値を絶対値化し、空間ＬＰＦ２２に入力
する。空間ＬＰＦ２２は、絶対値化されたフレーム間差
分値に空間的なローパスフィルタをかけることによって
空間的な変化をスムージングし、動き方向判定器２３に
入力する。上記のように、動き方向判定器２３には画像
シフト設定器１９より各画像シフト値が入力されてお
り、動き方向判定器２３は、空間ＬＰＦ２２より入力さ
れる各画像シフト値のフレーム間差分値を比較する。

【００２８】動き方向判定器２３は、フレーム間差分値
の比較の結果、フレーム間差分値が最小値となる画像シ
フト値を画像の動き方向値ｓとして出力端子２４に出力
する。この動き方向値ｓは、上記のように、図１中の画
像シフト器９，１０に入力される。また、動き方向判定
器２３は、最小値のフレーム間差分値を非線形変換器２
５に入力する。非線形変換器２５は、入力されたフレー
ム間差分値を非線形変換し、画像の動き量値ｋとして出
力する。即ち、入力されたフレーム間差分値がノイズレ
ベル以下の場合を０とし、所定のレベル以上の場合を１
とし、その間を線形に変換する。

【００２９】この所定のレベルは、図１中のフィールド
内補間器５により得たフィールド内補間信号の方が、明
らかに加算器１４までの処理によって得た時空間補間信
号よりも適正であるとするレベルに設定する。このよう
にして得られた動き量値ｋは、出力端子２６より出力さ
れる。この動き量値ｋは、上記のように、図１中の乗算
器１１，１２に入力される。

【００３０】本発明の走査線補間回路は以上のように構
成される。そして、本発明の走査線補間回路は、図３に
示すように、動き適応補間装置の走査線補間回路とし
て、また、図４に示すように、順次走査線変換装置の走
査線補間回路として用いられる。

【００３１】まず、図３において、入力端子１より入力
された画像信号は、走査線補間回路３０，フィールド間
補間器３１，動き検出器３３に入力される。走査線補間
回路３０は、図１に示す本発明による走査線補間回路で
ある。走査線補間回路３０は動き用補間信号を生成し、
適応混合器３２に入力する。フィールド間補間器３１
は、図６で説明したように、被補間フィールドの時間的
に前後フィールドの画素Ａ，Ｂの平均値を静止用補間信
号として生成し、適応混合器３２に入力する。動き検出
器３３は画像の動きを検出する。適応混合器３２は、動
き検出器３３により検出された動きの大きさに応じて動
き用補間信号と静止用補間信号とを適応混合し、最終的
な補間信号を出力端子３４より出力する。

【００３２】次に、図４において、入力されたインタレ
ース画像信号は、走査線補間回路４０とフィールド遅延
器４１に入力される。走査線補間回路４０は、図１に示
す本発明による走査線補間回路である。走査線補間回路
４０により生成された補間信号はラインバッファ４２に
入力される。フィールド遅延器４１は入力された画像信
号に対して走査線補間回路４０により生じた遅延分と同
等の遅延をし、ラインバッファ４３に入力する。ライン
バッファ４２とラインバッファ４３は１ライン分の信号
を保持し、入力信号の２倍の速度で読み出す。ラインバ
ッファ４２，４３の出力はスイッチ４４に入力され、こ
のスイッチ４４で交互に選択されることによって順次走
査信号となり、出力端子４５より出力される。

【００３３】以上のようにして、本発明の走査線補間回
路は、画像の動き方向と大きさを検出し、そのときの画
像のスペクトルに最適な時空間補間フィルタの特性に変
化させることができるので、順次走査変換や倍密変換等
の走査線補間に際し、解像度が劣化することなく、ま
た、ラインフリッカやジャギ等のインタレース妨害も発
生しない。

【００３４】

【発明の効果】以上詳細に説明したように、本発明の走
査線補間回路は、被補間フィールドである現フィールド
の空間的に上下に位置する走査線よりフィールド内補間
信号を生成するフィールド内補間手段と、現フィールド
の垂直方向に低い周波数成分である現フィールド低域信
号を生成する現フィールド低域信号生成手段と、現フィ
ールドに対して時間的に後の垂直方向に高い周波数成分
である後フィールド高域信号を生成する後フィールド高
域信号生成手段と、現フィールドに対して時間的に前の
垂直方向に高い周波数成分である前フィールド高域信号
を生成する前フィールド高域信号生成手段と、現フィー
ルドに対して時間的に前後するフィールドから画像の動
き方向と動き量とを検出する動き方向検出手段と、動き
方向検出手段によって検出された動き方向に従って、後
フィールド高域信号をシフトする第１のシフト手段と、
動き方向検出手段によって検出された動き方向に従っ
て、前フィールド高域信号をシフトする第２のシフト手
段と、第１及び第２のシフト手段によってシフトされた
後フィールド高域信号及び前フィールド高域信号と、現
フィールド低域信号とを加算して時空間補間信号を生成
する時空間補間信号生成手段と、動き方向検出手段によ
って検出された動き量に従って、フィールド内補間信号
と時空間補間信号とを適応混合する適応混合手段とを備
えて構成したので、走査線補間するに際して画像に動き
部分が存在しても、解像度の劣化やインタレース妨害が
発生することなく、高画質な走査線補間画像を得ること
ができる。

【図面の簡単な説明】

【図１】本発明の一実施例を示すブロック図である。

【図２】図１中の動き方向検出器４の具体的構成の一例
を示すブロック図である。

【図３】本発明を動き適応補間装置に応用した例を示す
ブロック図である。

【図４】本発明を順次走査変換装置に応用した例を示す
ブロック図である。

【図５】各種走査線構造を示す図である。

【図６】フィールド間補間及びフィールド内補間を示す
図である。

【図７】従来の問題点を説明するためのフィールド間補
間及びフィールド内補間の画像のスペクトルを示す図で
ある。

【図８】本発明を説明するための画像スペクトルを示す
図である。

【符号の説明】

２，６ フィールド遅延器 ３，８ 垂直ハイパスフィルタ ４ 動き方向検出部 ５ フィールド内補間器 ７ 垂直ローパスフィルタ ９，１０ 画像シフト器 １１，１２ 乗算器 １３，１４，１５ 加算器

Claims (1)

【特許請求の範囲】
1. 【請求項１】入力された画像信号の走査線を補間する走
   査線補間回路において、 被補間フィールドである現フィールドの空間的に上下に
   位置する走査線よりフィールド内補間信号を生成するフ
   ィールド内補間手段と、 前記現フィールドの垂直方向に低い周波数成分である現
   フィールド低域信号を生成する現フィールド低域信号生
   成手段と、 前記現フィールドに対して時間的に後の垂直方向に高い
   周波数成分である後フィールド高域信号を生成する後フ
   ィールド高域信号生成手段と、 前記現フィールドに対して時間的に前の垂直方向に高い
   周波数成分である前フィールド高域信号を生成する前フ
   ィールド高域信号生成手段と、 前記現フィールドに対して時間的に前後するフィールド
   から画像の動き方向と動き量とを検出する動き方向検出
   手段と、 前記動き方向検出手段によって検出された動き方向に従
   って、前記後フィールド高域信号をシフトする第１のシ
   フト手段と、 前記動き方向検出手段によって検出された動き方向に従
   って、前記前フィールド高域信号をシフトする第２のシ
   フト手段と、 前記第１及び第２のシフト手段によってシフトされた前
   記後フィールド高域信号及び前記前フィールド高域信号
   と、前記現フィールド低域信号とを加算して時空間補間
   信号を生成する時空間補間信号生成手段と、 前記動き方向検出手段によって検出された動き量に従っ
   て、前記フィールド内補間信号と前記時空間補間信号と
   を適応混合する適応混合手段とを備えて構成したことを
   特徴とする走査線補間回路。