JPH10304401A - 映像信号変換装置、映像信号変換方法及び映像提供システム - Google Patents

映像信号変換装置、映像信号変換方法及び映像提供システム

Info

Publication number
JPH10304401A
JPH10304401A JP17274097A JP17274097A JPH10304401A JP H10304401 A JPH10304401 A JP H10304401A JP 17274097 A JP17274097 A JP 17274097A JP 17274097 A JP17274097 A JP 17274097A JP H10304401 A JPH10304401 A JP H10304401A
Authority
JP
Japan
Prior art keywords
signal
video
video signal
color difference
dct
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP17274097A
Other languages
English (en)
Other versions
JP3901287B2 (ja
Inventor
Tsutomu Uenoyama
努 上野山
Daisaku Komiya
大作 小宮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP17274097A priority Critical patent/JP3901287B2/ja
Priority to SG1998000278A priority patent/SG76534A1/en
Priority to AU54668/98A priority patent/AU694400B1/en
Priority to EP20030020255 priority patent/EP1367840A3/en
Priority to DE1998620313 priority patent/DE69820313T2/de
Priority to EP19980301220 priority patent/EP0862339B1/en
Priority to MYPI98000803A priority patent/MY127521A/en
Priority to CA 2228241 priority patent/CA2228241C/en
Priority to US09/030,819 priority patent/US5982432A/en
Priority to CNB2004100488825A priority patent/CN1315331C/zh
Priority to CNB981052940A priority patent/CN1175670C/zh
Publication of JPH10304401A publication Critical patent/JPH10304401A/ja
Application granted granted Critical
Publication of JP3901287B2 publication Critical patent/JP3901287B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/06Transmission systems characterised by the manner in which the individual colour picture signal components are combined
    • H04N11/20Conversion of the manner in which the individual colour picture signal components are combined, e.g. conversion of colour television standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/04Colour television systems using pulse code modulation
    • H04N11/042Codec means
    • H04N11/044Codec means involving transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/53Multi-resolution motion estimation; Hierarchical motion estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

(57)【要約】 【課題】 形式の異なるカラーコンポーネント信号間の
直接変換を行なう映像信号変換装置を提供する。 【解決手段】 デジタル映像信号を入力する入力手段20
1と、入力映像信号の輝度信号を格納するフレームメモ
リ301と、入力映像信号の色差信号を格納するフレーム
メモリ302、303と、入力映像信号の色差信号を変換する
色差信号変換手段401と、色差信号変換手段により変換
された色差信号を格納するフレームメモリ304、305と、
フレームメモリ301に格納された輝度信号とフレームメ
モリ304、305に格納された色差信号とを組み合わせてデ
ジタル映像信号を出力する出力手段202とを設ける。例
えば4:1:1形式のDVCフォーマットの映像信号を
4:2:0形式のMPEGフォーマットへ直接変換する
ことができる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、デジタル映像信号
の変換処理を行なう映像信号変換装置とその映像信号変
換方法、並びにそれを用いた映像提供システムに関し、
特に、コンポーネント形式や圧縮フォーマットの異なる
デジタル映像信号間の直接変換を可能にしたものでる。
【0002】
【従来の技術】近年、デジタル映像信号を扱う映像機器
が増加している。このデジタル映像信号としては、従来
からカラーコンポーネント信号が多く使われている。カ
ラーコンポーネント信号とは、映像信号を、1つの輝度
信号Yと2つの色差信号Cr、Cbとに分けて扱う信号
の形式である。カラーコンポーネント信号には、次に説
明するように、輝度信号と色差信号との標本化周波数の
比を異にする複数の形式が存在する。
【0003】第1の形式は4:4:4である。これは図
30(B)に示すように、Y1画素に対しCr、Cbが
1画素ずつ対応するものである。1フレームの情報を
4:4:4で表すと、図30(A)に示す通り、Y、C
r、Cbが同じ情報量になる。第2の形式は4:2:2
である。これは図31(B)に示す様に、横に並んだ2
画素のYに対し、Cr、Cbが1画素ずつ対応するもの
である。1フレームの情報を4:2:2で表すと、図3
1(A)に示す通り、Cr、Cbの情報量がそれぞれY
の情報量の1/2になる。
【0004】第3の形式は4:2:0である。これは図
32(B)に示す様に、縦・横2画素ずつ並んだ4画素
のYに対し、Cr、Cbが1画素ずつ対応するものであ
る。1フレームの情報を4:2:0で表すと、図32
(A)に示す通り、Cr、Cbの情報量がそれぞれYの
情報量の1/4になる。
【0005】第4の形式は4:1:1である。これは図
33(B)に示す様に、横に並んだ4画素のYに対し、
Cr、Cbが1画素ずつ対応するものである。1フレー
ムの情報を4:1:1で表すと、図33(A)に示す通
り、Cr、Cbの情報量がそれぞれYの情報量の1/4
になる。
【0006】そして近年、このようなデジタル映像信号
を民生のビデオテープレコーダ付きカメラなどのビデオ
機器や、パーソナルコンピュータで扱うことが可能とな
り、そのための機器も急速に普及している。
【0007】このようなパーソナルコンピュータや民生
ビデオ機器で扱うデジタル映像信号は、標準化された圧
縮形式で映像信号が圧縮されている。この圧縮形式の中
の2種類について、次に説明する。
【0008】第1の圧縮形式は、MPEG1、MPEG
2である。これらの圧縮形式は、コンピュータで利用す
る映像信号に多く用いられる。MPEG1、MPEG2
は共に、動き補償によるフレーム間の時間的な冗長度の
削減と、DCT(離散コサイン変換)によるフレーム内
の空間的な冗長度の削減と、可変長符号化による符号量
削減とを組み合わせた画像圧縮の規格である。MPEG
1については「ISO/IEC 11172-2 "Information technol
ogy - Coding of moving pictures and associated aud
io for digital strage media at up to about 1,5Mbit
/s - Part 2: Video"」、MPEG2については「ISO/I
EC 13818-2 "Information technology -Generic coding
of moving Pictures and associated audio informati
on - Part 2: Video"」にその内容が説明されているた
め、ここでは詳細な説明を省略する。
【0009】従来、これらMPEG1またはMPEG2
形式の映像データを生成するには、一般に図34に示す
ような過程を経ていた。即ち、アナログの信号出力しか
持たないビデオテーププレーヤ、ビデオカメラなどのア
ナログビデオ機器101の場合には、出力されたアナログ
ビデオ信号をアナログ→デジタル変換器102で変換して
非圧縮デジタルビデオ信号を生成する。また、デジタル
の信号出力を持つデジタルビデオ機器103からは直接非
圧縮のデジタルビデオ信号を出力する。
【0010】これらの非圧縮デジタルビデオ信号をMP
EGエンコーダ104に入力し、MPEGエンコーダ104が
MPEGデータを生成する、という手順により、MPE
Gデータを生成していた。
【0011】このMPEGエンコーダ104へ入力される
非圧縮のデジタルビデオ信号には、4:2:2もしくは
4:4:4のカラーコンポーネント信号が用いられる。
また、生成されるMPEG1のデータすべてと、MPE
G2のデータの多くは、4:2:0である。
【0012】第2の圧縮形式は、DV、DVC、DVC
PRO、DVcamなどである。これらは民生のビデオ
機器を含むデジタルビデオ機器に用いられる映像信号の
形式であり、信号のデータ構造や圧縮形式が殆ど同じも
のであるため、以降はこれらを纏めてDVと記述する。
DVは、1996年に制定されたビデオカセットレコー
ダ向けの規格である、「Specifications of Consumer-U
se Digital VCRs (HDDigital VCR Conference, 1996)」
に準拠した規格であり、DVの映像信号を扱うビデオ機
器は近年急速に普及している。DVの映像信号を扱うビ
デオ機器として、民生向けビデオカメラも急速に普及が
進んでおり、一般の人々がDVの映像信号を生成するこ
とも安価かつ容易に可能である。
【0013】このDVは、DCTによるフレーム内の冗
長度削減と可変長符号化による符号量削減とを組み合わ
せた圧縮形式であり、この映像信号では、さらに圧縮信
号に対して、フレーム内でマクロブロック単位にデータ
の位置を変えるシャフリングの処理が施されている。
【0014】DVの映像信号を扱うビデオ機器の入出力
に用いられる映像信号は4:2:2あるいは4:4:4
であり、この機器の内部でのDVは4:1:1である場
合が多い。
【0015】DVの映像信号は、前記のMPEG1、M
PEG2の映像信号と比較して、 1)データがフレームごとに独立しているため、フレー
ム単位のカット&ペーストなどの映像の編集を容易に行
なうことができる。
【0016】2)単位フレーム当たりの符号量が多い
(MPEGの6倍程度)ため、一般に高画質である。と
いう性質を有する。
【0017】この画質が高く編集が容易なDVの映像信
号は、コンピュータに入力することも可能になってい
る。そして、コンピュータ上で映像を扱うユーザから
は、入力・編集・蓄積には、高画質で処理の簡単なDV
データを用い、ネットワークなどを介して映像を他のコ
ンピュータに提供する場合には、符号量の少ないMPE
Gデータを用いるという使い分けの要求が高まってい
る。
【0018】従来、DVデータからMPEGデータを生
成するには、図34の構成において、DVを扱うビデオ
機器をデジタルビデオ機器103として用い、これをMP
EGエンコーダ104に接続する必要があった。そのた
め、DVのビデオ機器とMPEGエンコーダとの2つの
ハードウェアが必要となり、コストが高くなった。
【0019】
【発明が解決しようとする課題】一方、コンピュータに
入力されたDVデータを、ソフトウェアでMPEGデー
タに直接変換した場合は、変換のための専用のハードウ
ェアが不要になり、映像信号の変換を安価に実施できる
と考えられる。しかしながら、ソフトウェアによるDV
データのMPEGデータへの直接変換は、従来次のよう
な課題が存在するため、実現が困難であった。即ち、 (課題1)DVに用いられている4:1:1カラーコン
ポーネント信号をMPEGに用いられている4:2:0
カラーコンポーネント信号に直接変換する方法がない。
【0020】(課題2)DVのデコードとMPEGのエ
ンコードとをそれぞれ行なった場合、処理量が多いた
め、一般のコンピュータでは非常に長い処理時間を要す
る。
【0021】本発明は、こうした従来の課題を解決する
ものであり、形式の異なるカラーコンポーネント信号間
の直接変換を行ない、また、圧縮フォーマットが異なる
映像信号間の直接変換を行なう映像信号変換装置とその
映像信号変換方法とを提供し、さらに、利用者が求める
フォーマットの映像信号を供給する映像提供システムを
提供することを目的としている。
【0022】
【課題を解決するための手段】そこで、本発明では、映
像信号のカラーコンポーネント信号形式を変換する映像
信号変換装置を、デジタル映像信号を入力する入力手段
と、入力された映像信号の輝度信号を格納する輝度信号
フレームメモリと、入力された映像信号の色差信号を格
納する入力色差信号フレームメモリと、入力された映像
信号の色差信号を変換する色差信号変換手段と、色差信
号変換手段により変換された色差信号を格納する出力色
差信号フレームメモリと、輝度信号フレームメモリに格
納された輝度信号と出力色差信号フレームメモリに格納
された色差信号とを組み合わせてデジタル映像信号を出
力する出力手段とで構成している。
【0023】また、本発明のカラーコンポーネント信号
形式を変換する映像信号変換方法では、4:1:1形式
のカラーコンポーネント信号の色差信号に対して、この
色差信号の特定の行の画素値を選択したり、2つの行の
画素値の平均を取るなどして、縦方向の解像度を2分の
1にし、画素値を隣の列に複写したり、線形補間などを
行なうことによって横方向の解像度を2倍にしている。
【0024】また、本発明では、圧縮フォーマットが異
なるデジタル映像信号間の変換を行なう映像信号変換装
置を、映像信号を入出力する入出力手段と、入力した圧
縮されている映像信号を復号する映像復号化手段と、復
号された映像信号のコンポーネント信号形式を変換する
コンポーネント信号変換手段と、コンポーネント信号変
換手段により変換された映像信号を圧縮し符号化する映
像符号化手段とで構成し、このコンポーネント信号変換
手段を、カラーコンポーネント信号形式を変換する本発
明の映像信号変換装置で構成している。
【0025】また、この映像信号変換装置を、映像信号
を入出力する入出力手段と、入力した圧縮されている映
像信号を復号するとともに、復号の過程で映像信号のコ
ンポーネント信号形式を変換する映像復号化手段と、コ
ンポーネント信号形式が変換された映像信号を圧縮し符
号化する映像符号化手段とで構成している。
【0026】さらに、本発明では、デジタル映像をユー
ザの要求するフォーマットの映像信号で提供する映像提
供システムを、デジタル信号を伝送するネットワーク
と、ネットワークを介してデジタル映像を取得し、取得
したデジタル映像を再生する映像再生端末と、デジタル
映像を蓄積して映像再生端末に提供する映像提供部と、
映像提供部にネットワークを介してデジタル映像を入力
する映像入力部とで構成し、映像提供部には、ネットワ
ークに接続してデジタル映像の入出力を行なう通信手段
と、デジタル映像を蓄積する映像蓄積手段と、デジタル
映像の圧縮フォーマットを変換する映像信号変換手段
と、通信手段、映像蓄積手段及び映像信号変換手段を制
御する制御手段とを設け、この映像信号変換手段を、圧
縮フォーマットが異なるデジタル映像信号間の変換を行
なう本発明の映像信号変換装置で構成している。
【0027】そのため、カラーコンポーネント信号形式
を変換する映像信号変換装置は、本発明の映像信号変換
方法を用いて、4:1:1形式のカラーコンポーネント
信号を4:2:0形式のカラーコンポーネント信号に直
接変換することができ、また、圧縮フォーマットが異な
るデジタル映像信号間の変換を行なう映像信号変換装置
は、4:1:1形式のDVCフォーマットの映像信号
を、4:2:0形式のMPEGフォーマットの映像信号
に直接変換することができる。
【0028】また、この装置を用いた映像提供システム
は、映像再生端末の再生能力に応じたフォーマットで映
像を提供することができる。
【0029】
【発明の実施の形態】本発明の請求項1に記載の発明
は、デジタル映像信号のカラーコンポーネント信号形式
を変換する映像信号変換装置であって、デジタル映像信
号を入力する入力手段と、入力された映像信号の輝度信
号を格納する輝度信号フレームメモリと、入力された映
像信号の色差信号を格納する入力色差信号フレームメモ
リと、入力された映像信号の色差信号を変換する色差信
号変換手段と、色差信号変換手段により変換された色差
信号を格納する出力色差信号フレームメモリと、輝度信
号フレームメモリに格納された輝度信号と出力色差信号
フレームメモリに格納された色差信号とを組み合わせて
デジタル映像信号を出力する出力手段とを設けたもので
あり、カラーコンポーネント信号の形式を直接変換する
ことができる。
【0030】請求項2に記載の発明は、前記色差信号変
換手段が、入力された映像信号の色差信号を4:1:1
コンポーネント信号形式から4:2:0コンポーネント
信号形式の色差信号に変換するようにしたものであり、
DVCフォーマットの映像信号をMPEGフォーマット
の映像信号に変換する場合のコンポーネント信号の形式
を変換することができる。
【0031】請求項3に記載の発明は、前記色差信号変
換手段が、入力色差信号フレームメモリに格納された色
差信号から縦方向に1画素おきに間引いた画素を取り出
して縦方向の画素数を2分の1にし、取り出した画素を
横方向に複写して横方向の画素数を2倍にするようにし
たものであり、色差信号の変換に特別の演算が不要であ
るため、処理負担が少なくて済む。
【0032】請求項4に記載の発明は、前記色差信号変
換手段が、入力色差信号フレームメモリに格納された色
差信号の縦方向に隣り合う2つの画素値の平均値を求
め、これを1つの画素値とすることにより縦方向の画素
数を2分の1にし、この平均値である1つの画素値を横
方向に複写して横方向の画素数を2倍にするようにした
ものであり、変換の際の演算量が少なく、変換に要する
処理負担が小さい。
【0033】請求項5に記載の発明は、前記色差信号変
換手段が、入力色差信号フレームメモリに格納された色
差信号の縦方向に隣り合う2つの画素値の平均値を求
め、これを1つの画素値とすることにより縦方向の画素
数を2分の1にし、この平均値である1つの画素値と、
横方向に隣り合う前記平均値である1つの画素値との平
均値を画素値として横方向に補間することにより横方向
の画素数を2倍にするようにしたものであり、画素間の
画素値の変化が滑らかとなり、データ圧縮のためにDC
Tを施した場合に、圧縮効率が向上する。
【0034】請求項6に記載の発明は、前記色差信号変
換手段が、入力色差信号フレームメモリに格納された色
差信号の縦方向に隣り合う2つの画素値の平均値を求
め、横方向に隣り合う2つの前記平均値を用いて横方向
の線形補間を行なうことにより、横方向の画素数を2倍
にし、縦方向の画素数を2分の1にするようにしたもの
であり、画素間の画素値の変化がより滑らかとなり、D
CTを施した場合の圧縮効率が一層向上する。
【0035】請求項7に記載の発明は、入力色差信号フ
レームメモリ内の指定された色差信号の画素に対応する
輝度信号の画素値を輝度信号フレームメモリから参照す
る輝度信号参照手段を設け、色差信号変換手段が、輝度
信号参照手段を介して参照した輝度信号の値を利用し
て、色差信号の変換を行なうようにしたものであり、自
然画像では色の変化と輝度の変化とが関係しているた
め、輝度を加味して色差信号の変換を行なうことによ
り、自然な色の変化を示す映像への変換が可能となる。
【0036】請求項8に記載の発明は、色差信号変換手
段が、入力色差信号フレームメモリの横方向に隣り合う
2つの画素の間に、この2つの画素に対応する輝度信号
の画素値の比に基づいて色差信号の画素値を線形補間
し、横方向の画素数を2倍にするようにしたものであ
り、補間する画素の色差信号が隣り合う画素の輝度を参
考にして決められる。
【0037】請求項9に記載の発明は、色差信号変換手
段が、入力色差信号フレームメモリに格納された色差信
号の縦方向に隣り合う2つの画素値の平均値を求め、こ
れを1つの画素値とすることにより縦方向の画素数を2
分の1にし、横方向に隣り合う2つの平均値の画素の間
に、この2つの平均値の算出に用いた画素に対応する輝
度信号の画素値の比に基づいて色差信号の画素値を線形
補間し、横方向の画素数を2倍にするようにしたもので
あり、横方向の画素数を増やすために内挿する画素の画
素値を輝度信号の変化と関連付けることができる。
【0038】請求項10に記載の発明は、色差信号変換
手段が、入力色差信号フレームメモリに格納された色差
信号の横方向に隣り合う2つの画素に対して、この2つ
の画素に対応する輝度信号の画素値の比に比例した線形
補間を行なうことにより、横方向の色差信号の画素数を
2倍にするようにしたものであり、横方向のすべての画
素の画素値を、輝度信号を利用した線形補間で求めるこ
とにより、輝度と関連付けることができる。
【0039】請求項11に記載の発明は、色差信号変換
手段が、入力色差信号フレームメモリに格納された色差
信号の縦、横2つずつから成る4つの画素を、横方向に
は1画素分ずつずらしながら、縦方向には2画素分ずつ
ずらしながら順次選択し、選択した4つの画素に対応す
る輝度信号の画素値の比に比例した線形補間を行なうこ
とにより、横方向の色差信号の画素数を2倍にし、縦方
向の色差信号の画素数を2分の1にするようにしたもの
であり、縦方向及び横方向の色差信号の画素値を、輝度
信号の変化と関連付けることができる。
【0040】請求項12に記載の発明は、デジタル映像
信号の4:1:1形式のカラーコンポーネント信号を
4:2:0形式のカラーコンポーネント信号に変換する
映像信号変換方法であって、4:1:1形式のカラーコ
ンポーネント信号の色差信号に対して、この色差信号の
2n行または2n+1行(但し、nは整数)のいずれか
一方の画素値を用いることによって、縦方向の解像度を
2分の1にし、前記画素値を左または右隣りの列に複写
することによって、横方向の解像度を2倍にするように
したものであり、特別の演算を行なうことなく、コンポ
ーネント信号形式の変換が可能である。
【0041】請求項13に記載の発明は、同様の映像信
号変換方法において、4:1:1形式のカラーコンポー
ネント信号の色差信号に対して、この色差信号の2n行
と2n+1行、または2n+1行と2(n+1)行の縦
方向に隣り合う2つの画素値の平均値を求めることによ
って、縦方向の解像度を2分の1にし、この平均値を左
または右隣りの列に複写することによって、横方向の解
像度を2倍にするようにしたものであり、少ない演算量
でコンポーネント信号の形式を変換することができる。
【0042】請求項14に記載の発明は、同様の映像信
号変換方法において、4:1:1形式のカラーコンポー
ネント信号の色差信号に対して、この色差信号の2n行
と2n+1行、または2n+1行と2(n+1)行の縦
方向に隣り合う2つの画素値の平均値を求めることによ
って、縦方向の解像度を2分の1にし、横方法に隣り合
う2つの平均値の平均値を求め、これを画素値として隣
り合う2つの平均値の間に補間することによって、横方
向の解像度を2倍にするようにしたものであり、画素間
の画素値の変化を滑らかにすることができる。
【0043】請求項15に記載の発明は、同様の映像信
号変換方法において、4:1:1形式のカラーコンポー
ネント信号の色差信号に対して、この色差信号の2n行
と2n+1行、または2n+1行と2(n+1)行の縦
方向に隣り合う2つの画素値の平均値を求め、横方向に
隣り合うこの2つの平均値を用いて線形補間を行なうこ
とによって、横方向の解像度を2倍にし、縦方向の解像
度を2分の1にするようにしたものであり、画素間の画
素値の変化をより滑らかにすることができる。請求項1
6に記載の発明は、同様の映像信号変換方法において、
4:1:1形式のカラーコンポーネント信号の色差信号
に対して、この色差信号の2n行と2n+1行、または
2n+1行と2(n+1)行の縦方向に隣り合う2つの
画素値の平均値を求めることによって、縦方向の解像度
を2分の1にし、横方向に隣り合う2つのこの平均値の
算出に用いた画素に対応する輝度信号の画素値の比に基
づいて色差信号を線形補間し、得られた画素値を2つの
平均値の間に内挿することによって、横方向の解像度を
2倍にするようにしたものであり、横方向に内挿する画
素の画素値を、輝度信号の変化に関連付けているため、
自然で精細な映像への変換が可能となる。
【0044】請求項17に記載の発明は、同様の映像信
号変換方法において、4:1:1形式のカラーコンポー
ネント信号の色差信号に対して、この色差信号の2n行
と2n+1行、または2n+1行と2(n+1)行の上
及び隣接する列の上で互いに隣り合う合計4つの画素を
順次選択し、この4つの画素に対応する輝度信号の画素
値の比に比例した線形補間を行なうことにより、色差信
号の横方向の解像度を2倍にし、縦方向の解像度を2分
の1にするようにしたものであり、縦方向及び横方向の
色差信号の画素値を、輝度信号の変化に関連付けること
ができるため、より自然で精細な映像への変換が可能と
なる。
【0045】請求項18に記載の発明は、圧縮フォーマ
ットが異なるデジタル映像信号間の変換を行なう映像信
号変換装置であって、映像信号を入出力する入出力手段
と、入力した圧縮されている映像信号を復号する映像復
号化手段と、復号された映像信号のコンポーネント信号
形式を変換するコンポーネント信号変換手段と、コンポ
ーネント信号変換手段により変換された映像信号を圧縮
し符号化する映像符号化手段とを設け、コンポーネント
信号変換手段を、請求項1乃至11に記載の映像信号変
換装置で構成したものであり、入力した圧縮フォーマッ
トの映像信号が復号され、次いでコンポーネント信号形
式が変換され、その後、所定の圧縮フォーマットに変換
される。
【0046】請求項19に記載の発明は、前記映像復号
化手段に、入力された映像信号に対して情報の並べ替え
を行なう前処理手段と、前処理手段により並び替えられ
た情報を可変長復号する可変長復号化手段と、可変長復
号化手段により可変長復号された情報を逆量子化する逆
量子化手段と、逆量子化手段により逆量子化された情報
に対して逆DCT処理を施す逆DCT処理手段とを設
け、前記映像符号化手段に、コンポーネント信号変換手
段の出力を格納する入力バッファと、入力バッファに格
納された情報に対してDCT処理や量子化を行なうDC
T圧縮手段と、DCT圧縮手段の出力を非圧縮情報に伸
張する逆DCT伸長手段と、逆DCT伸長手段の出力を
格納するフレームメモリと、動きベクトルを求めフレー
ム間差分を求める動き予測手段と、符号化の種類を選択
する符号選択手段と、符号選択手段の出力に対して可変
長符号化処理を施す可変長符号化手段と、最終的な圧縮
フォーマットの信号を生成する構造符号化手段と、映像
符号化手段の各手段の動作を制御する符号化制御手段と
を設けたものであり、DVCフォーマットなどの直交変
換圧縮されたデジタル映像信号をMPEGフォーマット
などの動き補償付き直交変換圧縮されたデジタル映像信
号に直接変換することができる。
【0047】請求項20に記載の発明は、圧縮フォーマ
ットが異なるデジタル映像信号間の変換を行なう映像信
号変換装置であって、映像信号を入出力する入出力手段
と、入力した圧縮されている映像信号を復号するととも
に、復号の過程で映像信号のコンポーネント信号形式を
変換する映像復号化手段と、コンポーネント信号形式が
変換された映像信号を圧縮し符号化する映像符号化手段
とを設けたものであり、入力した圧縮フォーマットの映
像信号が復号と同時にコンポーネント信号形式が変換さ
れ、次いで、所定の圧縮フォーマットに変換される。
【0048】請求項21に記載の発明は、映像復号化手
段に、入力された映像信号に対して情報の並べ替えを行
なう前処理手段と、前処理手段により並び替えられた情
報を可変長復号する可変長復号化手段と、可変長復号化
手段により可変長復号された情報を逆量子化して輝度信
号及び色差信号のDCT係数を再生する逆量子化手段
と、再生された色差信号のDCT係数を間引き、または
補間してDCT係数の解像度を変更するDCT係数変換
手段と、逆量子化手段から出力された輝度信号のDCT
係数とDCT係数変換手段から出力された色差信号のD
CT係数とに対して逆DCT処理を施す逆DCT処理手
段とを設け、映像符号化手段に、映像復号化手段の出力
を格納する入力バッファと、入力バッファに格納された
情報に対してDCT処理や量子化を行なうDCT圧縮手
段と、DCT圧縮手段の出力を非圧縮情報に伸張する逆
DCT伸長手段と、逆DCT伸長手段の出力を格納する
フレームメモリと、動きベクトルを求めフレーム間差分
を求める動き予測手段と、符号化の種類を選択する符号
選択手段と、符号選択手段の出力に対して可変長符号化
処理を施す可変長符号化手段と、最終的な圧縮フォーマ
ットの信号を生成する構造符号化手段と、映像符号化手
段の各手段の動作を制御する符号化制御手段とを設けた
ものであり、映像復号化手段において、コンポーネント
形式の変換が復号処理の中間情報であるDCT係数の段
階で行なわれる。この映像復号化手段で復号化された非
圧縮コンポーネント信号を映像符号化手段が圧縮符号化
することにより、DVCフォーマットなどのデジタル映
像信号からMPEGフォーマットなどのデジタル映像信
号への直接変換が可能になる。
【0049】請求項22に記載の発明は、DCT係数変
換手段が、色差信号のDCT係数で構成されるDCTブ
ロックから、低周波部分を含む縦方向の半分のDCT係
数を抜き出し、抜き出したDCT係数の横方向に値が0
のDCT係数を同数だけ付け足して、元のDCTブロッ
クに比べて、縦方向のDCT係数の数が半分で、横方向
のDCT係数の数が2倍のDCTブロックを生成するよ
うにしたものであり、このように色差信号のDCT係数
における解像度を変換することにより、4:1:1形式
の映像信号を4:2:0形式の非圧縮映像信号に変換す
ることが可能になる。
【0050】請求項23に記載の発明は、映像復号化手
段が、入力したDCT処理が施された圧縮映像信号の輝
度信号のDCT係数を映像符号化手段に送るように構成
し、映像符号化手段に、映像復号化手段から送られたD
CT係数を格納するDCT係数バッファと、DCT係数
バッファに格納されたDCT係数に対して低周波成分か
ら段階的に逆DCTを施し、解像度の異なる複数の画像
である階層画像を生成する階層的逆DCT処理手段とを
設け、動き予測手段が、階層的逆DCT処理手段で生成
された階層画像を用いて動きベクトルを求めるようにし
たものであり、入力映像信号の復号過程で得られる輝度
信号のDCT係数を、映像符号化手段における階層画像
の生成に利用することによって、処理量及び処理時間の
短縮を図ることができる。
【0051】請求項24に記載の発明は、映像復号化手
段が、入力したDCT処理が施された圧縮映像信号の輝
度信号のDCT係数を映像符号化手段に送るように構成
し、映像符号化手段に、映像復号化手段から送られたD
CT係数を格納するDCT係数バッファと、DCT係数
バッファに格納されたDCT係数の一部に対して一次元
の逆DCT処理を施し、2方向の一次元情報を生成する
1次元逆DCT処理手段とを設け、動き予測手段が、1
次元逆DCT処理手段で生成された2方向の一次元情報
を用いて動きベクトルを求めるようにしたものであり、
動きベクトルの検出に要する演算量を削減することがで
きる。
【0052】請求項25に記載の発明は、この映像信号
変換装置が、DVCフォーマットの映像信号を入力し、
MPEGフォーマットの映像信号に変換して出力するよ
うにしたものであり、高画質なDVCフォーマットの映
像信号を、通信に適したMPEGフォーマットの映像信
号に変換することができる。
【0053】請求項26に記載の発明は、DVCフォー
マットの映像信号をMPEGフォーマットの映像信号に
変換する映像信号変換方法であって、DVCフォーマッ
トの映像信号の復号処理中に再生する色差信号のDCT
係数を間引き、または補間してDCT係数の解像度を変
換し、解像度を変換した色差信号のDCT係数と輝度信
号のDCT係数とに逆DCT処理を施して4:2:0形
式の非圧縮コンポーネント信号を復号し、この非圧縮コ
ンポーネント信号をMPEGフォーマットの映像信号に
符号化するようにしたものであり、DVCフォーマット
の復号と併せて、信号形式が4:2:0形式に変換され
るため、少ない処理工程でDVCフォーマットからMP
EGフォーマットへの変換が可能になる。
【0054】請求項27に記載の発明は、DCT係数の
解像度の変換に際して、色差信号のDCT係数で構成さ
れるDCTブロックから、低周波部分を含む縦方向の半
分のDCT係数を抜き出し、抜き出したDCT係数の横
方向に値が0のDCT係数を同数だけ付け足して、元の
DCTブロックに比べて、縦方向のDCT係数の数が半
分で、横方向のDCT係数の数が2倍のDCTブロック
を生成するようにしたものであり、色の変化が滑らかな
画質に変換することができる。
【0055】請求項28に記載の発明は、デジタル映像
をユーザの要求するフォーマットの映像信号で提供する
映像提供システムであって、デジタル信号を伝送するネ
ットワークと、ネットワークを介してデジタル映像を取
得し、取得したデジタル映像を再生する映像再生端末
と、デジタル映像を蓄積して映像再生端末に提供する映
像提供部と、映像提供部にネットワークを介してデジタ
ル映像を入力する映像入力部とを設け、映像提供部に、
ネットワークに接続してデジタル映像の入出力を行なう
通信手段と、デジタル映像を蓄積する映像蓄積手段と、
デジタル映像の圧縮フォーマットを変換する映像信号変
換手段と、通信手段、映像蓄積手段及び映像信号変換手
段を制御する制御手段とを設け、映像信号変換手段を、
請求項18乃至25の映像信号変換装置によって構成し
たものであり、映像再生端末に対して、その要求するフ
ォーマットのデジタル映像を提供することができる。
【0056】請求項29に記載の発明は、映像信号変換
手段が、入力したデジタル映像のフォーマットを変換
し、映像蓄積手段に、1つのデジタル映像に関して各種
のフォーマットの映像信号が蓄積されるようにしたもの
であり、映像再生端末が要求するフォーマットのデジタ
ル映像を、映像蓄積手段に蓄積されている中から選んで
提供することができる。
【0057】請求項30に記載の発明は、映像信号変換
手段が、映像蓄積手段から読出されて映像再生端末に出
力されるデジタル映像のフォーマットを、ユーザの要求
に応じて変換するようにしたものであり、蓄積されてい
るデジタル映像のフォーマットが、そのデジタル映像を
映像再生端末に送出する際に、リアルタイムで変換され
る。
【0058】以下、本発明の実施の形態について図面を
用いて説明する。
【0059】(第1の実施の形態)第1の実施形態で
は、4:1:1コンポーネント信号を4:2:0コンポ
ーネント信号に直接変換する映像信号変換装置とその映
像信号変換方法について説明する。
【0060】この装置は、機能ブロックとして、図1に
示すように、4:1:1コンポーネント映像信号が入力
する入力手段201と、入力したコンポーネント信号のY
信号を格納するYフレームメモリ301と、入力したコン
ポーネント信号のCr信号を格納する入力Crフレーム
メモリ302と、入力したコンポーネント信号のCb信号
を格納する入力Cbフレームメモリ303と、出力する映
像信号の形式に合わせて色差信号を変換する色差信号変
換手段401と、変換されたCr信号を格納する出力Cr
フレームメモリ304と、変換されたCb信号を格納する
出力Cbフレームメモリ305と、4:2:0コンポーネ
ント信号を出力する出力手段202とを備えている。
【0061】次に、この装置の動作を説明する。全体の
処理の流れを図2に示す。この装置は、この図2の流れ
で映像信号の変換を行なう。
【0062】ステップ101:最初に、入力手段201が、1
フレーム分の4:1:1コンポーネント映像信号を入力
し、Y信号をYフレームメモリ301に、Cr信号、Cb
信号を、それぞれ入力Crフレームメモリ302、入力C
bフレームメモリ303に格納する。
【0063】ステップ102:次に色差信号変換手段401
が、入力Crフレームメモリ302と入力Cbフレームメ
モリ303とに格納された色差信号を4:2:0の色差信
号に変換し、変換結果を出力Crフレームメモリ304と
出力Cbフレームメモリ305とに格納する。
【0064】ステップ103:次に出力手段102が、Yフレ
ームメモリ301に格納されたY信号と出力Crフレーム
メモリ304に格納されたCr信号と出力Cbフレームメ
モリ305に格納されたCb信号とを組み合わせて4:
2:0コンポーネント信号として出力する。
【0065】ステップ104:そして、処理したフレーム
が、動画の最終フレームであれば処理を終了し、そうで
なければ、次のフレームに対して同様の処理を行なう
(ステップ101に戻る)。
【0066】上記の処理における色差信号変換処理(ス
テップ102)について、次に説明する。
【0067】図3は、(A)コンポーネント信号のY信
号の一部、(B)そのY信号に対応する4:1:1のC
r、Cb信号、(C)そのY信号に対応する4:2:0
のCr、Cb信号を示す図である。図3(A)におい
て、Yx,yは、フレームの左上を始点としたときの画素
単位のX座標、Y座標がそれぞれx,yの画素における
輝度値を表す。即ち、図3(A)に示したY信号は、フ
レームの左上から縦4画素、横8画素の部分を取り出し
て示したものである。また、図3(B)、(C)におい
て、Ui x,y、はCrフレーム中のX座標、Y座標がそれ
ぞれx,yの画素における色差Crの値を示し、Vi x,y
はCbフレーム中のX座標、Y座標がそれぞれx,yの
画素における色差Cbの値を示す。また、Ui x,y
i x,y のうち、iが1のものは入力フレームの値、即
ち4:1:1の色差信号を表し、iが2のものは出力フ
レームの値、即ち4:2:0の色差信号を表す。
【0068】ここで説明する色差信号変換処理(ステッ
プ102)は、図3におけるU1、V1からU2、V2を求め
る処理に他ならない。この処理は複数の方法によって行
なうことができる。以下にその方法をそれぞれ説明す
る。
【0069】以下の説明では、図3を用いて、フレーム
の一部の色差信号の変換を例として示すが、同様の処理
をフレームの他の部分に施すことにより、フレーム全体
について色差信号の変換が可能であることは明らかであ
る。
【0070】(色差信号変換の方法1)第1の方法は、
入力の色差信号に対して、縦方向の解像度を、入力の色
差信号の中の奇数、あるいは偶数番目の色差信号の値を
用いることで半減させ、横方向の解像度を、左側の色差
信号の値をそのまま用いることで2倍にするものであ
る。即ち、この変換方法によれば、図3のU2、V2は次
の式(数式1)による計算で求めることができる。 U2 2x,y = U2 2x+1,y = U1 x,2y V2 2x,y = V2 2x+1,y = V1 x,2y (数式1) ここで、xとyは正の整数値である。
【0071】ところで、一般に、DVフォーマットで記
録される4:1:1の色差信号は、DVフォーマットで
記録するデジタルビデオ機器に入力される4:2:2の
色差信号の隣り合う2つの色差信号値の右側を取り除い
て生成される。この例を図4に示す。図4(A)は、こ
のデジタルビデオ機器に入力されるY信号を示し、図4
(B)は、それに対応する4:2:2の色差信号を示し
ている。このとき、DVフォーマットとして記録される
4:1:1の色差信号は、図4(C)に示すように、図
4(B)の色差信号を横方向に1つおきに間引いたもの
となる。
【0072】この実施形態の色差信号変換の第1の方法
は、DVフォーマットの映像信号の元となる4:2:2
信号から考えた場合に、その情報を加工せず用いている
と見ることができる(図3(C)のU2 0,0、U2 2,0は、
それぞれ図4(B)のU1 0,0、U1 2,0をそのまま用いる
ことになる)から、4:2:2信号に忠実な色情報を変
換後の信号に残すことができるという有効な性質を有す
る。
【0073】また、この変換方法では、色差信号の変換
に演算が不要であるため、処理の負担を最も軽減できる
という有効な性質も有する。
【0074】(色差信号変換の方法2)第2の方法は、
入力の色差信号に対して、縦方向の解像度を、縦に隣り
合う2つの色差信号の平均を求めることで半減させ、横
方向の解像度を、左側の色差信号の値をそのまま用いる
ことで2倍にするものである。即ち、この変換方法によ
れば、図3のU2、V2は次の式(数式2)による計算で
求めることができる。 U2 2x,y = U2 2x+1,y = (U1 x,2y + U1 x,2y+1)/2 V2 2x,y = V2 2x+1,y = (V1 x,2y + V1 x,2y+1)/2 (数式2) ここで、xとyは正の整数値である。
【0075】この変換方法は、第1の変換方法と比較す
ると、全ての入力された色差信号を用いて変換を行なっ
ており、入力の色差信号にノイズが加わっている場合、
変換後の色差信号に対するノイズの影響を軽減するとい
う有効な性質を有する。また、この変換方法は、入力の
色差信号の情報を全て用いた中では、本来の情報をでき
る限り保存しており、画質的に本来の画像に忠実な高い
画質が得られるという有効な性質を有する。また、計算
が簡単なため、変換に要する処理負担を軽減するという
有効な性質を有する。
【0076】(色差信号変換の方法3)第3の方法は、
入力の色差信号に対して、縦方向の解像度を第2の方法
と同様にして半減させ、また、横方向の解像度を、横に
隣り合う2つの色差信号の平均値をその中間に内挿する
色差信号の値とすることで2倍にする方法である。即
ち、この変換方法によれば、図3のU2、V2は次の式
(数式3)による計算で求めることができる。 U2 2x,y = (U1 x,2y + U1 x,2y+1)/2 U2 2x+1,y = (αU2 2x,y + (1-α)U2 2(x+1),y)/2 V2 2x,y = (V1 x,2y + V1 x,2y+1)/2 V2 2x+1,y = (αV2 2x,y + (1-α)V2 2(x+1),y)/2 (数式3) ここで、xとyは正の整数値である。
【0077】また、αは0から1までの間の任意の値を
持つ定数である。例えばαに0.5を用いた場合、内挿
される色差信号は、その両隣の色差信号のちょうど平均
となる。なお、この変換方法において、色差信号をフレ
ームの右端において補間する場合には、(数式3)によ
る内挿が適用できない。このよう部分は、左側の色差信
号の値をそのまま用いるなどの方法により外挿を行な
う。
【0078】この変換手法は、例えば図3のU2 0,0
2 2,0の値が大きく異なる場合でも、U2 1,0にその間の
値が内挿されるため、変化が滑らかになり、DCTを施
した場合に、低周波部分に情報がより集中するため、圧
縮効率が向上するという有効な性質を有する。
【0079】(色差信号変換の方法4)第4の方法は、
入力する色差信号の縦方向及び横方向の値を合成して求
めた中間値を色差信号の出力とし、その合成における色
差信号の配合比率を違えた中間値を横方向に補間する方
法である。即ち、この変換方法によれば、図3のU2
2は次の式(数式4)による計算で求めることができ
る。 U2 2x,y =(3A + B)/4 U2 2x+1,y =(A + 3B)/4 A = (U1 x,2y + U1 x,2y+1)/2 B = (U1 x+1,2y + U1 x+1,2y+1)/2 V2 2x,y = (C + 3D)/4 V2 2x+1,y = (3C + D)/4 C = (V1 x,2y + V1 x,2y+1)/2 D = (V1 x+1,2y + V1 x+1,2y+1)/2 (数式4) ここで、xとyは正の整数値である。
【0080】この変換方法は、出力する全ての色差信号
を線形補間により求めているため、特に色差信号の変化
が滑らかであり、DCTを用いた圧縮を行なう際に、圧
縮効率が向上するという有効な性質を有する。
【0081】次に、上記の4種類の変換方法により色差
信号を変換する具体例を示す。これら4種類の変換方法
のいずれを用いた場合でも、2種類の色差信号Cr、C
bは同様に変換することができるため、以下に示す具体
例ではCr信号の変換のみについて説明する。Cb信号
について変換を行なった場合でも、以下に示す具体例と
同様の結果を得ることができることは明らかである。
【0082】図5、図6及び図7は、異なる4:1:1
のCr信号が入力したとき、それぞれの変換方法で、そ
の変換結果がどのように変わるかを示している。図5、
図6及び図7において、(A)は入力された4:1:1
のCr信号であり、(B)は第1の変換方法により変換
した4:2:0のCr信号、(C)は第2の変換方法に
より変換した4:2:0のCr信号、(D)は第3の変
換方法により変換した4:2:0のCr信号、また、
(E)は第4の変換方法により変換した4:2:0のC
r信号を示している。それぞれの例において、個々の升
目が1つのCr信号の画素を示し、升目の中の数値が画
素値を表す。また、これらのCr信号は、全て、Cr信
号のフレームの左上端から一部を抜き出したものとす
る。即ち、全ての例において、左上の升目がCr信号の
フレームの左上端の画素を表す。これらの例の変換結果
は、それぞれの変換方法の式により求めた値であるが、
小数点以下は四捨五入して整数値で表している。なお、
画素値として「−」の記号が記入されている画素は、画
素値がこの例にない他の部分の画素の値により変化する
ため、この例では確定しないことを表している。
【0083】上記3種類の例における、各変換方法によ
る変換結果の特徴を次に述べる。
【0084】第1の変換方法及び第2の変換方法による
変換結果では、横に隣り合う2つの画素値が全て等しく
なる。
【0085】さらに、第1の変換方法による変換結果で
は、入力のCr信号の中で参照しないライン(水平方向
の画素の並び)、即ち、この具体例では2番目及び4番
目のラインの画素値は、出力されるCr信号の画素値に
影響を与えない。例えば、図5の入力Cr信号(A)の
1ライン目と図6の入力Cr信号(A)の1ライン目と
図7の入力信号(A)の1ライン目の画素値は全て同じ
であり、それぞれ2ライン目の画素値は異なる。このよ
うな3種類の入力に対して、第1の変換方法では、その
変換結果がすべて同じになる。即ち、図5、図6及び図
7の第1の変換方法による変換結果(B)において、1
ライン目の画素値は全て同じになっている。
【0086】また、第3の変換方法による変換結果で
は、横方向に偶数番目の画素値が、左右の画素値の間の
値で、かつ左右の画素値から常に一定の比率(この具体
例では左右とも0.5)の値が内挿されている。また、
その左右の画素値、即ち横方向に奇数番目の画素値は、
入力信号の縦に隣り合う2つの画素値の平均値となって
いる。この2点が第3の変換方法の特徴である。
【0087】また、第4の変換方法では、入力の画素値
がそのまま反映されない点に特徴がある。これを、図6
を用いて説明する。入力信号(A)において、上半分に
注目した場合、左側の縦2画素の平均値は0と200の
平均で100、右側の縦2画素の平均値は100と0の
平均で50となり、左側の平均値と右側の平均値との差
は50となる。
【0088】一方、下半分に注目した場合、左側の縦2
画素の平均値は100と0の平均で50、右側の縦2画
素の平均値は0と0の平均で0となり、左側の平均値と
右側の平均値との差は、上半分と同様50となる。
【0089】このように差が等しい入力に対して、例え
ば第3の変換方法による変換では2つの変換結果は同じ
差となる。具体的には図6(D)において、左上端の画
素値は100、その右隣の画素値は75でその差は25
である。そして、その下側のラインにおいても、左端が
50、その右隣が25で、その差は25となる。
【0090】一方、第4の変換方法による変換結果にお
いては、上側が88と63でその差が25であるのに対
し、下側が44と31でその差が13となる。
【0091】以上説明したように、この実施形態に示し
た装置と変換の方法とを用いれば、4:1:1コンポー
ネント信号を直接4:2:0信号に変換することが可能
である。
【0092】(第2の実施の形態)第2の実施形態で
は、4:1:1コンポーネント信号を4:2:0コンポ
ーネント信号に変換する場合に、対応する画素の輝度信
号(Y信号)の値を利用して色差信号の変換を行なう映
像信号変換装置とその映像信号変換方法について説明す
る。
【0093】この装置は、図8に示すように、Yフレー
ムメモリ301からY信号を読み出して色差信号変換手段4
01に提供するY信号参照手段402を備えている。その他
の構成は第1の実施形態(図1)と変わりがない。
【0094】次に、この装置の動作を説明する。全体の
処理の流れは、図2に示す、第1の実施形態の処理の流
れと同一である。全体の処理の中で、色差信号変換処理
(ステップ102)が第1の実施形態と異なる。この装置
では、色差信号変換処理(ステップ102)において、色
差信号変換手段402が、Y信号参照手段402を介して、変
換すべき色差信号に対応する輝度信号の画素値を参照
し、それを色差信号の変換に用いる。
【0095】次に、この装置における上記色差信号変換
処理(ステップ102)の2種類の変換方法を、図3に示
すコンポーネント信号の一部を用いて具体的に説明す
る。
【0096】(色差信号変換の方法5)第1の方法は、
入力の色差信号に対して、縦方向の解像度を、入力の色
差信号の中の奇数、あるいは偶数番目の色差信号の値を
用いることで半減させ、横方向の解像度を、入力の各画
素の右側に値を内挿することにより2倍にするものであ
る。そして、この方法においては、右側に内挿する画素
の値を求める際に、参照する左右の色差信号の画素に対
応する輝度信号を用いて、参照する比を決定する。即
ち、この変換方法によれば、図3のU2、V2は次の式
(数式5)による計算で求めることができる。 U2 2x,y = (U1 x,2y + U1 x,2y+1)/2 U2 2x+1,y = (U1 x,2y×B)/2(A+B) + (U1 x+1,2y×A)/2(A+B) + (U1 x,2y+1×D)/2(C+D) + (U1 x+1,2y+1×C)/2(C+D) V2 2x,y = (V1 x,2y + V1 x,2y+1)/2 V2 2x+1,y = (V1 x,2y×B)/2(A+B) + (V1 x+1,2y×A)/2(A+B) + (V1 x,2y+1×D)/2(C+D) + (V1 x+1,2y+1×C)/2(C+D) A = ((Y4x,2y + Y4x+1,2y) - Y4x+3,2y))2 B = ((Y4(x+1),2y + Y4(x+1),2y) - (Y4(x+1)+2,2y + Y4(x+1)+3,2y))2 C = ((Y4x,2y+1 + Y4x+1,2y+1) - (Y4x+2,2y+1 + Y4x+3,2y+1))2 D = ((Y4(x+1),2y+1 + Y4(x+1),2y+1) - (Y4(x+1)+2,2y+1 + Y4(x+1)+3,2y+1))2 (数式5) ここで、xとyは正の整数値である。
【0097】自然画像においては、一般に、輝度情報と
色情報との間に相関がある場合が多い。即ち、色が変化
する場合には、輝度も変化する場合が多い。このような
自然画像の特徴を考慮した場合、この変換方法は、変換
結果として自然で、より精細な色差信号が得られるとい
う有効な性質を有する。
【0098】(色差信号変換の方法6)第2の方法は、
第1の実施形態の第4の変換方法(色差信号変換の方法
4)と同様に、縦方向及び横方向の色差信号を合成して
求めた中間値を色差信号の出力とし、その合成における
色差信号の配合比率を違えた中間値を横方向に補間する
方法である。色差信号変換の方法4と異なる点は、合成
における配合比率を輝度信号と関連付けて決めている点
である。即ち、この変換方法によれば、図3のU2、V
2は次の式(数式6)による計算で求めることができ
る。 U2 2x,y = (U1 x,2y×B)/2(A+B) + (U1 x+1,2y×A)/2(A+B) + (U1 x,2y+1×F)/2(E+F) + (U1 x+1,2y+1×E)/2(E+F) U2 2x+1,y = (U1 x,2y×D)/2(C+D) + (U1 x+1,2y×C)/2(C+D) + (U1 x,2y+1×H)/2(G+H) + (U1 x+1,2y+1×G)/2(G+H) V2 2x,y = (V1 x,2y×B)/2(A+B) + (V1 x+1,2y×A)/2(A+B) + (V1 x,2y+1×F)/2(E+F) + (V1 x+1,2y+1×E)/2(E+F) V2 2x+1,y = (V1 x,2y×D)/2(C+D) + (V1 x+1,2y×C)/2(C+D) + (V1 x,2y+1×H)/2(G+H) + (V1 x+1,2y+1×G)/2(G+H) A = ((Y4x,2y + Y4x+1,2y + Y4x+2,2y + Y4x+3,2y) - 2(Y4x,2y + Y4x+1,2y))2 B = ((Y4(x+1),2y + Y4(x+1)+1,2y + Y4(x+1)+2,2y + Y4(x+1)+3,2y) - 2(Y4x,2y + Y4x+1,2y))2 C = ((Y4x,2y + Y4x+1,2y + Y4x+2,2y + Y4x+3,2y) - 2(Y4x+2,2y + Y4x+3,3y))2 D = ((Y4(x+1),2y + Y4(x+1)+1,2y + Y4(x+1)+2,2y + Y4(x+1)+3,2y) - 2(Y4x+2,2y + Y4x+3,2y))2 E = ((Y4x,2y+1 + Y4x+1,2y+1 + Y4x+2,2y+1 + Y4x+3,2y+1) - 2(Y4x,2y+1 + Y4x+1,2y+1))2 F = ((Y4(x+1),2y+1 + Y4(x+1)+1,2y+1 + Y4(x+1)+2,2y+1 + Y4(x+1)+3,2y+1) - 2(Y4x,2y+1 + Y4x+1,2y+1))2 G = ((Y4x,2y+1 + Y4x+1,2y+1 + Y4x+2,2y+1 + Y4x+3,2y+1) - 2(Y4x+2,2y+1 + Y4x+3,2y+1))2 H = ((Y4(x+1),2y+1 + Y4(x+1)+1,2y+1 + Y4(x+1)+2,2y+1 + Y4(x+1)+3,2y+1) - 2(Y4x+2,2y+1 + Y4x+3,2y+1))2 (数式6) ここで、xとyは正の整数値である。また、A〜Hの値
としてそれぞれ上記の式の平方根を用いることも可能で
ある。
【0099】この変換方法は、この実施形態の第1の変
換方法(色差信号変換の方法5)と同様に、輝度の変化
を利用しているため、自然で精細な色差信号が得られ
る。さらに加えて、より滑らかな色差信号を得ることが
できるため、DCTなどの直交変換による圧縮において
圧縮効率の向上が可能になる。
【0100】次に、この実施形態の装置によるコンポー
ネント信号の変換処理の具体例を図9に示す。この具体
例では、第1の実施形態の具体例と同様にCr信号の変
換についてのみ説明するが、Cb信号の変換も同様に可
能である。図9(A)は入力された4:1:1のY信号
であり、図9(B)はそのY信号に対応する4:1:1
のCr信号を示している。図9(C)は、この入力信号
に対して、この実施形態の第1の変換方法により変換し
た4:2:0のCr信号を示し、図9(D)は、この実
施形態の第2の変換方法により変換した4:2:0のC
r信号を示している。また、図9(E)は、参考として
第1の実施形態の第1の変換方法により変換した4:
2:0のCr信号を示している。
【0101】この例では、第1の実施形態の具体例と同
様に、個々の升目が1つのCr信号もしくはY信号の画
素を示し、升目の中の数値が画素値を表す。また、これ
らのCr信号もしくはY信号は全て、フレームの左上端
から一部を抜き出したものとする。これらの例の変換結
果は、それぞれの変換方法の式により求めた値である
が、小数点以下は四捨五入して整数値で表している。ま
た画素値として「−」の記号が記入されている画素は、
画素値がこの例にない他の部分の画素の値により変化す
るため、この例では確定しないことを表す。
【0102】まず、この実施形態の第1の方法による変
換結果を説明する。第1の実施形態による変換結果
(E)が、右2画素同士と左2画素同士の値が同じで、
値は中央(2画素目と3画素目との間)で分かれている
のに対し、この実施形態の第1の変換方法によれば、1
画素目と2画素目との間で値が分かれている。DVフォ
ーマットが生成される前の4:2:2の入力において、
輝度に対応した色変化をしていた場合(図9(A)の輝
度200に対応するCr画素値が0、輝度100に対応
するCr画素値が200)を考えると、1画素目と2画
素目との間で値が分かれている方が、本来の入力に忠実
な値であることが分かる。
【0103】次に、この実施形態の第2の方法による変
換結果を説明する。この変換結果も、第1の変換結果
(C)と同様、1画素目と2画素目で値が変化してい
る。ただし、第1の変換結果(C)と比較して、変化の
度合い(2つの画素値の差)は、この変換結果の方が小
さい。このことにより、色差信号について低周波成分が
増し、DCTなどの直交変換の圧縮効率を向上させるこ
とが可能となる。
【0104】以上説明したとおり、この実施形態に示し
た装置と変換方法を用いれば、4:1:1のコンポーネ
ント信号を4:2:0のコンポーネント信号に直接変換
することが可能となり、さらに、輝度信号の変化と色差
信号の変化との間に相関がある自然画像を入力した場
合、自然で精細な色差信号を得ることが可能となる。
【0105】(第3の実施の形態)第3の実施形態で
は、DVCフォーマットなどの直交変換圧縮されたデジ
タル圧縮映像信号を、MPEG2フォーマットなどの動
き補償付き直交変換圧縮されたデジタル圧縮映像信号に
変換する映像信号変換装置について説明する。
【0106】この映像信号変換装置は、図10に示すよ
うに、デジタル圧縮映像信号が入力し、変換されたデジ
タル圧縮映像信号が出力される入出力部1000と、入力し
た圧縮映像信号を非圧縮コンポーネント信号に復号する
映像復号部2000と、形式の異なるコンポーネント信号間
の直接変換を行なうコンポーネント信号変換部3000と、
変換されたコンポーネント信号を圧縮映像信号に変換す
る映像符号部4000とから構成されている。
【0107】そして、入出力部1000は、DVCフォーマ
ットのデジタル圧縮映像信号が入力する入力手段1001
と、MPEGフォーマットのデジタル圧縮映像信号を出
力する出力手段1002とを備え、映像復号部2000は、シャ
フリングされている圧縮映像信号をデシャフリングする
前処理手段2001と、圧縮映像信号を可変長復号してDC
T係数の量子化値を得る可変長復号手段2002と、この量
子化値を逆量子化してDCT係数を得る逆量子化手段20
03と、DCT係数を基に非圧縮映像信号を生成する逆D
CT処理手段2004とを備え、映像符号部4000は、符号化
するフレームの種類を指定する符号化制御手段4001と、
入力する非圧縮映像信号を格納する入力バッファ4002
と、非圧縮映像信号にDCT処理を施し、DCT係数を
量子化テーブルの値で除算して量子化値を得るDCT圧
縮手段4003と、DCT圧縮手段4003の出力を非圧縮信号
に戻す逆DCT伸張手段4004と、非圧縮信号に戻された
映像信号を格納するフレームメモリ4005と、フレームメ
モリ4005に格納された映像信号と入力バッファ4002に格
納された映像信号とから画像の動きを予測し、動きベク
トルと画素値の差分とを求める動き予測部4100と、動き
予測を用いた符号化を行なうかどうかを選択する符号選
択手段4006と、符号選択手段4006から渡された情報を可
変長符号化する可変長符号手段4007と、可変長符号手段
4007から出力される可変長符号化データを用いてMPE
Gフォーマットを生成する構造符号化手段4008とを備え
ている。また、コンポーネント信号変換部3000には、第
1または第2の実施形態に示した映像信号変換装置を用
いる。
【0108】次に、この装置の動作を説明する。この装
置の全体の処理は、図11に示す流れに沿って行なわれ
る。
【0109】ステップ1100:最初に、入力手段1001より
入力されたDVCフォーマットの映像信号を映像復号部
2000が復号して非圧縮の映像信号とし、 ステップ1200:復号された非圧縮映像信号の形式を、コ
ンポーネント信号変換部3000が4:1:1から4:2:
0に変換し、 ステップ1300:4:2:0に変換されたコンポーネント
信号を、映像符号部4000がMPEGフォーマットに圧縮
符号化し、出力手段1002を介して出力する。
【0110】また、上記の処理は、それぞれの処理(ス
テップ1100〜ステップ1300)を並行して行なうことも可
能である。即ち、映像復号部2000が入力映像信号の全て
を完全に復号する前に、復号が済んだ一部のデータを先
にコンポーネント信号変換部3000が変換し、映像符号部
4000がMPEGフォーマットに圧縮符号化することが可
能である。
【0111】次に、上記の処理のうち、映像の復号処理
(ステップ1100)と映像の符号処理(ステップ1300)と
について詳しく説明する。
【0112】まず、映像の復号処理(ステップ1100)に
ついて詳しく説明する。最初に、DVCフォーマットに
ついて簡単に説明する。DVCフォーマットは、4:
1:1コンポーネント信号に対して8画素×8画素のブ
ロックごとにDCTを施し、DCT係数を量子化し、こ
れを可変長符号化した符号が記録されているフォーマッ
トである。
【0113】また、DVCフォーマットの1フレーム
は、4つの輝度信号のDCTブロックとそれに対応する
2つの色差信号のDCTブロックとを組とするマクロブ
ロック、さらに複数のマクロブロックの集合であるスー
パーブロックの集合によって構成されている。そして、
1フレーム内でマクロブロックやスーパーブロックの記
録位置を本来のフレームの位置と変えるシャフリング処
理が施されている。
【0114】図12は、この装置の映像の復号処理の流
れを示すフローチャートである。この装置の映像復号部
2000は、次の様に復号を行なう。
【0115】ステップ1101:シャフリングされた圧縮信
号を、前処理手段2001がデシャッフリングし、フレーム
ごとに、全てのマクロブロックの情報を本来の映像の位
置に配置し、 ステップ1102:可変長復号手段2002が、可変長復号して
DCT係数の量子化値の情報に変換し、 ステップ1103:逆量子化手段2003が、可変長復号された
情報を逆量子化してDCT係数を求め、 ステップ1104:逆DCT処理手段2004が、DCT係数よ
り各画素の画素値を求めて、非圧縮映像信号を生成す
る。
【0116】次に、映像の符号処理(ステップ1300)に
ついて説明する。図13は、この装置の映像の符号処理
の流れを示すフローチャートである。この装置の映像符
号部4000は、次の様にMPEGフォーマットの映像信号
を生成する。
【0117】ステップ1301:最初に、DCT圧縮手段40
03が、入力バッファ4002より入力した非圧縮映像信号に
DCT処理を施し、DCT係数を量子化する。
【0118】ステップ1302:符号化制御手段4001が、D
CT圧縮手段4003で処理された信号のエンコードされる
べきフレームの種類、即ちIピクチャ、Pピクチャ、B
ピクチャのいずれかのタイプを選択し、選択されたタイ
プがIピクチャであれば、符号選択手段4006は、DCT
圧縮手段4003が入力バッファ4002のデータについて処理
した出力を可変長符号手段4006に渡す。(ステップ1306
から処理を続ける) ステップ1303:選択されたタイプがPピクチャまたはB
ピクチャであれば、動き予測部4100は、フレームメモリ
4004に格納された前フレームの映像信号と入力バッファ
4002に格納された現フレームの映像信号とから動き予測
を行ない、動きベクトルと画素値の差分情報とを求め
る。そして、動きベクトルと、DCT圧縮手段4003でD
CT・量子化処理した(またはDCT・量子化処理しな
い)差分情報とを符号選択手段4006に渡す。
【0119】ステップ1304:次に、逆DCT伸張手段40
04が、DCT圧縮手段4003の出力を逆量子化・逆DCT
処理し、フレームメモリ4005に、このフレームの再現し
た非圧縮映像信号を格納する。
【0120】ステップ1305:符号選択手段4005は、マク
ロブロック毎に動き予測を用いた符号化をするか否かを
選択し、動き予測を用いる場合は、動き予測部4100から
渡された該当マクロブロックの情報を可変長符号手段40
07に渡し、動き予測を用いない場合は、入力バッファ40
02のデータについて処理したDCT圧縮手段4002の出力
における該当マクロブロックの情報を可変長符号手段40
07に渡す。
【0121】ステップ1306:そして、可変長符号手段40
07は、符号選択手段4005から渡された情報を可変長符号
化する。
【0122】ステップ1307:最後に、可変長符号手段40
07が符号化した可変長符号に対し、構造符号化手段4008
が、MPEGデータとして必要なヘッダを付加するなど
してMPEGフォーマットを生成する。
【0123】この処理の流れによって、MPEG1及び
MPEG2のMPEGフォーマットを生成することが可
能である。
【0124】次に、上記映像圧縮処理(ステップ1300)
の内、動き予測処理(ステップ1303)における動きベク
トル計算処理について詳しく説明する。
【0125】動きベクトルの計算には、該当するマクロ
ブロックの画素値を探索範囲の全ての箇所の画素値と比
較して、それぞれの箇所における画素値の平均誤差を求
め、そのマクロブロックの元の位置と最も誤差の少ない
箇所の位置との差を動きベクトルとする方法(全探索)
を始めとして、種々の方法を用いることができる。この
実施形態では、階層画像を用いた段階的な動き情報の探
索による計算方法を説明する。
【0126】この計算方法は、対象画像フレームと参照
する画像のフレームとの両方に対して、解像度を落とし
た(画素数を減らした)複数の画像を生成し、低い解像
度の画像から粗い動きベクトルの情報を計算し、計算に
用いる画像を順次解像度の高いものにして動きベクトル
の精度を高める方法である。この実施形態では上記の解
像度を落とした複数の画像を階層画像と呼ぶ。この計算
方法は、自然画像において、大きい物体の動きに当たる
粗い動きベクトルを最初に求め、それを基に段階的に精
度の高い動きベクトルの計算を行なうため、精度の高い
動きベクトルを得ることができ、MPEG符号化時に圧
縮効率を上げることができ、結果として画質を向上させ
ることができる方法である。
【0127】ここで、階層画像とその生成方法について
簡単に説明する。図14は、階層画像の例を示す図であ
る。図14において、最初に、入力される原画像10000
から、間引き処理(ダウンサンプリング)により解像度
を2分の1に下げた1/2画像が生成され、さらに1/
2画像に対して同様のダウンサンプリングを行なう、と
いう手順を繰り返すことで、階層画像が生成される。こ
のとき、ダウンサンプリングとしては、低周波通過フィ
ルタ(LPF)で縦方向、横方向共に空間周波数帯域を
2分の1にした後、1つおきに画素を間引く、という処
理を用いることができる。
【0128】この装置において、この計算方法を実現す
るための、動き予測部4100について詳しく説明する。
【0129】最初に、動き予測部4100の構成を図15を
用いて説明する。図15に示すように、動き予測部4100
は、階層画像を生成する階層画像生成手段4101と、生成
された階層画像を格納する階層画像メモリ4102と、階層
画像を用いて低い解像度から段階的に動きベクトルを検
出する動き検出手段4103と、動き検出手段4103が検出し
た段階的な動きベクトルを格納する動き情報一時格納手
段4104と、画像圧縮に用いる最終的な動きベクトルを生
成する動きベクトル生成手段4105と、この動きベクトル
を基に圧縮すべき画像信号のフレーム間差分を求める差
分情報生成手段4106とを備えている。
【0130】次に、動き予測部4100の処理について、図
16のフローチャートを基に説明する。
【0131】ステップ2000:階層画像生成手段4101は、
入力バッファ4002及びフレームメモリ4005から得た画像
データを用いて、対象画像及び参照画像の階層画像を生
成し、階層画像メモリ4102に格納する。
【0132】ステップ2100:動き検出手段4103は、先
ず、対象画像における1/8画像の画素を縦16画素×
横16画素の256画素ずつに分割して検索対象ブロッ
クとし、検索対象ブロック毎に、参照画像における1/
8画像とのマッチングを取り、動きベクトルを求める。
求めた動きベクトルは動き情報一時格納手段4104に格納
する。
【0133】次に、動き検出手段4103は、対象の1/4
画像を縦16画素×横16画素ずつに分割して検索対象
ブロックとし、参照画像の1/4画像とのマッチングを
取り、動きベクトルを求める。このとき、先に求めた1
/8画像の対応するブロックの動きベクトルを動きベク
トル候補として用い、動きベクトル候補周辺からマッチ
ングを行なうことで、探索範囲を狭める。
【0134】動き検出手段4103は、このような階層的な
動き予測を順次より大きい階層画像に対して行ない、最
後に原画像に対する動きベクトルを求める。
【0135】ステップ2200:動きベクトル生成手段4105
は、原画像に対して検出された動きベクトルを最終的な
動きベクトルの値として設定する。
【0136】ステップ2300:差分情報生成手段4106は、
入力バッファ4002及びフレームメモリ4005から入力した
画像データを基に、対象画像の各マクロブロックの画素
値と、動きベクトルで示された対応する参照画像のブロ
ックの画素値との差分を計算する。
【0137】この階層画像を用いた動き予測によれば、
動きベクトル導出に必要な計算量を効果的に削減するこ
とができる。また、粗い画像から順次動きベクトルの精
度を上げているため、画像の大きな動きに忠実な、自然
な動きを表現する動きベクトルを求めることができ、動
きベクトルの精度を高めることができる。
【0138】なお、動き予測部4100の動きベクトル導出
処理としては、上記の例の他、既存の階層的な動きベク
トル検出方法を用いることも可能である。
【0139】こうした処理により、精度の高い動きベク
トルを検出することができ、結果として、生成するMP
EGフォーマットの圧縮画像の画質を高めることができ
る。以上説明したように、この装置によれば、DVCフ
ォーマットの圧縮映像を、高画質なMPEG1、あるい
はMPEG2のフォーマットに直接変換することができ
る。
【0140】(第4の実施の形態)第4の実施形態で
は、DVCフォーマットなどの直交変換圧縮されたデジ
タル圧縮映像信号を、MPEG2フォーマットなどの動
き補償付き直交変換圧縮されたデジタル圧縮映像信号に
変換する映像信号変換装置であって、DVCフォーマッ
トの輝度信号のDCT係数を、MPEGフォーマットの
生成に利用する装置について説明する。
【0141】この装置は、図17に示すように、映像符
号部4000が、映像復号部2000の逆量子化手段2003から送
られた輝度信号のDCT係数を格納するDCT係数バッ
ファ4009と、DCT係数バッファ4009に格納されたDC
T係数を処理して階層画像を生成する階層的逆DCT手
段4010とを備えている。また、映像符号部4000の動き予
測部4100は、図18に示すように、第3の実施形態の動
き予測部(図15)が有していた階層画像生成手段4101
を備えていない。その他の構成は第3の実施形態(図1
0)と変わりがない。
【0142】次に、この装置の動作を説明する。この装
置の動作の特徴は、輝度信号を、映像復号部2000がDC
T係数のまま直接映像符号部4000に出力し、映像符号部
4000の階層的逆DCT手段4010が、そのDCT係数から
階層画像を直接生成する点である。そのため、この装置
では、第3の実施形態の装置で必要であったダウンサン
プリングによる階層画像生成処理が不要になるため、処
理時間の短縮を実現することができる。
【0143】この装置における全体の処理の流れは、第
3の実施形態の全体の処理の流れと同じである。即ち、
この装置における全体の処理の流れは図11のフローチ
ャートの通りである。
【0144】この装置の処理が、第3の実施形態に示し
た処理と異なる点は、DVCフォーマットの復号処理
(ステップ1100)とMPEGフォーマットの圧縮処理
(ステップ1300)とである。
【0145】図19に、この装置における映像信号復号
処理(ステップ1100)の処理の流れを示す。この装置の
映像復号部2000は、図19に示す流れでDVCフォーマ
ットの復号(伸長)を行なう。
【0146】ステップ1111:シャフリングされた圧縮信
号を、前処理手段2001がデシャッフリングし、フレーム
ごとに、全てのマクロブロックの情報を本来の映像の位
置に配置し、 ステップ1112:可変長復号手段2002が、可変長復号して
DCT係数の量子化値の情報に変換し、 ステップ1113:逆量子化手段2003が、可変長復号された
情報を逆量子化してDCT係数を求め、 ステップ1114:処理中のDCTブロックが輝度信号なら
ば、 ステップ1115:逆量子化手段2003が、求めたDCT係数
をDCT係数バッファ4009に格納する。
【0147】ステップ1116:また、処理中のDCTブロ
ックが色差信号ならば、逆DCT処理手段2004は、逆D
CTによりDCT係数から各画素の画素値を求めて、非
圧縮映像信号を生成する。
【0148】この非圧縮の色差信号は、コンポーネント
信号変換部3000で形式が変換された後、映像符号部4000
の入力バッファ4002に格納される。
【0149】図20に、この装置における映像信号圧縮
処理(ステップ1300)の流れを示す。この装置の映像符
号部4000は、図20の流れに沿ってMPEGフォーマッ
トの生成を行なう。
【0150】ステップ1311:DCT圧縮手段4003は、処
理するDCTブロックが、入力バッファ4002から入力し
た色差信号であれば、 ステップ1312:そのブロックのデータをDCT変換す
る。
【0151】ステップ1313:次に、符号化制御手段4001
が、エンコードするフレームの種類、即ちIピクチャ、
Pピクチャ、Bピクチャのいずれかのタイプを選択し、 ステップ1314:選択されたタイプがIピクチャであれ
ば、DCT圧縮手段4003は、変換した色差信号のDCT
係数及びDCT係数バッファ4009から読み出した輝度信
号のDCT係数を量子化し、量子化された信号を符号選
択手段4005が、可変長符号手段4006に渡す。(ステップ
1319から処理を続ける) ステップ1315:選択されたタイプがPピクチャまたはB
ピクチャであれば、DCT係数バッファ4009に格納され
たDCT係数に対して、階層的逆DCT処理手段4010が
後で説明する階層的逆DCT処理を行ない、階層画像を
生成して動き予測部4100に渡す。
【0152】ステップ1316:動き予測部4100は、フレー
ムメモリ4004に格納された映像信号と階層的逆DCT処
理手段4010から渡された階層画像とから動き予測を行な
い、動きベクトルと画素値の差分情報とを求める。そし
て、動きベクトルと、DCT圧縮手段4003でDCT・量
子化処理した差分情報とを符号選択手段4006に渡す。 ステップ1317:次に、逆DCT伸張手段4004が、DCT
圧縮手段4003の出力を逆量子化・逆DCT処理し、フレ
ームメモリ4005に、このフレームの再現した非圧縮映像
信号を格納する。
【0153】ステップ1318:符号選択手段4006は、マク
ロブロック毎に動き予測を用いた符号化をするか否かを
選択し、動き予測を用いる場合は、動き予測部4100から
渡された該当マクロブロックの情報を可変長符号手段40
07に渡し、動き補償を用いない場合は、入力バッファ40
02及びDCT係数バッファ4009のデータについて処理し
たDCT圧縮手段4002の出力における該当マクロブロッ
クの情報を可変長符号手段4007に渡す。
【0154】ステップ1319:可変長符号手段4007は、符
号選択手段4006から渡された情報を可変長符号化する。
【0155】ステップ1320:最後に、構造符号化手段40
08が、可変長符号手段4007が符号化した可変長符号に対
し、MPEGデータとして必要なヘッダを付加するなど
してMPEGフォーマットを生成する。
【0156】ここで、階層的逆DCT処理(ステップ13
15)について説明する。
【0157】階層的逆DCT処理とは、DVCフォーマ
ットの信号に含まれるDCT係数に対して、低周波部分
から段階的に逆DCTを施し、複数の解像度の画像を生
成する処理である。これを図21を用いて説明する。
【0158】図21は、左側に、DVCフォーマットの
信号に含まれるDCT係数の一部を抜き出したものを示
し、右側に、復号された画像を示している。各DCTブ
ロックの黒色部分が、その段階で逆DCTされるべき係
数である。即ち、第1段階としてDCT係数の直流
(0,0)成分のみを抜き出し、画像を復号する。DC
Tの直流成分はそのまま1/8画像10030を構成する。
次に、左上、つまり低周波部分4画素を逆DCTして1
/4画像10020を生成する。同様に、1/2画像10010、
原画像10000を生成する。
【0159】また、図22に示すように、解像度の高い
画像を生成する場合に、その一段階前の復号された画像
を用い、その画像との差分、即ち図22のDCT係数の
黒色部分のみを逆DCTし、加えることで、さらに演算
量を削減することも可能である。
【0160】動き予測部4100が、生成された階層画像を
用いて、動きベクトルと画素値の差分情報とを求める動
作は、第3の実施形態と変わりがない。
【0161】以上説明したように、この実施形態の装置
では、DVCフォーマットの輝度信号のDCT係数をM
PEGフォーマットの作成に利用しているため、処理量
の削減が可能となる。また、階層的逆DCT処理では、
DVCフォーマットの復号における逆DCTとほぼ同じ
演算量で、MPEG符号時に必要となる階層画像を生成
することができ、効果的に処理を削減することができ
る。
【0162】(第5の実施の形態)第5の実施形態で
は、DVCフォーマットなどの直交変換圧縮されたデジ
タル圧縮映像信号を、MPEG2フォーマットなどの動
き補償付き直交変換圧縮されたデジタル圧縮映像信号に
変換する映像信号変換装置であって、動きベクトルの検
出処理を少ない演算量で行なうことができる装置につい
て説明する。
【0163】この装置は、図23に示すように、第4の
実施形態の装置(図17)と異なり、映像符号部4000
が、階層的逆DCT手段4010に代わり、1次元の逆DC
T処理を行なう1次元逆DCT手段4011を備えている。
また、映像符号部4000の動き予測部4100は、図24に示
すように、第4の実施形態(図18)において具備して
いた階層画像メモリ4102を備えていない。その他の構成
は第4の実施形態と変わりがない。
【0164】次に、この装置の動作について説明する。
この装置では、動きベクトル検出処理の動作が、第4の
実施形態と異なる。この装置では、DVCフォーマット
に含まれる輝度信号のDCT係数に対して、縦方向、横
方向それぞれに一次元の逆DCT処理を施し、それぞれ
一次元の画素のデータによる動きベクトルを検出し、そ
れを組み合わせて2次元の動きベクトルを導出すること
により、動きベクトルを検出している。
【0165】具体的な処理の流れを説明する。全体の処
理の流れは、第3ないしは第4の実施形態と同様であ
る。即ち、全体の処理の流れは、図11に示すとおりで
ある。また、映像復号処理(ステップ1100)は、第4の
実施形態(図19)と同じであり、映像符号処理(ステ
ップ1300)のみが第4の実施形態と異なっている。この
装置における映像符号処理(ステップ1300)の流れを図
25に示す。この装置の映像符号部4000は、図25の流
れに沿って映像符号処理を行なう。
【0166】ステップ1321:DCT圧縮手段4003は、処
理するDCTブロックが、入力バッファ4002から入力し
た色差信号であれば、 ステップ1322:そのブロックのデータをDCT変換す
る。
【0167】ステップ1323:次に、符号化制御手段4001
が、エンコードするフレームの種類、即ちIピクチャ、
Pピクチャ、Bピクチャのいずれかのタイプを選択し、 ステップ1324:選択されたタイプがIピクチャであれ
ば、DCT圧縮手段4003は、変換した色差信号のDCT
係数及びDCT係数バッファ4009から読み出した輝度信
号のDCT係数を量子化し、符号選択手段4005が、量子
化された信号を可変長符号手段4006に渡す。(ステップ
1329から処理を続ける) ステップ1325:選択されたタイプがPピクチャまたはB
ピクチャであれば、DCT係数バッファ4009に格納され
たDCT係数に対して、1次元逆DCT処理手段4011が
後で説明する一次元逆DCT処理を行ない、生成した一
次元情報を動き予測部4100に渡す。
【0168】ステップ1326:動き予測部4100は、フレー
ムメモリ4005に格納された映像信号と1次元逆DCT処
理手段4011から渡された一次元情報とから動き予測を行
ない、動きベクトルと画素値の差分情報とを求める。そ
して、動きベクトルと、DCT圧縮手段4003でDCT・
量子化処理した差分情報とを符号選択手段4006に渡す。
【0169】ステップ1327:次に、逆DCT伸張手段40
04が、DCT圧縮手段4003の出力を逆量子化・逆DCT
処理し、フレームメモリ4005に、このフレームの再現し
た非圧縮映像信号を格納する。
【0170】ステップ1328:符号選択手段4006は、マク
ロブロック毎に動き予測を用いた符号化をするか否かを
選択し、動き予測を用いる場合は、動き予測部4100から
渡された該当マクロブロックの情報を可変長符号手段40
07に渡し、動き予測を用いない場合は、入力バッファ40
02及びDCT係数バッファ4009のデータについて処理し
たDCT圧縮手段4002の出力における該当マクロブロッ
クの情報を可変長符号手段4007に渡す。
【0171】ステップ1329:可変長符号手段4007は、符
号選択手段4006から渡された情報を可変長符号化する。
【0172】ステップ1330:最後に可変長符号手段4007
が符号化した可変長符号に対し、構造符号化手段4008
が、MPEGデータとして必要なヘッダを付加するなど
してMPEGフォーマットを生成する。
【0173】ここで、一次元逆DCT処理(ステップ13
25)と、一次元情報による動き予測(ステップ1326)に
ついて説明する。この処理は、従来2次元の画像そのま
まで動き予測をしていたものを、2方向の1次元の情報
を2次元画像を代表する情報として、動き予測に用いる
ものである。
【0174】図26は、1次元逆DCTと、この処理で
得られた1次元情報を用いて行なう動き予測の方法につ
いて、概念的に簡単に示した図である。1次元逆DCT
では、個々のDCTブロックに対して、x方向のみの周
波数成分とy方向のみの周波数成分とのそれぞれに、1
次元の逆DCTを施し、1つのDCTブロックのx方向
及びy方向に対して、それぞれ1×8個の1次元の画素
値を生成する。ここでは、これを1次元情報と呼ぶ。こ
れをマクロブロック単位で組み合わせると、1マクロブ
ロックは2×2個のブロックで構成されているから、x
方向及びy方向のそれぞれに対して、2×16個の1次
元の画素値が組み合わされた1マクロブロック分の1次
元情報ができる。
【0175】同じように、1フレームを構成するブロッ
クの1次元情報を組み合わせて、x方向及びy方向の1
フレーム分の1次元情報を作成する。
【0176】次いで、x方向y方向のそれぞれにおい
て、1マクロブロック分の1次元情報と1フレーム分の
1次元情報とのパターンマッチングを行ない、1次元の
動きベクトルを検出する。即ち、x方向の1次元情報に
よる動きベクトルは、x方向の値のみを利用し、y方向
の1次元情報による動きベクトルは、y方向の値のみを
利用して、1マクロブロック分の一次元情報との平均誤
差が最小となるフレーム位置を求め、そのマクロブロッ
クの元の位置との差を検出する。
【0177】そして、こうして求めたそれぞれの方向の
動きベクトルを、動きベクトル候補とし、双方の動きベ
クトル候補における予測誤差(平均誤差)を比較して、
予測誤差の少ない動きベクトルを選択する。
【0178】次いで、選択されなかった方向について
は、選択された方向の動きベクトルに対応した箇所に範
囲を限定して、パターンマッチングを行ない、再度動き
ベクトルを検出する。こうして検出した2方向の動きベ
クトルを合成して、実際の動きベクトルとする。
【0179】この処理を用いると、パターンマッチング
の際に必要な差分の絶対値を求める計算の回数を大幅に
削減することが可能となる。例えば、1つのマクロブロ
ックの1回のパターンマッチングにおいて、従来は16
画素×16画素、即ち256画素について差分の絶対値
を求める必要があったが、この処理によれば、各方向の
動きベクトル候補の検出として、2画素×16画素、即
ち32画素について差分の絶対値を求めるだけでよい。
【0180】また、最終的な、選択されなかった方向に
ついてのパターンマッチングは、範囲を限定した、一方
向のみのパターンマッチングであるため、計算量は少な
い。そのため、結果として、動きベクトル検出のパター
ンマッチングに要する計算量を1/8近くにまで削減す
ることができる。
【0181】なお、この処理におけるパターンマッチン
グとして、全探索のほか、第3の実施形態のように階層
的な処理など、2次元の動きベクトル検出で用いられて
いる処理を用いることもできる。
【0182】以上説明したように、この実施形態によれ
ば、DVCフォーマットに含まれるDCT係数を利用す
ることにより、動きベクトル検出に要する計算量を大幅
に削減することが可能となる。
【0183】(第6の実施の形態)第6の実施形態で
は、クライアントが要求するフォーマットの映像信号を
提供する多フォーマット映像提供システムについて説明
する。
【0184】このシステムは、コンピュータのクライア
ントサーバシステムであり、図27に示すように、クラ
イアントのコンピュータから成る映像再生端末5000と、
映像提供用のサーバから成る映像提供部7000と、映像提
供部7000に蓄積される映像を入力する映像入力部8000
と、各部を結ぶネットワーク6000とを備えており、映像
提供部7000は、映像を通信する通信手段7100と、映像を
蓄積する映像蓄積手段7300と、映像信号のフォーマット
を変換する映像信号変換手段7200と、各手段の動作を制
御する制御手段7400とを備えている。映像提供部7000の
映像信号変換手段7200には、第3乃至第5の実施形態の
映像信号変換装置が使われる。
【0185】映像入力部8000は、DVCフォーマットの
映像信号を入力し、映像提供部7000は、DVC、MPE
G1またはMPEG2のいずれかのフォーマットの映像
信号を出力する。
【0186】次に、このシステムの動作を説明する。図
28は、このシステムの映像提供部7000の処理動作手順
を示しており、図28(A)は映像入力処理、図28
(B)は映像出力処理の流れを示すフローチャートであ
る。
【0187】映像の入力は、次に示す流れで行なわれ
る。
【0188】ステップ3000:制御手段7400は、通信手段
7100を介して、映像入力部8000からの映像入力要求を受
け付けると、入力許可信号を映像入力部8000に対して送
り、 ステップ3100:映像入力部8000から、通信手段7100を介
して入力されたDVCフォーマットの映像信号を映像蓄
積手段7300に蓄積する。
【0189】ステップ3200:制御手段7400は、映像信号
変換手段7200に対して、映像信号のフォーマットの変換
を指示し、映像信号変換手段7200は、映像蓄積手段7300
に蓄積された映像信号を読み出して、MPEG1及びM
PEG2のフォーマットに変換する。変換されたMPE
G1及びMPEG2フォーマットの映像信号は、DVC
フォーマットの映像信号とともに、映像蓄積手段7300に
蓄積される。
【0190】また、映像提供部7000は、次の流れで映像
を出力する。
【0191】ステップ4000:制御手段7400は、通信手段
7100を介して、映像再生端末5000からの映像出力要求を
受け付けると、出力許可信号を映像再生端末5000に送
り、 ステップ4100:映像蓄積手段7300に蓄積されている、要
求されたフォーマットの映像信号を、通信手段7100を介
して、映像再生端末5000に出力する。
【0192】このシステムでは、DVCフォーマットな
ど、単一のフォーマットで入力された映像を、再生する
端末に応じて、他のフォーマットで提供することが可能
である。
【0193】また、映像信号変換処理が実時間以上の速
度で行なえる場合は、図29に示す手順で映像入力処理
及び映像出力処理を行なう。映像入力処理は、図29
(A)に示すように、 ステップ5000:制御手段7400は、通信手段7100を介し
て、映像入力部8000からの映像入力要求を受け付ける
と、入力許可信号を映像入力部8000に対して送り、 ステップ5100:映像入力部8000から、通信手段7100を介
して入力されたDVCフォーマットの映像信号を映像蓄
積手段7300に蓄積する。
【0194】また、映像出力処理は、図29(B)に示
すように、 ステップ6000:制御手段7400は、通信手段7100を介し
て、映像再生端末5000からの映像出力要求を受け付ける
と、出力許可信号を映像再生端末5000に送り、 ステップ6100:要求された映像信号のフォーマットがD
VCフォーマットであれば、 ステップ6300:映像蓄積手段7300に蓄積されている映像
信号を、通信手段7100を介して、映像再生端末5000に出
力する。
【0195】また、ステップ6100において、要求された
映像信号のフォーマットがDVCフォーマット以外であ
れば、 ステップ6200:制御手段7400は、映像信号変換手段7200
に対して、フォーマットの変換を指示し、映像信号変換
手段7200は、映像蓄積手段7300に蓄積された映像信号を
読み出して、要求されたMPEG1またはMPEG2の
フォーマットに変換する。
【0196】ステップ6300:制御手段7400は、変換され
た映像信号を、通信手段7100を介して、映像再生端末50
00に出力する。
【0197】このように、この場合には、映像出力時
に、映像再生端末5000が要求したフォーマットの映像信
号にリアルタイムで変換しながら出力する。この場合、
映像信号変換手段7200は、通信手段7100とも直接接続さ
れていることが望ましい。
【0198】(第7の実施の形態)第7の実施形態で
は、復号処理の中間情報であるDCT係数を変換するこ
とにより、カラーコンポーネント形式の変換を行なう映
像信号変換装置と、その映像信号変換方法について説明
する。
【0199】この映像信号変換装置は、映像信号を非圧
縮コンポーネント信号に復号してからカラーコンポーネ
ント形式を変換する第3の実施形態の装置(図10)と
異なり、映像信号の復号化の過程で得られるDCT係数
を用いてカラーコンポーネント形式を変換する。そのた
め、この装置では、図35に示すように、コンポーネン
ト信号変換部3000に代わるものとして、映像復号部2000
に、コンポーネント形式の変換に合わせてDCT係数の
配列を変更するDCT係数変換手段2005が設けられてお
り、映像復号部2000からは、カラーコンポーネント形式
が変換された非圧縮コンポーネント信号が出力される。
その他の構成は第3の実施形態と変わりがない。
【0200】次に、この装置の動作について説明する。
この装置では、DVCフォーマットに含まれる色差信号
のDCT係数を間引くことによって縦方向のDCT係数
の解像度を半分にし、横方向に0を補間することによっ
て横方向のDCT係数の解像度を2倍にし、こうして解
像度を変えたDCT係数に逆DCT処理を施して、MP
EG2などのカラーコンポーネント形式に変換してい
る。
【0201】具体的な処理の流れを説明する。図36
は、本装置の全体の処理の流れを示すフローチャートで
ある。この内、映像符号処理(ステップ1300)は、第3
の実施形態の動作(図11のステップ1300)と同じであ
り、映像復号処理(ステップ1100)のみが第3の実施形
態と異なっている。
【0202】この装置における映像復号処理(ステップ
1100)は、図37に示す手順で行なわれる。この映像復
号処理手順のうち、デシャッフル(ステップ1101)、可
変長復号(ステップ1102)、逆量子化処理(ステップ11
03)は、第3の実施形態の動作(図12のステップ110
1、1102、1103)と同じであり、DCT係数変換処理
(ステップ1105)及び逆DCT処理(ステップ1106)の
みが第3の実施形態と異なっている。この装置の映像復
号部2000は、図37の流れに沿って映像復号処理を行な
う。
【0203】ステップ1101:シャフリングされた圧縮信
号を、前処理手段2001がデシャッフリングし、フレーム
ごとに、全てのマクロブロックの情報を本来の映像の位
置に配置し、 ステップ1102:可変長復号手段2002が、可変長復号して
DCT係数の量子化値の情報に変換し、 ステップ1103:逆量子化手段2003が、可変長復号された
情報を逆量子化してDCT係数を求める。逆量子化手段
2003は、求めた輝度信号のDCT係数を逆DCT処理手
段2004に出力し、求めた色差信号のDCT係数をDCT
係数変換手段2005に出力する。
【0204】ステップ1105:DCT係数変換手段2005
は、色差信号のDCT係数に対してDCT係数変換処理
を施し、色差信号のDCTブロックの縦の解像度を半分
にし、横の解像度を2倍にする。
【0205】ステップ1106:逆DCT処理手段2004は、
逆量子化手段2003から出力されたDCT係数により輝度
信号に関する各画素の画素値を求め、また、DCT係数
変換手段2005から出力されたDCT係数により色差信号
に関する各画素の画素値を求めて、非圧縮映像信号を生
成する。
【0206】ここで、DCT係数変換処理(ステップ11
05)及び逆DCT処理(ステップ1106)について説明す
る。この処理は、第3の実施形態の装置で非圧縮映像信
号に対して行なっていたコンポーネント形式変換を、復
号処理の中間情報であるDCT係数の段階で行なう処理
である。
【0207】図38は、DCT係数変換処理及び逆DC
T処理による、4:1:1形式から4:2:0形式への
コンポーネント形式変換について、概念的に簡単に示し
た図である。
【0208】DCT係数変換処理では、4:1:1形式
の色差信号の横8×縦8のDCTブロックから、縦方向
に低周波部分の半分(横8×縦4)のDCT係数を抜き
出すことで縦方向の解像度を半分にする。そして、横方
向のDCT係数を2倍にし、新しく増やした横8×縦4
のDCT係数の値を0にすることで、横方向の解像度を
2倍にする。
【0209】逆DCT処理では、DCT係数変換処理に
より生成された横16×縦4のDCT係数の集まりを1
つの新たなDCTブロックとして、縦16×横4の2次
元逆DCT処理を行なう。この逆DCT処理により生成
された縦16×横4の信号が、4:2:0形式の非圧縮
色差信号となる。
【0210】このように、このDCT係数変換処理で
は、4:1:1形式のDCTブロックから、主要な色差
情報の全てを含む低周波部分の横8×縦4のDCT係数
をそのまま抜き出しているため、変換後の色の変化が滑
らかであり、自然な画質の画像が得られる。また、横方
向に増やした横8×縦4のDCT係数は、高周波部分に
付け足しているため、その値を0にしても人の目にはそ
れ程目立たない。従って、このDCT係数変換処理によ
り、違和感の無い変換後の画質が得られる。
【0211】なお、輝度信号に対する逆DCT処理は、
第3の実施形態と同様に行なわれ、逆量子化手段2003か
ら出力されたDCT係数に対して、縦8×横8のDCT
ブロック単位で2次元逆DCT処理が施され、縦8×横
8の単位で非圧縮輝度信号が算出される。
【0212】以上説明したように、この実施形態の映像
信号変換では、DVCフォーマットに含まれるDCT係
数を利用することにより、簡単な構成でカラーコンポー
ネント形式を変換することができ、また、自然な画質へ
の変換が可能である。
【0213】なお、この実施の形態で説明した、DCT
係数変換処理と逆DCT処理とは、第4あるいは第5の
実施の形態の装置に適用することもできる。
【0214】
【発明の効果】以上の説明から明らかなように、本発明
の映像信号変換装置は、カラーコンポーネント信号の形
式を直接変換することができ、また、圧縮フォーマット
の異なる映像信号間の変換を直接行なうことができる。
【0215】また、本発明の映像信号変換方法は、カラ
ーコンポーネント信号の形式を効率的且つ高精度に変換
することを可能にする。
【0216】また、本発明の映像提供システムは、単一
のフォーマットで入力された映像信号を、複数の形式で
提供することができる。
【図面の簡単な説明】
【図1】第1の実施形態の映像信号変換装置の構成を示
す機能ブロック図、
【図2】第1の実施形態の映像信号変換装置における全
体の処理の流れを示すフローチャート、
【図3】輝度信号(A)とそれに対応する4:1:1形
式の色差信号(B)と4:2:0形式の色差信号(C)
の例、
【図4】DVC形式の映像信号を生成するために入力す
る4:2:2コンポーネント信号と、生成される4:
1:1コンポーネント信号の例、
【図5】第1の実施形態の映像信号変換装置への色差信
号の第1の入力例とそれに対する出力結果、
【図6】第1の実施形態の映像信号変換装置への色差信
号の第2の入力例とそれに対する出力結果、
【図7】第1の実施形態の映像信号変換装置への色差信
号の第3の入力例とそれに対する出力結果、
【図8】第2の実施形態の映像信号変換装置の構成を示
す機能ブロック図、
【図9】第2の実施形態の映像信号変換装置への色差信
号の入力例とそれに対する出力結果、
【図10】第3の実施形態の映像信号変換装置の構成を
示す機能ブロック図、
【図11】第3の実施形態の映像信号変換装置における
全体の処理の流れを示すフローチャート、
【図12】第3の実施形態の映像信号変換装置における
DVC復号処理の流れを示すフローチャート、
【図13】第3の実施形態の映像信号変換装置における
MPEG符号処理の流れを示すフローチャート、
【図14】階層画像の例、
【図15】第3の実施形態の映像信号変換装置における
動き予測部の機能ブロック図、
【図16】前記動き予測処理の処理の流れを示すフロー
チャート、
【図17】第4の実施形態の映像信号変換装置の構成を
示す機能ブロック図、
【図18】第4の実施形態の映像信号変換装置における
動き予測部の機能ブロック図、
【図19】第4の実施形態の映像信号変換装置における
DVC復号処理の流れを示すフローチャート、
【図20】第4の実施形態の映像信号変換装置における
MPEG符号処理の流れを示すフローチャート、
【図21】第4の実施形態の映像信号変換装置における
階層画像の作成方法を説明する図、
【図22】第4の実施形態の映像信号変換装置における
階層画像の他の作成方法を説明する図、
【図23】第5の実施形態の映像信号変換装置の構成を
示す機能ブロック図、
【図24】第5の実施形態の映像信号変換装置における
動き予測部の機能ブロック図、
【図25】第5の実施形態の映像信号変換装置における
MPEG符号処理の流れを示すフローチャート、
【図26】第5の実施形態の映像信号変換装置における
動き予測処理の概念図、
【図27】第6の実施形態の映像提供システムの構成
図、
【図28】第6の実施形態の映像提供システムにおける
映像入力処理と映像提供処理の流れを示すフローチャー
ト、
【図29】第6の実施形態の映像提供システムにおける
他の映像入力処理と映像提供処理の流れを示すフローチ
ャート、
【図30】4:4:4カラーコンポーネント信号の説明
図、
【図31】4:2:2カラーコンポーネント信号の説明
図、
【図32】4:2:0カラーコンポーネント信号の説明
図、
【図33】4:1:1カラーコンポーネント信号の説明
図、
【図34】従来のMPEGデータ生成のための装置の構
成図、
【図35】第7の実施形態の映像信号変換装置の構成を
示す機能ブロック図、
【図36】第7の実施形態の映像信号変換装置における
全体の処理の流れを示すフローチャート、
【図37】第7の実施形態の映像信号変換装置における
DVC復号処理の流れを示すフローチャート、
【図38】第7の実施形態の映像信号変換装置における
コンポーネント形式変換の方法を示す図である。
【符号の説明】
101 アナログビデオ機器 102 アナログ→デジタル変換器 103 デジタルビデオ機器 104 MPEGエンコーダ 201 入力手段 202 出力手段 301 Yフレームメモリ 302 入力Crフレームメモリ 303 入力Cbフレームメモリ 304 出力Crフレームメモリ 305 出力Cbフレームメモリ 401 色差信号変換手段 402 Y信号参照手段 1000 入出力部 1001 入力手段 1002 出力手段 2000 映像復号部 2001 前処理手段 2002 可変長符号手段 2003 逆量子化手段 2004 逆DCT処理手段 2005 DCT係数変換手段 3000 コンポーネント信号変換部 4000 映像符号部 4001 符号化制御手段 4002 入力バッファ 4003 DCT圧縮手段 4004 逆DCT伸長手段 4005 フレームメモリ 4006 符号選択手段 4007 可変長符号手段 4008 構造符号手段 4009 DCT係数バッファ 4010 階層的逆DCT処理手段 4011 1次元逆DCT処理手段 4100 動き予測部 4101 階層画像生成手段 4102 階層画像メモリ 4103 動き検出手段 4104 動き情報一時格納手段 4105 動きベクトル生成手段 4106 差分情報生成手段 5000 映像再生端末 6000 ネットワーク 7000 映像提供部 7100 通信手段 7200 映像信号変換手段 7300 映像蓄積手段 7400 制御手段 8000 映像入力部 10000 原画像 10010 1/2画像 10020 1/4画像 10030 1/8画像

Claims (30)

    【特許請求の範囲】
  1. 【請求項1】 デジタル映像信号のカラーコンポーネン
    ト信号形式を変換する映像信号変換装置であって、 デジタル映像信号を入力する入力手段と、 入力された前記映像信号の輝度信号を格納する輝度信号
    フレームメモリと、 入力された前記映像信号の色差信号を格納する入力色差
    信号フレームメモリと、 入力された前記映像信号の色差信号を変換する色差信号
    変換手段と、 前記色差信号変換手段により変換された色差信号を格納
    する出力色差信号フレームメモリと、 前記輝度信号フレームメモリに格納された輝度信号と前
    記出力色差信号フレームメモリに格納された色差信号と
    を組み合わせてデジタル映像信号を出力する出力手段と
    を備えることを特徴とする映像信号変換装置。
  2. 【請求項2】 前記色差信号変換手段が、入力された前
    記映像信号の色差信号を4:1:1コンポーネント信号
    形式から4:2:0コンポーネント信号形式の色差信号
    に変換することを特徴とする請求項1に記載の映像信号
    変換装置。
  3. 【請求項3】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリに格納された色差信号から縦方向に
    1画素おきに間引いた画素を取り出して縦方向の画素数
    を2分の1にし、取り出した画素を横方向に複写して横
    方向の画素数を2倍にすることを特徴とする請求項2に
    記載の映像信号変換装置。
  4. 【請求項4】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリに格納された色差信号の縦方向に隣
    り合う2つの画素値の平均値を求め、これを1つの画素
    値とすることにより縦方向の画素数を2分の1にし、前
    記平均値である1つの画素値を横方向に複写して横方向
    の画素数を2倍にすることを特徴とする請求項2に記載
    の映像信号変換装置。
  5. 【請求項5】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリに格納された色差信号の縦方向に隣
    り合う2つの画素値の平均値を求め、これを1つの画素
    値とすることにより縦方向の画素数を2分の1にし、前
    記平均値である1つの画素値と、横方向に隣り合う前記
    平均値である1つの画素値との平均値を画素値として横
    方向に補間することにより横方向の画素数を2倍にする
    ことを特徴とする請求項2に記載の映像信号変換装置。
  6. 【請求項6】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリに格納された色差信号の縦方向に隣
    り合う2つの画素値の平均値を求め、横方向に隣り合う
    2つの前記平均値を用いて横方向の線形補間を行なうこ
    とにより、横方向の画素数を2倍にし、縦方向の画素数
    を2分の1にすることを特徴とする請求項2に記載の映
    像信号変換装置。
  7. 【請求項7】 前記入力色差信号フレームメモリ内の指
    定された色差信号の画素に対応する輝度信号の画素値を
    前記輝度信号フレームメモリから参照する輝度信号参照
    手段を備え、前記色差信号変換手段が、前記輝度信号参
    照手段を介して参照した輝度信号の値を利用して、色差
    信号の変換を行なうことを特徴とする請求項1または2
    に記載の映像信号変換装置。
  8. 【請求項8】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリの横方向に隣り合う2つの画素の間
    に、前記2つの画素に対応する輝度信号の画素値の比に
    基づいて色差信号の画素値を線形補間し、横方向の画素
    数を2倍にすることを特徴とする請求項7に記載の映像
    信号変換装置。
  9. 【請求項9】 前記色差信号変換手段が、前記入力色差
    信号フレームメモリに格納された色差信号の縦方向に隣
    り合う2つの画素値の平均値を求め、これを1つの画素
    値とすることにより縦方向の画素数を2分の1にし、横
    方向に隣り合う2つの前記平均値の画素の間に、前記2
    つの平均値の算出に用いた画素に対応する輝度信号の画
    素値の比に基づいて色差信号の画素値を線形補間し、横
    方向の画素数を2倍にすることを特徴とする請求項7に
    記載の映像信号変換装置。
  10. 【請求項10】 前記色差信号変換手段が、前記入力色
    差信号フレームメモリに格納された色差信号の横方向に
    隣り合う2つの画素に対して、前記2つの画素に対応す
    る輝度信号の画素値の比に比例した線形補間を行なうこ
    とにより、横方向の色差信号の画素数を2倍にすること
    を特徴とする請求項7に記載の映像信号変換装置。
  11. 【請求項11】 前記色差信号変換手段が、前記入力色
    差信号フレームメモリに格納された色差信号の縦、横2
    つずつから成る4つの画素を、横方向には1画素分ずつ
    ずらしながら、縦方向には2画素分ずつずらしながら順
    次選択し、選択した前記4つの画素に対応する輝度信号
    の画素値の比に比例した線形補間を行なうことにより、
    横方向の色差信号の画素数を2倍にし、縦方向の色差信
    号の画素数を2分の1にすることを特徴とする請求項7
    に記載の映像信号変換装置。
  12. 【請求項12】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行または2n+1行(但
    し、nは整数)のいずれか一方の画素値を用いることに
    よって、縦方向の解像度を2分の1にし、前記画素値を
    左または右隣りの列に複写することによって、横方向の
    解像度を2倍にすることを特徴とする映像信号変換方
    法。
  13. 【請求項13】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行と2n+1行、または
    2n+1行と2(n+1)行の縦方向に隣り合う2つの
    画素値の平均値を求めることによって、縦方向の解像度
    を2分の1にし、前記平均値を左または右隣りの列に複
    写することによって、横方向の解像度を2倍にすること
    を特徴とする映像信号変換方法。
  14. 【請求項14】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行と2n+1行、または
    2n+1行と2(n+1)行の縦方向に隣り合う2つの
    画素値の平均値を求めることによって、縦方向の解像度
    を2分の1にし、横方法に隣り合う2つの前記平均値の
    平均値を求め、これを画素値として前記隣り合う2つの
    平均値の間に補間することによって、横方向の解像度を
    2倍にすることを特徴とする映像信号変換方法。
  15. 【請求項15】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行と2n+1行、または
    2n+1行と2(n+1)行の縦方向に隣り合う2つの
    画素値の平均値を求め、横方向に隣り合う2つの前記平
    均値を用いて線形補間を行なうことによって、横方向の
    解像度を2倍にし、縦方向の解像度を2分の1にするこ
    とを特徴とする映像信号変換方法。
  16. 【請求項16】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行と2n+1行、または
    2n+1行と2(n+1)行の縦方向に隣り合う2つの
    画素値の平均値を求めることによって、縦方向の解像度
    を2分の1にし、横方向に隣り合う2つの前記平均値の
    算出に用いた画素に対応する輝度信号の画素値の比に基
    づいて色差信号を線形補間し、得られた画素値を前記2
    つの平均値の間に内挿することによって、横方向の解像
    度を2倍にすることを特徴とする映像信号変換方法。
  17. 【請求項17】 デジタル映像信号の4:1:1形式の
    カラーコンポーネント信号を4:2:0形式のカラーコ
    ンポーネント信号に変換する映像信号変換方法であっ
    て、 4:1:1形式のカラーコンポーネント信号の色差信号
    に対して、前記色差信号の2n行と2n+1行、または
    2n+1行と2(n+1)行の上及び隣接する列の上で
    互いに隣り合う合計4つの画素を順次選択し、前記4つ
    の画素に対応する輝度信号の画素値の比に比例した線形
    補間を行なうことにより、色差信号の横方向の解像度を
    2倍にし、縦方向の解像度を2分の1にすることを特徴
    とする映像信号変換方法。
  18. 【請求項18】 圧縮フォーマットが異なるデジタル映
    像信号間の変換を行なう映像信号変換装置であって、 映像信号を入出力する入出力手段と、 入力した圧縮されている映像信号を復号する映像復号化
    手段と、 復号された前記映像信号のコンポーネント信号形式を変
    換するコンポーネント信号変換手段と、 前記コンポーネント信号変換手段により変換された映像
    信号を圧縮し符号化する映像符号化手段とを備え、前記
    コンポーネント信号変換手段が、請求項1乃至11に記
    載の映像信号変換装置で構成されていることを特徴とす
    る映像信号変換装置。
  19. 【請求項19】 前記映像復号化手段が、入力された映
    像信号に対して情報の並べ替えを行なう前処理手段と、
    前記前処理手段により並び替えられた情報を可変長復号
    する可変長復号化手段と、前記可変長復号化手段により
    可変長復号された情報を逆量子化する逆量子化手段と、
    前記逆量子化手段により逆量子化された情報に対して逆
    DCT処理を施す逆DCT処理手段とを備え、 前記映像符号化手段が、前記コンポーネント信号変換手
    段の出力を格納する入力バッファと、前記入力バッファ
    に格納された情報に対してDCT処理や量子化を行なう
    DCT圧縮手段と、前記DCT圧縮手段の出力を非圧縮
    情報に伸張する逆DCT伸長手段と、前記逆DCT伸長
    手段の出力を格納するフレームメモリと、動きベクトル
    を求めフレーム間差分を求める動き予測手段と、符号化
    の種類を選択する符号選択手段と、前記符号選択手段の
    出力に対して可変長符号化処理を施す可変長符号化手段
    と、最終的な圧縮フォーマットの信号を生成する構造符
    号化手段と、映像符号化手段の各手段の動作を制御する
    符号化制御手段とを備えることを特徴とする請求項18
    に記載の映像信号変換装置。
  20. 【請求項20】 圧縮フォーマットが異なるデジタル映
    像信号間の変換を行なう映像信号変換装置であって、 映像信号を入出力する入出力手段と、 入力した圧縮されている映像信号を復号するとともに、
    復号の過程で前記映像信号のコンポーネント信号形式を
    変換する映像復号化手段と、 コンポーネント信号形式が変換された前記映像信号を圧
    縮し符号化する映像符号化手段とを備えることを特徴と
    する映像信号変換装置。
  21. 【請求項21】 前記映像復号化手段が、入力された映
    像信号に対して情報の並べ替えを行なう前処理手段と、
    前記前処理手段により並び替えられた情報を可変長復号
    する可変長復号化手段と、前記可変長復号化手段により
    可変長復号された情報を逆量子化して輝度信号及び色差
    信号のDCT係数を再生する逆量子化手段と、再生され
    た色差信号のDCT係数を間引き、または補間して前記
    DCT係数の解像度を変更するDCT係数変換手段と、
    前記逆量子化手段から出力された輝度信号のDCT係数
    と前記DCT係数変換手段から出力された色差信号のD
    CT係数とに対して逆DCT処理を施す逆DCT処理手
    段とを備え、 前記映像符号化手段が、前記映像復号化手段の出力を格
    納する入力バッファと、前記入力バッファに格納された
    情報に対してDCT処理や量子化を行なうDCT圧縮手
    段と、前記DCT圧縮手段の出力を非圧縮情報に伸張す
    る逆DCT伸長手段と、前記逆DCT伸長手段の出力を
    格納するフレームメモリと、動きベクトルを求めフレー
    ム間差分を求める動き予測手段と、符号化の種類を選択
    する符号選択手段と、前記符号選択手段の出力に対して
    可変長符号化処理を施す可変長符号化手段と、最終的な
    圧縮フォーマットの信号を生成する構造符号化手段と、
    映像符号化手段の各手段の動作を制御する符号化制御手
    段とを備えることを特徴とする請求項20に記載の映像
    信号変換装置。
  22. 【請求項22】 前記DCT係数変換手段が、前記色差
    信号のDCT係数で構成されるDCTブロックから、低
    周波部分を含む縦方向の半分のDCT係数を抜き出し、
    抜き出したDCT係数の横方向に値が0のDCT係数を
    同数だけ付け足して、元のDCTブロックに比べて、縦
    方向のDCT係数の数が半分で、横方向のDCT係数の
    数が2倍のDCTブロックを生成することを特徴とする
    請求項21に記載の映像信号変換装置。
  23. 【請求項23】 前記映像復号化手段が、入力したDC
    T処理が施された圧縮映像信号の輝度信号のDCT係数
    を前記映像符号化手段に送り、 前記映像符号化手段が、前記映像復号化手段から送られ
    た前記DCT係数を格納するDCT係数バッファと、前
    記DCT係数バッファに格納されたDCT係数に対して
    低周波成分から段階的に逆DCTを施し、解像度の異な
    る複数の画像である階層画像を生成する階層的逆DCT
    処理手段とを備え、 前記動き予測手段が、前記階層的逆DCT処理手段で生
    成された前記階層画像を用いて動きベクトルを求めるこ
    とを特徴とする請求項18乃至22に記載の映像信号変
    換装置。
  24. 【請求項24】 前記映像復号化手段が、入力したDC
    T処理が施された圧縮映像信号の輝度信号のDCT係数
    を前記映像符号化手段に送り、 前記映像符号化手段が、前記映像復号化手段から送られ
    た前記DCT係数を格納するDCT係数バッファと、前
    記DCT係数バッファに格納されたDCT係数の一部に
    対して一次元の逆DCT処理を施し、2方向の一次元情
    報を生成する1次元逆DCT処理手段とを備え、 前記動き予測手段が、前記1次元逆DCT処理手段で生
    成された前記2方向の一次元情報を用いて動きベクトル
    を求めることを特徴とする請求項18乃至22に記載の
    映像信号変換装置。
  25. 【請求項25】 入力するDVCフォーマットの映像信
    号をMPEGフォーマットの映像信号に変換して出力す
    ることを特徴とする請求項18乃至24に記載の映像信
    号変換装置。
  26. 【請求項26】 DVCフォーマットの映像信号をMP
    EGフォーマットの映像信号に変換する映像信号変換方
    法であって、 DVCフォーマットの映像信号の復号処理中に再生する
    色差信号のDCT係数を間引き、または補間して前記D
    CT係数の解像度を変換し、解像度を変換した色差信号
    のDCT係数と輝度信号のDCT係数とに逆DCT処理
    を施して4:2:0形式の非圧縮コンポーネント信号を
    復号し、前記非圧縮コンポーネント信号をMPEGフォ
    ーマットの映像信号に符号化することを特徴とする映像
    信号変換方法。
  27. 【請求項27】 前記DCT係数の解像度の変換に際し
    て、前記色差信号のDCT係数で構成されるDCTブロ
    ックから、低周波部分を含む縦方向の半分のDCT係数
    を抜き出し、抜き出したDCT係数の横方向に値が0の
    DCT係数を同数だけ付け足して、元のDCTブロック
    に比べて、縦方向のDCT係数の数が半分で、横方向の
    DCT係数の数が2倍のDCTブロックを生成すること
    を特徴とする請求項26に記載の映像信号変換方法。
  28. 【請求項28】 デジタル映像をユーザの要求するフォ
    ーマットの映像信号で提供する映像提供システムであっ
    て、 デジタル信号を伝送するネットワークと、前記ネットワ
    ークを介してデジタル映像を取得し、取得したデジタル
    映像を再生する映像再生端末と、デジタル映像を蓄積し
    て前記映像再生端末に提供する映像提供部と、前記映像
    提供部に前記ネットワークを介してデジタル映像を入力
    する映像入力部とを備え、 前記映像提供部が、前記ネットワークに接続してデジタ
    ル映像の入出力を行なう通信手段と、デジタル映像を蓄
    積する映像蓄積手段と、デジタル映像の圧縮フォーマッ
    トを変換する映像信号変換手段と、前記通信手段、映像
    蓄積手段及び映像信号変換手段を制御する制御手段とを
    具備し、前記映像信号変換手段が、請求項18乃至25
    の映像信号変換装置によって構成されていることを特徴
    とする映像提供システム。
  29. 【請求項29】 前記映像信号変換手段が、入力したデ
    ジタル映像のフォーマットを変換し、前記映像蓄積手段
    に、1つのデジタル映像に関して各種のフォーマットの
    映像信号が蓄積されることを特徴とする請求項28に記
    載の映像提供システム。
  30. 【請求項30】 前記映像信号変換手段が、前記映像蓄
    積手段から読出されて前記映像再生端末に出力されるデ
    ジタル映像のフォーマットを、ユーザの要求に応じて変
    換することを特徴とする請求項28に記載の映像提供シ
    ステム。
JP17274097A 1997-02-27 1997-06-16 映像信号変換装置、映像信号変換方法及び映像提供システム Expired - Fee Related JP3901287B2 (ja)

Priority Applications (11)

Application Number Priority Date Filing Date Title
JP17274097A JP3901287B2 (ja) 1997-02-27 1997-06-16 映像信号変換装置、映像信号変換方法及び映像提供システム
SG1998000278A SG76534A1 (en) 1997-02-27 1998-02-09 Method and apparatus for converting color component type of picture signals method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
AU54668/98A AU694400B1 (en) 1997-02-27 1998-02-16 Method and apparatus for converting color component type of picture signals, method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
DE1998620313 DE69820313T2 (de) 1997-02-27 1998-02-19 Verfahren und Einrichtung zum Umwandeln der Farbkomponenten von Bildsignalen, Verfahren und Einrichtung zum Umwandeln des Kompressionsformates von Bildsignalen und System zum Erzeugen von Bildsignalen eines erforderlichen Kompressionsformates
EP19980301220 EP0862339B1 (en) 1997-02-27 1998-02-19 Method and apparatus for converting color component type of picture signals, method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
EP20030020255 EP1367840A3 (en) 1997-02-27 1998-02-19 Method and apparatus for converting colour component type of picture signals,method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
MYPI98000803A MY127521A (en) 1997-02-27 1998-02-25 Method and apparatus for converting color component type of picture signals, method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
CA 2228241 CA2228241C (en) 1997-02-27 1998-02-26 Method and apparatus for converting color component type of picture signals, method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
US09/030,819 US5982432A (en) 1997-02-27 1998-02-26 Method and apparatus for converting color component type of picture signals, method and apparatus for converting compression format of picture signals and system for providing picture signals of a required compression format
CNB2004100488825A CN1315331C (zh) 1997-02-27 1998-02-27 图像信号转换方法和设备以及图像提供系统
CNB981052940A CN1175670C (zh) 1997-02-27 1998-02-27 图像信号转换方法和设备以及图像提供系统

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP5860497 1997-02-27
JP9-58604 1997-02-27
JP17274097A JP3901287B2 (ja) 1997-02-27 1997-06-16 映像信号変換装置、映像信号変換方法及び映像提供システム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2006314966A Division JP4526529B2 (ja) 1997-02-27 2006-11-22 階層画像を用いる映像信号変換装置

Publications (2)

Publication Number Publication Date
JPH10304401A true JPH10304401A (ja) 1998-11-13
JP3901287B2 JP3901287B2 (ja) 2007-04-04

Family

ID=26399638

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17274097A Expired - Fee Related JP3901287B2 (ja) 1997-02-27 1997-06-16 映像信号変換装置、映像信号変換方法及び映像提供システム

Country Status (9)

Country Link
US (1) US5982432A (ja)
EP (2) EP0862339B1 (ja)
JP (1) JP3901287B2 (ja)
CN (2) CN1175670C (ja)
AU (1) AU694400B1 (ja)
CA (1) CA2228241C (ja)
DE (1) DE69820313T2 (ja)
MY (1) MY127521A (ja)
SG (1) SG76534A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040003588A (ko) * 2002-07-03 2004-01-13 삼성전자주식회사 영상신호의 포맷 변환기 및 그 방법
US7151799B2 (en) 2002-03-14 2006-12-19 Kddi Corporation Transcoder for coded video

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU719060B2 (en) * 1997-02-28 2000-05-04 Matsushita Electric Industrial Co., Ltd. Motion picture converting apparatus
JP4092734B2 (ja) * 1997-11-05 2008-05-28 ソニー株式会社 ディジタル信号変換方法およびディジタル信号変換装置
KR100275700B1 (ko) * 1998-07-10 2000-12-15 윤종용 영상신호 규격 변환장치
US6697525B1 (en) * 1998-10-02 2004-02-24 Parthusceva Ltd. System method and apparatus for performing a transform on a digital image
JP4406944B2 (ja) * 1998-11-11 2010-02-03 株式会社日立製作所 計算機システム及び問合せに対する処理分散システム
US6262771B1 (en) * 1999-03-04 2001-07-17 Victor Company Of Japan, Ltd. Method and apparatus for converting picture signal, and recording and reproducing apparatus
US6331874B1 (en) * 1999-06-29 2001-12-18 Lsi Logic Corporation Motion compensated de-interlacing
US6847365B1 (en) * 2000-01-03 2005-01-25 Genesis Microchip Inc. Systems and methods for efficient processing of multimedia data
US6674479B2 (en) * 2000-01-07 2004-01-06 Intel Corporation Method and apparatus for implementing 4:2:0 to 4:2:2 and 4:2:2 to 4:2:0 color space conversion
US6754383B1 (en) * 2000-07-26 2004-06-22 Lockheed Martin Corporation Lossy JPEG compression/reconstruction using principal components transformation
US7194128B1 (en) 2000-07-26 2007-03-20 Lockheed Martin Corporation Data compression using principal components transformation
JP3918497B2 (ja) * 2000-11-02 2007-05-23 株式会社村田製作所 端面反射型表面波装置
US7006147B2 (en) * 2000-12-22 2006-02-28 Thomson Lincensing Method and system for MPEG chroma de-interlacing
US6870963B2 (en) 2001-06-15 2005-03-22 Qualcomm, Inc. Configurable pattern optimizer
TWI229562B (en) * 2003-04-17 2005-03-11 Mediatek Inc Apparatus and method for signal processing of format conversion and combination of video signals
GB2405281A (en) * 2003-08-19 2005-02-23 Snell & Wilcox Ltd Format conversion using colourimetric components
JP2005167742A (ja) * 2003-12-03 2005-06-23 Funai Electric Co Ltd Dvdレコーダおよび映像信号記録装置
TW200534258A (en) * 2004-04-14 2005-10-16 Lite On It Corp Portable audiovisual data recording control device
JP3800427B2 (ja) * 2004-07-20 2006-07-26 ソニー株式会社 信号処理装置および方法、並びにプログラム
TWI288568B (en) * 2004-12-10 2007-10-11 Seiko Epson Corp Image display method and device, and projector
JP4277793B2 (ja) * 2004-12-17 2009-06-10 ソニー株式会社 画像処理装置、符号化装置およびそれらの方法
JP4542107B2 (ja) * 2005-07-22 2010-09-08 三菱電機株式会社 画像復号装置及び画像復号方法
BRPI0611668B1 (pt) * 2005-09-20 2019-06-18 Mitsubishi Electric Corporation Decodificador de imagem, e, método de decodificação de imagem
US8831111B2 (en) * 2006-05-19 2014-09-09 The Hong Kong University Of Science And Technology Decoding with embedded denoising
US8369417B2 (en) * 2006-05-19 2013-02-05 The Hong Kong University Of Science And Technology Optimal denoising for video coding
JP4494490B2 (ja) * 2008-04-07 2010-06-30 アキュートロジック株式会社 動画処理装置及び動画処理方法、動画処理プログラム
TWI387319B (zh) * 2009-06-02 2013-02-21 Novatek Microelectronics Corp 影像處理電路及方法
CN101625847B (zh) * 2009-08-06 2011-03-30 杭州电子科技大学 一种大尺寸非压缩数字图像的快速显示方法
US8625666B2 (en) * 2010-07-07 2014-01-07 Netzyn, Inc. 4:4:4 color space video with 4:2:0 color space video encoders and decoders systems and methods
KR101695247B1 (ko) 2012-05-07 2017-01-12 한화테크윈 주식회사 주파수 변환 및 필터링 절차가 포함된 행렬 기반의 움직임 검출 시스템 및 방법
JP6125215B2 (ja) 2012-09-21 2017-05-10 株式会社東芝 復号装置、及び符号化装置
KR101979634B1 (ko) * 2012-12-13 2019-05-20 삼성전자주식회사 화질 개선을 위한 영상 처리 장치 및 그 방법
JP5606638B1 (ja) 2013-06-14 2014-10-15 株式会社東芝 映像送信装置、映像表示装置、及び映像送信方法
JP2016178601A (ja) * 2015-03-23 2016-10-06 セイコーエプソン株式会社 データ処理回路、物理量検出用回路、物理量検出装置、電子機器及び移動体
TWI629892B (zh) * 2016-05-09 2018-07-11 國立成功大學 景深包裝及解包裝之rgb格式與yuv格式的轉換與反轉換的方法及電路
KR102601732B1 (ko) * 2016-05-31 2023-11-14 삼성디스플레이 주식회사 영상 부호화 방법 및 영상 복호화 방법
US11756240B2 (en) * 2020-02-28 2023-09-12 Shanghai United Imaging Intelligence Co., Ltd. Plugin and dynamic image modality reconstruction interface device
CN111556612B (zh) * 2020-06-04 2022-02-18 黄萍 一种电源线载波驱动led灯体的压缩灰度控制码协议
CN113362348B (zh) * 2021-07-19 2023-04-11 网易(杭州)网络有限公司 图像处理方法、装置、电子设备及存储介质
CN116027181B (zh) * 2023-03-30 2023-07-18 浙江瑞测科技有限公司 一种并行图像处理装置及方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3360844B2 (ja) * 1992-02-04 2003-01-07 ソニー株式会社 ディジタル画像信号の伝送装置およびフレーム化方法
US5253056A (en) * 1992-07-02 1993-10-12 At&T Bell Laboratories Spatial/frequency hybrid video coding facilitating the derivatives of variable-resolution images
JP3381855B2 (ja) * 1992-12-28 2003-03-04 ソニー株式会社 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置
US5539663A (en) * 1993-11-24 1996-07-23 Intel Corporation Process, apparatus and system for encoding and decoding video signals using temporal filtering
US5642139A (en) * 1994-04-29 1997-06-24 Cirrus Logic, Inc. PCMCIA video card
JP2933487B2 (ja) * 1994-07-15 1999-08-16 松下電器産業株式会社 クロマフォーマット変換の方法
JPH0837672A (ja) * 1994-07-21 1996-02-06 Sony Corp カラーコンポーネントビデオ信号方式変換装置
US5610659A (en) * 1995-05-08 1997-03-11 Futuretel, Inc. MPEG encoder that concurrently determines video data encoding format and rate control
JPH0984011A (ja) * 1995-09-14 1997-03-28 Hitachi Ltd 動画符号化方式変換装置
US5712687A (en) * 1996-04-25 1998-01-27 Tektronix, Inc. Chrominance resampling for color images

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7151799B2 (en) 2002-03-14 2006-12-19 Kddi Corporation Transcoder for coded video
KR20040003588A (ko) * 2002-07-03 2004-01-13 삼성전자주식회사 영상신호의 포맷 변환기 및 그 방법

Also Published As

Publication number Publication date
EP0862339B1 (en) 2003-12-10
AU694400B1 (en) 1998-07-16
CN1175670C (zh) 2004-11-10
CN1545330A (zh) 2004-11-10
CN1196641A (zh) 1998-10-21
CN1315331C (zh) 2007-05-09
JP3901287B2 (ja) 2007-04-04
EP1367840A3 (en) 2004-01-02
EP0862339A2 (en) 1998-09-02
CA2228241A1 (en) 1998-08-27
EP1367840A2 (en) 2003-12-03
DE69820313T2 (de) 2004-10-21
SG76534A1 (en) 2000-11-21
EP0862339A3 (en) 2000-03-08
MY127521A (en) 2006-12-29
DE69820313D1 (de) 2004-01-22
US5982432A (en) 1999-11-09
CA2228241C (en) 2000-12-12

Similar Documents

Publication Publication Date Title
JP3901287B2 (ja) 映像信号変換装置、映像信号変換方法及び映像提供システム
JP4092734B2 (ja) ディジタル信号変換方法およびディジタル信号変換装置
US6349154B1 (en) Method and Arrangement for creating a high-resolution still picture
JPH06205438A (ja) 画像信号符号化方法および画像信号符号化装置、画像信号復号化方法および画像信号復号化装置、ならびに画像信号記録媒体
US5905846A (en) Image decoding apparatus and process thereof and image reproduction apparatus
JP3168922B2 (ja) デジタル画像情報の記録再生装置
JPH0937243A (ja) 動画像符号化装置及び復号装置
JP3140487B2 (ja) 画像記録再生装置
JP4526529B2 (ja) 階層画像を用いる映像信号変換装置
JP2008109700A (ja) ディジタル信号変換方法およびディジタル信号変換装置
JP4605212B2 (ja) ディジタル信号変換方法およびディジタル信号変換装置
JPH07336681A (ja) 画像変換装置
JP4513856B2 (ja) ディジタル信号変換方法およびディジタル信号変換装置
JPH07250329A (ja) 画像合成符号化方法及び画像合成装置
JP3481111B2 (ja) 動画像復号化装置
JP2002010291A (ja) 映像信号変換装置
JPH06311498A (ja) 画像信号の符号化・復号化装置
JP2004088795A (ja) 画像信号生成装置および方法、並びに、画像信号再生装置および方法
PO et al. 4 DATA COMPRESSION TECHNIQUES
JP2008109701A (ja) ディジタル信号変換方法およびディジタル信号変換装置
JP2008118693A (ja) ディジタル信号変換方法およびディジタル信号変換装置
JP2002135803A (ja) 画像信号記録媒体の製造方法、および画像信号記録媒体
JPH0818968A (ja) 画像データ符号化/復号化方法及び装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040322

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061226

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20061226

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120112

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130112

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees