JPH0746441A - 映像データ処理装置及び方法 - Google Patents

映像データ処理装置及び方法

Info

Publication number
JPH0746441A
JPH0746441A JP5111703A JP11170393A JPH0746441A JP H0746441 A JPH0746441 A JP H0746441A JP 5111703 A JP5111703 A JP 5111703A JP 11170393 A JP11170393 A JP 11170393A JP H0746441 A JPH0746441 A JP H0746441A
Authority
JP
Japan
Prior art keywords
data
data stream
data streams
video
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5111703A
Other languages
English (en)
Other versions
JP3466657B2 (ja
Inventor
John W Richards
ウィリアム リチャーズ ジョン
Stephen M Keating
マーク キーティング スティーブン
James Stone Jonathan
ジェームズ ストーン ジョナサン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Europe BV United Kingdom Branch
Original Assignee
Sony United Kingdom Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony United Kingdom Ltd filed Critical Sony United Kingdom Ltd
Publication of JPH0746441A publication Critical patent/JPH0746441A/ja
Application granted granted Critical
Publication of JP3466657B2 publication Critical patent/JP3466657B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/12Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • H04N5/937Regeneration of the television signal or of selected parts thereof by assembling picture element blocks in an intermediate store
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/843Television signal recording using optical recording on film

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Picture Signal Circuits (AREA)
  • Color Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Processing (AREA)

Abstract

(57)【要約】 【目的】 データの分割、処理及び合成による歪みが少
ない映像データ処理を可能とする。 【構成】 原データストリームを複数の分割データスト
リームに分割する。これらの分割データストリームの各
々は、原データストリームの情報の一部分のみを含む。
分割データストリームをあと製作処理手段で別々に処理
し、これらをデータ合成器108に送って組合せ、出力
データストリームを作る。原データストリーム及び出力
データストリームは、個々の分割データストリームより
高解像度である。あと製作処理手段は、行おうとする処
理に合った異なる技法を用いて分割データストリームを
リフォーマットする手段96,100を含む。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、映像データの処理に関
するものである。
【0002】
【従来の技術】映像データの処理は、技術が十分に確立
された分野である。映像データは、多くの異なる形で捕
捉する(取込む)ことができる。例えば、スチルもしく
は運動映像写真カメラ又はスチルもしくは運動映像電子
カメラにより捕捉できる。映像データは、一旦捕捉され
ると、PAL,NTSC,SECAM又はSMPTE2
40Mなどの公知の映像データフォーマットに合ったデ
ータストリームに変換されるのが普通である。
【0003】これらのフォーマットの映像データを処理
する機器には、多くの異なるものがある。その処理に
は、多くの異なる形式が取られている。例えば、その処
理が、磁気テープへの記録であったり、デジタルビデオ
特殊効果装置による処理であったり、動き補正標準変換
又は空間濾波であったりする。
【0004】映像データの捕捉、処理及び再生の技術が
進歩するにつれて、ますます高解像度の装置を使用する
ことが可能となった。現在、この技術分野は、PAL,
NTSC及びSECAMのようなフォーマットの使用
と、新しい世代の高精細度(高品位)ビデオフォーマッ
トの使用との間の過渡期のスタート点にある。
【0005】このような発展の途上に立ちはだかる主な
障害は、これらの新しい一層高品位のフォーマットのデ
ータを処理する装置を製作するために、膨大な量の投資
と開発努力を要することである。空間的及び時間的解像
度が増すに従って、映像データを処理しなければならな
い速度が増し、これに対処するために極めて複雑な機器
を使用しなければならなくなっている。これは、ばく大
な費用を伴う仕事である。
【0006】
【発明が解決しようとする課題】解像度が一層高いフォ
ーマットの使用を容易にする1つの方法は、原データス
トリームを或る数の別々のデータストリームに分割し、
その各々に原データストリームの情報内容の一部分のみ
を持たせることである。分割の結果データストリームの
情報内容が減少すると、最初からもっと低い解像度フォ
ーマットで使用するように設計された既存の、又は少し
改変した機器を使用することが、十分に可能となる。こ
の技法は、より低い解像度用に最初から製作された機器
の構成部分を組合せると、より高い解像度の装置を構成
することができる、という階層的原理を示すものであ
る。
【0007】上述の方法は、一見魅力的な方法である
が、それを実際に使用しようとすると解決しなければな
らない固有の問題を伴っている。詳しくいえば、映像デ
ータを分割し、処理し、再び合成すると、最初に意図さ
れたフォーマットのデータに低解像度機器を用いた場合
には生じないか、或いは問題にならない歪みが映像デー
タの中に入ってくることがある。
【0008】したがって、本発明の課題は、上述の階層
的原理を採用するも、データの分割、処理及び合成によ
る歪みが少ない映像データ処理装置を提供することであ
る。
【0009】
【課題を解決するための手段及び作用】本発明による映
像データ処理装置は、次のような特徴を有するものであ
る。 (i)映像を表す原データストリームを発生する映像デ
ータ源と、(ii)上記原データストリームを、各々が該
データストリームの情報内容の一部分を表す複数の分割
データストリームに分割するデータ分割器と、(iii )
上記複数の分割データストリームに処理を施す処理手段
と、(iv)上記複数の分割データストリームを組合せて
1つの出力データストリームを合成するデータ合成器と
を具え、(V)上記処理手段は、上記複数の分割データ
ストリームを、該データストリームに加えようとする処
理によく合った異なる技法に従って、該データストリー
ムの情報内容が上記複数の分割データストリームの間に
分割されるように、リフォーマット(reforma
t)する少なくとも1つのリフォーマッタを含むことを
特徴としている。
【0010】本発明は、映像データを分割する方法が変
わると、再結合(合成)前の或る形の処理には適する
が、他の形の処理には適しない、という問題を認識して
これを解決するものである。装置の処理手段に少なくと
も1つのリフォーマッタを設けると、該装置の多用途性
が大きく増加するのに対し、複雑性は僅かしか増加しな
い。
【0011】データ分割器及びデータ合成器が多くの異
なる分割技法を用いうることは、分かるであろう。デー
タ分割フォーマットを変えるため、処理装置の異なる項
目間に必要なインタフェースは何でも設けるという「そ
の場限りの」方法を使用することもできる。しかし、そ
うすると、処理回路に沿う色々な個所で信号をモニタす
るのに一様な方法が取れなくなる、という問題を引き起
こすことになる。
【0012】もっとよい方法は、処理装置間でデータを
交換するために一定のフォーマットを設定し、この一定
フォーマット以外のものを必要とする各処理装置の入力
及び出力に、その一定フォーマットからリフォーマット
し(他のフォーマットに作り変え)再び該一定フォーマ
ットに戻すリフォーマッタを設けることである。使用可
能な種々の分割技法には、それぞれ関連した利点と欠点
がある。サブサンプリング(図11参照)によりデータ
を分割するのは実施が簡単であるが、モニタ信号の質が
概して高くない。タイル分割(図7参照)によるデータ
分割は、なお実施が比較的容易で標準的なエラー隠蔽を
使用できる利点があるが、それをモニタすることが容易
でなく、再合成したとき望ましくないエッジ現象が目に
見えることがある。
【0013】本発明の好適な具体構成では、上記データ
分割器は、原データストリームを複数の2次元空間周波
数サブバンド(分割帯域)のデータストリームに分割す
る手段を含み、上記データ合成器は、上記2次元空間周
波数サブバンドの複数のデータストリームを組合せて上
記出力データストリームを合成する手段を含んでいる。
空間周波数に基いてデータを分割することは、比較的簡
単で安価なフィルタを用いて達成できる。また、各サブ
バンドが映像全体のエッジに対応するエッジしか持たな
いので、この方法によれば、再構成された映像の中央部
にエッジ現象エラーを起こすことは余りない。
【0014】サブバンド分割技法は、上記処理手段が、
上記2次元空間周波数サブバンドの複数のデータストリ
ームを別々に記録する映像データ記録器と、最も低い2
次元空間周波数をもつ2次元サブバンドのデータストリ
ームから部分的にリプレイしてモニタ映像を再生するモ
ニタ手段とを含む場合に、特に適している。映像をモニ
タすることは、デジタルビデオ効果ユニットで編集処理
をするような仕事を行うとき決定的に重要であり、上記
特徴により、記録されたチャンネルの1つを用いて質の
よいモニタ映像を与えることができる。
【0015】本発明の特に好適な具体構成では、上記デ
ータ分割器は、最も低い2次元空間周波数をもち、且つ
テレビジョン受像機による直接再生に適する信号フォー
マットをもつ2次元サブバンドのデータストリームを与
える動作をする。このようにすれば、最低2次元空間周
波数をもつサブバンドデータを従来のテレビジョン受像
機に直接タップ(接続)して表示させることができる。
このモニタ映像は、原データストリームより解像度は低
いが、映像データストリーム内の特定点を見付ける機能
を果すには全く充分である。
【0016】サブバンド分割は上述したような利点があ
るが、分割したデータストリームにおけるどれかのデー
タを処理して空間周波数が変わると、再合成の際ひどい
歪みを起こす欠点がある。また、空間濾波を伴う処理を
すると、処理される個々の分割データストリームの空間
解像度が減少するため、解像度が減少するという欠点が
ある。
【0017】したがって、本発明の好適な具体構成で
は、上記少なくとも1つのリフォーマッタは、上記複数
の分割データストリームを、各々が映像内の異なる区域
を表す複数のデータストリームにリフォーマットする手
段を含んでいる。
【0018】このリフォーマットにより、関係処理に要
求される、各分割データストリームにおける充分な空間
解像度が回復される。タイル分割されたデータを与える
ことができるリフォーマッタをもつ本発明の具体構成
は、上記処理手段が、映像の異なる区域を表す上記複数
のデータストリームに別々に空間濾波を施す空間濾波手
段を含む場合に、特に適している。
【0019】上記少なくとも1つのリフォーマッタが、
上記複数の分割データストリームを複数のサブサンプル
されたデータのストリームにリフォーマットする手段を
含む具体構成では、もう1つのリフォーマット操作が行
われる。このような処理前の分割は、画像の中央に望ま
しくないエッジ効果が現れるのを防ぎ、分割データスト
リームの空間周波数を変えてはならない、という厳しい
要件を緩和する。
【0020】実時間で処理をしたい場合、好適な具体構
成の1つでは、上記処理手段を、上記複数の分割データ
ストリームの各々が異なるチャンネルで処理される多チ
ャンネル構成とし、上記映像データを実時間で処理でき
るようにしている。
【0021】或いはまた、実時間処理を要しない場合、
ハードウェア効率のよい本発明の好適な具体構成では、
上記データ分割器は、上記複数の分割データストリーム
の一連の同期した部分より成る多重化されたデータスト
リームを出力し、上記処理手段は、この多重化データス
トリームに非実時間処理を施している。
【0022】本発明はまた、次のステップを含む映像デ
ータ処理方法を提供する。 (i)映像を表す原データストリームを発生すること、
(ii)上記原データストリームを、各々が該データスト
リームの情報内容の一部分を表す複数の分割データスト
リームに分割すること、(iii )上記複数の分割データ
ストリームを、あとの処理によく合った異なる技法に従
って、上記原データストリームの情報内容が上記複数の
分割データストリームに分割されるように、リフォーマ
ットすること、(iv)上記複数の分割データストリーム
に処理を施すこと、(V)上記複数の分割データストリ
ームを組合せて1つの出力データストリームとするこ
と。
【0023】
【実施例】以下、図面により本発明を具体的に説明す
る。図1は、低い情報内容の映像データを処理するよう
に最初から設計された機器で映像データを処理する非実
時間装置の例を示すものである。図中、原(ソース)映
像データストリームを発生する種々の装置が示されてい
る。これらは、スチル映像写真カメラ2及びスライド走
査器4、映画(ムービー)カメラ6及びフィルム走査器
8、高品位運動映像電子(HDVS)カメラ10、高品
位デジタルビデオテープレコーダ(HD−DVTR)1
2及びビデオアップ変換器14、超高解像度(SHR)
運動映像電子ビデオカメラ16及び超高解像度デジタル
ビデオテープレコーダ(SHR−DVTR)18であ
る。図は、将来開発される解像度が増した機器に装置が
対処できるように、これらを階層構成としたものを示
す。
【0024】これらの装置の映像捕捉(撮像)は、実時
間で行われる。この例における後続処理は、非実時間で
行われる。処理時間を減らす因子は、データが分割され
るストリームの数にほぼ等しい。
【0025】スライド走査器4、フィルム走査器8又は
ビデオアップ変換器14の1つからの非実時間原データ
ストリームは、それぞれのデータ分割器20に供給され
る。データ分割器20からの分割されたデータストリー
ムは、各分割データストリームの一連の同期した部分よ
り成る多重化されたデータストリームの形を取ってい
る。例えば、単一フレームからの映像データが4つの別
々のストリームに分割され、これらが順次データ分割器
20から出力される。データ分割器20からの非実時間
多重化データストリームは、高品位デジタルビデオテー
プレコーダ22に記録される。SHRカメラ16及びS
HRデジタルビデオテープレコーダ18の場合、SHR
デジタルビデオテープレコーダは映像データを実時間で
捕捉するが、該データはデータ分割器20により非実時
間で再生される。
【0026】分割されたデータはそれから、あと製作処
理ユニット24に供給される。あと製作(ポストプロダ
クション)処理ユニット24は、高品位ビデオ特殊効果
ユニット又は高品位フィルタ装置のような、高品位機器
の標準的構成部分であってもよい。或いは、具体構成に
よっては、その処理が高品位デジタルビデオテープレコ
ーダ(HD−DVTR)22による磁気媒体への記録で
あることもある。
【0027】あと製作処理ユニット24の出力は、更に
もう1つのHD−DVTR26を介してデータ合成器2
8に送られる。データ合成器28は、分割されたデータ
ストリームを組合せて1つの出力データストリームを合
成する。これは更に、SHR(超高解像度)フィルム転
写ユニット30を経て70mmフィルム映写機32に送
るか、又はSHRビデオチャンネル(34)に向けられ
る。或いはまた、合成出力データストリームをビデオダ
ウン変換器36によりパン・走査・ズーム操作を加えて
再び分割し、標準高品位チャンネル38を経て表示した
り、又は電子ビームレコーダ(EBR)40により35
mmフィルム上に載せたりすることもできる。
【0028】図2は、低い情報内容の映像データを処理
するように最初から設計された機器で映像データを処理
する実時間装置の例を示す。この装置と図1装置との違
いは、データ分割器20とデータ合成器28との間に、
4つのあと製作処理ユニット24とこれに対応するバン
ク(組)のHD−DVTR22及び26より成る多チャ
ンネルが構成されていることである。4つのあと製作処
理ユニット24は統合された動作をしなければならない
ので、これらの動作を同期させるためにコントローラ4
2が設けられる。例えば、あと製作処理ユニットがフェ
ード又はワイプ操作を行っている場合、再合成時の歪み
を回避するためには、各分割データストリームに対し同
じレートで操作が進行しなければならない。
【0029】図3は、ビデオデータの超高解像度(SH
R)フレームを示す図である。これは、現在の高品位ビ
デオのほぼ4倍の(2倍の水平及び2倍の垂直)解像度
で、2070水平ラインをもち、各ラインは3840ピ
クセルより成る。
【0030】図4は、図3のSHRフレームAを4つの
2次元空間周波数サブバンドに分割する方法を示す説明
図である。この例では、映像が水平(H)及び垂直
(V)の両方向に低(Lo)及び高(Hi)周波数成分
に分割されている。サブバンド44は、低水平(Lo
H)及び低垂直(LoV)周波数成分である。サブバン
ド46は、低水平(LoH)及び高垂直(HiV)周波
数成分である。サブバンド48は、高水平(HiH)及
び低垂直(LoV)周波数成分である。サブバンド50
は、高水平(HiH)及び高垂直(HiV)周波数成分
である。図3のSHRフレームは標準の高品位ビデオフ
レームのほぼ2倍の水平及び垂直空間周波数を有するの
で、4の率で分割することは、サブバンド44が実際に
高品位(HDVS)基本バンドの映像を表すことを意味
する。サブバンド52は、映像データの次のフレームB
の第1サブバンドである。
【0031】図5は、サブバンド分割用のデータ分割器
20の動作を示すブロック図である。SHR原データス
トリームは、フィルタ・バンク(組)54に供給され
る。非実時間装置の場合、このデータは標準レートの1
/4で供給される。フィルタ・バンク54は、入力デー
タストリームをデシメート(間引き)し周波数分離する
ため、公知のタイプの有限インパルス応答フィルタのア
レイより成る。フィルタ・バンク54の出力は、各々が
異なる空間周波数サブバンドを表す4つの並列データス
トリームである。図2の実時間装置の場合、これらの分
割データストリームは並列に多チャンネルあと製作処理
系に供給される。非実時間装置の場合、これらはバッフ
ァ・セレクタ56に供給して集められ、図1の装置のあ
と製作処理のためただ1つの高品位ビデオチャンネルに
順次供給される。
【0032】図6は、サブバンド分割技法で生成された
分割データストリームに対して用いるデータ合成器28
の動作を示すブロック図である。実時間装置では、分割
データストリームは並列にフィルタ・バンク58に供給
され、そこでこれらは組合され補間されてSHR信号と
なる。実時間装置の場合、並列チャンネルは、修正され
ることなくセレクタ・バッファ60を通過する。非実時
間装置の場合、多重化された分割データストリームは、
直列(順次)チャンネルを経てセレクタ・バッファ60
に供給され、そこでこれらは適切なバッファメモリに供
給され、続いて次のフレーム期間にフィルタ・バンク5
8に並列出力が発生される。その間、他の組のバッファ
は、その次のフレームに対する分割データストリームを
受ける。
【0033】図7は、タイル分割技法によるSHRフレ
ームの分割を示す。映像が4つの異なる区域A1,A
2,A3,A4にそれぞれ等分されている。これらの4
等分区域は、互いに重なっている。この重なりは、4等
分区域をあとで再合成するとき、エッジ効果歪みを除く
のに役立つ。
【0034】図8は、このタイル分割技法により分割さ
れたデータストリームを示す。各データストリームは、
図7のSHRフレームA内のそれぞれの4等分区域を表
している。4等分区域B1は、次のSHRフレームの左
上の4等分区域を表す。
【0035】図9は、タイル分割又はサブサンプリング
分割に用いる非実時間データ分割器20を示す。SHR
データが交替バッファ装置62に供給される。SHRデ
ータの各フレームは、交替バッファ装置62のどちらか
一方のフレームメモリにそれぞれ記憶される。タイミン
グ回路64は、SHRデータからタイミング及び同期情
報を抽出する。このタイミング回路は、読出しアドレス
発生器66及び書込みアドレス発生器68の動作を制御
する。これらのアドレス発生器66及び68は、交替バ
ッファ装置62のフレームメモリ内の所定順序のアドレ
スに増分カウントをマッピングするため、適正にプログ
ラムされたPROMにアドレス指定する増分(インクリ
メント)カウンタを有することができる。SHRデータ
の現フレームが、書込みアドレス発生器68の制御の下
にフレームメモリの一方に供給されている間に、その前
のフレームのデータが、読出しアドレス発生器66の制
御の下に他方のフレームメモリから読出される。
【0036】PROMを適切にプログラムすることによ
り、データをフレームメモリにその正常なラスタ走査パ
ターンで読込んでも、所望の任意の順序で読出すことが
可能である。例えば、タイル分割の場合、データを4つ
のラスタ走査された等分区域として読出し、サブサンプ
リング分割の場合、データをラスタ走査され空間的にサ
ブサンプルされた順序で読出すことができる。これにつ
いては、あとで述べる。
【0037】
【0038】図10は、図9のデータ分割器を実時間用
に改変したものを示す。この場合は、4つの並列の交替
バッファが設けられる。分割は、フレームメモリの入力
側又は出力側で行うことができる。全体の映像を各フレ
ームメモリに書込み、その中の適切なピクセルを所定順
序の読出しアドレスで制御して読出す。或いは、特定の
分割データストリームに対するピクセルのみを各フレー
ムメモリに読込み、これらをすべて簡単な増分読出しア
ドレスで並列に読出してもよい。
【0039】図11は、サブサンプリング分割技法を示
す説明図である。SHRフレームの小区域内のピクセル
を図11の下側に拡大して図解的に示す。それぞれの分
割データストリームに対するピクセルを○、△、▽及び
□で示してある。ピクセルが全SHRフレームにわたっ
て規則正しいアレイの形に効果的にサブサンプルされ、
各分割データストリームを構成している。
【0040】図12は、サブサンプルされたピクセルが
一緒に集められた分割データストリームを示す。それぞ
れの分割データストリームは、1SHRフレームからの
○、△、▽、□ピクセルを全部含むものである。
【0041】図9及び10のデータ分割器は、アドレス
発生器66,68における適切なアドレス・マッピング
により、前のタイル分割でなく図11及び12のサブサ
ンプリング分割を行うように容易に改変できることを理
解されたい。
【0042】図13は、リフォーマッタを含む処理手段
の例を示す。同図の処理手段は、前景映像を処理しこれ
を背景映像に挿入(キーイング)するものである。デー
タ分割器92は、前景映像データストリームを図4に示
すような一連の続くサブバンド(SB)映像に分割する
(サブバンド分割は、この例では、処理装置間の一定の
データ交換フォーマットとして使用される。)。これら
のサブバンド映像は、それからVTR94に記憶され
る。前景映像は、背景映像と組合せる前に圧縮するのが
望ましい。この圧縮は、映像内の空間周波数を変えるの
で、サブバンド領域では行えない。これを解決するこ
め、リフォーマッタ96は、サブバンド(SB)フォー
マットからのデータを図7に示したタイル分割フォーマ
ットに変換する。リフォーマッタ96の出力はそれか
ら、デジタル多効果ユニット(DME)98において圧
縮され、リフォーマッタ100により再びSBフォーマ
ットに戻される。
【0043】背景映像は、もう1つのチャンネルでデー
タ分割器102によりSBフォーマットに分割され、V
TR104に記憶される。リフォーマッタ100及びV
TR104の出力は、キーヤー106に入力され、そこ
でキー信号の制御の下にサブバンド領域で一緒にキーイ
ングされ、データ合成器108により出力データストリ
ームに合成される。
【0044】DMEによる圧縮及びキーイング処理の結
果をオペレータにフィードバックするため、LoH,L
oVサブバンド(図4参照)を読取るモニタ110を設
ける。
【0045】リフォーマッタ96,100は、図5,
6,9及び10について前述したデータ分割器及びデー
タ合成器を用いて構成できる。リフォーマッタ96(S
B→タイル)は、サブバンド合成器にタイル分割器を直
列に接ぎ、リフォーマッタ100(タイル→SB)は、
タイル合成器にサブバンド分割器を直列に接いで構成す
ることができる。
【0046】図14は、非実時間サブバンド分割データ
のモニタ方法を示す。多重化されたサブバンド(SB)
データの直列ストリームは、選択的にサンプルされフレ
ームメモリ74に入れられる。フレームメモリ74への
同期入力は、該メモリ74に取込まれるものが低周波数
水平及び低周波数垂直SBデータであることを確実にす
るものである。この特定のサブバンドは、前述のよう
に、標準高品位モニタ76の駆動に直接使用できる基本
バンド高品位ビデオ信号を表す。
【0047】図15は、実時間サブバンド分割データの
モニタ方法を示す。この方法では、低周波数水平(Lo
H)及び低周波数垂直(LoV)SBデータを直接高品
位モニタ78に分岐接続することができ、非実時間装置
のようにフレームメモリをバッファに使う必要はない。
【0048】図16は、非実時間タイル分割データのモ
ニタ方法を示す。原映像フレームの連続する4等分区域
は、フレームメモリ80に取込まれる。この取込まれた
データはそれから、再濾波されてエッジ効果(歪み)を
除去され高品位信号にダウン・デシメート(サンプルレ
ートを下げる)される。これは、高品位モニタ82の駆
動に使用できる。
【0049】図17は、実時間タイル分割データのモニ
タ方法を示す。この場合、4等分区域は並列に捕捉され
るが、その他の合成、再濾波及びデシメーションの過程
は同一である。図18及び19はそれぞれ、サブサンプ
リング分割方式における非実時間及び実時間モニタ方法
を示す。これらのモニタ装置は、各分割データストリー
ム内のデータの順序が異なる点を除き、図16及び17
のものとほぼ同じである。
【0050】図20,21及び22は、行うことが考え
られるあと製作処理の例を示す。映像はすべて、図3に
示した形式のSHRフォーマットをもつものである。図
20は、拡大し焦点をぼかした高品位(HD)映像の背
景83にあとで前景映像84をその最高の超解像度で当
てがったものを示す。図21は、SHR背景86にHD
前景88をその最高品位解像度で当てがったものを示
す。図22は、水平及び垂直方向に拡大してSHRフレ
ーム90を満たしたHD映像を示す。
【0051】以上、本発明を図示の実施例について詳細
に説明したが、本発明は、これらの実施例に限定される
ものではなく、特許請求の範囲内において種々の変形、
変更が可能なものである。
【0052】
【発明の効果】映像データを分割し、処理し、合成する
ことにより生じる歪みを低減できるので、既存の低解像
度用機器の構成部分を組合せて、もつと高解像度用の装
置を構成することができる。
【図面の簡単な説明】
【図1】本発明を用いる映像データ非実時間処理装置の
例を示す構成図である。
【図2】本発明を用いる映像データ実時間処理装置の例
を示す構成図である。
【図3】ビデオデータの超高解像度(SHR)フレーム
を示す図である。
【図4】図3のSHRフレームAを4つの2次元空間周
波数サブバンドに分割した分割データストリームを図解
的に示す説明図である。
【図5】サブバンド分割に用いるデータ分割器20の動
作を示すブロック図である。
【図6】サブバンド分割データストリームに用いるデー
タ合成器の動作を示すブロック図である。
【図7】SHRフレームを4つのタイルに分割する方法
を示す説明図である。
【図8】タイル分割による分割データストリームを図解
的に示す説明図である。
【図9】タイル分割又はサブサンプリング分割に用いる
非実時間データ分割器を示すブロック図である。
【図10】タイル分割又はサブサンプリング分割に用い
る実時間データ分割器を示すブロック図である。
【図11】SHRフレームをサブサンプリング分割する
方法を示す説明図である。
【図12】サブサンプリング分割された分割データスト
リームを図解的に示す説明図である。
【図13】リフォーマッタを含む処理手段の例を示すブ
ロック図である。
【図14】非実時間サブバンド分割データのモニタ方法
を示すブロック図である。
【図15】実時間サブバンド分割データのモニタ方法を
示すブロック図である。
【図16】非実時間タイル分割データのモニタ方法を示
すブロック図である。
【図17】実時間タイル分割データのモニタ方法を示す
ブロック図である。
【図18】非実時間サブサンプリング分割データのモニ
タ方法を示すブロック図である。
【図19】実時間サブサンプリング分割データのモニタ
方法を示すブロック図である。
【図20】あと製作処理の例1を示す図である。
【図21】あと製作処理の例2を示す図である。
【図22】あと製作処理の例3を示す図である。
【符号の説明】
2,6,10,16 映像データ源 20,92,102 データ分割器 24,(96,98,100) 処理手段 28,108 データ合成器 96,100 リフォーマッタ 22,94,104 映像データ記録器 110,110′,110″ モニタ手段
───────────────────────────────────────────────────── フロントページの続き (72)発明者 スティーブン マーク キーティング イギリス国 RG6 3AB,バークシャ ー,レディング,ローワー アーリー,ハ ンティングドン クロース 28 (72)発明者 ジョナサン ジェームズ ストーン イギリス国 RG2 8PQ,バークシャ ー,レディング,ホィットリー ウッド レーン,フォレスト ディーン 7

Claims (11)

    【特許請求の範囲】
  1. 【請求項1】 映像を表す原データストリームを発生す
    る映像データ源と、 上記原データストリームを、各々が該原データストリー
    ムの情報内容の一部分を表す複数の分割データストリー
    ムに分割するデータ分割器と、 上記複数の分割データストリームに処理を施す処理手段
    と、 上記複数の分割データストリームを組合せて1つの出力
    データストリームにするデータ合成器とを具え、 上記処理手段は、上記複数の分割データストリームを、
    これら複数の分割データストリームに加えようとする処
    理によく合った異なる技法に従って、上記原データスト
    リームの情報内容が上記複数の分割データストリームに
    分割されるようにリフォーマットする少なくとも1つの
    リフォーマッタを含むことを特徴とする映像データ処理
    装置。
  2. 【請求項2】 上記処理手段は、その入力に第1のリフ
    ォーマッタを、その出力に第2のリフォーマッタを含む
    請求項1の装置。
  3. 【請求項3】 上記データ分割器は、上記原データスト
    リームを複数の2次元空間周波数サブバンドのデータス
    トリームに分割する手段を含み、上記データ合成器は、
    上記複数の2次元空間周波数サブバンドのデータストリ
    ームを組合せて上記出力データストリームを作成する手
    段を含む請求項1の装置。
  4. 【請求項4】 上記処理手段は、上記複数の2次元空間
    周波数サブバンドのデータストリームを別々に記録する
    映像データ記録器と、最も低い2次元空間周波数をもつ
    上記2次元サブバンドのデータストリームからの部分的
    再生によりモニタ映像を再生するモニタ手段とを含む請
    求項3の装置。
  5. 【請求項5】 上記データ分割器は、テレビジョン受像
    機による直接再生に適する信号フォーマットで、最も低
    い2次元空間周波数をもつ2次元サブバンドのデータス
    トリームを与える動作をする請求項3の装置。
  6. 【請求項6】 上記少なくとも1つのリフォーマッタ
    は、上記複数の分割データストリームを、各々が1映像
    内の異なる区域を表す複数のデータストリームにリフォ
    ーマットする手段を含む請求項1の装置。
  7. 【請求項7】 上記処理手段は、1映像の異なる区域を
    表す上記複数のデータストリームに別々に空間的濾波を
    行う空間濾波手段を含む請求項6の装置。
  8. 【請求項8】 上記少なくとも1つのリフォーマッタ
    は、上記複数の分割データストリームを複数のサブサン
    プルされたデータストリームにリフォーマットする手段
    を含む請求項1の装置。
  9. 【請求項9】 上記処理手段は、上記映像データを実時
    間処理するため、各々が異なるチャンネルで処理される
    上記複数の分割データストリームに関する多チャンネル
    構成を有する請求項1の装置。
  10. 【請求項10】 上記データ分割器は、上記複数の分割
    データストリームの一連の同期部分を含む多重化された
    データストリームを出力し、上記処理手段は上記多重化
    されたデータストリームに非実時間処理を施す請求項1
    の装置。
  11. 【請求項11】 映像データを処理する方法であって、 (i)映像を表す原データストリームを発生し、 (ii)上記原データストリームを、各々が該原データス
    トリームの情報内容の一部を表す複数の分割データスト
    リームに分割し、 (iii )上記複数の分割データストリームを、あとの処
    理によく合った異なる技法に従って、上記原データスト
    リームの情報内容が上記複数の分割データストリームに
    分割されるようにリフォーマットし、 (iv)上記複数の分割データストリームに処理を施し、 (V)上記複数の分割データストリームを1つの出力デ
    ータストリームに組合せるステップを含む方法。
JP11170393A 1992-05-13 1993-05-13 映像データ処理装置 Expired - Lifetime JP3466657B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB9210261:5 1992-05-13
GB9210261A GB2267194B (en) 1992-05-13 1992-05-13 Apparatus and method for processing image data

Publications (2)

Publication Number Publication Date
JPH0746441A true JPH0746441A (ja) 1995-02-14
JP3466657B2 JP3466657B2 (ja) 2003-11-17

Family

ID=10715435

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11170393A Expired - Lifetime JP3466657B2 (ja) 1992-05-13 1993-05-13 映像データ処理装置

Country Status (5)

Country Link
US (1) US5392071A (ja)
EP (1) EP0570092B1 (ja)
JP (1) JP3466657B2 (ja)
DE (1) DE69320689T2 (ja)
GB (1) GB2267194B (ja)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5861894A (en) 1993-06-24 1999-01-19 Discovision Associates Buffer manager
CA2145365C (en) 1994-03-24 1999-04-27 Anthony M. Jones Method for accessing banks of dram
CA2145363C (en) 1994-03-24 1999-07-13 Anthony Mark Jones Ram interface
US5703793A (en) 1994-07-29 1997-12-30 Discovision Associates Video decompression
GB9417138D0 (en) * 1994-08-23 1994-10-12 Discovision Ass Data rate conversion
JPH09294238A (ja) * 1996-04-24 1997-11-11 Sony Corp 画像取り込み装置、画像取り込み方法、画像取り込みシステム、画像表示処理装置、及び記録媒体
KR100284696B1 (ko) * 1998-06-29 2001-03-15 윤종용 Mpeg 복호 블럭에서의 수평/수직 주파수 변환장치
US6745231B1 (en) 2000-08-08 2004-06-01 International Business Machines Corporation System for securing electronic mail
US20030063191A1 (en) * 2001-10-03 2003-04-03 Philips Electronics North America Corp. Method and system for detecting and selecting foreground objects
US7428019B2 (en) * 2001-12-26 2008-09-23 Yeda Research And Development Co. Ltd. System and method for increasing space or time resolution in video
US7197071B1 (en) 2002-09-09 2007-03-27 Warner Bros. Entertainment Inc. Film resource manager
US7376183B2 (en) * 2002-09-09 2008-05-20 Warner Bros. Entertainment, Inc. Post-production processing
WO2004086747A2 (en) 2003-03-20 2004-10-07 Covi Technologies, Inc. Systems and methods for multi-stream image processing
US7464121B2 (en) * 2006-01-06 2008-12-09 International Business Machines Corporation Apparatus for sending a sequence of asynchronous messages to the same member of a clustered consumer
MY162861A (en) 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
JP4645638B2 (ja) 2007-11-22 2011-03-09 ソニー株式会社 信号送信装置、信号送信方法、信号受信装置及び信号受信方法
US8325757B2 (en) * 2009-12-17 2012-12-04 Silicon Image, Inc. De-encapsulation of data streams into multiple links
JP2014146924A (ja) * 2013-01-28 2014-08-14 Sony Corp ソース機器、シンク機器、通信システムおよび画像送信方法
CN105611213A (zh) * 2016-01-04 2016-05-25 京东方科技集团股份有限公司 一种图像处理方法、播放方法及相关的装置和系统
AU2016273973A1 (en) 2016-12-16 2018-07-05 Canon Kabushiki Kaisha Transcode PCL delta-row compressed image to edges
US10489199B2 (en) 2017-05-12 2019-11-26 Google Llc Program code transformations to improve image processor runtime efficiency
CN112313954B (zh) * 2018-06-28 2025-01-21 苹果公司 视频编码系统
WO2020006291A1 (en) 2018-06-28 2020-01-02 Apple Inc. Priority-based video encoding and transmission
KR102541392B1 (ko) 2018-06-28 2023-06-13 애플 인크. 저 레이턴시 비디오 인코딩 및 송신을 위한 레이트 제어

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1223333A (en) * 1983-07-29 1987-06-23 Yoshiyuki Ota Video signal processing apparatus
GB2189366B (en) * 1986-04-17 1989-12-28 British Broadcasting Corp Method and apparatus for conveying information signals
GB8622611D0 (en) * 1986-09-19 1986-10-22 Questech Ltd Processing of video image signals
US5029002A (en) * 1988-08-31 1991-07-02 Zenith Electronics Corporation High definition television system
US4829378A (en) * 1988-06-09 1989-05-09 Bell Communications Research, Inc. Sub-band coding of images with low computational complexity
GB2229059B (en) * 1989-03-07 1993-08-04 Sony Corp Obtaining access to a two-dimensional portion of a digital picture signal
US4918524A (en) * 1989-03-14 1990-04-17 Bell Communications Research, Inc. HDTV Sub-band coding using IIR filter bank
US4969204A (en) * 1989-11-29 1990-11-06 Eastman Kodak Company Hybrid residual-based hierarchical storage and display method for high resolution digital images in a multiuse environment
KR930003204B1 (ko) * 1990-06-30 1993-04-23 삼성전자 주식회사 영상신호의 3x3신호밴드 코딩 디코딩회로 및 방식
US5128791A (en) * 1990-08-13 1992-07-07 Bell Communications Research, Inc. Multi-channel HDTV system

Also Published As

Publication number Publication date
US5392071A (en) 1995-02-21
EP0570092B1 (en) 1998-09-02
GB9210261D0 (en) 1992-07-01
GB2267194A (en) 1993-11-24
JP3466657B2 (ja) 2003-11-17
DE69320689T2 (de) 1999-03-18
EP0570092A1 (en) 1993-11-18
DE69320689D1 (de) 1998-10-08
GB2267194B (en) 1995-10-04

Similar Documents

Publication Publication Date Title
JP3466657B2 (ja) 映像データ処理装置
US4633293A (en) High definition television signal for film-television standards conversion system
KR100232778B1 (ko) 텔레비전 신호 처리장치 및 재구성 장치
KR100254525B1 (ko) 필름형 비디오 형성장치 및 방법
DE69731334T2 (de) Videosignalumsetzer und Fernsehsignalverarbeitungsvorrichtung
JPH05284473A (ja) ビデオ規格変換装置及び方法
JP3449737B2 (ja) デジタルビデオ信号フォーマット変換方法及び装置
JP2004522365A (ja) 多チャンネル入力の高画質多重画面分割装置及び方法
JPH0965374A (ja) 3次元映像記録装置および3次元映像再生装置
JPH05153550A (ja) 映像信号の記録装置および再生装置
JP2799713B2 (ja) Muse―ntsc変換方式
JP3237527B2 (ja) 高速度カメラシステム
JPS58119281A (ja) ビデオ・テ−プ・レコ−ダ編集の制御方式
JPH11191859A (ja) 撮像装置
JP2809738B2 (ja) 映像信号変換装置
JP4042106B2 (ja) 画像信号変換方法
JP2004140687A (ja) 撮像装置
JPH0540618Y2 (ja)
JPH0793738B2 (ja) 映像信号の方式変換装置
JPH0548962A (ja) テレシネの出力ビデオ信号記録及び再生装置
JP3072636B2 (ja) 第2世代edtvプリエンコーダ/デコーダ
JPH10210452A (ja) 監視カメラシステムの画像合成方法
JPS6229381A (ja) 映像信号記録再生方法
JP2003298934A (ja) 画像合成装置及び画像合成方法
JPH0846995A (ja) 画像記録装置及び画像再生装置

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080829

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090829

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100829

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120829

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120829

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130829

Year of fee payment: 10

EXPY Cancellation because of completion of term