JPH11352946A

JPH11352946A - 映像出力処理装置

Info

Publication number: JPH11352946A
Application number: JP11-48899A
Authority: JP
Inventors: 勉橋本; 勝岩佐; 栄子藤井
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1998-04-09
Filing date: 1999-02-25
Publication date: 1999-12-24
Anticipated expiration: 2019-02-25

Abstract

(57)【要約】【課題】実時間の映像出力処理において、それぞれの
処理サイクルが最悪となる場合が重なっても、映像の乱
れなどを生じることなく視聴者に不快感を与えることな
く映像出力を行なうこと。【解決手段】判定処理３０５、代入処理３０６と、判
定処理３０４ａ，３０４ｂを設け、１ラインにおいて、
主映像，副映像，ＯＳＤの映像出力処理を実時間で行な
うことが不可能となったことを検出した場合、副映像の
処理（３０２ａ，３０２ｂ）を次ラインにおいて実行し
ないようにする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像出力処理装置
に関し、特に、動画，静止画などの情報が含まれる主映
像、字幕などの情報が含まれる副映像、メニューやタイ
トル画面などの情報が含まれるＯＳＤ（On Screen Disp
lay ）データの出力の実時間処理の制御性の向上を図っ
たものに関するものである。

【０００２】

【従来の技術】近年、マルチメディアの進歩とともに、
映像分野においてもディジタル放送を考慮してさまざま
な方式の再生装置が提案されている。そして、今後、よ
り多くの情報が放送局から出力されることになると考え
られ、再生装置によっては、その再生処理能力を越える
処理を要求されるような事態が生じることも考えられ
る。そして、このようなスペックを越える処理が要求さ
れた場合には、視聴者から見れば、映像の乱れ等の現象
として捕らえられることとなり、違和感や不快感を与え
かねない。そこで、従来、パソコンなどで動画データを
表示する際に、再生装置のスペックに合わせて何とか違
和感を低減して再生を行うために、単位時間あたりに表
示される画像の数（フレーム数）を低下させる、いわゆ
るフレーム落しを適用することも考えられるが、高画質
な映像を提供するハイビジョン放送等においては、この
ような処理を行うことは、やはり視聴者に不快感等を与
えることになると考えられる。

【０００３】そこで、上記再生処理能力を、出力処理に
必要となる処理サイクルの最悪値を基準にして、その処
理を満たす能力を有する制御装置を用いて実現すること
も考えられるが、このような構成とすることは、いたず
らに制御装置の構成を複雑にし、また、高周波数での動
作となるために、環境的な問題となることが懸念され
る。

【０００４】

【発明が解決しようとする課題】従来の映像出力処理装
置は以上のように構成されており、処理能力を越える負
荷が装置に要求された場合に、視聴者に不快感等を与え
ることなく、実時間内でデータを処理する有効な方法が
何ら提案されておらず、将来、マルチメディアの進歩に
伴う大量情報伝達が必要となった場合に鑑みて、これに
対処することのできる映像出力処理装置が必要とされて
いた。この発明は以上のような状況に鑑みてなされたも
ので、実時間の映像出力処理において、再生処理能力を
越える場合となっても、映像の乱れなどを生じることな
く視聴者に不快感を与えることなく映像出力を行うこと
ができる映像出力処理装置を提供することを目的とす
る。

【０００５】

【課題を解決するための手段】この発明の請求項１にか
かる映像出力処理装置によれば、種類の異なる複数の映
像データを処理してモニタ出力とする映像データ処理実
行手段と、映像データ処理実行手段による上記複数の映
像データの処理が、モニタ出力時点で実時間内に処理を
完了したか否かを検出する映像処理遅延検出手段と、上
記映像処理遅延検出手段により処理の遅れが検出された
場合に、上記映像データ処理実行手段による処理を、１
ライン期間に割り当てられた処理を軽減するよう上記映
像データ処理実行手段を制御する映像データ処理制御手
段とを備えたものである。

【０００６】また、この発明の請求項２にかかる映像出
力処理装置によれば、上記請求項１記載の映像出力処理
装置において、上記映像データ処理制御手段を、上記処
理を軽減する際の映像データの優先順位を設定して、上
記上記映像データ処理実行手段を制御するものとしたも
のである。

【０００７】また、この発明の請求項３にかかる映像出
力処理装置によれば、上記請求項２記載の映像出力処理
装置において、上記優先順位を、視聴者の視点から上記
モニタ上における表示画面までの距離に基づいて決定す
るようにしたものである。

【０００８】また、この発明の請求項４にかかる映像出
力処理装置によれば、上記請求項２記載の映像出力処理
装置において、上記優先順位を、映像データに設定され
た表示情報に基づいて決定するようにしたものである。

【０００９】また、この発明の請求項５にかかる映像出
力処理装置によれば、請求項１記載の映像出力処理装置
において、上記１ライン期間に行う上記種類の異なる複
数の映像データのそれぞれの処理の少なくとも１つの映
像データの処理を複数に分割するものとしたものであ
る。

【００１０】また、この発明の請求項６にかかる映像出
力処理装置によれば、上記請求項５記載の映像出力処理
装置において、上記停止する映像データを主映像とした
ものである。

【００１１】また、この発明の請求項７にかかる映像出
力処理装置によれば、上記請求項１記載の映像出力処理
装置において、上記映像処理遅延検出手段は、上記遅延
の検出を所定数のフィールドまたはフレーム間隔で行う
ものとしたものである。

【００１２】また、この発明の請求項７にかかる映像出
力処理装置によれば、上記請求項１記載の映像出力処理
装置において、上記映像処理遅延検出手段は、上記遅延
の検出を所定数のライン間隔で行うものとしたものであ
る。

【００１３】また、この発明の請求項８にかかる映像出
力処理装置によれば、請求項１または５記載の映像出力
処理装置において、上記映像データ処理制御手段は、上
記種類の異なる複数の映像データのうちのいずれか映像
データの処理の少なくとも一部を停止することにより処
理を軽減するものとしたものである。

【００１４】また、この発明の請求項９にかかる映像出
力処理装置によれば、上記請求項５記載の映像出力処理
装置において、上記１ライン期間に処理すべきデータに
は、少なくとも種類の異なる３つの映像データのうち２
つ以上含まれるものである。

【００１５】

【発明の実施の形態】以下、本発明の映像出力処理装置
の本実施の形態について、図面を参照しながら説明す
る。実施の形態１．図１は、本発明の実施の形態１による映
像出力処理装置の構成を示す図であり、同図において、
１０１は表示出力する主映像データと、副映像データ
と、ＯＳＤデータとを格納する外部記憶部、１０２は上
記外部記憶部１０１に格納された表示出力すべき主映
像，副映像，ＯＳＤデータをバッファリングすることに
より順次これらデータを取り出す内部記憶部、１０３は
上記外部記憶部１０１と内部記憶部１０２間の転送制御
を行なう転送制御部である。また、１０８は転送制御部
１０３と内部記憶部１０２を相互に接続するための第１
の内部バスである。１０４ａは上記内部記憶部１０２か
らの主映像データを入力として主映像データを出力する
主映像出力部、１０４ｂは上記内部記憶部１０２からの
副映像データを入力として副映像データを出力する副映
像出力部、１０４ｃは上記内部記憶部１０２からのＯＳ
Ｄデータを入力としてＯＳＤデータを出力するＯＳＤ出
力部である。

【００１６】１０９は上記内部記憶部１０２と、主映像
出力部１０４ａ，副映像出力部１０４ｂ，ＯＳＤ出力部
１０４ｃを相互に接続するための第２の内部バスであ
る。１０５は、上記主映像出力部１０４ａ，副映像出力
部１０４ｂ，ＯＳＤ出力部１０４ｃからのデータを入力
とし、それらのデータ（映像）を混合してモニタ１１１
ヘ出力する映像出力部である。１０６は上記映像出力部
１０５からの制御信号１１０をその入力とし、内部プロ
グラムにより、上記主映像出力部１０４ａ，副映像出力
部１０４ｂ，ＯＳＤ出力部１０４ｃ，転送処理部１０３
を制御する中央処理制御部である。これらの出力に関す
る制御は順に、制御信号１０７ａ，１０７ｂ，１０７
ｃ，１０７ｄを用いて行なわれる。なお、上記制御信号
１１０は映像出力における１ラインの開始時刻を伝える
ための信号である。

【００１７】図２に、図１における中央処理制御部１０
６の詳細な構成の一例を示す。図に示すように上記中央
処理制御部１０６は、中央処理部２０１，命令メモリ２
０２，作業メモリ２０３，Ｉ／Ｏ用メモリ２０４ａ〜２
０４ｅ、内部バス２０５を含んでいる。

【００１８】上記命令メモリ２０２は、中央処理部２０
１で実行する命令（プログラム）を格納する。中央処理
部２０１は、命令メモリ２０２に格納されるプログラム
を実行する。作業メモリ２０３は、中央処理部２０１の
途中の処理結果などを格納する。Ｉ／Ｏ用メモリ２０４
ａは、主映像出力部１０４ａに対する制御用のメモリ
で、メモリマップドＩ／Ｏと呼ばれる構成となってい
る。同様に、Ｉ／Ｏ用メモリ２０４ｂ、Ｉ／Ｏ用メモリ
２０４ｃ、Ｉ／Ｏ用メモリ２０４ｄは、それぞれ、副映
像出力部１０４ｂ、ＯＳＤ出力部１０４ｃ、転送制御部
１０３を制御するためのメモリである。上記中央処理部
２０１と、命令メモリ２０２，作業メモリ２０３，Ｉ／
Ｏ用メモリ２０４ａ〜ｅは、内部バス２０５により相互
に接続されている。

【００１９】また、２０４ｅは映像出力部１０５からの
制御信号を入力するためのＩ／Ｏ用メモリである。１ラ
インの開始時刻の検出は、制御信号１１０からの情報が
Ｉ／Ｏ用メモリ２０４ｅに書き込まれるため、中央処理
部２０１において、Ｉ／Ｏ用メモリ２０４ｅを読み出す
ことにより、実現することができる。

【００２０】ここで、Ｉ／Ｏ用メモリ２０４ｅが「０」
のとき、１ラインの開姶、すなわち、直前の表示ライン
から見た場合に、次のラインが始まっていることを示す
ものとする。中央処理部２０１が１ラインの開始点で
「１」を書き込み、判定処理実行時にＩ／Ｏ用メモリ２
０４ｅが「０」となっている場合は、次の表示ラインが
開始されたことを意味する。また、Ｉ／Ｏ用メモリ２０
４ｅが「１」である場合は、次の表示ラインがまだ開姶
されていないことを意味する。

【００２１】上記構成において、モニタ１１１以外によ
って、映像データ処理実行手段が実現され、上記映像出
力部１０５によって映像処理遅延検出手段が実現され、
中央処理制御部１０６によって映像データ処理制御手段
が実現されるものとなっている。

【００２２】次に、図２に示した上記中央処理制御部１
０６で行なわれる映像出力処理を図３のフローチャート
を用いて説明する。図３の処理では、すべての映像出力
処理を実時間で行なうことができない場合、副映像の処
理を停止し、副映像の表示出力処理を行なわないように
することにより、映像出力処理を実時間で処理させるこ
とを実現するものである。この映像出力処理は、映像出
力における毎フィールド単位、または毎フレーム単位で
行なうものを示したものである。

【００２３】また、各映像出力処理を行う各主映像，副
映像，ＯＳＤ処理は、内部記憶部１０２に割り当てる主
映像出力部１０４ａ，副映像出力部１０４ｂ，ＯＳＤ出
力部１０４ｃの内部に設けられるバッファメモリの容量
によって、処理を実行する間隔が異なる。これらのバッ
ファメモリは、外部記憶部１０１に格納されている各映
像データをバッファリングするために用いるものであ
る。例えば、主映像出力に割り当てるバッファ容量部１
０４ａのバッファが表示フィールド画像と比較して大き
ければ、主映像の出力処理は１フィールドに１回行えば
よい。同様に副映像、ＯＳＤの出力処理の間隔も１フィ
ールドに１回とすれば、複数の表示ライン期間で主映像
の出力処理を行い、また別の複数の表示ライン期間で副
映像の出力処理を行い、また別の複数の表示ライン期間
でＯＳＤの出力処理を行うことができる。

【００２４】しかし、これらのバッファメモリ、すなわ
ち、内部記憶部１０２のメモリの容量の増大は、装置全
体としての回路規模の増大となる。装置全体の回路規模
を小さくするためには、これらのバッファメモリの容量
を小さくする必要がある。しかしこのとき、主映像，副
映像，ＯＳＤの出力処理の間隔も短くなる。本実施の形
態では、主映像，副映像，ＯＳＤの出力処理の間隔を、
表示する１ライン期間に２回とするものである。なお、
以下でいう、１ライン期間に割り当てる処理とは、それ
ぞれの映像出力処理で表示１ライン期間で行う必要のあ
るそれぞれの映像出力処理ををさす。

【００２５】ここで、３０１ａ，３０１ｂは主映像処理
Ａ，Ｂを示し、３０２ａ，３０２ｂは副映像処理Ａ，Ｂ
を示し、３０３ａ，３０３ｂはＯＳＤ処理Ａ，Ｂを示
し、このようにこれらの処理は、ここでは２つに分割し
て行なわれるものとする。それぞれの処理では、外部記
憶部１０１から内部記憶部１０２への映像データの転送
制御や、主映像出力部１０４ａ，副映像出力部１０４
ｂ，ＯＳＤ出力部１０４ｃの制御を行なうものである。

【００２６】これら主映像処理３０２ａ，３０２ｂ、副
映像処理３０３ａ，３０３ｂが１ライン期間に割り当て
る処理となる。また、ここでは、１ライン期間にそれぞ
れの出力処理を２回行うものとするが、１ラインで行う
処理回数は２回に限定されるものではない。３０４ａ，
３０４ｂは処理が遅れたか否かの判定処理であり、これ
らの判定処理３０４ａ，３０４ｂの結果により、３０２
ａ，３０２ｂの副映像出力処理Ａ，Ｂが迂回されること
になる。すなわち、映像出力処理として、ここで処理量
が減少されることになる。

【００２７】３０５はモニタ１１１出力での、１ライン
処理が間に合ったか否かの判定処理である。また、３０
６は上記判定処理３０５により、判定処理３０４ａ，３
０４ｂでの判定に用いたｆｌａｇ（フラグ）に対し、処
理が遅れた場合は「１」を代入する処理である。３０７
は１フィールド、またはフレームの表示ライン数を越え
るか否かの判定処理で、表示ライン数を越えない場合、
処理３０１ａから処理を繰り返すことになる。

【００２８】３０８は初期設定を行なうもので、ｆｌａ
ｇに「０」を代入する処理である。図４は、図３に示し
た処理において、処理遅れが発生した場合の様子を示
す。ここにおいても、主映像処理，副映像処理，ＯＳＤ
処理のすべてが、１ラインで実行完了することを前提と
する。図４において、４００は、Ｈ−ＳＹＮＣ（水平同
期信号）信号を表す。４００ａは、１ラインの処理開始
を示す点である。４００ｂは、次のラインの処理開始を
示す点である。また、４０１は映像出力が行なわれるラ
インを、４０２はライン４０１の次のラインを、４０３
はライン４０２の次のラインを表し、それぞれ、ライン
Ａ、ラインＢ、ラインC とする。従って、本来、ライン
Ａ４０１における、次ライン（ラインＢ）の開始点４０
０ｂは、ラインＢ４０２における、ラインの開始点４０
０ａと同一の点となる。同様に、ラインＢ４０２におけ
る、次ラインの開始点４００ｂについても、ラインC ４
０３における、ラインの開始点４００ａと同一の点とな
る。

【００２９】４１０はラインＡ４０１で行なう必要のあ
る処理で、主映像処理Ａ４１１ａと、主映像処理Ｂ４１
１ｂと、副映像処理Ａ４１２ａと、副映像処理Ｂ４１２
ｂと、ＯＳＤ処理Ａ４１３ａと、ＯＳＤ処理Ｂ４１３ｂ
とからなり、４１０ｘはラインＡ４０１における、映像
出力処理の遅れを判定する判定処理３０５が行なわれる
点を表す。また、４２０は、ラインＢ４０２で行なう必
要のある処理で、主映像処理Ａ４２１ａと、主映像処理
Ｂ４２１ｂと、ＯＳＤ処理Ａ４２３ａと、ＯＳＤ処理Ｂ
４２３ｂとからなる。

【００３０】同様に、４３０はラインC ４０３で行なう
必要のある処理で、主映像処理Ａ４３１ａと、主映像処
理Ｂ４３１ｂと、ＯＳＤ処理Ａ４３３ａと、ＯＳＤ処理
Ｂ４３３ｂとからなる。映像出力処理４１０での実行順
序は、主映像処理Ａ４１１ａ、副映像処理Ａ４１２ａ、
ＯＳＤ処理Ａ４１３ａ、主映像処理Ｂ４１１ｂ、副映像
処理Ｂ４１２ｂ、ＯＳＤ処理Ｂ４１３ｂ、点４１０ｘに
おける判定処理３０５の順で行なう。

【００３１】また、映像出力処理４２０での実行順序
は、主映像処理Ａ４２１ａ、ＯＳＤ処理Ａ４２３ａ、主
映像処理Ｂ４２１ｂ、ＯＳＤ処理Ｂ４２３ｂの順で、さ
らに、映像出力処理４３０での実行順序は、主映像処理
Ａ４３１ａ、ＯＳＤ処理Ａ４３３ａ、主映像処理Ｂ４３
１ｂ、ＯＳＤ処理Ｂ４３３ｂの順で行なうものとする。

【００３２】また、４０３ａは、ラインC ４０３におけ
る処理の余裕を示すものとする。なお、これら映像出力
処理４１０、４２０、４３０では、図３に示した、判定
処理３０４ａ，３０４ｂ，３０５，３０７や、代入処理
３０６，３０８は、断りのない限り省いている。

【００３３】このとき、ラインＡ４０１で行なう映像出
力処理４１０が、中央処理制御部１０６の処理性能を越
え、ラインＢ４０２の開始位置４００ａを越えた場合を
以下に考える。すなわち、この場合は、すべての映像出
力処理が１ライン内に間に合わず、処理しきれなかった
ことになる。ここで、判定処理３０５が実行されるの
は、点４１０ｘであり、次ラインの開始を越えている。

【００３４】この場合、上記判定処理３０５の結果は
「Ｙ」となり、代入処理３０６でｆｌａｇに「１」が代
入される。これに続くラインＢ４０２で行なう映像出力
処理４２０では、判定処理３０４ａ，３０４ｂの結果が
ともに「Ｙ」となり、副映像処理Ａ３０２ａ、副映像処
理Ｂ３０２ｂは実行されない。すなわち、映像出力処理
４２０は、主映像処理Ａ４２１ａ、ＯＳＤ処理Ａ４２３
ａ、主映像処理Ｂ４２１ｂ、ＯＳＤ処理Ｂ４２３ｂの順
で各処理を行なうことになる。

【００３５】これにより、映像出力処理４２０は、実行
すべきラインＢ４０２に納まることになる。さらに、ラ
インC ４０３での映像出力処理４３０では、映像出力処
理４２０と同様に、主映像処理Ａ４３１ａ、ＯＳＤ処理
Ａ４３３ａ、主映像処理Ｂ４３１ｂ、ＯＳＤ処理Ｂ４３
３ｂの順で各処理を行なうことになる。また、映像出力
処理４３０には、処理の余裕４０３ａが発生することに
なる。そして、以降のラインにおいても処理の余裕があ
ることになり、実時間での映像出力処理を実現すること
ができるようになる。

【００３６】また、本実施の形態では、主映像，副映
像，ＯＳＤの出力処理を、それぞれ２つ（Ａ，Ｂ）にし
た処理で実現している。これは、各処理を分割すること
により、それぞれの処理の一部を少なくとも一度は実行
することができるようになるからである。これにより、
それぞれの映像出力処理が反映されないことを回避する
ことも期待できるものである。

【００３７】このように本実施の形態１によれば、判定
処理３０５、代入処理３０６と、判定処理３０４ａ，３
０４ｂを設け、１ラインにおいて、主映像，副映像，Ｏ
ＳＤの映像出力処理を実時間で行なうことが不可能とな
ったことを検出した場合、副映像の処理（３０２ａ，３
０２ｂ）を次ラインにおいて実行しないようにすること
により、映像出力処理全体の処理量を軽減し、従って、
映像出力処理の実時間処理を保証することを実現するこ
とができる。

【００３８】また、これらの判定処理や、代入処理は、
プログラムコードサイズとしても小さいものである。ま
た、これらを処理する制御装置を複雑にする必要もな
く、高周波で動作させる必要もない。

【００３９】なお、本実施の形態１では、映像出力処理
の実行を、主映像処理，副映像処理，ＯＳＤ処理の順で
行なったが、これらの実行順序は制限されるものではな
く、異なる順で実行しても同様の効果を実現することが
できる。また、本実施の形態１では、主映像，副映像，
ＯＳＤの出力処理を二つに分割し、図３に示す判定処理
部３０４a ，３０４ｂの両方を実行することにより、副
映像処理Ａ３０２ａ、および副映像処理Ｂ３０２ｂの両
方を行わないことにより、処理の軽減を図ったが、判定
処理部３０４ａ，３０４ｂのどちらか一方の判定処理を
行わないことにより、少なくとも一方の副映像処理Ａ３
０２ａ、または副映像処理Ｂ３０２ｂを行うことで、処
理の軽減を行うことも可能である。これにより、段階的
に処理対象外とする処理、すなわち、軽減する処理を設
定することができる。

【００４０】さらに、主映像，服映像，ＯＳＤの出力処
理を２つに分割して行うようにしたが、これらの出力処
理を３つ以上に分割して処理することも可能である。こ
れにより、処理対象外とする処理を細かく設定すること
が可能となり、より多くの処理を１ライン期間で処理す
ることができる。

【００４１】また、本実施の形態１では、二つ存在する
副映像処理をともに停止するものとしたが、いずれか一
方の副映像処理を停止するようにしても構わない。具体
的には、判定処理３０４ａ，３０４ｂのいずれか一つを
省略するとしても、同様の効果を実現することができる
ものである。また、本実施の形態１では、副映像処理を
停止する構成としたが、主映像処理，またはＯＳＤ処理
を停止させたとしても同様の効果を実現することができ
る。

【００４２】さらに、この場合、二つある主映像処理の
いずれか一方の処理を停止するとしても、また、二つあ
るＯＳＤ処理のいずれか一方の処理を停止するとして
も、同様の効果を実現することができる。

【００４３】さらに、本実施の形態１では、処理遅れの
判定に用いるフラグの初期化を、毎フィールド単位、ま
たは毎フレーム単位で行なうものとしている。このと
き、処理遅れの判定に用いるフラグの初期化である代入
処理３０８は、所定フィールド、所定フレーム毎に行う
ことになる。つまり、処理遅れが発生した場合、処理の
軽減を該フィールドの間、または該フレームの間、行な
うものとすることで、失われる情報を少なく抑えること
ができるものであるが、処理遅れの判定に用いるフラグ
の初期化は、複数フィールド単位または複数フレーム単
位で行なうものとしても、失われる情報は多少増大する
が、処理を簡略化することができる。

【００４４】また、逆に、処理遅れの判定に用いるフラ
グの初期化を、所定ライン単位毎に行う場合は、代入処
理３０８を所定ライン毎に行うことにより、処理遅れ判
定を所定ライン単位で行うことができる。すなわち、図
１８は１ライン単位での処理遅れの判定を行う場合にお
いて、処理遅れが発生した場合の様子を示す。図におい
て、１８０１は映像出力が行われるラインＤを表す。１
８０１はラインＤに割り当てられる処理で、主映像処理
Ａ１８１１ａと、主映像処理Ｂ１８１１ｂと、副映像処
理Ａ１８１２ａと、副映像処理Ｂ１８１２ｂと、ＯＳＤ
処理Ａ１８１３ａと、ＯＳＤ処理１８１３ｂとからなっ
ている。また、ラインＤ１８０１では、ＯＳＤ画像の表
示画素数などがラインＡ４０１、ラインＢ４０２までと
比較して少なく、処理内容が変更されることにより、Ｏ
ＳＤ処理Ａ１８１３ａ，ＯＳＤ処理Ｂ１８１３ｂの処理
サイクルが短くなっている。

【００４５】ＯＳＤ画像は、スクリーンの任意の位置
に、任意の表示幅、表示高さで表示することが可能であ
り、ラインＢとラインＤとで表示する内容が異なるよう
にしたものである。１８００ｘは主映像処理Ａ４３１ａ
と、ＯＳＤ処理Ａ４３３ａと、主映像処理Ｂ４３１ｂ
と、ＯＳＤ処理Ｂ４３３ｂからなうラインＢ４０２に割
り当てられる映像出力処理の後に行う、判定処理３０５
のラインＢ４０２の表示時刻における実行位置である。
なお、図３に示した判定処理３０４ａ，３０４ｂ，３０
５，３０７や代入処理３０６，３０８は特に断りの無い
限り省略する。また、図４と同一符号は同一、または相
当部分を示す。

【００４６】ここで、ラインＡ４０１の処理に遅れが発
生し、ラインＢ４０２、ラインＣ４０３において副映像
処理Ａ４１２ａ，副映像処理Ｂ４１２ｂを行わないこと
により、１ラインに割り当てる処理を軽減することにつ
いては先に述べた。これに続く点１８００ｘでの判定処
理では、１ライン期間に１ラインに割り当てられる処理
が収まっており、判定処理３０５においては「Ｎ」とな
る。従って、次のラインＤ１８０１での判定処理３０４
ａ、３０４ｂは「Ｎ」となる。これは図３における代入
処理３０８の実行位置とは異なり、毎ライン毎に処理３
０８を実行するためである。このため、ラインＤ１８０
１においては、主映像処理，副映像処理，ＯＳＤ処理を
それぞれ実行することが可能となる。

【００４７】すなわち、判定処理３０５により反映され
るｆｌａｇを代入処理３０８において毎ライン初期化
（０を代入）することにより、副映像の出力処理を行わ
ずに軽減する期間を１ラインとすることができる。副映
像の非表示期間をラインＢ４０２の１ラインだけとする
ことができ、ラインＢ４０２以外のラインに関しては主
映像，副映像，ＯＳＤを全て表示する映像と比較しても
大きな差異にはさらない。

【００４８】このように、処理遅れの判定を１ライン毎
に行い、処理の軽減を１ライン毎に調整することによ
り、それぞれの映像出力を多く表示することができ、よ
り一層の効果を得ることができる。なお、ここでは、処
理軽減を副映像の処理で行うものとしたが、主映像，Ｏ
ＳＤにより処理軽減を行う場合についても同様に効果を
得ることができる。

【００４９】実施の形態２．以下、本発明の実施の形態
２による映像出力処理装置について図面を参照しながら
説明する。本実施の形態２による映像出力処理装置の構
成に関しては、実施の形態１に示したものとほぼ同様で
あるが、映像処理出力の流れが異なることを特徴とする
ものである。

【００５０】図５に本実施の形態２における映像出力処
理装置の処理の流れを示す。映像出力処理に関して、実
施の形態１と異なるのは、判定処理３０４ａ，３０４ｂ
がなく、判定処理５０１ａ，５０１ｂ，５０２ａ，５０
２ｂ，５０３ａ，５０３ｂをそれぞれ設けた点であり、
これ以外は、実施の形態１における処理の流れと同様で
ある。

【００５１】上記判定処理５０１ａ，５０１ｂ，５０２
ａ，５０２ｂ，５０３ａ，５０３ｂは、処理が遅れたか
否かの判定処理であり、設定される処理迂回の優先度に
応じて実行されるものである。この優先度を表すフラグ
として、ｐｒｉｏｒｉｔｙを用いる。判定処理５０１
ａ，５０１ｂは、その結果により、主映像処理Ａ３０１
ａ，主映像処理Ｂ３０１ｂを迂回する。また、判定処理
５０２ａ，５０２ｂは、その結果により、副映像処理Ａ
３０２ａ，副映像処理Ｂ３０２ｂを迂回する。同様に判
定処理５０３ａ，５０３ｂは、その結果により、ＯＳＤ
処理Ａ３０３ａ，ＯＳＤ処理Ｂ３０３ｂを迂回するもの
である。

【００５２】ここで、設定される優先度が本映像出力装
置として定まっており、主映像の出力処理優先度を最も
低いものとする場合、優先度を示すｐｒｉｏｒｉｔｙに
「１」を設定する。これにより、全ての映像出力処理が
中央処理制御部１０６の性能を越えた場合、すなわち、
中央処理制御部１０６の処理が遅れた場合、映像出力処
理である主映像処理Ａ３０１ａ，主映像処理Ｂ３０１ｂ
を迂回することになる。

【００５３】また、上記優先度として、副映像の出力処
理を最も優先順位が低いものとする場合は、Ｐｒｉｏｒ
ｉｔｙに「２」を設定する。これにより、副映像処理Ｂ
３０２ａ，副映像処理Ｂ３０２ｂを迂回することにな
る。同様に、上記優先度として、ＯＳＤの出力処理を最
も優先順位が低いものとする場合は、Ｐｒｉｏｒｉｔｙ
に「３」を設定することにより、中央処理制御部１０６
の処理が遅れた場合、ＯＳＤ処理Ａ３０３ａ，ＯＳＤ処
理Ｂ３０３ｂの処理を迂回することになる。つまり、上
述した実施の形態１と同様に、全ての映像出力処理を実
時間内で行なうことが不可能となった場合、映像出力処
理の処理量を軽減することができ、実時間での映像出力
処理を実現することができる。このときの優先度の設定
は、システムとして表示する優先度を動的に設定するこ
とができるものである。

【００５４】ここで、この優先度の設定を、出力表示の
表示順序により行なう方法について説明する。図６は、
本実施の形態２による映像出力処理装置を用いた処理に
よる表示結果を表したものである。図６（ａ）におい
て、６１０は、処理の軽減を行なう前の表示結果の画面
である。図６（ｂ），（ｃ）において、６１１，６１２
は、映像出力処理のそれぞれの処理サイクルの最悪の状
態が重なったり、映像出力処理が処理待ちの発生などに
より、中央処理制御部１０６の処理が遅れ、すべての映
像出力処理を実時間で行なうことが不可能となり、処理
の軽減を行なった後の表示結果の画面である。

【００５５】６１０ａは、主映像の表示を表わし、６１
０ｂは副映像の表示を表わし、６１０ｃはＯＳＤの表示
をそれぞれ表すものである。それぞれの映像表示は、視
点手前から、ＯＳＤ表示６１０ｃ，副映像表示６１０
ｂ，主映像表示６１０ａの順で表示されている。

【００５６】この表示順より、処理の軽減対象を主映像
とし、優先度を示すｐｒｉｏｒｉｔｙに「１」を設定す
るものとする。これは、視点から奥の表示映像に関する
情報が必ずしも重要でないと判断できるからである。こ
こで、全ての映像出力処理を実時間で行なうことが不可
能となる場合、視点から最も奥に表示される主映像の表
示映像６１０ａに関する処理である、主映像処理Ａ３０
１ａ，主映像処理Ｂ３０１ｂを迂回することにより、図
６（ａ）から図６（ｂ）に示すようになり、映像出力処
理を軽減することになる。これにより、表示結果が表示
画像６１０から、表示結果６１１となる。

【００５７】また、表示映像として、視点からの表示順
で、中間に表示されている映像に関する情報が重要でな
いと判断できる場合もある。この場合、Ｐｒｉｏｒｉｔ
ｙに「２」を設定することにより、全ての映像出力処理
を実時間で行なうことが不可能となる場合、副映像６１
０ｂに関する処理である、副映像処理Ａ３０２ａ，副映
像処理Ｂ３０２ｂを迂回することにより、図６（ａ）か
ら図６（ｃ）に示すようになり、表示結果が表示画像６
１０から、表示結果６１２となる。

【００５８】視点からの表示で、この優先度を示す、ｐ
ｒｉｏｒｉｔｙを設定することは、映像出力処理の遅れ
が発生する場合に、迂回する出力処理が動的に変化する
ことになる。つまり、出力表示される場面毎に、最も重
要な映像情報を少なくとも表示することを実現すること
ができる。

【００５９】以上のように、本実施の形態２によれば、
判定処理５０１ａ，５０１ｂと、判定処理５０２ａ，５
０２ｂと、判定処理５０３ａ，５０３ｂを設けることに
より、主映像，副映像，ＯＳＤに関する、すべての映像
出力を実時間で行なうことが不可能となる場合、設定さ
れる優先度に応じて、主映像の処理３０１ａ，３０１
ｂ、または、副映像の処理３０２ａ，３０２ｂ、また、
あるいは、ＯＳＤの処理３０３ａ，３０３ｂを迂回する
ことにより、上記実施の形態１と同様に、映像出力処理
全体の実時間処理を保証することを実現することがで
き、プログラムコードサイズの増大や、装置の複雑化、
高周波動作の必要性がないのに加えて、ここで設定する
この優先度は、映像情報に関して最も情報量が少なく、
表示されないことによる影響が最も少ないものを選択す
ることにより、ユーザ指向に立った制御を行うことがで
きる。

【００６０】なお、本実施の形態２では、視点からの表
示順から、主映像処理，副映像処理，ＯＳＤ処理の優先
順位付けを行なったが、ユーザが提示する優先順位付け
を行なうようにしてもよく、同様の効果を奏する。この
ようにすることで、ユーザがどの映像表示に興味がある
かにより、ユーザの意志で自由に設定することができ、
実施の形態１のように、自動的に表示さるるべき情報が
削除されるような場合に比べて、ユーザ指向な制御を行
うことができる。

【００６１】また、本実施の形態２では、視点からの表
示順から映像出力処理の優先順位付けを行なったが、予
め設定されている表示状態により、いずれの処理を優先
させるかの優先順位付けを行うこともできる。例えば、
ＯＳＤに関しては、装置を制御するメニュー画面の設定
に用いるＯＳＤ表示を行う場合、ＯＳＤ表示を優先して
行うことになる。また、副映像に関しては、ＤＶＤ規格
（DVD Specificationfor Read-Only Disc, Part3 VIDEO
SPECIFICATIONS Version1.0 Ａugust 1996）におけ
る、ＳＰ＿ＤＣＳＱに含まれるコマンドの１つであるＦ
ＳＴＡ＿ＤＳＰにより、副映像出力を強制的に表示させ
るなどのコマンドがあり、このコマンドにより、優先的
に副映像を表示することになる。

【００６２】実施の形態３．以下、本発明の実施の形態
３による映像出力処理装置について図面を参照しながら
説明する。本実施の形態３による映像出力処理装置の構
成に関しては、実施の形態１に示したものとほぼ同様で
あるが、映像処理出力の流れ、特にＯＳＤの出力処理が
異なることを特徴とするものである。

【００６３】図７は本実施の形態３における映像出力処
理装置の処理の流れを示すフローチャート図である。映
像出力処理に関して、実施の形態１と異なるのは、判定
処理３０４ａ，３０４ｂがなく、ＯＳＤ処理Ａ３０３
ａ，ＯＳＤ処理Ｂ３０３ｂを、ＯＳＤ処理Ａ７０１ａ，
ＯＳＤ処理７０１ｂに変更した点である。本実施の形態
３では、映像出力処理を実時間での実行が実行不可能と
なった場合に、ＯＳＤ処理の処理量を軽減するものであ
り、これ以外は、上記実施の形態１における処理の流れ
と同様の処理を行なうものである。

【００６４】以下、このＯＳＤ処理Ａ７０１ａの流れを
図８に、また、ＯＳＤ処理Ｂ７０１ｂの処理の流れを図
９に示す。図８に示すＯＳＤ処理Ａ７０１ａは、判定処
理８０１と、アドレス計算処理Ａ８０２ａと、アドレス
計算処理Ｂ８０２ｂと、転送制御部１０３に対する転送
制御処理８０３とからなる。

【００６５】アドレス計算処理Ａ８０２ａと、アドレス
計算処理Ｂ８０２ｂは、転送元の外部記憶部１０１のＯ
ＳＤ画像のアドレスと、転送先の内部記憶部１０２のア
ドレスとを計算するものである。ここで、全ての映像出
力処理の実時間での実行が実行可能である場合は、アド
レス計算処理Ａ８０２ａを、全ての映像出力処理の実時
間での実行が実行不可能である場合は、アドレス計算処
理Ｂ８０２ｂを実行する。これら２つのアドレス計算の
違いについては後述する。８０１は、全ての映像出力処
理が実時間で実行不可能となったか否かを判定するもの
で、実行可能の場合は、アドレス計算処理Ａ８０２ａに
制御を移し、実行不可能の場合はアドレス計算処理Ｂ８
０２ｂに制御を移すように構成されている。次いで、転
送制御処理８０３により、外部記憶部１０１と内部記憶
部１０２間の転送処理が開始されることとなる。

【００６６】ＯＳＤ処理Ｂ７０１ｂは、図９に示すよう
に、判定処理９０１と、アドレス計算処理Ｃ９０２と、
転送制御部１０３に対する転送制御処理８０３とからな
る。アドレス計算処理Ｃ９０２は、転送元の外部記憶部
１０１のＯＳＤ画像のアドレスと、転送先の内部記憶部
１０２のアドレスとを計算するものである。

【００６７】９０１は、全ての映像出力処理が実時間で
実行不可能となったか否かを判定するもので、実行可能
の場合はアドレス計算処理Ｃ９０２、及び制御処理８０
３を実行する。実行不可能の場合は、アドレス計算処理
Ｃ９０２、及び制御処理８０３を迂回するように構成さ
れている。

【００６８】本実施の形態３における処理において、全
ての映像出力処理の実時間での実行が可能の場合、ＯＳ
Ｄの出力処理は、アドレス計算処理Ａ８０２ａと転送制
御処理８０３、及び、アドレス計算処理Ａ９０２と転送
制御処理８０３を実行する。

【００６９】しかし、すべての映像出力処理の実時間で
の実行が不可能の場合、実施の形態１，２と同様の判定
処理により、ＯＳＤの出力処理は、アドレス計算処理Ａ
８０２ｂとそれに続く転送制御処理８０３を実行する。

【００７０】このように処理することについて、８ｂｉ
ｔ／ｐｉｘｅｌのＯＳＤ（１画素が８ｂｉｔからなるＯ
ＳＤ）で、水平方向に７２０画素を出力する場合を、例
に挙げて説明する。

【００７１】このとき、ＯＳＤ画像の転送量は７２０ｂ
ｙｔｅである（１ｂｙｔｅ＝８ｂｉｔ）。すべての映像
出力処理を実時間で実行可能の場合に行なう、ＯＳＤの
アドレス計算処理８０２ａ，９０２による転送では、そ
れぞれ３６０ｂｙｔｅづつの転送を行なうものとする。
これは、内部記憶部１０２の容量を少なくするためや、
他の外部記憶部１０１に対するアクセス待ちを少なくす
るためのものである。

【００７２】ここで、１ライン内ですべての映像出力処
理が間に合わず、実時間で実行不可能となった場合、Ｏ
ＳＤの出力処理は、実質的にＯＳＤ処理Ｂ７０１ｂが迂
回することとなり、処理の軽減を行なう。すなわち、Ｏ
ＳＤ処理Ａ７０１ａだけを実行することになる。このと
き、８ｂｉｔ／ｐｉｘｅｌでＯＳＤを出力するとした場
合、水平方向に３６０画素のＯＳＤしか出力できなくな
ってしまう。しかし、水平方向７２０画素、４ｂｉｔ／
ｐｉｘｅｌのＯＳＤ画像を出力するとすれば、３６０ｂ
ｙｔｅの転送量で実現することができる。つまり、ＯＳ
Ｄ処理Ａ７０１ａだけの実行で、ＯＳＤ画像の出力処理
を行なうことが可能になる。

【００７３】図１０に、これらの様子を示す。図１０
（ａ）の１００１は、映像出力処理を実時間で実行可能
な場合のＯＳＤ出力画像である。図１０（ｂ）の１００
２は、映像出力処理を実時間で実行不可能となった場合
で、８ｂｉｔ／ｐｉｘｅｌのＯＳＤ画像の出力画像であ
る。また、図１０（ｃ）の１００３は、映像出力処理を
実時間で実行不可能となった場合で、４ｂｉｔ／ｐｉｘ
ｅｌのＯＳＤ画像の出力画像である。これらの図のう
ち、図１０（ｃ）の１００３が本実施の形態３によるＯ
ＳＤの出力画像となる。図１０に示すように、ＯＳＤの
処理量を軽減する場合、ＯＳＤ画像の半分が全く出力さ
れない出力画像１００２と比較して、ＯＳＤ画像をすべ
て出力する出力画像１００３の画像表示効果は極めて大
きい。ユーザに対して、色数に関する情報量を落してし
まうことになるが、ＯＳＤ画像そのものの情報量をすべ
て伝えることが可能となる。

【００７４】以上のような動作を実現するのが、それぞ
れのアドレス計算処理である。アドレス計算処理Ａ８０
２ａでは、８ｂｉｔ／ｐｉｘｅｌで外部記憶部１０１に
格納されるＯＳＤの情報から、転送するＯＳＤのアドレ
スを計算するものであり、アドレス計算処理Ｂ８０２ｂ
では、４ｂｉｔ／ｐｉｘｅｌで外部記憶部１０１に格納
されるＯＳＤの情報から転送するＯＳＤのアドレスを計
算するものである。これらのアドレス計算処理は極めて
簡単なものであり、その実現は容易である。

【００７５】以上のように本実施例の形態３によれば、
ＯＳＤ処理７０１ａ，７０１ｂを設けることにより、上
記実施の形態１と同様に、主映像，副映像，ＯＳＤの映
像出力処理を実時間で行なうことが不可能となった場合
においても、映像出力処理全体の実時間処理を保証する
ことを実現することができ、プログラムコードサイズの
増大や、装置の複雑化、高周波動作の必要性がないのに
加えて、映像出力処理の軽減により、ＯＳＤ表示が全く
表示されないという事態を回避することが可能となり、
ユーザに違和感等を与えることを軽減することができ
る。

【００７６】なお、本実施の形態３では、ＯＳＤ画像の
処理における１回の転送量を３６０ｂｙｔｅとしたが、
ここでの転送量はこれに限るものではなく、他の転送量
であっても、同様の効果を実現することができることは
いうまでもない。

【００７７】また、本実施の形態３では、ＯＳＤ画像の
処理を、８ｂｉｔ／ｐｉｘｅｌから４ｂｉｔ／ｐｉｘｅ
ｌへ変更することにより、負荷を軽減したが、例えば、
８ｂｉｔ／ｐｉｘｅｌから２ｂｉｔ／ｐｉｘｅｌへ変更
することにより、転送量は１／４となり処理の軽減が大
きくなり、また、例えば、８ｂｉｔ／ｐｉｘｅｌから６
ｂｉｔ／ｐｉｘｅｌへ変更することにより転送量は３／
４となり処理の軽減の効果が少なくなるものの、表示す
るＯＳＤ画像の色数に関する情報量落ちが少なくなり、
変更前と変更後のＯＳＤ画像の１画素を構成するｂｉｔ
数に関しては、この限りでなくとも、同様またはそれ以
上の効果を実現することができるものである。

【００７８】実施の形態４．以下、本発明の実施の形態
４による画像出力処理装置について図面を参照しながら
説明する。本実施の形態４による映像出力処理装置の構
成に関しては、実施の形態１で示した図１、及び図２の
ものとほぼ同様であるが、外部記憶装置１０１の構成に
特徴を有し、副映像処理において、色／コントラスト変
化処理を停止することにより、中央処理制御部における
副映像出力処理を軽減し、映像出力処理を実時間で処理
させることを実現することを特徴とするものである。

【００７９】ここで、図１１に外部記憶部１０１に格納
されている副映像データユニットの一例を示す。外部記
憶部１０１には、副映像データユニット１１０１と副映
像データユニット１１０２とが格納されている。

【００８０】上記副映像データユニット１１０１は、ユ
ニット情報（ＳＰＵＨ）１１０１ａと、画像データ（Ｐ
ＸＤＸ）１１０１ｂと、表示制御コマンド（ＳＰ＿ＤＣ
ＳＱ）１１０１ｃ，１１０１ｄとから構成される。

【００８１】さらに、表示制御コマンド１１０１ｄに
は、色／コントラスト変化データ（ＣＨＧ＿ＣＯＬＣＯ
Ｎ）１１０１ｅを含んでいる。

【００８２】上記副映像データユニット１１０２は、ユ
ニット情報１１０２ａと、画像データ１１０２ｂと、表
示制御コマンド１１０２ｃとから構成される。

【００８３】上記ユニット情報１１０１ａ，１１０２ａ
には、副映像データユニット１１０１，１１０２のデー
タサイズ（ＳＰＵ＿−ＳＺ）と、表示制御コマンド１１
０１ｃ，１１０２ｃの開始アドレス（ＳＰＵ＿ＤＣＳＱ
Ｔ＿ＳＡ）が格納されている。画像データ１１０１ｂ，
１１０２ｂには、画像データが格納されている。

【００８４】また、上記表示制御コマンド１１０１ｃ，
１１０１ｄ，１１０２ｃには、表示制御コマンドの実行
時間（ＳＰ＿ＤＣＳＱ＿ＳＴＭ）、次の表示制御コマン
ドの開始アドレス（ＳＰ＿ＮＸＴ＿ＤＣＳＱ＿ＳＡ）、
表示開始（ＦＳＴＡ＿ＤＳＰ、ＳＴＡ＿ＤＳＰ）、表示
終了（ＳＴＰ＿ＤＳＰ）、初期色（ＳＥＴ＿ＣＯＬＯ
Ｒ）、初期コントラスト（ＳＥＴ＿ＣＯＮＴＲ）、表示
位置（ＳＥＴ＿ＤＡＲＥＡ）、色／コントラスト変化
（ＣＨＧ＿ＣＯＬＣＯＮ）等が格納されている。

【００８５】次に本実施の形態４による中央処理制御部
で行なう映像出力処理を図１２を用いて説明する。図１
２において、主映像処理Ａ３０１ａ，主映像処理Ｂ３０
１ｂ，ＯＳＤ処理Ａ３０３ａ，ＯＳＤ処理Ｂ３０３ｂ，
判定処理３０４ｂ，３０５，３０７、及び代入処理３０
６，３０８の構成は、図３に示したものとほぼ同じであ
る。図３と異なる点は、判定処理３０４ａを無くし、さ
らに副映像処理３０２ａでは、副映像処理Ａ３０２ａと
して、外部記憶部１０１から内部記憶部１０２へのデー
タ転送制御，副映像データユニット解析処理，表示制御
コマンド解析処理を行ない、副映像処理Ｂ３０２ｂで
は、色／コントラスト変化データ解析処理を行なうよう
にした点である。

【００８６】副映像処理Ａ３０２ａでは、外部記憶部１
０１から内部記憶部１０２へ、さらに副映像出力部１０
４ｂへ副映像データを転送する。さらに、副映像データ
ユニット情報１１０１ａを解析し、表示制御コマンド１
１０１ｃの開始アドレス、次の副映像データユニット１
１０２の開始アドレスを得る。さらに、表示制御コマン
ド１１０１ｃ，１１０１ｄを実行時間に従って順に解析
する。副映像処理Ｂ３０２ｂでは、色／コントラスト変
化データ１１０１ｅを解析し、制御信号１０７ｂを用い
て、副映像出力部１０４ｂを制御する。判定処理３０５
にて、１ライン処理が間に合わなかったと判定された場
合、中央処理制御部１０６では、判定処理３０４ｂによ
り、副映像処理Ｂ３０２ｂが迂回され、色／コントラス
ト変化処理を停止することにより、副映像処理の軽減を
図る。

【００８７】このように本実施例の形態４によれば、主
映像，副映像，ＯＳＤの映像出力処理を実時間で行なう
ことが不可能となった場合、色／コントラスト変化処理
のみを停止することにより、副映像画像出力は停止する
ことなく、映像出力処理全体の処理量を軽減することが
できる。これにより上記実施の形態１と同様に、主映
像，副映像，ＯＳＤの映像出力処理を実時間で行なうこ
とが不可能となった場合においても、映像出力処理全体
の実時間処理を保証することを実現することができ、プ
ログラムコードサイズの増大や、装置の複雑化、高周波
動作の必要性がないのに加えて、副映像処理Ａ３０２ａ
での処理は迂回されることがないため、外部記憶部１０
１から内部記憶部１０２へのデータ転送制御，副映像デ
ータユニット解析処理，表示制御コマンド解析処理は、
毎ライン実行される。その結果、映像出力処理が１ライ
ンで収まるようになれば、次の表示制御コマンドから副
映像出力を正常な状態で復帰させることができる。つま
り、表示制御コマンド単位で主映像，副映像，ＯＳＤ出
力全てを正しく表示させることができる。

【００８８】実施の形態５．以下、本発明の実施の形態
５による映像出力処理装置について図面を参照しながら
説明する。本実施の形態では、映像出力処理が実時間で
行なえない場合、増加した処理量に応じて、副映像処理
における、色／コントラスト変化処理に上限を設けるこ
とにより、中央処理制御部における副映像出力処理を軽
減し、映像出力処理を実時間で処理させることを実現す
るものである。図１１は、本実施の形態５に用いられる
副映像データユニットの一例を示し、同図の副映像デー
タユニットは、実施の形態４で用いたものと同じであ
る。図１３は本実施の形態５による映像処理装置の構成
図を示し、同図において、１３１１は、例えば、２７Ｍ
Ｈｚでサンプリングしたときの１ライン開始からのサイ
クル数（Ｄｅｌａｙ）を示す制御信号であり、映像出力
部１０５より出力され中央処理制御部１０６に入力され
ている。その他の構成については図１に示したものと同
じであるのでここではその説明は省略する。図１４に上
記図１３における中央処理制御部１０６の詳細な構成の
一例を示す。同図において、１４０４ｆは映像出力部１
０５からの制御信号１３１１を入力するためのＩ／０用
メモリであり、その他の構成については図２に示したも
のと同じであるのでここではその説明は省略する。

【００８９】１ラインの開始時刻の検出は、制御信号１
１０からの情報がＩ／０用メモリ２０４ｅに書き込ま
れ、これを中央処理部２０１が読み出すことにより実現
することができる。ここで、Ｉ／Ｏ用メモリ２０４ｅが
「０」のとき、既に１ラインが開始されていることを示
すものとする。中央処理部２０１が１ラインの開始点で
「１」を書き込むことにより、判定処理３０５実行時に
時間経過後にＩ／Ｏ用メモリ２０４ｅが「０」である場
合は、次の表示ラインが開始されたことを意味する。

【００９０】このとき、Ｉ／Ｏ用メモリ１４０４ｆを中
央処理部２０１が読み出すことにより、１ラインで間に
合わなかった処理数を知ることができる。また、Ｉ／Ｏ
用メモリ２０４ｅが「１」である場合は、次の表示ライ
ンがまだ開始されていないことを意味する。

【００９１】以下に、図１３に示した中央処理制御部１
０６で行なう映像出力処理を図１５を用いて説明する。
図１５において、実施の形態１で用いた図３に示したも
のと異なるのは、処理３０４ａ，処理３０４ｂを省き、
処理１５０４，１５１０，１５１１を設けた点である。
さらに、３０２ａでは、副映像処理Ａとして、外部記憶
部１０１から内部記憶部１０２へのデータ転送制御，副
映像データユニット解析処理，表示制御コマンド解析処
理を割り当て、３０２ｂでは、副映像処理Ｂとして、色
／コントラスト変化データ解析処理を行なうことであ
る。

【００９２】副映像処理Ａ３０２ａでは、外部記憶部１
０１から内部記憶部１０２、及び副映像出力部１０４ｂ
への副映像データを転送する。さらに、副映像データユ
ニット情報１１０１ａを解析し、表示制御コマンド１１
０１ｃの開始アドレス、次の副映像データユニット１１
０２の開始アドレスを得る。さらに、表示制御コマンド
１１０１ｃ，１１０１ｄを実行時間に従って順に解析す
る。

【００９３】副映像処理Ｂ３０２ｂでは、色／コントラ
スト変化データ１１０１ｅを解析し、制御信号１０７ｂ
を用いて副映像出力部１０４ｂを制御する。１５０４
は、処理が遅れたか否かの判定処理である。１５１１
は、処理１５０４で処理が遅れたと判定された場合、処
理の遅れに応じて、色／コントラスト変化処理の処理回
数を減少させる。ここでは、例として、色／コントラス
ト変化の総変化点数をＮとし、１変化に要する処理に１
０サイクル必要とする。（Ｄｅｌａｙ÷１０）値は、１
ライン出力に対して遅れた処理量を色／コントラスト変
化点数に換算した値である。つまり、（Ｄｅｌａｙ÷１
０）変化点処理分だけ処理を軽減しなければ、映像出力
処理の実時間を保証できない。以上より、副映像処理２
において、色／コントラスト変化点として、（Ｎ−Ｄｅ
ｌａｙ÷１０）点に処理を減じることにより、映像出力
処理を１ラインで収めることができる。なお、上記（Ｎ
−Ｄｅｌａｙ÷１０）の計算においては、結果を小数点
以下切り捨て処理して整数化するものとする。

【００９４】また、（Ｎ−Ｄｅｌａｙ÷１０）≦０の場
合は、副映像処理Ｂにて色／コントラスト変化処理は行
なわれない。処理１５１０は、処理１５１１に用いたｄ
ｅｌａｙに対し、Ｉ／Ｏ用メモリ１４０４ｆを読み出
す。

【００９５】このように本実施の形態５によれば、主映
像，副映像，ＯＳＤの映像出力処理を実時間で行なうこ
とが不可能となった場合、１ライン期間に対してオーバ
ーした処理量に応じて、色／コントラスト変化数を減少
させるようにしたので、副映像画像出力は得られたま
ま、色／コントラスト変化処理を全て停止することもな
く、映像出力処理全体の処理を軽減することができ、か
つ、映像出力処理の実時間を保証することができる。ま
た、副映像処理Ａ３０２ａでの処理は、迂回されること
がないため、外部記憶部１０１から内部記憶部１０２へ
のデータ転送制御，副映像データユニット解析処理，表
示制御コマンド解析処理は、毎ライン実行される。その
結果、映像出力処理が１ラインで収まるようになれば、
次の表示制御コマンドから副映像出力を正常な状態で復
帰させることができる。つまり、表示制御コマンド単位
で主映像，副映像，ＯＳＤ出力全てを正しく表示させる
ことができる。

【００９６】実施の形態６．以下、本発明の実施の形態
６による映像出力表示装置について図面を参照しながら
説明する。図１３は、本実施の形態６で用いる映像出力
処理装置の構成図である。本実施の形態では、映像出力
処理が実時間で行なえない場合、副映像処理において、
実施の形態４で示したような、表示制御コマンド解析処
理、及び色／コントラスト変化処理を停止することによ
り、中央処理制御部における副映像出力処理を軽減し、
映像出力処理を実時間で処理させることを実現するもの
である。映像出力装置の概略的な構成は、実施の形態１
で述べたものと同じである。

【００９７】以下、中央処理制御部１０６で行なう、本
実施の形態６による映像出力処理を図１６に示す。図１
６において、主映像処理Ａ３０１ａ，主映像処理Ｂ３０
１ｂや、ＯＳＤ処理Ａ３０３ａ，ＯＳＤ処理Ｂ３０３ｂ
や、判定処理３０４ａ，３０４ｂ，３０５，３０７や、
代入処理３０６，３０８は、図３に示したものと同じで
ある。図３に示したものと異なる点は、副映像処理Ａ１
６０２ａ，Ｂ１６０２ｂ，Ｃ１６０２ｃを設けた点であ
り、副映像処理Ａ１６０２ａでは、外部記憶部１０１か
ら内部記憶部１０２へのデータ転送制御、副映像データ
ユニット解析処理を割り当て、副映像処理Ｂ１６０２ｂ
では、表示制御コマンド解析処理を割り当て、副映像処
理Ｃ１６０２ｃでは、色／コントラスト変化データ解析
処理を行なうようにしたことである。

【００９８】副映像処理Ａ１６０２ａでは、外部記憶部
１０１から内部記憶部１０２へ、副映像出力部１０４ｂ
への副映像データを転送する。さらに、副映像データユ
ニット情報１１０１ａを解析し、表示制御コマンド１１
０１ｃの開始アドレス、次の副映像データユニット１１
０２の開始アドレスを得る。副映像処理Ｂ１６０２ｂで
は、表示制御コマンド１１０１ｃ，１１０１ｄを実行時
間に従って順に解析する。副映像処理Ｃ１６０２ｃで
は、色／コントラスト変化データ１１０１ｅを解析し、
制御信号１０７ｂを用いて、副映像出力部１０４ｂを制
御する。

【００９９】判定処理３０５にて、１ライン処理が間に
合わなかったと判定された場合、中央処理制御部１０６
では、判定処理３０４ａ，３０４ｂにより、副映像処理
Ｂ１６０２ｂ，副映像処理C １６０２ｃが迂回される。
このようにして、表示制御コマンド解析処理、色／コン
トラスト変化処理を停止することにより、副映像処理の
軽減を図るように構成されている。

【０１００】このように本実施の形態６によれば、主映
像，副映像，ＯＳＤの映像出力処理を実時間で行なうこ
とが不可能となった場合、表示制御コマンド解析処理、
色／コントラスト変化処理を停止することにより、１ラ
イン処理が間に合わなくなったときの表示制御コマンド
による、副映像画像出力が得られたまま、映像出力処理
全体の処理量を軽減することができ、これにより映像出
力処理の実時間を保証することが可能となる。

【０１０１】また、副映像処理Ａ１６０２ａでの処理は
迂回されることがないため、外部記憶部１０１から内部
記憶部１０２へのデータ転送制御、副映像データユニッ
ト解析処理は毎ライン実行される。その結果、映像出力
処理が１ラインで収まるようになれば、次の副映像デー
タユニットから副映像出力を正常な状態で復帰させるこ
とができる。つまり、副映像データユニット単位で主映
像，副映像，ＯＳＤ出力全てを正しく表示させることが
できる。

【０１０２】実施の形態７．以下、本発明の実施の形態
７による映像出力処理装置について図面を参照しながら
説明する。図１７は、本発明の実施の形態７における映
像出力装置を用いた主映像の出力処理の流れを示す図で
ある。図１７の主映像出力処理は、主映像出力処理方法
を制御する主映像出力処理制御部１７０１と、主映像デ
ータ転送処理遅延検出部１７０２と、主映像データ転送
処理起動制御部１７０３とで構成される。また、本実施
の形態７における映像出力装置の構成は図１に示したも
のと同じとする。

【０１０３】以上のように構成された本実施の形態７の
主映像出力処理について、以下、その動作について説明
する。まず、主映像出力処理制御部１７０１では、主映
像データを外部記憶部１０１から内部記憶部１０２へ転
送するために必要な制御情報の設定を転送制御部１０３
に対して行なう。このとき、処理が遅れたことを示すｆ
ｌａｇの状態に従って、これから表示するラインの出力
処理を選択し、その出力処理を行なう。

【０１０４】ｆｌａｇ＝１の場合は、モニタ１１１出力
での１ライン処理が間に合わなかったとして、主映像処
理が軽減される手段を選択する。例えば、垂直フィルタ
リング処理の方法によって、１ライン期間中に内部記憶
部１０２へ格納すべきデータ量を調整することができ
る。本実施の形態では、格納すべきデータ量が小さいフ
ィルタリング処理を選択することによって、主映像出力
処理にかかる処理時間の軽減を図るものである。

【０１０５】以上が、１ライン前の処理が性能を越えた
場合の、それ以降のラインにおける主映像出力処理軽減
方法であるが、さらに、主映像出力処理自体が１ライン
期間処理の性能を侵すような状況になった場合を検出す
る手段を、本実施の形態では設けている。

【０１０６】例えば、データ転送処理を起動できるまで
に待ち時間が発生した場合、この処理の遅れが蓄積さ
れ、後の副映像処理、及びＯＳＤ映像出力処理に影響を
及ぼすことがある。主映像データ転送処理遅延検出部１
７０２は、この待ち時間発生を検出するものであり、本
実施の形態では、この遅れを主映像出力以降の処理に及
ぼさないように主映像出力処理の軽減を図るものであ
る。

【０１０７】待ち時間が検出された場合には、主映像デ
ータ転送処理起動制御部１７０３で、そのラインでのみ
データ転送を停止するように処理を切り替える。このと
き、その１ライン期間の主映像表示にはバッファ上に既
に格納されている１ライン前の映像データを代用する
が、これは映像信号の垂直方向の相関が大きいという特
性を利用したものであり、このような処理を行なうこと
で、主映像の視覚的画質劣化を小さく抑えることができ
る。

【０１０８】このように本実施の形態７によれば、デー
タ転送処理を起動できるまでに待ち時間が発生した場合
に、これを検出し、主映像の処理を当該ラインのみ停止
するとともに、バッファ上に既に格納されている１ライ
ン前の映像データを用いて表示を行なうことにより、主
映像出力処理に要する時間を短縮し、処理遅延時間の蓄
積を抑えて、副映像，ＯＳＤ画像出力処理を実行でき、
なお且つ、画質劣化も小さく抑えることができる。

【０１０９】なお、処理量に応じては、主映像出力処理
制御部１７０１による処理か、主映像データ転送処理遅
延検出部１７０２と主映像データ転送処理起動制御部１
７０３とによる処理のいずれか一方のみを使用するよう
にしてもよい。

【０１１０】また、上記各実施の形態同士を組み合わせ
て使用することも可能である。すなわち、ＯＳＤ処理の
軽減を行う実施の形態３と、副映像出力処理の軽減を行
う実施の形態４〜６のうちの１つと、主映像出力処理の
軽減を行う実施の形態７とから、任意に２つ以上組み合
わせて使用することが可能である。これら実施例の組み
合わせに関しては、入力される蓄積符号化データの、主
映像や副映像の符号化データの存在の有無や、ＯＳＤ表
示の有無などから柔軟に組み合わせることが可能であ
る。つまり、主映像，副映像，ＯＳＤの出力処理軽減の
組み合わせに、処理が行われていない部分を各映像毎に
振り分けることにより、各映像出力処理において軽減さ
れ、実行できない部分を少なくすることができる。これ
により、それぞれの映像出力処理で実行されない部分が
少なくなり、各映像としては不完全であるものの、全体
として、より完全な映像を表示することが可能となる。

【０１１１】さらに、各実施の形態では、映像データと
して主映像と副映像、ＯＳＤの３種類が交互に出現する
ような形式のものについて説明したが、これら映像デー
タとして単一のものが連続して出現する場合や、２種類
が交互に現れるような場合においても、同様に適応する
ことが可能である。

【０１１２】

【発明の効果】以上のように、本発明の請求項１にかか
る映像出力処理装置によれば、映像出力に関する処理の
遅れを検出し、処理の遅れが生じた場合には、１ライン
期間に割り当てられた映像出力処理を軽減することによ
り、実時間での映像出力を保証することができ、しか
も、視聴者に違和感を与えることがない。さらに、プロ
グラムコードサイズの増大も少なく、また、処理に要す
る制御装置を複雑にする必要もなく、高周波で動作させ
る必要もない。

【０１１３】また、本発明の請求項２にかかる映像出力
処理装置によれば、上記処理の遅れを検出した時に、い
ずれの映像データの処理を軽減するかを、その時の状況
に応じて優先順位を設定するか、または予め優先順位を
設定して行うようにすることにより、上記処理の軽減時
の表示を、映像データを選択して行うことができるとい
う効果がある。

【０１１４】また、本発明の請求項３にかかる映像出力
処理装置によれば、上記請求項２記載の映像出力処理装
置において、上記優先順位を、視聴者の視点から上記モ
ニタ上における表示画面までの距離に基づいて決定する
ようにしたので、上記処理の軽減時の表示をユーザ指向
に合わせて行うことができる効果がある。

【０１１５】また、本発明の請求項４にかかる映像出力
処理装置によれば、上記請求項２記載の映像出力処理装
置において、上記優先順位を、映像データに設定された
表示情報に基づいて決定するようにしたので、番組タイ
トルなど、重要な情報が優先的に表示され、これらを見
逃したりすることがないという効果がある。

【０１１６】また、本発明の請求項５にかかる映像出力
処理装置によれば、上記請求項１記載の映像出力処理装
置において、上記１ライン期間に行う上記種類の異なる
複数の映像データのそれぞれの処理の少なくとも１つの
映像データの処理を複数に分割するものとしたので、バ
ッファメモリを削減することができる効果がある。

【０１１７】また、本発明の請求項６にかかる映像出力
処理装置によれば、上記請求項１記載の映像出力処理装
置において、上記遅延の検出を所定数のフィールドまた
はフレーム間隔で行うようにしたので、遅延検出による
ハードウエアへの負荷を少なくすることができるという
効果がある。

【０１１８】また、本発明の請求項７にかかる映像出力
処理装置によれば、上記請求項１記載の映像出力処理装
置において、上記遅延の検出を所定数のライン間隔で行
うようにしたので、精度の高い画面表示を行うことがで
きるという効果がある。

【０１１９】また、本発明の請求項８にかかる映像出力
処理装置によれば、上記請求項１または請求項５記載の
映像出力処理装置において、上記映像出力処理の軽減
は、種類の異なる複数の映像データのうちのいずれかの
映像データの処理の少なくとも一部を停止するようにし
たので、表示画面全体が乱れるようなことがなく、所望
とする映像データについては、これを参照することがで
きる効果がある。

【図面の簡単な説明】

【図１】本発明の実施の形態１による映像出力処理装
置の構成図である。

【図２】上記実施の形態１による映像出力処理装置に
おける中央制御処理部の構成図である。

【図３】上記実施の形態１における映像出力処理装置
による処理の流れを示すフロー図である。

【図４】実施の形態１における映像出力処理におい
て、処理遅れが発生した場合の様子を示す図である。

【図５】本発明の実施の形態２における映像出力処理
装置による処理の流れを示すフロー図である。

【図６】上記実施の形態２における映像出力処理装置
を用いて映像出力処理を行うことによる表示結果を説明
するための図である。

【図７】本発明の実施の形態３における映像出力処理
装置による処理の流れを示すフロー図である。

【図８】上記実施の形態３における映像出力処理装置
のＯＳＤ処理Ａの流れを示すフロー図である。

【図９】上記実施の形態３における映像出力処理装置
のＯＳＤ処理Ｂの流れを示すフロー図である。

【図１０】上記実施の形態３における映像出力処理装
置のＯＳＤ処理によるＯＳＤ出力画像のイメージを示す
図である。

【図１１】本発明の実施の形態４における映像出力処
理装置による副映像データユニットの構成を示す図であ
る。

【図１２】本発明の実施の形態４における映像出力処
理装置による処理の流れを示すフロー図である。

【図１３】本発明の実施の形態５による映像出力処理
装置の構成図である。

【図１４】上記実施の形態５による映像出力処理装置
における中央制御処理部の構成図である。

【図１５】本発明の実施の形態５における映像出力処
理装置による処理の流れを示すフロー図である。

【図１６】本発明の実施の形態６における映像出力処
理装置による処理の流れを示すフロー図である。

【図１７】本発明の実施の形態７における映像出力処
理装置による処理の流れを示すフロー図である。

【図１８】１ライン単位での処理遅れの判定を行う場
合において、処理遅れが発生した場合の様子を示す図で
ある。

【符号の説明】

１０１外部記憶部１０２内部記憶部１０３転送処理部１０４ａ主映像出力部１０４ｂ副映像出力部１０４ｃＯＳＤ出力部１０５映像出力部１０６中央処理制御部１０７ａ〜１０７ｄ制御信号１０８第１の内部バス１０９第２の内部バス１１０制御信号１１１モニタ２０１中央処理部２０２命令メモリ２０３作業メモリ２０４ａＩ／Ｏ用メモリ（主映像出力部制御用）２０４ｂＩ／Ｏ用メモリ（副映像出力部制御用）２０４ｃＩ／Ｏ用メモリ（ＯＳＤ出力部制御用）２０４ｄＩ／Ｏ用メモリ（転送制御部制御用）２０４ｅＩ／Ｏ用メモリ（映像出力部からの制御信号
用）６１０処理軽減前の表示画像例６１０ａ主映像６１０ｂ副映像６１０ｃＯＳＤ映像６１１処理軽減後の表示画像例６１２処理軽減後の表示画像例１００１８ｂｉｔ／ｐｉｘｅｌのＯＳＤ出力結果１００２０ＳＤ処理軽減後の出力結果（８ｂｉ−ｔ／
ｐｉｘｅｌのＯＳＤ）１００３０ＳＤ処理軽減後の出力結果（４ｂｉｔ／ｐ
ｉｘｅｌのＯＳＤ）１３１１処理時間遅れによる変化点数算出処理１４０４ｆＩ／Ｏ用メモリ（Ｈ−ＳＹＮＣからのサイ
クル数を示す制御信号用）

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁶ 識別記号ＦＩＨ０４Ｎ 5/445 Ｈ０４Ｎ 5/445 Ｚ

Claims

【特許請求の範囲】

【請求項１】種類の異なる複数の映像データを処理し
てモニタ出力とする映像データ処理実行手段と、上記映像データ処理実行手段による上記複数の映像デー
タの処理が、モニタ出力時点で実時間内に処理を完了し
たか否かを検出する映像処理遅延検出手段と、上記映像処理遅延検出手段により処理の遅れが検出され
た場合に、上記映像データ処理実行手段による処理を、
１ライン期間に割り当てられた処理を軽減するよう上記
映像データ処理実行手段を制御する映像データ処理制御
手段とを備えたことを特徴とする映像出力処理装置。
【請求項２】請求項１記載の映像出力処理装置におい
て、上記映像データ処理制御手段は、上記処理を軽減する際
の映像データの優先順位を設定して、上記映像データ処
理実行手段を制御するものであることを特徴とする映像
出力処理装置。
【請求項３】請求項２記載の映像出力処理装置におい
て、上記優先順位は、視聴者の視点から上記モニタ上におけ
る表示画面までの距離に基づいて決定されることを特徴
とする映像出力処理装置。
【請求項４】請求項２記載の映像出力処理装置におい
て、上記優先順位は、映像データに設定された表示情報に基
づいて決定されることを特徴とする映像出力処理装置。
【請求項５】請求項１記載の映像出力処理装置におい
て、上記１ライン期間に行う上記種類の異なる複数の映像デ
ータのそれぞれの処理の少なくとも１つの映像データの
処理を複数に分割することを特徴とする映像出力処理装
置。
【請求項６】請求項１記載の映像出力処理装置におい
て、上記映像処理遅延検出手段は、上記遅延の検出を所定数のフィールドまたはフレーム間
隔で行うものであることを特徴とする映像出力処理装
置。
【請求項７】請求項１記載の映像出力処理装置におい
て、上記映像処理遅延検出手段は、上記遅延の検出を所定数のライン間隔で行うものである
ことを特徴とする映像出力処理装置。
【請求項８】請求項１または５記載の映像出力処理装
置において、上記映像データ処理制御手段は、上記種類の異なる複数
の映像データのうちのいずれか映像データの処理の少な
くとも一部を停止することにより処理を軽減することを
特徴とする映像出力処理装置。