JPH11261966A

JPH11261966A - 映像符号化装置および映像符号化方法

Info

Publication number: JPH11261966A
Application number: JP6136698A
Authority: JP
Inventors: Keiichiro Fujie; 慶一郎藤江
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1998-03-12
Filing date: 1998-03-12
Publication date: 1999-09-24
Anticipated expiration: 2018-03-12
Also published as: JP3544852B2

Abstract

(57)【要約】【課題】映像符号化装置で符号化されたＭＰＥＧ２ビデ
オストリーム(VSm) の画面の一部領域を他の映像で置換
する場合、ストリーム(Sm)を復号化し映像を置換して再
符号化するので映像符号編集装置内に復号化及び符号化
装置が必要となり装置が大きくなる。また、再度の復号
化、再符号化実施により画質が劣化する。【解決手段】映像を映像符号化装置でVSm に符号化する
際、画面領域を置換可能領域(A1)、置換不能領域(A2)の
２領域に分割し、A2はA2のみを動き検出の参照画面に用
いて符号化する。該符号化装置で作成したSmのA1のスラ
イスをライブラリ63の持つ置換する映像のスライスで置
換部62が置換する。更に映像符号化装置でA1をイントラ
符号化すればA1のみを復号、画像に上書き、符号化出来
る。本発明によりSmを復号せずに一部分を別映像（ex.
ＣＭ）で置換したSmを作ることや置換領域のみの復号、
符号化で例えばロゴ等を上書きしたSmを作成出来る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明はＭＰＥＧ２ビデオス
トリームを用いた映像放送に有用な映像符号化装置およ
び映像符号化方法に関する。

【０００２】

【従来の技術】近年、放送、通信、蓄積メディアなどへ
の応用が期待されている技術にＭＰＥＧ２（ＩＳＯ／Ｉ
ＥＣ１３８１８）に代表されるディジタル動画像符号化
技術がある。

【０００３】周知の通り、ＭＥＰＧ２による動画像符号
化においては、動き補償と呼ばれる方式により符号化を
行うフレームまたはフィールドを、過去や未来のフレー
ムまたはフイールドの類似する部分から予測し、その残
差を符号化することにより高能率な符号化を実現してい
る。従って、復号化するにはその逆の手順を実施する必
要がある。

【０００４】ところで、ビデオオンデマンドなどのよう
な映像放送等を考えた場合、ユーザに番組内容を安価な
料金で、あるいは無料で提供したりすることが考えられ
るが、そのためにはコマーシャル（ＣＭ）を画像の一部
に挿入して提供すると云った途が考えられる。この場
合、商業テレビ放送で行っているような番組の途中にＣ
Ｍのみの放送時間帯を組み入れると云う方式は、ビデオ
オンデマンドの場合、スキップ操作を適宜行うことでＣ
Ｍ視聴を避けて鑑賞される懸念があるため、ＣＭ提供者
の利益を考えると、画面の一部の領域を利用してそこに
ＣＭを挿入しておくという対策が考えられる。

【０００５】そして、これにより、ＣＭをカットして番
組を視聴されてしまうと云う問題を回避できるようにな
る。

【０００６】しかしながら、その一方で次のような問題
が残る。すなわち、画像は、ディジタル録画する場合、
容量が膨大なものとなるため、通常は、映像符号化装置
で動画像符号化して収録する。そして、標準的な動画像
符号化にはＭＰＥＧ２を使用する。従って、符号化済み
の収録画像中にＣＭやロゴなどを挿入するためには、収
録後の画像にＣＭ挿入やロゴ挿入のための編集を施す必
要がある。

【０００７】しかし、ＭＰＥＧ２用の従来の映像符号化
装置での符号化済み画像のデータであるＭＰＥＧ２ビデ
オストリームにおいて、そのストリームで得られる画面
上の一部の領域をＣＭやロゴなどの他の映像で置換しよ
うとする場合、従来の映像符号編集装置ではＭＰＥＧ２
ビデオストリームを復号し、得られた画像の所定部分を
置換し、映像符号化装置で再符号化する必要があった。

【０００８】

【発明が解決しようとする課題】ＭＰＥＧ２ビデオスト
リームにて得られる画面上の一部領域をＣＭなどの他の
映像で置換する場合、または放送局のロゴなどを上書き
した映像で置換する場合、従来の映像符号化装置ではＭ
ＰＥＧ２ビデオストリームを復号し、得られた画像の所
定部分を置換又は上書きし、営巣符号化装置で再符号化
する必要がある。

【０００９】しかし、一度復号化してから再符号化する
ためには映像符号編集装置内に復号化装置と符号化装置
が必要となるため装置が大きくなる。しかも復号化、再
符号化を行うことにより画質が劣化する。また、ビデオ
オンデマンドなどの場合、例えば、契約視聴者を正規料
金会員とエコノミー会員や無料会員等に分けていずれの
会員かにより、ＣＭなし番組視聴や、ＣＭ付番組視聴な
どをしたり、また、ＣＭを入れるにしても、地域別ある
いは年齢別、趣味別などといった具合に、契約内容に応
じて種々、対応を変えるようにしたいといった多様化、
差別化をする要求もある。しかし、これに応えるため
に、ＣＭなしの番組をＭＰＥＧ２ビデオストリームとし
て用意して、これを必要に応じＣＭ付とする場合、ま
ず、番組を復号化し、この復号化したディジタル信号の
画像における画面内の一部にＣＭを付加すべく編集処理
してから符号化して番組を伝送することになる。

【００１０】この場合、復号化と再符号化処理が加わる
ために、その分、遅延が生じ、高速処理が可能なシステ
ムにしないと実用に供するには不向きとなる。

【００１１】そこで、この発明の目的とするところは、
ＭＰＥＧ２ビデオストリームの画面の一部領域を他の映
像で置換える場合に、画像の劣化を生じることなく、ま
た、遅延を最小限に抑えることができて、十分に実用に
供することができるようにした符号化画像編集装置を提
供することにある。

【００１２】

【課題を解決するための手段】上記目的を達成するた
め、本発明は次のような装置を用いる。

【００１３】画面上の一部の領域を例えばＣＭなどで完
全に置き換える場合には、第一の発明の映像符号化装置
を用いて符号化する。この映像符号化装置では、映像を
ＭＰＥＧ２ビデオストリームに映像符号化する際に画面
領域を置換可能領域、置換不能領域の２つの領域に分割
し、置換不能領域の予測符号化の参照画面には置換不能
領域のみを用いる。この際２つの領域はスライス単位で
分割する。

【００１４】画面上の一部の領域に例えば放送局のロゴ
などを上書きした映像で置き換える場合には、第二の映
像符号化装置を用いて符号化する。この映像符号化装置
では、映像をＭＰＥＧ２ビデオストリームに映像符号化
するの際に画面領域を置換可能領域、置換不能領域の２
つの領域に分割し、置換不能領域の予測符号化の参照画
面には置換不能領域のみを用いた上に、置換可能領域は
ピクチャータイプに関わらずイントラ符号化する。この
際２つの領域はマクロブロック単位で分割する。

【００１５】二つの発明とも置換可能領域に関する情報
（置換可能領域が存在すること、置換可能領域の種類、
領域の画面上の位置、大きさ）を記述したユーザーデー
タをストリームに多重する。

【００１６】こうして作られたＭＰＥＧ２ビデオストリ
ームに対して、映像符号編集装置は置換可能領域の映像
を加工する。

【００１７】第一の映像符号化装置で作られたストリー
ムの置換可能領域をＣＭなどで置換する場合、置換可能
領域のスライスを置換用のスライスで置き換える。

【００１８】第二の映像符号化装置で作られたストリー
ムの置換可能領域にロゴなどを上書きした映像で置換す
る場合、ＭＰＥＧ２ビデオストリームの置換可能領域の
みを一旦、デコードする。そして、その再生画像にロゴ
などを上書きし、再びイントラ符号化する。こうして得
られたストリームで置換可能領域を置き換える。

【００１９】いずれの映像符号編集装置の場合も、置換
後必要に応じて上書き可能領域に関する情報を記述した
ユーザーデータを消去する。

【００２０】本発明を用いることにより、第一の発明で
はＭＰＥＧ２ビデオストリームを復号することなく一部
分を別の映像（例えばＣＭ）で置換したストリームを作
ることが出来るようになるもので、ＭＰＥＧ２における
ビデオストリームを復号化、再符号化することなく画面
の一部分を別の映像（例えばＣＭ（コマーシャルメディ
ア）で置換したストリームを作ることが出来る。また、
第二の発明ではストリームの一部を復号、映像編集、再
符号化するだけで映像に例えば放送局のロゴを上書きす
ることが出来る。

【００２１】

【発明の実施の形態】以下、本発明の実施例について、
図面を参照して説明する。

【００２２】（実施例１）図１に映像符号化装置の全体
の構成図を示す。図において、入力された動画像信号２
３は、動き検出部１１によりマクロブロック単位の動き
検出を行い、フレーム内符号化を行う場合は入力画像
を、動き補償予測フレーム間符号化を行う場合は、フレ
ームメモリ１８に記録されたローカルデコード画像との
動き補償誤差を、それぞれＤＣＴ（離散コサイン変換）
部１３，４３、量子化部１４、可変長符号化部２０によ
りにより符号化し、動きベクトル、予測モード情報等と
ともにビットストリーム２４として出力する。

【００２３】量子化後の信号は、逆量子化部１５、逆Ｄ
ＣＴ部１６及び予測画面との加算により復号を行い、参
照画面としてフレームメモリ１８に記録する。全体制御
部は、可変長符号化部２０から得られる発生符号量情報
に基づいて、全体制御部２１により所定の符号化所定の
符号化ビットレートになるように、フィードバック制御
によって量子化部１４における量子化スケール値を決定
する他に、各ブロックのパラメータ設定なども行う。映
像符号化装置全体に対する外部から指示はパラメータ入
力部２２を介して行う。

【００２４】本システムでは、画面の一部に必要に応じ
て、後からＣＭなどの画像を挿入したりすることが出来
るようにするために、映像を符号化する際に、画面を他
の画像と自由に置き換えることができる置換可能領域Ａ
１と、他の画像と置き換えができない置換不能領域Ａ２
に分けるようにする。

【００２５】例えば、図２の如きである。ラスタスキャ
ンのライン１６本分を１スライスとすると、この図２の
例では、画面の上から９６ライン（６スライス分）を置
換可能領域Ａ１、その他の部分を置換不能領域Ａ２とし
ていることを示している。

【００２６】本発明システムにおいては、映像符号化装
置を構成する要素の一つである動き検出部１１において
動き検出をする際に、置換不能領域Ａ２の画素を参照画
面として動き検出する場合には、置換不能領域Ａ２の画
素のみを参照画面として用いる。

【００２７】符号化に際して置換可能領域Ａ１はＧＯＰ
単位に設定することが出来る。この際、イントラ符号化
用量子化マトリックス“intra_quantiser_matrix”，ノ
ンイントラ符号化用量子化マトリックス“non_intra_qu
antiser_matrix”は置換可能領域が設定されているスト
リームを通して一定とする。またＭＰＥＧ２の画像には
ピクチャタイプとして、Ｉピクチャ，Ｐピクチャ，Ｂピ
クチャがあるが、これらそれぞれに対してピクチャタイ
プ毎に置換可能領域Ａ１の占めるスライス（この例の場
合、６スライス分）の合計符号量の最低量を設定し、符
号化する際にはピクチャタイプ毎に置換可能領域Ａ１の
スライスの合計符号量が最低量以上になるように符号量
制御を行ってもよい。これらの制御パラメータはパラメ
ータ入力部１６より入力する。

【００２８】上記制限を付けた符号化を行つた場合に
は、ストリームのsequence_header()に続くシーケンス
拡張部“sequence_extention()”部分におけるユーザに
解放されたユーザデータ“user_data() ”部分に上記符
号化に関するデータを記述する。この記述内容として
は、・「参照画面の制限を行ったこと」・「置換可能領域のスライスの番号」・「ストリーム中に現れるＩ，Ｐ，Ｂピクチャの周期は
一定か否か」・「周期が一定の場合のＩピクチャの周期とＩ又はＰピ
クチャの周期」・「置換可能領域のスライスの符号量制御を行ったか否
か」・「符号量制御を行った場合のＩ，Ｐ，Ｂピクチャに割
り当てられた符号量」などがあげられる。

【００２９】図３、図４、図５に“user_data() ”の記
述例を示す。これらのうち、図３はストリーム中に現れ
るＩ，Ｐ，Ｂピクチャの周期は一定で、置換可能領域Ａ
１のスライスの符号量制御を行った場合の記述例を示
し、また、図４はストリーム中に現れるＩ，Ｐ，Ｂピク
チャの周期は一定で、置換可能領域Ａ１のスライスの符
号量制御を行わなかった場合の記述例を示しており、そ
して、図５はストリーム中に現れるＩ，Ｐ，Ｂピクチャ
の周期は不定で置換不能領域のスライスの符号量制御を
行わなかった場合の記述例を示している。また、置換可
能領域が設定されているGOP には必ずこの“user_dat
a() ”を含む“sequence_extention()”を持つsequence
_header() がなければならない。

【００３０】［映像符号編集装置］次に、映像符号編集
装置について説明する。実施例１における映像符号編集
装置の構成は図６に示す如きであり、ストリーム解析部
６１、ストリーム置換部６２、置換用ストリームライブ
ラリ６３とからなる。

【００３１】ここでストリーム解析部６１は、図１の構
成の映像符号化装置の最終段の出力段より出力される当
該映像符号化装置で作られたストリームを解析するため
のものであって、置換可能領域Ａ１のストリームである
か、置換不可能領域のストリームであるのかの解析を行
うためのものである。また、置換用ストリームライブラ
リ６３は置換する各種画像のストリームをライブラリと
して蓄えたものであり、自己の蓄えているライブラリ中
から、前記ストリーム解析部６１の解析結果に応じて所
定の置換用ストリームを選択してストリーム置換部６２
に与える機能を有するものである。また、ストリーム置
換部６２は前記ストリーム解析部６１の解析結果に応じ
て置換用ストリームライブラリ６３が出力するストリー
ムを置換可能領域Ａ１に置換して出力するものである。

【００３２】次にこの映像符号編集装置の作用を説明す
る。ここでは上記図１の構成の映像符号化装置で作られ
たストリームを“元ストリーム”、置換する映像をＭＰ
ＥＧ２ビデオのスライスに符号化したものを“置換スラ
イス”と呼ぶ。また、元ストリームの置換可能領域のス
ライスを“元スライス”と呼ぶ。

【００３３】置換スライスとして、以下の条件のものを
用意する。すなわち、・「置換スライスは、元ストリームと同じ“intra_quan
tiser_matrix”，“non_intra_quantiser_matrix”を使
っていること」・「置換スライスは、元ストリームの置換可能領域と同
じ表示サイズのスライスであること」などである。また、置換スライスは以下に示す“ｔｙｐ
ｅ１”と“ｙｐｅ２”の２種類のストリームがあり、両
者で処理が異なる。

【００３４】［ｔｙｐｅ１］これは置換スライスが通常
のＭＰＥＧ２ビデオストリームから得られる場合であ
る。そして、この場合、Ｉ，Ｐ，Ｂピクチャそれぞれの
ピクチャタイプごとの符号量は一定値以下に制限されて
いる必要がある。また、Ｉ，Ｐ，Ｂピクチャの順序は一
定である必要がある。

【００３５】［ｔｙｐｅ２］これは置換スライスが静止
画の場合であり、この場合には以下のスライスの構成に
する。

【００３６】・表示する静止画の内容で構成される“in
tra_macroblock”で構成されたスライスを用意する。こ
の際、“macroblock_type ”は“Ppicture”のものを用
いる。元ストリームのＰピクチャの置換に用いる。

【００３７】・スライスの最初と最後は前方の画面をそ
のまま用い、両者の間はスキップドマクロブロックで構
成されたスライスを用意する。この際、“macroblock_t
ype”は“Ppicture”のものを用いる。元ストリームの
Ｐピクチャの置換に用いる。

【００３８】・スライスの最初と最後は後方の画面をそ
のまま用い、両者の間はスキップドマクロブロックで構
成されたスライスを用意する。この際、“macroblock_t
ype”は“Bpicture”のものを用いる。元ストリームの
Ｂピクチャの置換に用いる。

【００３９】ｔｙｐｅ１は元ストリームと同じＩ，Ｐ，
Ｂピクチャの順序の置換スライスである必要があるがｔ
ｙｐｅ２の場合は元ストリームのピクチャタイプに対応
したスライスを挿入するので、ピクチャタイプの順序だ
けスライスを用意する必要がない。

【００４０】次に置換スライスで置換する手順を説明す
る。はめに、ｔｙｐｅ１の置換スライスで置換する場合
の手順を示す。

【００４１】［ｔｙｐｅ１の置換スライスで置換する場
合の手順］ｔｙｐｅ１の置換スライスで置換する場合に
は図７、図８の手順に従う。

【００４２】はじめに、置換開始前の処理（図７参照）
を行う。この処理は、Ｓ１からＳ４の手順に沿った処理
である。すなわち、［Ｓ１］図３〜図５に示した置換可能領域に関する
“user_data() ”を探す。見つかればＳ２に移り、見つ
からなければ置換を中止する。［Ｓ２］ “intra_quantiser_matrix”, “non_intra_
quantiser_matrix”をロードする。そして、Ｓ３に移
る。［Ｓ３］元ストリームの各ピクチャの置換可能領域の
符号量がピクチャタイプごとに下限値以上になってい
て、かつＩ，Ｐ，Ｂピクチャの順序は固定のものの場合
のみ置換可能であるので、その条件に合うものを探す。
条件に合えばＳ４に移り、合わなければ置換中止にす
る。［Ｓ４］置換可能領域のサイズ、“intra_quantiser_
matrix”, “non_intra_quantiser_matrix”、各ピクチ
ャのスライスの符号量がピクチャタイプ毎の下限値以
下、Ｉ，Ｐ，Ｂピクチャの順序が原ストリームと同じも
のを選ぶ。そして、その条件を満たすストリームがあれ
ばそれを置換開始する。条件を満たすものがなければ、
置換を中止する。

【００４３】［Ｓ５］置換可能領域に関する“user_dat
a() ”を消去するか否かを判定する。

【００４４】［Ｓ６］消去する場合は、上記置換可能領
域に関する“user_data() ”を“0”で置換する。

【００４５】実際の置換は次のようにする。［置換処理］置換処理は図８の如きであり、Ｓ２１から
Ｓ２５の手順を踏む。［Ｓ２１］元ストリームのＧＯＰ（Group of Picture
s ；ランダムアクセスを可能にするために、画面内だけ
で閉じた情報による符号化画面（フレーム内符号化画
面）を定期的に挿入し、このフレーム内符号化画面が少
なくとも一枚入った画面群構造を持つ。このような画面
群構造がＧＯＰである。）の先頭を探す。ＧＯＰの先頭
が見つかったならばＳ２２の処理に移る。［Ｓ２２］置換終了の条件（元ストリーム終了、置換
スライス終了、その他の置換終了条件）を満たしていな
いことを確認する。そして、満たしてないことが確認さ
れたならばＳ２３の処理に移り、満たしてないことが確
認されなければ置換終了する。［Ｓ２３］ピクチャ毎に元スライスを置換スライスで
置き換えていく。そして、それを終えたならば、Ｓ２４
の処理に移る。

【００４６】［Ｓ２４］置換スライスの符号量の方が
元スライスより多いか少ないかを判定する。元スライス
の方が少なければＳ２２に戻って以上の処理を繰り返
し、元スライスの方が多ければＳ２５の処理に移る。［Ｓ２５］ここでは、置換スライスの符号量が不足す
る分、ストリームにスタッフィング（符号発生量が予定
より少ないとき、アンダーフローを防止するために挿入
するダミービット）を挿入する。こうして、置換スライ
スの符号量の方が元スライスより少ない場合は不足分だ
けスタッフィングを挿入する。以上が、ｔｙｐｅ１の置
換スライスで置換する場合の手順の例である。

【００４７】次にｔｙｐｅ２の置換スライスで置換する
場合の手順の一例を説明する。［ｔｙｐｅ２の置換スライスで置換する場合の手順］ｔ
ｙｐｅ２の置換スライスの置換の手順は図９，図１０の
如きである。［置換開始前の処理］まずはじめに、図９に示す置換開
始前の処理を実施する。

【００４８】置換処理は図９の如きであり、Ｓ３１から
Ｓ３３の手順を踏む。［Ｓ３１］まず、図３〜図５に示した置換可能領域に
関する“user_data()”を探す。見つかればＳ３２の処
理に移り、見つからなければ置換を中止する。

【００４９】［Ｓ３２］次に、ビデオストリーム中の
イントラ（フレーム内予測符号化）量子化マトリックス
“intra_quantiser_matrix”の情報をロードする。そし
て、Ｓ３３の処理に移る。［Ｓ３３］置換スライスの中から置換可能領域のサイ
ズ、“intra_quantiser_matrix ”が元ストリームと同
じものを選ぶ。

【００５０】［Ｓ３４］置換可能領域に関する“user_d
ata() ”を消去するか否かを判定する。

【００５１】［Ｓ３５］消去する場合は、上記置換可能
領域に関する“user_data() ”を“0 ”で置換する。

【００５２】実際の置換は次のようにする。［置換処理］置換処理は図１０の如きであり、Ｓ４１か
らＳ５０までの手順を踏む。［Ｓ４１］まず、元ストリームのＧＯＰの先頭を探
す。そして、Ｓ４２の処理に移る。

【００５３】［Ｓ４２］置換終了の条件（元ストリー
ム終了、その他の置換終了条件）を満たしていないこと
を確認する。そして、満たしていないことが確認できた
ならば、Ｓ４３の処理に移る。もしも置換終了の条件を
満たしていたならば置換終了する。［Ｓ４３］元ストリームのピクチャのタイプをチェッ
クする。そして、ピクチャタイプに応じてＳ４４からＳ
４６までのいずれかの処理に移る。例えば、Ｉピクチャ
の場合は、Ｓ４４の処理に移り、Ｐピクチャの場合は、
Ｓ４５の処理に移り、Ｂピクチャの場合は、Ｓ４６の処
理に移る。［Ｓ４４］Ｉピクチャの場合は、Ｉピクチャ用置換ス
ライスを採用する。そして、Ｓ４７の処理に移る。

【００５４】［Ｓ４７］採用したＩピクチャ用置換ス
ライスの符号量が元スライスの符号量より小さいか大き
いかを確認する。その結果、小さければ、Ｓ４８の処理
に移って採用したＩピクチャ用置換スライスで置換す
る。そして、処理をＳ４９に移す。また、Ｓ４７での確
認の結果、大きければＳ４１に戻って上述の処理を繰り
返す。つまり、採用したＩピクチャ用置換スライスの符
号量が元スライスの符号量より大きい場合は置換を行わ
ずに元ストリームのＧＯＰの先頭を探す処理へ戻り、小
さい場合には置換を行う。［Ｓ４５］Ｓ４３での判断の結果、Ｐピクチャであっ
た場合はＰピクチャ用スライスを採用し、Ｓ４８に移っ
て、当該採用したＰピクチャ用置換スライスで置換す
る。そして、処理をＳ４９に移す。［Ｓ４６］Ｓ４３での判断の結果、Ｂピクチャであっ
た場合には、Ｓ４８に移ってＢピクチャ用置換スライス
で置換する。そして、処理をＳ４９に移す。

【００５５】［Ｓ４９］元ストリームのスライスをピ
クチャの種類に合わせてその該当種類のピクチャ用置換
スライスで置換した場合は、置換スライスの符号量の方
が元スライスより多いか少ないかを判断する。その結
果、多い場合はＳ４２の処理に戻り、上述の処理を繰り
返し、また、置換スライスの符号量の方が元スライスよ
り少ない場合はＳ５０の処理に移り、ここで不足分だけ
スタッフィングを挿入してからＳ４２の処理に戻り、上
述の処理を繰り返す。

【００５６】つまり、Ｉピクチャの場合は、Ｉピクチャ
用置換スライスの符号量が元スライスの符号量より小さ
いことを確認して置換する。そして、大きい場合は置換
を行わずに元ストリームのＧＯＰの先頭を探す処理へ戻
る。

【００５７】Ｐ，Ｂピクチャの場合はそれぞれＰピクチ
ャ用、Ｂピクチャ用置換スライスで置換する。置換した
場合は、置換スライスの符号量の方が元スライスより少
ない場合は不足分だけスタッフィングを挿入する。

【００５８】これらの処理のために、元ストリームの置
換可能領域のサイズ、“intra_quantiser_matrix”，の
組み合わせが何種類か考えられる場合は、置換用ストリ
ームライブラリにその種類だけ置換スライスを準備す
る。

【００５９】ｔｙｐｅ２のスライスを置換する場合に
は、以下に示すようにＩピクチャに置換する置換スライ
スのみ元ストリームの置換可能領域のサイズトパラメー
タに合わせて符号化し、Ｐ，Ｂピクチャに関しては置換
可能領域のサイズに合わせてスライスを作成して置換す
る方法も可能である。この場合の映像符号編集装置に構
成を図１１に示す。次いで置換の手順を図１２，図１３
に示す。

【００６０】＜映像符号編集装置の構成例２＞図１１に
示す構成例２の映像符号編集装置は、ストリーム解析部
６１，ストリーム置換部６２、バッファ７１、置換用映
像符号化装置７２からなり、置換用映像符号化装置７２
には原画像７３が取り込まれる。

【００６１】ここでストリーム解析部６１は、図１の構
成の映像符号化装置の最終段の出力段より出力される当
該映像符号化装置で作られたストリームを解析するため
のものであって、置換可能領域Ａ１のストリームである
か、置換不可能領域のストリームであるのかの解析を行
って出力するためのものである。また、バッファ７１は
この出力を一時保持するためのものであり、置換用映像
符号化装置７２は図６の構成例での置換用ストリームラ
イブラリ６３の代わりのもので、原画像７３を元に置換
用スライスを作製するものであって、Ｉピクチャに置換
する置換スライスのみ元ストリームの置換可能領域のサ
イズトパラメータに合わせて符号化し、Ｐ，Ｂピクチャ
に関しては置換可能領域のサイズに合わせてスライスを
作成してストリーム置換部６２に与える機能を有するも
のである。また、ストリーム置換部６２は前記ストリー
ム解析部６１の解析結果に応じて置換用映像符号化装置
７２が出力するストリームを置換可能領域Ａ１に置換し
て出力するものである。

【００６２】次にこの映像符号編集装置の作用を説明す
る。［ｔｙｐｅ２の置換スライスで置換する場合の手順］ｔ
ｙｐｅ２の置換スライスの置換の手順は図１２，図１３
の如きである。［置換開始前の処理］まずはじめに、図１２に示す置換
開始前の処理を実施する。

【００６３】置換処理は図１２の如きであり、Ｓ５１か
らＳ５３の手順を踏む。［Ｓ５１］ここでは、まず図３〜図５に示した“user
_data() ”を探す。見つかればＳ５２の処理に移り、見
つからなければ置換を中止する。［Ｓ５２］置換可能領域のサイズを調べる。

【００６４】［Ｓ５３］そして、同じサイズのＰ，Ｂ
ピクチャ用置換スライスを準備する。

【００６５】［Ｓ５４］置換可能領域に関する“user_d
ata() ”を消去するか否かを判定する。

【００６６】［Ｓ５５］消去する場合は、上記置換可能
領域に関する“user_data() ”を“0 ”で置換する。

【００６７】そして、置換処理に移る。

【００６８】実際の置換は次のようにする。［置換処理］置換処理は図１３の如きであり、Ｓ６１か
らＳ７１までの手順を踏む。［Ｓ６１］まず、元ストリームのＧＯＰの先頭を探
す。そして、Ｓ６２の処理に移る。［Ｓ６２］置換終了の条件（元ストリーム終了、その
他の置換終了条件）を満たすか、否かを調べる。満たし
ていれば、置換を終了し、満たしていなければＳ６３の
処理に移る。［Ｓ６３］このようにしてＳ６２において、置換終了
の条件（元ストリーム終了、その他の置換終了条件）を
満たしていないことを確認したならば、Ｓ６３におい
て、元ストリームの“intra_quantiser_matrix”をロー
ドする。元ストリームで使われている“intra_quantise
r_matrix”が変化した場合は新しいものにアップデート
する。ここでの処理が終わると次にＳ６４の処理に移
る。［Ｓ６４］ここでは、元ストリームのピクチャのタイ
プをチェックする。そして、ピクチャタイプに応じてＳ
４５からＳ６７までのいずれかの処理に移る。例えば、
Ｉピクチャの場合は、Ｓ６５の処理に移り、Ｐピクチャ
の場合は、Ｓ６６の処理に移り、Ｂピクチャの場合は、
Ｓ６７の処理に移る。［Ｓ６５］Ｉピクチャの場合は、置換スライスの符号
量を調べる。そして、Ｓ６８の処理に移る。

【００６９】［Ｓ６８］元ストリームで使用されてい
る“intra_quantiser_matrix”を用いて置換画像を元ス
ライス符号量のスライスに符号化する。そして、Ｓ６９
の処理に移り、ここで、元ストリームのピクチャの種類
に合わせて置換スライスに置換する。スライス垂直位置
“slice_vertical_position ”の値は元スライスのもの
を使用する。そして、処理をＳ７０に移す。［Ｓ６６］Ｓ６４での判断の結果、Ｐピクチャであっ
た場合はＰピクチャ用スライスを採用し、Ｓ６９に移っ
て、元ストリームのピクチャの種類に合わせて置換スラ
イスに置換する。スライス垂直位置“slice_vertical_p
osition ”の値は元スライスのものを使用する。そし
て、処理をＳ７０に移す。［Ｓ６７］Ｓ６４での判断の結果、Ｂピクチャであっ
た場合には、Ｂピクチャ用置換スライスを採用する。そ
して、Ｓ６９に移って、元ストリームのピクチャの種類
に合わせて置換スライスに置換する。“slice_vertical
_position ”の値は元スライスのものを使用する。そし
て、処理をＳ７０に移す。［Ｓ７０］ここでは置換スライスの符号量の方が元ス
ライスより多いか少ないかを判断する。その結果、多い
場合はＳ６２の処理に戻り、上述の処理を繰り返し、ま
た、置換スライスの符号量の方が元スライスより少ない
場合はＳ７１の処理に移り、ここで不足分だけスタッフ
ィングを挿入してからＳ６２の処理に戻り、上述の処理
を繰り返す。

【００７０】このように、Ｉピクチャの場合は、元スラ
イスの置換可能領域の符号量を調べ、現在使われている
“intra_quantiser_matrix”を用いて置換用の原画像を
上記符号量以下のスライスに符号化する。また、Ｐ，Ｂ
ピクチャの場合は用意したＰピクチャ用、Ｂピクチャ用
置換スライスで置換する。

【００７１】そして、置換した場合は、置換スライスの
符号量の方が元スライスより少ない場合は不足分だけス
タッフィングを挿入する。

【００７２】この方法を用いれば元ストリームのパラメ
ータによらずに画像を置換することが出来る。

【００７３】以上、実施例１は、画面領域を置換可能領
域、置換不能領域の２つの領域に分割し、置換可能領域
の予測符号化を行う際に置換不能領域を予測の参照画面
に用いずにＭＰＥＧ２ビデオス卜リームを作成する映像
符号化装置と、前記符号化装置で作成されたストリーム
の置換可能領域を他の映像のスライスに置換する映像符
号編集装置とから構成した。

【００７４】従来の映像符号化装置で符号化されたＭＰ
ＥＧ２ビデオストリームの画面上の一部の領域を他の映
像で置換する場合、ストリームを復号化して映像を置換
して再符号化するので映像符号編集装置内に復号化装置
と符号化装置が必要となり装置が大きくなる。しかも復
号化、再符号化を行うことにより画質が劣化する。ま
た、復号化、再符号化の際に遅延が生ずる。

【００７５】そこで、実施例１に示した本発明では、映
像を映像符号化装置でＭＰＥＧ２ビデオストリームに符
号化する際、画面領域を置換可能領域、置換不能領域の
２つの領域に分割し、置換不能領域は置換可能領域を予
測の参照画面に用いない条件で符号化するようにし、こ
の符号化装置で作成されたストリームの置換可能領域の
スライスを、置換したい対象の映像のスライスで置換す
るようにした。

【００７６】故に、本発明を用いることにより、ストリ
ームを復号することなく一部分を別の映像（例えばＣ
Ｍ）で置換したストリームを作ることが出来るようにな
るもので、実施例１の本発明を用いることにより、動画
像符号化の標準的な手法の一つであるＭＰＥＧ２におけ
るビデオストリームを復号化、再符号化することなく画
面の一部分を別の映像（例えばＣＭ（コマーシャルメデ
ィア））で置換したストリームを作ることが出来、これ
により映像符号編集装置でＭＰＥＧ２ビデオストリーム
を復号化、再符号化する必要がないので映像符号編集装
置を小型にでき、画像の劣化を防いで、しかも、復号
化、再符号化による遅延がなくなる利点が得られるよう
になる。

【００７７】以上は、画面を上下に所望に分けて置換可
能領域と不可能領域に分け、置換可能領域について、画
像を書き換えるようにしたものであったが、ロゴ等を対
象とする場合、これでは領域が多き過ぎる。そこで、ロ
ゴなどに最適な実施例を次に実施例２として説明する。

【００７８】（実施例２）従来の映像符号化装置で符号
化したＭＰＥＧ２ビデオストリームの画面上に例えばロ
ゴを上書きした映像で置換する場合、従来の映像符号編
集装置ではＭＰＥＧ２ビデオストリームを復号し、得ら
れた画像にロゴを上書きし、映像符号化装置で再符号化
する必要があった。しかし、一度復号化してから再符号
化するためには映像符号編集装置内に復号化装置と符号
化装置が必要となるため装置が大きくなる。しかも復号
化、符号化を行うことにより画質が劣化が生ずる。ま
た、復号化、再符号化の際に遅延が生ずる。

【００７９】実施例２に示す本発明は、映像符号化装置
で映像符号化を行う際に画面領域を置換可能領域と置換
不能領域に分割する。符号化に際して置換可能領域はピ
クチャタイプに関わらずイントラ符号化を行う。置換不
能領域は動き検出を行う際の参照画面に上書き不能領域
のみを用いて符号化を行う。そして上書き可能領域に関
する情報（上書き可能領域が存在すること、領域の画面
上の位置、大きさ）を記述したユーザーデータをストリ
ームに多重する。

【００８０】上記映像符号化装置で作られたＭＰＥＧ２
ビデオストリームの置換可能領域の映像を例えば番組の
ロゴを上書きしたもので置換する場合には、映像符号編
集装置においてＭＰＥＧ２ビデオストリームの置換可能
領域のみを一旦デコードする。そしてその再生画像にロ
ゴを上書きし、再びイントラ符号化する。こうして得ら
れたストリームを本来のストリームと置換する。またこ
の際、必要に応じて置換可能領域に関する情報を記述し
たユーザーデータを消去する。

【００８１】第二の発明においては、ＭＰＥＧ２ビデオ
ストリーム全体を復号化、再符号化することなく、画面
の一部分に別の映像（例えばロゴ等）を上書きしたスト
リームを作ることが出来るようになり、また、映像符号
編集装置の小型化と画質の維持を可能になり、復号化、
再符号化による遅延もないようにしたシステムとなる。
そして、この発明により、画面の一部分に別の映像（例
えばロゴ等）を上書きしたストリームを作ることが出来
るようになることから、例えば、ディジタル放送を行う
際に上書き可能領域に放送局のロゴを上書きすること
で、映像が複製された場合にオリジナルが何であるかが
分かるようになるので、著作権保護に有用であり、さら
に上書き可能領域の有無、領域の画面上の位置、大きさ
を記述したユーザデータを消去することにより、ストリ
ームに対する上書き防止、上書きデータの削除を困難に
する。

【００８２】実施例２においては、図１４に符号Ａ１１
を付して示すように、書き換え可能な領域をロゴのサイ
ズ対応に画面のフルサイズに対して比較的小さく確保す
る。また、実施例１と同様に、ＭＰＥＧ２ビデオストリ
ーム全体を復号化、再符号化することなく、画面の一部
分に別の映像（例えばロゴ等）を上書きしたストリーム
を作ることが出来るようにし、また、映像符号編集装置
の小型化と画質の維持を可能にし、復号化、再符号化に
よる遅延もないようにする。

【００８３】以下、詳細を説明する。

【００８４】この実施例で用いる映像符号化装置の構成
も図１で説明したものと同じである。実施例２では先の
実施例１でのスライス単位の画像書き換え（画面の領域
を水平分割する方式）ではなく、実施例２では、例え
ば、図１４に示すように、マクロブロック単位で画面を
置換可能領域と置換不能領域に分け、置換可能領域に対
して所望の画像を上書きした映像をはめ込むことができ
るようにするものである。

【００８５】図１４に、画面の右上から９６画素×９６
画素（４×４マクロブロック）を上書き可能領域Ａ１
１、その他の部分を上書き不能領域Ａ１２とした例を示
す。

【００８６】図１の映像符号化装置は、上書き可能領域
Ａ１１についてはピクチャの符号化タイプがＩピクチ
ャ、Ｐピクチャ、Ｂピクチャに関わらずイントラ符号化
する。

【００８７】置換不能領域Ａ１２については、映像符号
化装置の動き補償予測部１５において動き予測をする際
に、置換不能領域Ａ１２を参照画面として用いて符号化
する。

【００８８】上記制限を付けた符号化を行った場合に
は、例えば、ピクチャヘッダーのグループ情報を集めた
部分である“group_of_picture_header() ”の後に記述
される拡張ユーザデータである“extention_and_user_d
ata() ”に置換可能領域Ａ１１に関する情報として以下
の項目を記述したユーザデータ情報“user_data() ”と
して記述する。すなわち、記述内容としては、・「置換可能領域が存在すること」・「置換可能領域の画面上の位置」・「置換可能領域の大きさ」などである。

【００８９】図１５に置換可能領域Ａ１１に関する情報
を記述した“user_data() ”の例を示す。

【００９０】符号化に際して置換可能領域Ａ１１はＧＯ
Ｐ単位に設定することが出来る。

【００９１】従って、置換可能領域Ａ１１が存在する
“group_of_picture_header() ”の後に必ず置換可能領
域に関する情報を記述した“user_data() ”を付ける。
このため、各ＧＯＰには必ずビデオストリームにヘッダ
情報としてピクチャグループヘッダ“group_of_picture
_header() ”を付加する。

【００９２】置換可能領域Ａ１１の設定が終わった直後
のＧＯＰを終了ＧＯＰ“closed_ ＧＯＰ”としない場合
は、置換可能領域Ａ１１が設定されている最後のＰピク
チャを参照する直後のＢピクチャの予測符号化には最後
のＰピクチャの置換不能領域Ａ１２のみを予測の参照画
面とする。

【００９３】置換符号化をした際の符号量の調整に用い
るために各ピクチャの最後に０スタッフィングを追加し
ておいても良い。

【００９４】次に、映像符号編集装置について説明す
る。［映像符号編集装置］実施例２における映像符号編集装
置の構成例１を図１６に示す。映像符号編集装置は入力
ストリームを一旦受信する入力バッファ８１、置換可能
領域が含まれているストリームを検出する置換可能領域
検出部８２、置換可能領域の映像に上書きする置換可能
領域書換部８３からなる。

【００９５】映像符号編集装置は画像符号化装置よりＭ
ＰＥＧ２の形式に符号化されて与えられる入力ストリー
ム（ビデオストリーム）を入力バッファ８１に一旦受信
する。この入力バッファ８１に一時保持された入力スト
リームは、置換可能領域検出部８２に逐次読み込まれ
る。そして、置換可能領域検出部８２ではこの入力スト
リームに対して、以下の処理を行う。

【００９６】＜置換可能領域検出部８２での処理＞［処理１］ビデオストリーム中に含まれているシーケ
ンス情報を記述したシーケンスヘッダ“sequence_heade
r() ”と、ピクチャグループに関するヘッダ情報である
“group_of_picture_header() ”を検出してストリーム
からＧＯＰを切り分ける。

【００９７】［処理２］ “group_of_picture_heade
r() ”の後に図１５に示した置換可能領域Ａ１１に関す
る情報を記述した“user_data() ”がある場合は、１Ｇ
ＯＰ分のストリームを上書き領域検出部８２に出力す
る。一方、記述がない場合はそのままストリームを出力
し、上述の［処理１］に戻る。

【００９８】［処理３］置換可能領域書換部８３にス
トリームを出力した場合は、置換領域検出部８２がスト
リーム出力終了を通知するまで待って上述の［処理１］
に戻る。

【００９９】以上が、置換可能領域検出部８２での処理
である。

【０１００】次に置換可能領域書換部８３での処理を説
明する。［置換可能領域書換部８３］上置換可能領域書換部８３
について説明する。

【０１０１】置換可能領域書換部８３の構成を図１７に
示す。置換可能領域書換部８３は、ストリームを解析し
て置換可能領域Ａ１１を復号化する復号化部９１、復号
画像に上書き画像を上書きする映像上書き部９２、上書
きした映像を再び符号化する符号化部９３、上書き用の
映像を置いておく上書き用映像ライブラリ９５、並びに
前記各部分を制御する全体制御部９４からなる。

【０１０２】このような構成の上書き可能領域書換部８
３における処理の流れを図１８を用いて説明する。

【０１０３】［Ｓ８１］ストリームにおけるシーケン
スヘッダ“sequence_header() ”に含まれる“intra_qu
antiser_matrix”を全体制御部９４で保持しておく。

【０１０４】また、ストリームにおけるピクチャグルー
プヘッダ“group_of_picture_header() ”の後の置換可
能領域Ａ１１に関する情報を記述したデータ領域である
ユーザデータ“user-data() ”から置換可能領域のサイ
ズと位置の情報を読み込み、全体制御部９４に保持す
る。

【０１０５】［Ｓ８２］置換可能領域Ａ１１に関する
情報を記述した“user_data() ”を消去するか否かを判
定する。

【０１０６】［Ｓ８３］そして、その結果、消去する
場合は、ストリーム上の“user_data() ”を“0 ”で置
き換える。

【０１０７】［Ｓ８４］ストリームを解析して１フレ
ーム分のストリームを調べ、ピクチャデータの最後のス
タッフィングの“0 ”のバイト数を調べる。

【０１０８】［Ｓ８５］置換可能領域Ａ１１のマクロ
ブロックだけをデコードして再生画像を得る。

【０１０９】［Ｓ８６］再生画像に置換画像を上書き
して上書き済み画像を作成する。

【０１１０】［Ｓ８７］上書き済み画像を、デコード
に用いた“intra_quantiser-matrix”でイントラ符号化
する。その際、符号量については以下の条件を用いる。

【０１１１】《イントラ符号化時の符号量条件》「（新しく符号化するマクロブロックの符号量のピクチ
ャ単位での合計符号量）＜（元のマクロブロックの符号
量のピクチャ単位での合計符号量＋ピクチャデータの最
後のスタッフィングの“０”の符号量）」［Ｓ８８］「出来たストリームを元のストリームと置
き換える」［Ｓ８９］スタッフィングを用いて符号量を合わせ
る。新しく作ったマクロブロックの符号量のピクチャ単
位での合計が元のマクロブロックの符号量の合計より多
い場合は多い分だけピクチャの最後にある“０”を削除
する。また、少ない場合は少ない分だけ“０”を挿入す
る。」［Ｓ９０］ストリームを出力する。

【０１１２】［Ｓ９１］ＧＯＰ終了か否かを判断す
る。その結果、ＧＴＯ終了でなければＳ８４の処理に戻
り、Ｓ８４以降の処理を繰り返す。もし、ＧＴＯ終了で
あったならば、Ｓ９２の処理に移る。

【０１１３】［Ｓ９２］ストリームの出力終了を置換
可能領域検出部に通知する。そして、処理を終了する。
置換可能領域を完全に他の映像と置き換えてしまう場合
には、あらかじめイントラ符号化したマクロブロックデ
ータを作成しておいて、置換可能領域のデコードは行わ
ずに置き換えることも可能である。

【０１１４】以上、実施例２に示した本発明システムを
用いることにより、ＭＰＥＧ２ビデオストリーム全体を
復号化、再符号化することなく、画面の一部分に別の映
像（例えばロゴ）を上書きしたストリームを作ることが
出来るようになる。そして、これにより映像符号編集装
置でＭＰＥＧ２ビデオストリーム全体を復号化、再符号
化する必要はないので映像符号編集装置を小型にでき、
画像の劣化を防ぎ、復号化、再符号化による遅延がなく
なる。

【０１１５】これにより、例えばデジタル放送を行う際
に上書き可能領域に放送局のロゴを上書きすることによ
り映像が複製された場合にオリジナルが何であるかが分
かるようになる。さらに上書き可能領域Ａ１１の有無、
領域の画面上の位置、大きさを記述したユーザデータを
消去することにより、ストリームに対する上書き防止、
上書きデータの削除を困難にする。

【０１１６】尚、本発明は上述した実施例に限定される
ものでなく、要旨を変更しない範囲内で適宜、変形して
実施し得るものである。

【０１１７】

【発明の効果】以上、第一の本発明を用いることによ
り、動画像符号化の標準的な手法の一つであるＭＰＥＧ
２におけるビデオストリームを復号化、再符号化するこ
となく画面の一部分を別の映像（例えばＣＭ（コマーシ
ャルメディア））で置換したストリームを作ることが出
来る。これにより映像符号編集装置でＭＰＥＧ２ビデオ
ストリームを復号化、再符号化する必要がないので映像
符号編集装置を小型にでき、画像の劣化を防ぎ、復号
化、再符号化による遅延がなくなる。

【０１１８】また、第二の本発明を用いることにより、
ＭＰＥＧ２ビデオストリーム全体を復号化、再符号化す
ることなぐ画面の一部分に別の映像（例えばロゴ）を上
書きしたストリームを作ることが出来る。これにより映
像符号編集装置でＭＰＥＧ２ビデオストリーム全体を復
号化、再符号化する必要がないので映像符号編集装置を
小型にでき、画像の劣化を防ぎ、復号化、再符号化によ
る遅延がなくなる。これにより、例えばデジタル放送を
行う際に上書き可能領域に放送局のロゴを上書きするこ
とにより映像が複製された場合にオリジナルが何かが分
かる。

【０１１９】いずれの発明でも、さらに置換可能領域の
有無、領域の画面上の位置、大きさを記述したユーザー
データを置換処理後消去することにより、ストリームに
対する再置換防止、置換データの削除を困難にする。

【図面の簡単な説明】

【図１】本発明を説明するための図であって、本発明シ
ステムに用いる映像符号化装置の構成例を示すブロック
図。

【図２】本発明を説明するための図であって、本発明の
実施例１における置換可能領域と置換不能領域の分割の
例を説明する図。

【図３】本発明を説明するための図であって、本発明に
おいて使用するユーザヘッダにおける“user_data() ”
ユーザデータの内容の例を示す図。

【図４】本発明を説明するための図であって、本発明に
おいて使用するユーザヘッダにおける“user_data() ”
の内容の例を説明する図。

【図５】本発明を説明するための図であって、本発明に
おいて使用するユーザヘッダにおける“user_data() ”
の内容の例を説明する図。

【図６】本発明を説明するための図であって、本発明の
実施例１における映像符号編集装置の構成例を示すブロ
ック図。

【図７】本発明を説明するための図であって、本発明の
実施例１における映像符号編集装置におけるｔｙｐｅ１
の場合での置換用ストリーム選択の手順を説明する図。

【図８】本発明を説明するための図であって、本発明の
実施例１における映像符号編集装置でのｔｙｐｅ１置換
用ストリームで置換する場合の手順を説明する図。

【図９】本発明を説明するための図であって、本発明の
実施例１における映像符号編集装置のｔｙｐｅ２置換用
ストリーム選択の手順を説明する図。

【図１０】本発明を説明するための図であって、本発明
の実施例１における映像符号編集装置のｔｙｐｅ２置換
用ストリームで置換する場合の手順を説明する図。

【図１１】本発明を説明するための図であって、本発明
の実施例１における映像符号編集装置の別の構成例を示
すブロック図。

【図１２】本発明を説明するための図であって、本発明
の実施例１における図１１の映像符号編集装置でのｔｙ
ｐｅ２置換用ストリーム選択の手順を説明するための
図。

【図１３】本発明を説明するための図であって、本発明
の実施例１における映像符号編集装置のｔｙｐｅ２置換
用ストリームで置換する場合の手順を説明する図。

【図１４】本発明を説明するための図であって、本発明
の実施例２における上書き可能領域と上書き不能領域の
分割の例を説明する図。

【図１５】本発明を説明するための図であって、本発明
の実施例２における上書き可能領域に関する情報を記述
したuser_data() の内容の例を示す図。

【図１６】本発明を説明するための図であって、本発明
の実施例２における映像符号編集装置の構成例を示すブ
ロック図。

【図１７】本発明を説明するための図であって、本発明
の実施例２における上書き可能領域検出部の構成例を示
すブロック図。

【図１８】本発明を説明するための図であって、本発明
の実施例２における上書き可能領域検出部の処理の流れ
を説明するフローチャート。

【符号の説明】

１１…動き検出部１２…減算器１３…ＤＣＴ（直交変換）処理部１４…量子化部１５…逆量子化部１６…逆ＤＣＴ処理部１７…加算器１８…フレームメモリ１９…動き補償予測部２０…可変長符号化部２１…全体制御部２２…パラメータ入力部２３…入力動画信号６１…ストリーム解析部６２…ストリーム置換部６３…置換用ストリームライブラリ７１…バッファ７２…置換用映像符号化部７３…原画像８１…入力バッファ８２…上書き可能領域検出部８３…上書き部可能領域書換部９１…復号化部９２…映像上書き部９３…符号化部９４…全体制御部９５…上書き用映像ライブラリ。

Claims

【特許請求の範囲】

【請求項１】画面領域をデータ入れ替えを許可した置換
可能領域と、入れ替え不許可にした置換不能領域の２つ
の領域に分け、置換不能領域の予測符号化を行う際に置
換可能領域を予測の参照画面に用いることなくＭＰＥＧ
２ビデオス卜リームを作成する符号化手段と、この符号化手段にて作成されたＭＰＥＧ２ビデオストリ
ームの置換可能領域を他の映像に置換する映像符号編集
手段と、から構成したことを特徴とする映像符号化装
置。
【請求項２】請求項１記載の映像符号化装置において、置換可能領域を、ＧＯＰ単位で設定／解除する手段をさ
らに備えることを特徴とする映像符号化装置。
【請求項３】請求項２記載の映像符号化装置において、置換可能領域の有無、領域の大きさ、位置情報を示すユ
ーザーデータをＭＰＥＧ２ビデオストリームにＧＯＰ単
位に多重する構成とすることを特徴とする映像符号化装
置。
【請求項４】請求項３記載の映像符号化装置において、前記画面領域の分割をスライス単位とすることを特徴と
する映像符号化装置。
【請求項５】請求項４記載の映像符号化装置において、ピクチャタイプ毎に置換可能領域に割り当てる符号量を
一定量以上にすることを特徴とする映像符号化装置。
【請求項６】請求項３の映像符号化装置において、画像の置換可能領域となる画面領域はピクチャタイプに
無関係にイントラ符号化による符号化を行うことを特徴
とする映像符号化装置。
【請求項７】請求項６記載の映像符号化装置において、画面の前記領域分割をマクロブロック単位に実施させる
手段をさらに備えることを特徴とする映像符号化装置。
【請求項８】請求項６記載の映像符号化装置において、符号化する際に上書き可能領域を有する各ピクチャのス
トリームの最後にスタッフィングを挿入する手段を備え
ることを特徴とする映像符号化装置。
【請求項９】請求項５記載の映像符号化装置で作成され
たＭＰＥＧ２ビデオストリームに対して、置換可能領域
を別のスライスで置換することを特徴とする映像符号編
集装置。
【請求項１０】請求項８記載の映像符号化装置において
作成されたＭＰＥＧ２ビデオストリームに対して、置換
可能領域のみを復号化し、復号した画像の一部または全
部に映像を上書し再びイントラ符号化したストリームで
上書き可能領域のストリームを置換する手段を備えるこ
とを特徴とする映像符号編集装置。
【請求項１１】請求項９、１０記載の映像符号編集装置
において、ストリームを置換する際に置換可能領域の有無、大き
さ、位置情報を示すデータを消去する手段を備えること
を特徴とする映像符号編集装置。