JPH11243525A - 動画像編集装置および動画像編集方法 - Google Patents

Abstract

(57)【要約】 【課題】ＭＰＥＧ２などフレーム間の動きを利用してフ
レーム間符号化された２つのビットストリームをクロス
フェードによって接続する際、クロスフェード画像を再
符号化するときの演算量を削減する。 【解決手段】結合しようとする２種類のビットストリー
ムＡ，Ｂそれぞれから取り出された動きベクトルに代表
される符号化パラメータの中で、一方のビットストリー
ムの符号化パラメータを用いてクロスフェード画像を復
号化した場合の符号量と、他方のビットストリームの符
号化パラメータを用いてクロスフェード画像を復号化し
た場合の符号量とがそれぞれ発生符号量予測器８，９に
より予測される。そして、予測符号量が小さくなる方の
符号化パラメータを用いて、クロスフェード画像の再符
号化が行われる。これにより、クロスフェード画像につ
いて動き検出処理を行う必要が無くなり、演算量の低減
を図ることができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は符号化された複数の
動画像データを再編集し、１つの動画像データとする動
画像編集装置および動画像編集方法に関する。

【０００２】

【従来の技術】動画像符号化の国際標準ＭＰＥＧ２（Ｍ
ｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏ
ｕｐ ｐｈａｓｅ２）に代表されるディジタル動画像符
号化技術は、現行のアナログによる動画像メディアであ
るテレビジョン放送・ビデオなどを置き換える可能性を
持つ技術として現在注目されている。

【０００３】ＭＰＥＧ２における動画像圧縮は、フレー
ム間予測と呼ばれる時間方向の冗長性を取り除き情報量
を削減する方式が取り入れられている。ＭＰＥＧ２の符
号化装置の例を図７に示す。

【０００４】時間方向の冗長性の除去は図７中の動き検
出部４０と動き補償部３９によって実行される。動き検
出部４０では、図８に示されるように、参照画像メモリ
４１に保存されている過去に符号化した画像から画面を
１６×１６画素に分割したブロック（マクロブロック）
単位で似た部分を探索することで２つのフレーム間の動
きを検出する。この動きの情報（動きベクトル）はビッ
トストリームとして外部へ送出されるとともに、動き補
償部３９へ出力される。

【０００５】動き補償部３９では、動きベクトルから符
号化するマクロブロックと類似する１６×１６画素の領
域を参照画像メモリ４１から読み出し、予測画像とす
る。減算部３１では、フレーム順並び替え部３０によっ
て符号化画面順に並び替えられた入力画像信号の符号化
しようとするマクロブロックと、予測画像との差分が取
られ（残差信号を得る）、これにより符号化対象の当該
マクロブロックが持っていた情報量は大幅に抑制され
る。この抑制されたマクロブロックに対し、次に空間方
向の情報圧縮が行われる。

【０００６】まず、離散コサイン変換（ＤＣＴ）部３２
によって残差信号を周波数空間に写像し、量子化部３３
により所定の荒さで量子化する。次にこれを可変長符号
化部（ＶＬＣ）３４で可変長符号化することにより、も
ともとあった動画像情報は数十分の一にまで圧縮され
る。この情報は、前述の動きベクトルとともに多重化部
３５で多重化され、ビットストリームとして出力され
る。

【０００７】また、量子化部３３からの出力は、逆量子
化部３６、逆ＤＣＴ部３７、加算部３８を介して復号さ
れた後、参照画像メモリ４１に参照画像として記録され
る。このような処理の中で最も処理量が多いのが動き検
出処理である。代表的な動き検出の方法には、符号化す
るマクロブロックと探索範囲内の領域の画素値を０．５
画素単位でずらしながら画素値の差分の自乗和を計算
し、最も自乗和の値が小さなものを動きベクトルとする
というものがある。このような動き検出法は、一般にそ
の演算量が膨大であることが知られており、リアルタイ
ムに符号化を行う場合に必要となる単位時間あたりの演
算量は数百ＧＯＰＳ（Ｇｉｇａ Ｏｐｅｒａｔｉｏｎ
ｐｅｒ ｓｅｃｏｎｄ）にもなる。このため、実時間の
符号化処理を行うためには専用のプロセッサなどの特別
なハードウェアが必要とされる。

【０００８】一方、近年のパーソナルコンピュータ（以
下、ＰＣと称する）の処理能力の向上に伴い、ディジタ
ル動画像の加工・編集処理が個人レベルで可能になって
きている。ＰＣによる動画像の加工・編集処理は、あら
かじめ符号化された複数の動画像データ（ビットストリ
ーム）から、一定期間に相当する部分を取り出し、シー
ンチェンジ、またはフェードイン・フェードアウト、ク
ロスフェードなどの特種効果を用いて他のビットストリ
ームと接続し、一つのビットストリーム（プログラム）
にまとめるといった作業が代表的なものとなる。

【０００９】ＭＰＥＧ２における動画像の編集に関して
は、例えば特開平８−２５１５８２号公報に示されるよ
うな２つの動画像ビットストリームをシーンチェンジに
より接続する方法が提案されている。これは、ビットス
トリームＡとビットストリームＢを時間的に重ねること
なく接続するものであり、仮想デコーダのバッファ容量
を調整して接続することにより、接続する際に必要な演
算量は問題とならない。

【００１０】

【発明が解決しようとする課題】しかしながら、２つの
シーンをつなぎ合わせる際に頻繁に用いられる特種効果
の一つであるクロスフェードを実現しようとした場合、
異なる２つの動画像ビットストリームからクロスフェー
ド画像を新たに生成することが必要となる。

【００１１】この場合、図９に示されているように、復
号部２０，２１による２つの動画像ビットストリーム
Ａ，Ｂそれぞれの復号処理、合成部２２による復号画像
Ａ，Ｂの合成処理、この合成によって得られたクロスフ
ェード画像を符号化部２３によって再符号化する処理が
必要となる。

【００１２】前述の通り、符号化には動き検出処理が必
要であるため、再符号化に要する計算量は膨大なものと
なる。したがって、付加的なハードウェアを用いず汎用
のプロセッサだけで構成されたシステムにおいてはこの
処理に時間がかかり、ユーザーインタフェースの低下を
引き起こす。

【００１３】本発明はこのような点に鑑みてなされたも
のであり、その目的は、特別なハードウェアの追加をせ
ずに２種類の動画像ビットストリームをクロスフェード
によってつなぎ合わせる際の再符号化処理における処理
時間を低減し、ユーザーの操作性を損なわない動画像編
集装置および動画像編集方法を提供することにある。

【００１４】

【課題を解決するための手段】上述の課題を解決するた
めに、本発明は、フレーム間予測を用いて符号化されて
いる第１および第２の２種類の動画像ビットストリーム
をクロスフェードによって一部重ね合わせて結合する機
能を有する動画像編集装置であって、前記クロスフェー
ドで結合する期間に対応する前記第１および第２のビッ
トストリームそれぞれを復号化する手段と、復号化によ
って得られた２つの動画像からクロスフェード画像を作
成する手段と、前記クロスフェードで結合する期間にお
ける前記第１および第２のビットストリームを解析し、
それぞれの符号化パラメータを取り出す手段と、前記第
１および第２のビットストリームそれぞれの符号化パラ
メータを用いて前記クロスフェード画像を符号化したと
きの符号量を予測する符号量予測手段と、この予測結果
に基づいて前記第１および第２のビットストリームのい
ずれか一方の符号化パラメータを選択し、その選択した
符号化パラメータを用いて前記クロスフェード画像を再
符号化する手段とを具備することを特徴とする。

【００１５】この動画像編集装置においては、まず、結
合しようとする２種類のビットストリームそれぞれのク
ロスフェード部の復号化が行われ、復号化された画像の
重ね合わせによってクロスフェード画像が生成される。
そして、２種類のビットストリームそれぞれから取り出
された動きベクトルに代表される符号化パラメータの中
で、一方のビットストリームの符号化パラメータを用い
てクロスフェード画像を復号化した場合の符号量と、他
方のビットストリームの符号化パラメータを用いてクロ
スフェード画像を復号化した場合の符号量とがそれぞれ
予測される。そして、予測符号量が小さくなる方の符号
化パラメータを用いて、クロスフェード画像の再符号化
が行われる。

【００１６】このように、接続しようとする２種類のビ
ットストリームに記録された、動きベクトルに代表され
る符号化パラメータを、本来クロスフェード画像の符号
化処理に必要とされる動き検出処理によって求められる
符号化パラメータの代わりに用いることにより、クロス
フェード部分の再符号化処理に要する演算量を大幅に削
減することができる。

【００１７】また、２つのビットストリームから求めら
れる２つの符号化パラメータのどちらを用いるかを判断
する際に、クロスフェード部分の符号化に当該符号化パ
ラメータを用いたときに発生する符号量を予測し、少な
い方の符号化パラメータを選択し、再符号化することに
より、符号化パラメータの誤選択による符号化効率の低
下を抑制することができる。

【００１８】また、本発明は、前記クロスフェード画像
の符号化対象の画像領域毎に、その画像領域に対応する
前記第１および第２のビットストリームそれぞれの符号
化パラメータを用いたときの符号量を予測し、前記クロ
スフェード画像の符号化対象の画像領域毎に前記第１お
よび第２のビットストリームのいずれか一方の符号化パ
ラメータを動的に選択することを特徴とする。これによ
り、クロスフェード画像のマクロブロック毎に最適な符
号化パラメータを適用することが可能となり、より符号
化効率を高めることが可能となる。

【００１９】

【発明の実施の形態】本発明は、２つの動画像ビットス
トリームを復号し、合成して得られるクロスフェード画
像を再符号化する際に符号化に要する演算量を低減する
ことを可能にするものである。本発明の具体的な構成を
説明する前に、まず、ＭＰＥＧ２の符号化構造を説明す
る。

【００２０】ＭＰＥＧ２では、符号化するピクチャはそ
の種類に応じてＩピクチャ・Ｐピクチャ・Ｂピクチャに
分類される。Ｉピクチャは空間的な冗長度だけを利用し
て圧縮される。すなわち、動き検出は行われない。Ｐピ
クチャは、時間軸上で過去のピクチャからの動きを利用
して符号化される。Ｂピクチャは時間軸上で過去と未来
の両方のピクチャからの動きをともに利用して、補間に
より符号化される。この予測構造を示した図を図３に示
す。図３において、Ｉピクチャの直前の２つのＢピクチ
ャから次のＩピクチャの直前のＰピクチャまでのピクチ
ャ群をＧｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅ（ＧＯＰ）と
呼ぶ。

【００２１】以下、本実施形態の動画像編集処理につい
て説明する。本実施形態では、図４に示すように、ＧＯ
Ｐ単位で編集を行うものである。ここでは、元となるビ
ットストリームＡ（ＧＯＰ１ａ〜ＧＯＰ１６ａ）および
ビットストリームＢ（ＧＯＰ６ｂ〜ＧＯＰ２１ｂ）から
新たなビットストリームＣを作成する場合の例を表して
いる。

【００２２】この例では、ビットストリームＣの最初の
５ＧＯＰはビットストリームＡ（ＧＯＰ１ａ〜ＧＯＰ５
ａ）をそのまま用いる。ビットストリームＣの最後の５
ＧＯＰはビットストリームＢ（ＧＯＰ１７ｂ〜ＧＯＰ２
１ｂ）をそのまま用いる。途中の１１ＧＯＰについて
は、ビットストリームＡ（ＧＯＰ６ａ〜ＧＯＰ１６ａ）
とビットストリームＢ（ＧＯＰ６ｂ〜ＧＯＰ１６ｂ）を
復号化し、クロスフェード画像となるように合成したも
のを再符号化して得る。

【００２３】ここで、典型的なクロスフェード画像は、
フェードアウトされるビットストリームＡ（ＧＯＰ６ａ
〜ＧＯＰ１６ａ）の画像とフェードインされるビットス
トリームＢ（ＧＯＰ６ｂ〜ＧＯＰ１６ｂ）の画像との重
ね合わせにより得られるものであるが、合成画像の画素
値が予め決められた所定の上限値を超えない範囲であれ
ば、ビットストリームＡ（ＧＯＰ６ａ〜ＧＯＰ１６ａ）
の画像をフェードアウトしながらビットストリームＢ
（ＧＯＰ６ｂ〜ＧＯＰ１６ｂ）の画像をそれに重なるよ
うにカットインしたり、あるいはその逆に、ビットスト
リームＢ（ＧＯＰ６ｂ〜ＧＯＰ１６ｂ）の画像をフェー
ドインしながらその途中でビットストリームＡ（ＧＯＰ
６ａ〜ＧＯＰ１６ａ）の画像をカットアウトするといっ
た処理も可能である。

【００２４】図１には、本実施形態のクロスフェード画
像再符号化処理部の詳細な構成が示されている。このク
ロスフェード画像再符号化処理部には、図１に示すよう
に、記憶装置として、ビットストリームＡを記憶する記
憶装置１と、ビットストリームＢを記憶する記憶装置２
と、ビットストリームＡのクロスフェード期間における
符号化パラメータＡが記録される記憶装置３と、ビット
ストリームＢのクロスフェード期間における符号化パラ
メータＡが記録される記憶装置４と、ビットストリーム
Ａのクロスフェード期間についての復号化画像Ａが記録
される記憶装置５と、ビットストリームＢのクロスフェ
ード期間についての復号化画像Ｂが記録される記憶装置
６と、編集後の動画像ビットストリームＣが記録される
記憶装置１４とが設けられている。なお、これら記憶装
置１、２、３、４、５、６、１４は同一の記憶装置の異
なる領域を用いて構成してもかまわない。

【００２５】また、クロスフェード画像再符号化処理部
には、ビットストリームＡ，Ｂの復号を行う復号化器７
と、二つの発生符号量予測器８，９と、復号化画像Ａ，
Ｂの合成によってクロスフェード画像を生成するクロス
フェード画像作成器１０と、予測された発生符号量を比
較してビットストリームＡ，Ｂいずれかの符号化パラメ
ータを選択する比較器１１と、選択された符号化パラメ
ータを用いてクロスフェード画像を符号化する符号化器
１２と、ビットストリームＡ、符号化されたクロスフェ
ード画像、ビットストリームＢを多重化して編集後の動
画像ビットストリームＣを生成する多重化器１３とから
構成される。

【００２６】これら復号化器７、発生符号量予測器８、
９、比較器１１、クロスフェード画像作成器１０、符号
化器１２、多重化器１３は、ハードウェアで実現しても
ソフトウェアで実現してもよい。

【００２７】次に、図２のフローチャートを参照して、
クロスフェードによる動画像のつなぎ合わせ処理の手順
ついて説明する。まず、記憶装置１に記録されているビ
ットストリームＡのうち、これからクロスフェード画像
を作成しようとする部分が復号化器７に送られる。そし
て、復号化器７では、ビットストリームＡがマクロブロ
ック毎に復号されてその復号された画像情報が記憶装置
５に送出される同時に、復号処理で用いられた動きベク
トル、符号化タイプなどの各マクロブロックについての
符号化パラメータの情報が記憶装置３に送出される（ス
テップＳ１０１）。復号化器７で作成された画像および
動きベクトルは、一旦それぞれ記憶装置５、記憶装置３
で記憶される。

【００２８】これと同様に、記憶装置２に記録されてい
るビットストリームＢのうち、これからクロスフェード
画像を作成しようとする部分は復号化器７に送られる。
復号化器７では、復号した画像情報を記憶装置６に送出
すると同時に復号に用いた動きベクトル、符号化タイプ
などの各マクロブロックについての符号化パラメータの
情報を記憶装置４に送出する（ステップＳ１０２）。復
号化器７で作成された画像および動きベクトルは、一旦
それぞれ記憶装置６、記憶装置４で記憶される。

【００２９】クロスフェード画像作成器１０は、記憶装
置５および６に記録された復号された動画像からクロス
フェード画像を作成する（ステップＳ１０３）。クロス
フェードが開始されてから終了するまでの時間をＴ、ク
ロスフェード開始時刻からの経過時間をｔ（０≦ｔ≦
Ｔ）とし、時刻ｔにおいて復号されるビットストリーム
Ａ，Ｂそれぞれのマクロブロックの画素値をＰａ、Ｐｂ
とすると、ビットストリームＡの画像をフェードアウト
しながらビットストリームＢの画像をフェードインする
クロスフェードを行った場合、時刻ｔにおけるクロスフ
ェード画像Ｐｃは、例えば次式のような式を適用するこ
とにより作成することができる。

【００３０】 Ｐｃ＝ Ｐａ×（Ｔ−ｔ）／Ｔ＋Ｐｂ×（ｔ／Ｔ） 発生符号量予測器８，９ではそれぞれビットストリーム
ＡとビットストリームＢの動きベクトルをクロスフェー
ド画像の符号化に用いたときの発生符号量をマクロブロ
ック単位で予測される（ステップＳ１０４，Ｓ１０
５）。

【００３１】今、ビットストリームＡを復号化した画像
ＰA の成分がαで、ビットストリームＢを復号化した画
像ＰB の成分が１−αであるマクロブロックのピクチャ
αＰA ＋（１−α）ＰB を、ビットストリームＡに含ま
れていた対応するマクロブロック位置の動きベクトルＭ
ＶA で符号化したとすると、そのピクチャを符号化した
ときに発生する符号量は、ＰA をＭＶA で符号化したと
きに発生する符号量と、ＰB をＭＶA で符号化したとき
に発生する符号量との重み付け加算で近似できる。

【００３２】ＰB をＭＶA で符号化したときに発生する
符号量は、動きベクトルが全くあわないことが予想され
るため、ビットストリームＢにおける最も近いＩピクチ
ャ上における同じ位置のマクロブロックの符号化時に発
生した符号量で近似する。

【００３３】図５は、ある画像に対しその画素値をα
（０≦α≦１）倍した場合において、ＤＣＴ係数を符号
化する際に発生する符号量とαとの関係を表した図であ
る。この図から、αと発生符号量との関係は、ほぼ直線
で近似できることがわかる。

【００３４】以上のことから、ビットストリームＡの動
きベクトルＭＶA を使用してクロスフェード画像のマク
ロブロックを復号化したときの予測発生符号量ＢA は、
例えば次の式で表すことができる。

【００３５】ＢA ＝ ＢA0＋ＢAdct ×（Ｔ−ｔ）／
Ｔ＋ＢBIdct × ｔ／Ｔ ここで、ＢA0はビットストリームＡにおける当該マクロ
ブロックにおけるヘッダ部分（動きベクトルや符号化モ
ードなどの情報が含まれる）のビット量、ＢAdctはビッ
トストリームＡにおける当該マクロブロックにおけるＤ
ＣＴ係数のビット量、ＢBIdct はビットストリームＢに
おいて当該マクロブロックに最も時間的に近いＩピクチ
ャ上の当該マクロブロックと同じ位置のマクロブロック
におけるＤＣＴ係数のビット量を表す。

【００３６】同様に、ビットストリームＢの動きベクト
ルＭＶB を使用したときのマクロブロックの予測発生符
号量ＢB は、例えば次の式を用いることができる。 ＢB ＝ ＢB0＋ＢBdct × ｔ／Ｔ＋ＢAIdct ×（Ｔ
−ｔ）／Ｔ ここで、ＢB0はビットストリームＢにおける当該マクロ
ブロックにおけるヘッダ部分のビット量、ＢBdctはビッ
トストリームＢにおける当該マクロブロックにおけるＤ
ＣＴ係数のビット量、ＢAIdct はビットストリームＡに
おいて最も時間的に近いＩピクチャの当該マクロブロッ
クと同じ位置のマクロブロックにおけるＤＣＴ係数のビ
ット量を表す。

【００３７】比較器１１では、発生符号量予測器８，９
から得られる予測発生符号量が比較され、予測発生符号
量が少ない側の動きベクトル、すなわちＢA ＜ ＢB な
らばＭＶA を、ＢA ＞ＢB ならばＭＶB を、記憶装置
３、４から選び出して符号化器１２に送出する（ステッ
プＳ１０６）。

【００３８】符号化器１２では、クロスフェード画像作
成器１０から得られるクロスフェード画像を比較器１１
から送られる動きベクトルを用いてマクロブロック毎に
フレーム間符号化する（ステップＳ１０７，Ｓ１０
８）。

【００３９】符号化されたビットストリームは、多重化
器１３によって記憶装置１、２に保存されているビット
ストリームと組み合わされ、ビットストリームＡからビ
ットストリームＢへクロスフェードで接続された一つの
ビットストリームとして記憶装置１４に記憶され、目的
であるビットストリームＡとビットストリームＢのクロ
スフェードによる接続が実現される。

【００４０】このようにして、クロスフェード画像全て
の符号化が完了するまで、クロスフェード画像のマクロ
ブロック単位に、ビットストリームＡ，Ｂそれぞれの対
応する２つのマクロブロックのいずれか一方の符号化パ
ラメータが動的に選択されながら、ステップＳ１０４〜
Ｓ１０８の処理が繰り返し実行される（ステップＳ１０
９）。

【００４１】図６には、図１の符号化器１２の具体的な
構成の一例が示されている。この符号化器は、図示のよ
うに、フレーム順並び替え部５０、減算部５１、ＤＣＴ
変換部５２、量子化部５３、可変長符号化部（ＶＬＣ）
５４、多重化部５５，逆量子化部５６、逆ＤＣＴ変換部
５７、加算部５８、動き補償部５９、参照画像メモリ６
０から構成されており、これらは、それぞれ図７のフレ
ーム順並び替え部３０、減算部３１、ＤＣＴ変換部３
２、量子化部３３、可変長符号化部（ＶＬＣ）３４、多
重化部３５，逆量子化部３６、逆ＤＣＴ変換部３７、加
算部３８、動き補償部３９、参照画像メモリ４１に対応
しており、図７の動き検出部４０に相当する機能が省略
されている。

【００４２】すなわち、本実施形態では、動き補償部５
９に対してビットストリームＡまたはＢの符号化パラメ
ータがそのまま与えられることから、符号化の際に新た
に動き検出処理を行う必要がない。したがって、図７に
示される符号化器に比べ、動き検出部が省略されている
のである。

【００４３】このため、図１の符号化器１２が要求する
演算量は、復号化器７が通常のＭＰＥＧ２ビットストリ
ームの復号に必要とする演算量の２倍程度に抑えること
ができる。復号化器７は２つのビットストリームの復号
を行うことを考えれば、本システムにおいて符号化器１
２が符号化に要する演算量は復号化器７が２つのビット
ストリームを復号するのに要する演算量程度まで削減す
ることが可能である。

【００４４】すなわち、ＭＰＥＧ２の復号をソフトウェ
アでリアルタイムで行うことができるＰＣによって本実
施形態の編集処理を構成した場合、クロスフェードによ
る接続処理を付加的なハードウェアなしでソフトウェア
によって実現したとしても、待ち時間に起因するユーザ
ーに与えるストレスは極めて少ないものとすることがで
きる。

【００４５】以上のように、本実施形態によれば、接続
しようとする２種類のビットストリームＡ，Ｂに記録さ
れた動きベクトルに代表される符号化パラメータを、本
来クロスフェード画像の符号化処理に必要とされる動き
検出処理によって求められる符号化パラメータの代わり
に用いることにより、クロスフェード部分の再符号化処
理に要する演算量を大幅に削減することが可能となる。

【００４６】また、２つのビットストリームから求めら
れる２つの符号化パラメータのどちらを用いるかを判断
する際に、クロスフェード部分の符号化に当該符号化パ
ラメータを用いたときの発生符号量を予測し、少ない方
の符号化パラメータを用いて再符号化することにより、
符号化パラメータの誤選択による符号化効率の低下を抑
制することができる。特に、クロスフェード画像のマク
ロブロック毎に最適な符号化パラメータを動的に選択す
ることにより、高い符号化効率を得ることができる。

【００４７】なお、以上の説明では、フェードアウトさ
れるビットストリームＡの画像とフェードインされるビ
ットストリームＢの画像との重ね合わせにより作成され
たクロスフェード画像についての発生符号量を予測する
場合について説明したが、発生符号量の予測は、時間の
経過に対するビットストリームＡ、Ｂの混合の割合に基
づいて求めることができるので、例えばビットストリー
ムＡの画像をフェードアウトしながらビットストリーム
Ｂの画像をそれに重なるようにカットインしたり、ある
いはその逆に、ビットストリームＢの画像をフェードイ
ンしながらその途中でビットストリームＡの画像をカッ
トアウトするといった合成処理によって得られたクロス
フェード画像についても、本実施形態による編集方法を
適用することができる。

【００４８】

【発明の効果】以上説明したように、本発明によれば、
フレーム間符号化されたビットストリーム同士をクロス
フェードによりつなぎ合わせる動画像編集装置におい
て、もともと符号化されているビットストリームにおけ
る動きベクトルなどの符号化パラメータを再利用してク
ロスフェード画像部分の再符号化を行うことにより、再
符号化に必要な演算量を大幅に削減することが可能とな
る。

【図面の簡単な説明】

【図１】本発明の一実施形態に係る動画像編集装置の構
成を示すブロック図。

【図２】同実施形態において二つのビットストリームを
クロスフェードによって結合する場合の手順を示すフロ
ーチャート。

【図３】同実施形態で編集対象となるＭＰＥＧ２ビット
ストリームのピクチャの予測構造の例を示す図。

【図４】同実施形態の編集処理で得られるクロスフェー
ド接続後のビットストリームの一例を示す図。

【図５】同実施形態における編集処理画像のダイナミッ
クレンジと発生符号量との関係を表す図。

【図６】同実施形態に適用される動画像符号化器の構成
の一例を示す図。

【図７】従来の動画像符号化器の構成を示す図。

【図８】従来の動画像符号化器における動き検出処理の
原理を説明するための図。

【図９】従来のクロスフェード接続にる動画像変種動作
を説明するための図。

【符号の説明】

１、２、３、４、５、６、１４…記憶装置 ７…復号化器 ８、９…発生符号量予測器 １０…クロスフェード画像作成器 １１…比較器 １２…符号化器 １３…多重化器 ２０、２１…復号化器 ２２…クロスフェード画像合成器 ２３…符号化器 ３０，５０…フレーム順並び替え部 ３１，５１…減算部 ３２、５２…離散コサイン変換部 ３３、５３…量子化部 ３４、５４…可変長符号化部 ３５、５５…多重化部 ３６、５６…逆量子化部 ３７、５７…逆離散コサイン変換部 ３８、５８…加算部 ３９、５９…動き補償部 ４０…動き検出部 ４１、６０…参照画像メモリ

Claims (6)

【特許請求の範囲】
1. 【請求項１】 フレーム間予測を用いて符号化されてい
   る第１および第２の２種類の動画像ビットストリームを
   クロスフェードによって一部重ね合わせて結合する機能
   を有する動画像編集装置であって、 前記クロスフェードで結合する期間に対応する前記第１
   および第２のビットストリームそれぞれを復号化する手
   段と、 復号化によって得られた２つの動画像からクロスフェー
   ド画像を作成する手段と、 前記クロスフェードで結合する期間における前記第１お
   よび第２のビットストリームを解析し、それぞれの符号
   化パラメータを取り出す手段と、 前記第１および第２のビットストリームそれぞれの符号
   化パラメータを用いて前記クロスフェード画像を符号化
   したときの符号量を予測する符号量予測手段と、 この予測結果に基づいて前記第１および第２のビットス
   トリームのいずれか一方の符号化パラメータを選択し、
   その選択した符号化パラメータを用いて前記クロスフェ
   ード画像を再符号化する手段とを具備することを特徴と
   する動画像編集装置。
2. 【請求項２】 前記符号量予測手段は、 前記クロスフェード画像の符号化対象の画像領域毎に、
   その画像領域に対応する前記第１および第２のビットス
   トリームそれぞれの符号化パラメータを用いたときの符
   号量を予測し、 前記クロスフェード画像の符号化対象の画像領域毎に前
   記第１および第２のビットストリームのいずれか一方の
   符号化パラメータが動的に選択されることを特徴とする
   請求項１記載の動画像編集装置。
3. 【請求項３】 前記符号化パラメータは動きベクトル情
   報であることを特徴とする請求項１または２記載の動画
   像編集装置。
4. 【請求項４】 フレーム間予測を用いて符号化されてい
   る第１および第２の２種類の動画像ビットストリームを
   クロスフェードによって一部重ね合わせて結合する動画
   像編集方法であって、 前記クロスフェードで結合する期間に対応する前記第１
   および第２のビットストリームそれぞれを復号化し、 復号化によって得られた２つの動画像からクロスフェー
   ド画像を作成し、 前記クロスフェードで結合する期間における前記第１お
   よび第２のビットストリームそれぞれの符号化パラメー
   タを用いて前記クロスフェード画像を符号化したときの
   符号量を予測し、 この予測結果に基づいて前記第１および第２のビットス
   トリームのいずれか一方の符号化パラメータを選択し、 その選択した符号化パラメータを用いて前記クロスフェ
   ード画像を再符号化することにより、第１および第２の
   ２種類の動画像ビットストリームをクロスフェードによ
   って結合することを特徴とする動画像編集方法。
5. 【請求項５】 前記クロスフェード画像の符号化対象の
   画像領域毎に、その画像領域に対応する前記第１および
   第２のビットストリームそれぞれの符号化パラメータを
   用いたときの符号量を予測し、 前記クロスフェード画像の符号化対象の画像領域毎に前
   記第１および第２のビットストリームのいずれか一方の
   符号化パラメータを動的に選択することを特徴とする請
   求項４記載の動画像編集方法。
6. 【請求項６】 前記符号化パラメータは動きベクトル情
   報であることを特徴とする請求項４または５記載の動画
   像編集方法。