JPH11308618A - 画像信号処理装置及び方法並びに画像信号再生装置 - Google Patents
画像信号処理装置及び方法並びに画像信号再生装置Info
- Publication number
- JPH11308618A JPH11308618A JP10794798A JP10794798A JPH11308618A JP H11308618 A JPH11308618 A JP H11308618A JP 10794798 A JP10794798 A JP 10794798A JP 10794798 A JP10794798 A JP 10794798A JP H11308618 A JPH11308618 A JP H11308618A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image signal
- bit stream
- identification information
- signal processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【課題】 普通の撮像素子にてパノラマ撮影を可能とす
る。 【解決手段】 移動される複数の撮影領域の画像にてな
る画像信号をＭＰＥＧ２規格のビットストリームに符号
化するものであって、上記複数の撮影領域の間の動きベ
クトルを検出する動きベクトル検出器１７と、動きベク
トル検出器１７にて検出された動きベクトルを加算し、
この加算された動きベクトルが所定の閾値が越えたとき
に当該画像を符号化するように制御する制御部１８とを
有する。
る。 【解決手段】 移動される複数の撮影領域の画像にてな
る画像信号をＭＰＥＧ２規格のビットストリームに符号
化するものであって、上記複数の撮影領域の間の動きベ
クトルを検出する動きベクトル検出器１７と、動きベク
トル検出器１７にて検出された動きベクトルを加算し、
この加算された動きベクトルが所定の閾値が越えたとき
に当該画像を符号化するように制御する制御部１８とを
有する。
Description
【０００１】
【発明の属する技術分野】本発明は、ＭＰＥＧ２（Movi
ng Picture Experts Group Phase2 ）規格のビットスト
リームのビデオシーケンス（video sequence）を使用し
たパノラマ生成処理に使用する、フレーム全体の動きベ
クトルのビットストリームシンタックス（bitstream sy
ntax ）表現方法についての画像信号処理装置及び方法
並びに画像信号再生装置に関する。
ng Picture Experts Group Phase2 ）規格のビットスト
リームのビデオシーケンス（video sequence）を使用し
たパノラマ生成処理に使用する、フレーム全体の動きベ
クトルのビットストリームシンタックス（bitstream sy
ntax ）表現方法についての画像信号処理装置及び方法
並びに画像信号再生装置に関する。
【０００２】
【従来の技術】ＭＰＥＧ２（Moving Pictures Experts
Group Phase2）は放送やＡＶ機器などに用いられる符号
化方式であり、画像／音声／データなどの情報圧縮技術
として広く用いられるようになっている。
Group Phase2）は放送やＡＶ機器などに用いられる符号
化方式であり、画像／音声／データなどの情報圧縮技術
として広く用いられるようになっている。
【０００３】画像信号の記録／再生を行う記録／再生装
置では、例えばパノラマ撮影のように、１台の記録／再
生装置で順次撮影した画像をつなぎ合わせて、１枚の大
画面高精細静止画像に合成するいわゆるパノラマ合成画
像として表現したい場合がある。
置では、例えばパノラマ撮影のように、１台の記録／再
生装置で順次撮影した画像をつなぎ合わせて、１枚の大
画面高精細静止画像に合成するいわゆるパノラマ合成画
像として表現したい場合がある。
【０００４】
【発明が解決しようとする課題】しかし、従来の記録／
再生装置においては、ＭＰＥＧ２ビデオ規格の中で決め
られたサイズの大画面静止画しか表現できないために、
表現サイズの自由度が無かった。
再生装置においては、ＭＰＥＧ２ビデオ規格の中で決め
られたサイズの大画面静止画しか表現できないために、
表現サイズの自由度が無かった。
【０００５】例えばＭＰ＠ＭＬ（メインプロファイル／
メインレベル）では７２０（Ｈ）×５７６（Ｖ）画素の
解像度のように、表現サイズに限界があった。
メインレベル）では７２０（Ｈ）×５７６（Ｖ）画素の
解像度のように、表現サイズに限界があった。
【０００６】パノラマ合成画像とは、記録／再生装置の
記録時に、１台の記録／再生装置で順次撮影し、それぞ
れ圧縮してディスク等の記録媒体に記録する。再生時は
それらをつなぎ合わせて、例えば１４０８（Ｈ）×７２
０（Ｖ）などの１枚の大画面高精細静止画像として再生
するものである。
記録時に、１台の記録／再生装置で順次撮影し、それぞ
れ圧縮してディスク等の記録媒体に記録する。再生時は
それらをつなぎ合わせて、例えば１４０８（Ｈ）×７２
０（Ｖ）などの１枚の大画面高精細静止画像として再生
するものである。
【０００７】よって本発明は、ＭＰＥＧ２ビデオ規格で
決められている枠の中では表現できないパノラマ合成画
像を実現するための、ＭＰＥＧ２規格のビットストリー
ムのビデオシーケンスのビットストリームシンタックス
（bitstrem syntax ）表現についての画像信号処理装置
及び方法並びに画像信号再生装置を提供することを目的
とする。
決められている枠の中では表現できないパノラマ合成画
像を実現するための、ＭＰＥＧ２規格のビットストリー
ムのビデオシーケンスのビットストリームシンタックス
（bitstrem syntax ）表現についての画像信号処理装置
及び方法並びに画像信号再生装置を提供することを目的
とする。
【０００８】
【課題を解決するための手段】上述の課題を解決するた
めに、本発明に係る画像信号処理装置は、移動される複
数の撮影領域の画像にてなる画像信号が符号化されたビ
ットストリームについて少なくとも符号化を行うもので
あって、上記複数の撮影領域の間の移動量を検出する移
動量検出手段と、上記移動量検出手段にて検出された移
動量を加算し、この加算された移動量が所定の閾値を越
えたときに当該画像を符号化するように制御する制御手
段とを有する。
めに、本発明に係る画像信号処理装置は、移動される複
数の撮影領域の画像にてなる画像信号が符号化されたビ
ットストリームについて少なくとも符号化を行うもので
あって、上記複数の撮影領域の間の移動量を検出する移
動量検出手段と、上記移動量検出手段にて検出された移
動量を加算し、この加算された移動量が所定の閾値を越
えたときに当該画像を符号化するように制御する制御手
段とを有する。
【０００９】また、本発明に係る画像信号処理方法は、
移動される複数の撮影領域の画像にてなる画像信号が符
号化されたビットストリームについて少なくとも符号化
を行うものであって、上記複数の撮影領域の間の移動量
を検出する移動量検出工程と、上記移動量検出手段にて
検出された移動量を加算し、この加算された移動量が所
定の閾値を越えたときに当該画像を符号化するように制
御する制御工程とを有するものである。
移動される複数の撮影領域の画像にてなる画像信号が符
号化されたビットストリームについて少なくとも符号化
を行うものであって、上記複数の撮影領域の間の移動量
を検出する移動量検出工程と、上記移動量検出手段にて
検出された移動量を加算し、この加算された移動量が所
定の閾値を越えたときに当該画像を符号化するように制
御する制御工程とを有するものである。
【００１０】そして、本発明に係る画像信号再生装置
は、移動される複数の撮影領域の画像にてなる画像信号
について、上記移動される撮影領域の間の移動量を加算
し、この加算された移動量が所定の閾値を越えたときに
上記画像信号を符号化したビットストリームから画像信
号を再生するものであって、上記ビットストリームの所
定の記録単位内の固有情報領域に識別情報として書き込
まれた上記複数の撮影領域の間の移動量を加算した加算
された移動量を読み出す識別情報読み出し手段と、上記
識別情報読み出し手段にて読み出された上記加算された
移動量に基づいて、上記画像信号を再生する際に、上記
ビットストリームを復号して得られた複数の撮影領域の
画像を１枚の画像に合成するように制御する制御手段と
を有するものである。
は、移動される複数の撮影領域の画像にてなる画像信号
について、上記移動される撮影領域の間の移動量を加算
し、この加算された移動量が所定の閾値を越えたときに
上記画像信号を符号化したビットストリームから画像信
号を再生するものであって、上記ビットストリームの所
定の記録単位内の固有情報領域に識別情報として書き込
まれた上記複数の撮影領域の間の移動量を加算した加算
された移動量を読み出す識別情報読み出し手段と、上記
識別情報読み出し手段にて読み出された上記加算された
移動量に基づいて、上記画像信号を再生する際に、上記
ビットストリームを復号して得られた複数の撮影領域の
画像を１枚の画像に合成するように制御する制御手段と
を有するものである。
【００１１】すなわち、本発明においては、複数枚の静
止画像を順次撮影してそれらをつなぎ合わせることによ
って、１枚のパノラマ合成画像を実現する場合におい
て、例えば画面内符号化画像であるＩフレームなどのフ
レーム間の移動量である動きベクトル量を移動量検出手
段により検出し、その動きベクトル量が予め定められた
値（ｍｖｘref ）を越えた場合に限り、圧縮処理するよ
うにして、効率良く１枚のパノラマ合成画像を生成する
ようにしたものである。これにより、普通のＣＣＤ固体
撮像素子を採用した記録／再生装置によるパノラマ撮影
が可能となる。
止画像を順次撮影してそれらをつなぎ合わせることによ
って、１枚のパノラマ合成画像を実現する場合におい
て、例えば画面内符号化画像であるＩフレームなどのフ
レーム間の移動量である動きベクトル量を移動量検出手
段により検出し、その動きベクトル量が予め定められた
値（ｍｖｘref ）を越えた場合に限り、圧縮処理するよ
うにして、効率良く１枚のパノラマ合成画像を生成する
ようにしたものである。これにより、普通のＣＣＤ固体
撮像素子を採用した記録／再生装置によるパノラマ撮影
が可能となる。
【００１２】
【発明の実施の形態】以下、本発明の実施の形態とし
て、画像信号をＭＰＥＧ２規格のビットストリームに符
号化するＭＰＥＧ符号器、及びＭＰＥＧ２規格のビット
ストリームを画像信号に復号するＭＰＥＧ復号器につい
て、図面を参照して詳細に説明する。
て、画像信号をＭＰＥＧ２規格のビットストリームに符
号化するＭＰＥＧ符号器、及びＭＰＥＧ２規格のビット
ストリームを画像信号に復号するＭＰＥＧ復号器につい
て、図面を参照して詳細に説明する。
【００１３】ここで示すＭＰＥＧ符号化器及びＭＰＥＧ
復号器は、本発明の実施の形態の説明の便宜上、通常の
ＭＰＥＧ符号化器及びＭＰＥＧ復号器から本実施の形態
に特徴的な部分を抽出してその構成を概略的に示したも
のである。
復号器は、本発明の実施の形態の説明の便宜上、通常の
ＭＰＥＧ符号化器及びＭＰＥＧ復号器から本実施の形態
に特徴的な部分を抽出してその構成を概略的に示したも
のである。
【００１４】ＭＰＥＧ符号器は、図１に示すように、入
力された画像信号に所定の処理を施す入力処理部１１
と、入力処理部１１にて処理された画像データをフレー
ム毎に保持するフレームメモリ１２と、切り換えスイッ
チ１９と、離散コサイン変換（discrete cosine transf
ormation;DCT）を施して離散コサイン係数を出力する離
散コサイン変換部１３と、離散コサイン変換部１３から
の離散コサイン変換係数を量子化する量子化部１４とを
有している。
力された画像信号に所定の処理を施す入力処理部１１
と、入力処理部１１にて処理された画像データをフレー
ム毎に保持するフレームメモリ１２と、切り換えスイッ
チ１９と、離散コサイン変換（discrete cosine transf
ormation;DCT）を施して離散コサイン係数を出力する離
散コサイン変換部１３と、離散コサイン変換部１３から
の離散コサイン変換係数を量子化する量子化部１４とを
有している。
【００１５】入力処理部１１は、外部から供給される映
像信号をＡ／Ｄ変換し、順次得られるフレームデータに
画面内符号化画像であるＩピクチャを割り当てた後、フ
レームデータをマクロブロック単位に分割して出力す
る。
像信号をＡ／Ｄ変換し、順次得られるフレームデータに
画面内符号化画像であるＩピクチャを割り当てた後、フ
レームデータをマクロブロック単位に分割して出力す
る。
【００１６】なお、本実施の形態では、静止画を記録す
ることから、フレームデータに割り当てる画像はＩピク
チャとしているが、動画撮影時には、順方向予測符号化
画像であるＰピクチャや双方向予測符号化画像であるＢ
ピクチャも用いられ、このためにはローカルデコーダや
動き予測等の構成が用いられることは勿論である。
ることから、フレームデータに割り当てる画像はＩピク
チャとしているが、動画撮影時には、順方向予測符号化
画像であるＰピクチャや双方向予測符号化画像であるＢ
ピクチャも用いられ、このためにはローカルデコーダや
動き予測等の構成が用いられることは勿論である。
【００１７】フレームメモリ１２では、例えば記録／再
生装置で撮影した画像、例えば７０４（Ｈ）×４８０
（Ｖ）画素の解像度の画像をフレーム単位で記憶する。
生装置で撮影した画像、例えば７０４（Ｈ）×４８０
（Ｖ）画素の解像度の画像をフレーム単位で記憶する。
【００１８】スイッチ１９は、制御部１８からの動き量
がある値を越えたら、オンしてＩピクチャのフレームの
エンコード処理し、そうでない場合はオフするように制
御される。
がある値を越えたら、オンしてＩピクチャのフレームの
エンコード処理し、そうでない場合はオフするように制
御される。
【００１９】離散コサイン変換部１３は、フレームメモ
リ１２から取り出されたマクロブロックを離散コサイン
変換処理して離散コサイン変換係数に変換して量子化部
１３に送る。量子化部１４は、離散コサイン変換係数を
量子化する。
リ１２から取り出されたマクロブロックを離散コサイン
変換処理して離散コサイン変換係数に変換して量子化部
１３に送る。量子化部１４は、離散コサイン変換係数を
量子化する。
【００２０】また、ＭＰＥＧ符号器は、画像間の移動量
である動きベクトルを検出する動きベクトル検出器１７
と、このＭＰＥＧ符号器の各部を制御する制御部１８
と、量子化部１４にて量子化されたデータを可変長符号
化する可変長符号化部１５と、可変長符号化部１５から
のデータを一時的に蓄積するバッファ１６とを有してい
る。
である動きベクトルを検出する動きベクトル検出器１７
と、このＭＰＥＧ符号器の各部を制御する制御部１８
と、量子化部１４にて量子化されたデータを可変長符号
化する可変長符号化部１５と、可変長符号化部１５から
のデータを一時的に蓄積するバッファ１６とを有してい
る。
【００２１】可変長符号化部１５では、量子化部１４か
ら得られた量子化データに後述する固有情報であるユー
ザデータ（user_data ）をＭＰＥＧ２ビットストリーム
の記録単位毎に付加して所定方式で可変長符号化する。
この記録単位としては、例えばビデオシーケンス（vide
o sequence）が挙げられる。
ら得られた量子化データに後述する固有情報であるユー
ザデータ（user_data ）をＭＰＥＧ２ビットストリーム
の記録単位毎に付加して所定方式で可変長符号化する。
この記録単位としては、例えばビデオシーケンス（vide
o sequence）が挙げられる。
【００２２】バッファ１６は、可変長符号化部１５から
のデータを一時的に保持する。このバッファ１６の保持
する符号化データは、順次に図示しない記録／再生装置
に出力される。
のデータを一時的に保持する。このバッファ１６の保持
する符号化データは、順次に図示しない記録／再生装置
に出力される。
【００２３】動きベクトル検出器１７では、入力処理部
１及びフレームメモリからのマクロブロックに基づい
て、１画面全体に渡る撮像領域の動き、移動量を示すベ
クトルである動きベクトルを検出して制御部１８に送
る。
１及びフレームメモリからのマクロブロックに基づい
て、１画面全体に渡る撮像領域の動き、移動量を示すベ
クトルである動きベクトルを検出して制御部１８に送
る。
【００２４】すなわち、動きベクトル検出器１７は、マ
クロブロック間の移動量について動きベクトルを求める
ものである。この動きベクトル検出器１７には、順方向
予測符号化画像であるＰピクチャ及び双方向予測符号化
画像であるＢピクチャの動きベクトル検出に用いられる
ものを流用することができる。
クロブロック間の移動量について動きベクトルを求める
ものである。この動きベクトル検出器１７には、順方向
予測符号化画像であるＰピクチャ及び双方向予測符号化
画像であるＢピクチャの動きベクトル検出に用いられる
ものを流用することができる。
【００２５】制御部１８は、このＭＰＥＧ符号器の各部
を制御する部分である。制御部１８は、例えばＣＰＵ，
ＲＯＭ，ＲＡＭ等からなるマイコンとして構成される。
この制御部１８は、例えば、動きベクトル検出器１７か
らの動きベクトルに基づいて、スイッチ１９の開閉、可
変長符号化部１５における可変長符号化の処理等を制御
する。
を制御する部分である。制御部１８は、例えばＣＰＵ，
ＲＯＭ，ＲＡＭ等からなるマイコンとして構成される。
この制御部１８は、例えば、動きベクトル検出器１７か
らの動きベクトルに基づいて、スイッチ１９の開閉、可
変長符号化部１５における可変長符号化の処理等を制御
する。
【００２６】ＭＰＥＧ復号器は、図２に示すように、入
力される符号化データを一時的に蓄積するバッファ２１
と、バッファ２１からの符号化データを可変長復号する
可変長復号化部２２と、可変長復号化部２２からのデー
タを逆量子化して離散コサイン変換係数とする逆量子化
部２３と、逆量子化部２３からの離散コサイン変換係数
を逆離散コサイン変換する逆離散コサイン変換部２４と
を有している。
力される符号化データを一時的に蓄積するバッファ２１
と、バッファ２１からの符号化データを可変長復号する
可変長復号化部２２と、可変長復号化部２２からのデー
タを逆量子化して離散コサイン変換係数とする逆量子化
部２３と、逆量子化部２３からの離散コサイン変換係数
を逆離散コサイン変換する逆離散コサイン変換部２４と
を有している。
【００２７】バッファ２１は、図示しない記録／再生装
置から入力される符号化データを一時的に記憶する。可
変長符号化部２２は、バッファ２１からの符号化データ
をマクロブロック符号化情報に復号する。また、可変長
復号化部２２では、符号化データの記録単位毎の固有情
報領域に書き込まれた識別情報を読み出す。
置から入力される符号化データを一時的に記憶する。可
変長符号化部２２は、バッファ２１からの符号化データ
をマクロブロック符号化情報に復号する。また、可変長
復号化部２２では、符号化データの記録単位毎の固有情
報領域に書き込まれた識別情報を読み出す。
【００２８】逆量子化部２３では、可変長復号部２２に
て復号されたデータを逆量子化して離散コサイン変換係
数とする。逆離散コサイン変換部２４は、逆量子化部２
３からの離散コサイン変換係数に逆離散コサイン変換を
施して画素空間データに変換する。
て復号されたデータを逆量子化して離散コサイン変換係
数とする。逆離散コサイン変換部２４は、逆量子化部２
３からの離散コサイン変換係数に逆離散コサイン変換を
施して画素空間データに変換する。
【００２９】また、ＭＰＥＧ復号器は、このＭＰＥＧ復
号器の各部を制御する制御部２６と、画像の表示を制御
する表示制御部２５と、表示制御部２５の制御の下に画
像を保持するメモリ２８と、表示制御部２５からの画像
に対して所定の処理を施す出力処理部２７とを有してい
る。
号器の各部を制御する制御部２６と、画像の表示を制御
する表示制御部２５と、表示制御部２５の制御の下に画
像を保持するメモリ２８と、表示制御部２５からの画像
に対して所定の処理を施す出力処理部２７とを有してい
る。
【００３０】制御部２６は、このＭＰＥＧ復号器の各部
を制御する部分である。制御部２６は、可変長復号化部
２２から与えられる動きベクトルに基づいて、表示制御
部２５における画像の表示についての所定の処理の制御
をする。
を制御する部分である。制御部２６は、可変長復号化部
２２から与えられる動きベクトルに基づいて、表示制御
部２５における画像の表示についての所定の処理の制御
をする。
【００３１】制御部２６においては、可変長復号化部２
２から固有情報であるユーザデータ（user_data ）を取
り出してフレームメモリに送る。
２から固有情報であるユーザデータ（user_data ）を取
り出してフレームメモリに送る。
【００３２】表示制御部２５では、ユーザデータを基に
例えばｆ0 からｆ15までのような複数の画像の位置を判
断して貼り付け、１枚の静止画像を合成する。すなわ
ち、ユーザデータに識別情報として書き込まれている移
動量である動きベクトルに基づいて画像の撮像領域を判
断し、この撮像領域に従って複数の画像から１枚の画面
を合成する。この、画像の合成については、後述する。
例えばｆ0 からｆ15までのような複数の画像の位置を判
断して貼り付け、１枚の静止画像を合成する。すなわ
ち、ユーザデータに識別情報として書き込まれている移
動量である動きベクトルに基づいて画像の撮像領域を判
断し、この撮像領域に従って複数の画像から１枚の画面
を合成する。この、画像の合成については、後述する。
【００３３】これにより、従来のＭＰＥＧ２ビデオ規格
で決められている枠の中では表現できなかったパノラマ
合成画像を実現できる。メモリ２８は、表示制御部２５
の制御の下に画像を記憶する。
で決められている枠の中では表現できなかったパノラマ
合成画像を実現できる。メモリ２８は、表示制御部２５
の制御の下に画像を記憶する。
【００３４】出力処理部２７は、表示制御部２５からの
画像信号をＤ／Ａ変換して元出力信号として外部に出力
する。
画像信号をＤ／Ａ変換して元出力信号として外部に出力
する。
【００３５】続いて、上述したＭＰＥＧ符号器及びＭＰ
ＥＧ復号器における画像信号の処理について説明する。
これらＭＰＥＧ符号器及びＭＰＥＧ復号器は、画像信号
のＭＰＥＧ規格のビットストリームに対する符号化／復
号を行うものである。
ＥＧ復号器における画像信号の処理について説明する。
これらＭＰＥＧ符号器及びＭＰＥＧ復号器は、画像信号
のＭＰＥＧ規格のビットストリームに対する符号化／復
号を行うものである。
【００３６】ＭＰＥＧ２では、入力される画像／音声／
データなどのデータをビットレートに基づいて符号化行
う。画像では、画像をｍ×ｎのブロックに分割して、直
交関数で変換して信号電力を集中させ、全体情報量を圧
縮する。
データなどのデータをビットレートに基づいて符号化行
う。画像では、画像をｍ×ｎのブロックに分割して、直
交関数で変換して信号電力を集中させ、全体情報量を圧
縮する。
【００３７】ＭＰＥＧ２規格にてビットストリームに符
号化された画像データは、シーケンス層からブロック層
までの階層構造をとる。
号化された画像データは、シーケンス層からブロック層
までの階層構造をとる。
【００３８】すなわち、ＭＰＥＧ２規格によるビットス
トリームは、一連の同じ属性をもつ画面グループのシー
ケンス層、ランダムアクセスの単位となる画面グループ
の最小単位のＧＯＰ（Group of Pictures ）層、１枚の
画面に共通な属性のピクチャ層、１枚の画面を任意に分
割した小画面に共通の情報のスライス層、スライス層を
さらに分割した画素ブロック（マクロブロック）に共通
の情報のマクロブロック層、及び変換係数そのもののブ
ロック層から構成される。
トリームは、一連の同じ属性をもつ画面グループのシー
ケンス層、ランダムアクセスの単位となる画面グループ
の最小単位のＧＯＰ（Group of Pictures ）層、１枚の
画面に共通な属性のピクチャ層、１枚の画面を任意に分
割した小画面に共通の情報のスライス層、スライス層を
さらに分割した画素ブロック（マクロブロック）に共通
の情報のマクロブロック層、及び変換係数そのもののブ
ロック層から構成される。
【００３９】ここで、ピクチャ層については、メイン・
レベル・メイン・フォーマットに従ってＮＴＳＣ方式の
テレビジョン信号については７０４（Ｈ）×４８０
（Ｖ）画像をその対象とする。
レベル・メイン・フォーマットに従ってＮＴＳＣ方式の
テレビジョン信号については７０４（Ｈ）×４８０
（Ｖ）画像をその対象とする。
【００４０】各画面（ピクチャ）には、画面内符号化画
面であるＩ（Intra ）ピクチャ、表示順序に順方向の順
方向に予測符号化される順方向予測符号化画面Ｐ（Pred
ictive）ピクチャ，表示順序に順方向及び逆方向の双方
向に予想符号化される双方向符号化画像であるＢ（Bidi
rectionally predictive）ピクチャのピクチャタイプが
あり、これら複数のピクチャをまとめてＧＯＰ（Group
of Pictures）層を形成している。
面であるＩ（Intra ）ピクチャ、表示順序に順方向の順
方向に予測符号化される順方向予測符号化画面Ｐ（Pred
ictive）ピクチャ，表示順序に順方向及び逆方向の双方
向に予想符号化される双方向符号化画像であるＢ（Bidi
rectionally predictive）ピクチャのピクチャタイプが
あり、これら複数のピクチャをまとめてＧＯＰ（Group
of Pictures）層を形成している。
【００４１】ＭＰＥＧ２のビデオシーケンス（video se
quence ）は、その中では解像度等を換えることはでき
ないような記録単位である。この記録単位であるＭＰＥ
Ｇ２のビデオシーケンスは、図３に示すように、シーケ
ンスヘッダ（sequence header ）にて始まり、シーケン
スエンド（sequence end）で終わり、Ｂ，Ｂ，Ｉ，Ｂ，
Ｂ，Ｐピクチャ・・からなる。このような解像度を変更
する最小単位であるビデオシーケンスは、スタート−エ
ンド（start-end ）間で一つの動画を表す。
quence ）は、その中では解像度等を換えることはでき
ないような記録単位である。この記録単位であるＭＰＥ
Ｇ２のビデオシーケンスは、図３に示すように、シーケ
ンスヘッダ（sequence header ）にて始まり、シーケン
スエンド（sequence end）で終わり、Ｂ，Ｂ，Ｉ，Ｂ，
Ｂ，Ｐピクチャ・・からなる。このような解像度を変更
する最小単位であるビデオシーケンスは、スタート−エ
ンド（start-end ）間で一つの動画を表す。
【００４２】動画は、図３に示したように、ビデオシー
ケンスの集合として定義される動画シーケンス、すなわ
ちムービーシーケンス（movie sequence）を用いて表現
される。静止画は、ビデオシーケンスの不連続なフレー
ムの集合（Ｉピクチャ等）を定義して、その集合を静止
画の集合とすることで表現される。静止画についてのビ
デオシーケンスの集合は、静止画シーケンス、すなわち
スチルシーケンスとされる。
ケンスの集合として定義される動画シーケンス、すなわ
ちムービーシーケンス（movie sequence）を用いて表現
される。静止画は、ビデオシーケンスの不連続なフレー
ムの集合（Ｉピクチャ等）を定義して、その集合を静止
画の集合とすることで表現される。静止画についてのビ
デオシーケンスの集合は、静止画シーケンス、すなわち
スチルシーケンスとされる。
【００４３】このようにビデオシーケンスを利用するこ
とで、画像信号についての複数種類の再生形態、及び他
のビデオシーケンスとの関係すなわち動画及び静止画を
含む複数種類のモードが実現される。
とで、画像信号についての複数種類の再生形態、及び他
のビデオシーケンスとの関係すなわち動画及び静止画を
含む複数種類のモードが実現される。
【００４４】画像信号のモードである再生形態は、ＭＰ
ＥＧ２のビットストリームの固有情報であるユーザデー
タ（user_data ）を参照することにより識別される。
ＥＧ２のビットストリームの固有情報であるユーザデー
タ（user_data ）を参照することにより識別される。
【００４５】具体的には、図４に示すように、ＭＰＥＧ
２のビットストリームのビデオシーケンス（video sequ
ence）のシーケンスヘッダ（sequence_header ）のユー
ザデータ（user_data ）が利用される。すなわち、シー
ケンスごとに定義できるユーザデータエリアのバイト１
（byte 1）および新たに定義されるバイト２（byte 2）
に識別情報が書き込まれる。
２のビットストリームのビデオシーケンス（video sequ
ence）のシーケンスヘッダ（sequence_header ）のユー
ザデータ（user_data ）が利用される。すなわち、シー
ケンスごとに定義できるユーザデータエリアのバイト１
（byte 1）および新たに定義されるバイト２（byte 2）
に識別情報が書き込まれる。
【００４６】シーケンスヘッダのユーザデータは、図５
に示すように定義される。
に示すように定義される。
【００４７】ユーザデータの内のバイト１は、スタート
ＩＤ（start ID）に第７ビットｂ７、エンドＩＤ（end
ID）に第６ビットｂ６、ビットストリームＩＤ（Bit st
reamID）に第３ビットｂ３及び第４ビットｂ４、シーケ
ンスＩＤ（Sequence ID ）に第２ビットｂ２，第１ビッ
トｂ１及び第０ビットｂ０が用いられる。なお、第５ビ
ットｂ５は無定義である。
ＩＤ（start ID）に第７ビットｂ７、エンドＩＤ（end
ID）に第６ビットｂ６、ビットストリームＩＤ（Bit st
reamID）に第３ビットｂ３及び第４ビットｂ４、シーケ
ンスＩＤ（Sequence ID ）に第２ビットｂ２，第１ビッ
トｂ１及び第０ビットｂ０が用いられる。なお、第５ビ
ットｂ５は無定義である。
【００４８】スタートＩＤとして“１”ならば、動画又
は静止画シーケンスの最初のビデオシーケンスであると
定義し、エンドＩＤとして“１”ならば、動画又は静止
画シーケンスの最後のビデオシーケンスと定義する。な
お、数字の末尾の“ｂ”は２進（binary）表示であるこ
とを示している。
は静止画シーケンスの最初のビデオシーケンスであると
定義し、エンドＩＤとして“１”ならば、動画又は静止
画シーケンスの最後のビデオシーケンスと定義する。な
お、数字の末尾の“ｂ”は２進（binary）表示であるこ
とを示している。
【００４９】ビットストリームＩＤとして“００”なら
ば、動画又は静止画シーケンスの最初のビデオシーケン
スであると定義し、エンドＩＤとして“１”ならば、動
画又は静止画シーケンスの最後のビデオシーケンスと定
義する。ビットストリームＩＤとして“００”ならば、
ＭＰＥＧ２（ＭＤ ＤＡＴＡ２）と定義し、“０１”な
らば、ＭＰＥＧ２（ＭＰ＠ＭＬ）と定義する。
ば、動画又は静止画シーケンスの最初のビデオシーケン
スであると定義し、エンドＩＤとして“１”ならば、動
画又は静止画シーケンスの最後のビデオシーケンスと定
義する。ビットストリームＩＤとして“００”ならば、
ＭＰＥＧ２（ＭＤ ＤＡＴＡ２）と定義し、“０１”な
らば、ＭＰＥＧ２（ＭＰ＠ＭＬ）と定義する。
【００５０】すなわち、ビットストリームＩＤ“００”
とは、フレームレートが３０Ｈｚで２コマ取るとかＭＰ
ＥＧ２で規定される範囲で表現されるものであり、“０
０”は、ＭＰＥＧ２規格枠外で時間間隔が任意に開いた
ときに、表現されるものである。
とは、フレームレートが３０Ｈｚで２コマ取るとかＭＰ
ＥＧ２で規定される範囲で表現されるものであり、“０
０”は、ＭＰＥＧ２規格枠外で時間間隔が任意に開いた
ときに、表現されるものである。
【００５１】動画モードについては、シーケンスＩＤと
して“０００”ならば、ムービーシーケンス（Movie se
quence）のショットモード（Shot mode）とし、“００
１”ならば、ムービーシーケンスのノーマルモード（No
rmal mode）とし、“０１０”ならば、ムービーシーケ
ンスのロングプレイモード（Long play mode ）とす
る。
して“０００”ならば、ムービーシーケンス（Movie se
quence）のショットモード（Shot mode）とし、“００
１”ならば、ムービーシーケンスのノーマルモード（No
rmal mode）とし、“０１０”ならば、ムービーシーケ
ンスのロングプレイモード（Long play mode ）とす
る。
【００５２】ここで、ムービーシーケンスについては、
リアルタイム再生を要求しないショットモード（Shot m
ode）、リアルタイム再生を要求するノーマルモード（N
ormal mode ）、及びプログレッシブ（Progressive ）
画像のエンコードを前提とした長時間録画モードである
ロングプレイモード（Long play mode）を有している。
リアルタイム再生を要求しないショットモード（Shot m
ode）、リアルタイム再生を要求するノーマルモード（N
ormal mode ）、及びプログレッシブ（Progressive ）
画像のエンコードを前提とした長時間録画モードである
ロングプレイモード（Long play mode）を有している。
【００５３】ショットモードは、例えばメモリを用いて
高ビットレートで圧縮したい場合などに用いられる。シ
ョットモードのビットレートは１５Ｍｂｐｓである。
高ビットレートで圧縮したい場合などに用いられる。シ
ョットモードのビットレートは１５Ｍｂｐｓである。
【００５４】ノーマルモードは、ＭＰＥＧ２のＭＰ＠Ｍ
Ｌ（メインプロファイル／メインレベル）には完全には
準拠していない。ノーマルモードのビットレートは平均
４Ｍｂｐｓである。ロングプレイモードは、プログレッ
シブ画像に対応する長時間モードであり、ビットレート
は平均１Ｍｂｐｓ以下である。
Ｌ（メインプロファイル／メインレベル）には完全には
準拠していない。ノーマルモードのビットレートは平均
４Ｍｂｐｓである。ロングプレイモードは、プログレッ
シブ画像に対応する長時間モードであり、ビットレート
は平均１Ｍｂｐｓ以下である。
【００５５】このように、画像信号のモードは、ＭＰＥ
Ｇ２のビットストリームのユーザデータにより識別され
る。
Ｇ２のビットストリームのユーザデータにより識別され
る。
【００５６】続いて、いわゆるパノラマ合成について説
明する。パノラマ合成とは、撮影領域を換えた複数の画
面から、大画面を合成するものである。
明する。パノラマ合成とは、撮影領域を換えた複数の画
面から、大画面を合成するものである。
【００５７】記録／再生装置で順次撮影した複数の画像
であるｆ0 ，ｆ3 ，ｆ6 ，ｆ9 ・・等をつなぎ合わせ
てパノラマ合成画像を生成するには、重なった部分を検
出して１枚の静止画像を生成する。
であるｆ0 ，ｆ3 ，ｆ6 ，ｆ9 ・・等をつなぎ合わせ
てパノラマ合成画像を生成するには、重なった部分を検
出して１枚の静止画像を生成する。
【００５８】図６中のＡに示す７０４×３６０の複数の
フレームであるｆ0，ｆ3，ｆ6，ｆ9，・・の動きベクト
ルを検出して、図６中のＢに示すように、これらｆ0，
ｆ3，ｆ6，ｆ9，・・の位置を判断して当該位置を決定
する。
フレームであるｆ0，ｆ3，ｆ6，ｆ9，・・の動きベクト
ルを検出して、図６中のＢに示すように、これらｆ0，
ｆ3，ｆ6，ｆ9，・・の位置を判断して当該位置を決定
する。
【００５９】ここでｘ、ｙ方向の動き量が判ったなら
ば、図６中のＢのｆ0 を基準とするｆ3 の位置を判断し
て貼り付ける。このとき、ｆ0,ｆ3 間には所定のオーバ
ーラップが発生する。これらオーバーラップ分を差し引
くことにより、ｆ0 ，ｆ3 ,ｆ6 ,ｆ9 ・・の集合から、
例えば１４０８（Ｈ）×７２０（Ｖ）の１枚の静止画像
を合成する。
ば、図６中のＢのｆ0 を基準とするｆ3 の位置を判断し
て貼り付ける。このとき、ｆ0,ｆ3 間には所定のオーバ
ーラップが発生する。これらオーバーラップ分を差し引
くことにより、ｆ0 ，ｆ3 ,ｆ6 ,ｆ9 ・・の集合から、
例えば１４０８（Ｈ）×７２０（Ｖ）の１枚の静止画像
を合成する。
【００６０】またはフレーム間の移動量を表す動きベク
トルに応じてメモリ上におくことにより、破線で示すよ
うなサイズの静止画像を抜き出す。
トルに応じてメモリ上におくことにより、破線で示すよ
うなサイズの静止画像を抜き出す。
【００６１】すなわち、これらの複数のフレームである
ｆ0，ｆ3，ｆ6，ｆ9，・・を、図６中のＣに示すよう
に、１４０８×７２０の大画面に合成する。
ｆ0，ｆ3，ｆ6，ｆ9，・・を、図６中のＣに示すよう
に、１４０８×７２０の大画面に合成する。
【００６２】このため、ビデオシーケンスに連続して入
力された映像を動画として扱う。そして、図７中のＡに
示すように、例えば３０コマ／秒で入力されるｆ0，
ｆ1，ｆ2 フレーム間動きベクトル（ＭＶ0，ＭＶ1）を
算出する。動きが止まっているときにはフレーム間動き
ベクトル（ＭＶ0，ＭＶ1）は“０”となる。そして、図
７中のＢに示すように静止画を抽出する。
力された映像を動画として扱う。そして、図７中のＡに
示すように、例えば３０コマ／秒で入力されるｆ0，
ｆ1，ｆ2 フレーム間動きベクトル（ＭＶ0，ＭＶ1）を
算出する。動きが止まっているときにはフレーム間動き
ベクトル（ＭＶ0，ＭＶ1）は“０”となる。そして、図
７中のＢに示すように静止画を抽出する。
【００６３】静止画の抽出は、複数の画像の間の動きベ
クトルを加算した量が所定の閾値を越えるという条件に
より行われる。例えば、条件式 ｜ｍｖｘ0＋ｍｖｘ1＋ｍｖｘ2｜≧ｍｖｘref を充足する静止画が抽出される。
クトルを加算した量が所定の閾値を越えるという条件に
より行われる。例えば、条件式 ｜ｍｖｘ0＋ｍｖｘ1＋ｍｖｘ2｜≧ｍｖｘref を充足する静止画が抽出される。
【００６４】具体的には、図１に示したＭＰＥＧ符号器
において、制御部１８は、上記条件式が充足されるとき
にスイッチ１９を閉じて、当該静止画を抽出するように
制御する。
において、制御部１８は、上記条件式が充足されるとき
にスイッチ１９を閉じて、当該静止画を抽出するように
制御する。
【００６５】画像を撮影する記録／再生装置を少し動か
せば、ｆ2，ｆ3フレーム間の動きベクトル（ＭＶ2 ）が
検出される。この画面全体の動きベクトルをｘ，ｙ方向
に渡って検出する。また、動きベクトルは、被写体につ
いてではなく、記録／再生装置そのものの動きに対応す
る。
せば、ｆ2，ｆ3フレーム間の動きベクトル（ＭＶ2 ）が
検出される。この画面全体の動きベクトルをｘ，ｙ方向
に渡って検出する。また、動きベクトルは、被写体につ
いてではなく、記録／再生装置そのものの動きに対応す
る。
【００６６】そして、画面全体がどれだけ動いたかとい
うことをフレーム毎に検出し、予め定めたｍｖｘref と
比較し、動きがなければその映像は捨て、動きがあれば
そのＩピクチャーのエンコードを行う。
うことをフレーム毎に検出し、予め定めたｍｖｘref と
比較し、動きがなければその映像は捨て、動きがあれば
そのＩピクチャーのエンコードを行う。
【００６７】この予め定めたｍｖｘref とは、複数のフ
レームｆ0，ｆ3，ｆ6，ｆ9，・・の位置がどれぐらいオ
ーバーラップすれば、合成処理が容易になるかという値
で決定される。
レームｆ0，ｆ3，ｆ6，ｆ9，・・の位置がどれぐらいオ
ーバーラップすれば、合成処理が容易になるかという値
で決定される。
【００６８】例えば、一番最初のｆ0 フレームはそのま
ま使う。次のｆ1 フレームは殆ど動いてなかったとす
る。さらに、次のｆ2 フレーム（ｆ0 フレームからの合
計）も動いてなかったとする。ｆ3 フレームは動いてい
たとすると、ｆ3 フレームを採用する。この例における
ｆ0 フレームおよびｆ3 フレーム間は不定期になる。
ま使う。次のｆ1 フレームは殆ど動いてなかったとす
る。さらに、次のｆ2 フレーム（ｆ0 フレームからの合
計）も動いてなかったとする。ｆ3 フレームは動いてい
たとすると、ｆ3 フレームを採用する。この例における
ｆ0 フレームおよびｆ3 フレーム間は不定期になる。
【００６９】このようにして、検出された動きベクトル
は、ビデオシーケンスのユーザデータ（user_data ）バ
イト２（byte 2）以降の部分に書き込まれる。このユー
ザデータは、以下のように定義されている。
は、ビデオシーケンスのユーザデータ（user_data ）バ
イト２（byte 2）以降の部分に書き込まれる。このユー
ザデータは、以下のように定義されている。
【００７０】すなわち、図８に示すユーザデータにおい
ては、バイト１（byte 1）は、スタートＩＤ（start I
D）に第７ビットｂ７、エンドＩＤ（end ID）に第６ビ
ットｂ６、ビットストリームＩＤ（Bit stream ID）に
第３ビットｂ３及び第４ビットｂ４、シーケンスＩＤ
（Sequence ID ）に第２ビットｂ２，第１ビットｂ１及
び第０ビットｂ０が用いられる。なお、第５ビットｂ５
は無定義である。このバイト１については上述したの
で、説明を省略する。なお、本実施の形態に係るシーケ
ンスＩＤは、“１１０”である。
ては、バイト１（byte 1）は、スタートＩＤ（start I
D）に第７ビットｂ７、エンドＩＤ（end ID）に第６ビ
ットｂ６、ビットストリームＩＤ（Bit stream ID）に
第３ビットｂ３及び第４ビットｂ４、シーケンスＩＤ
（Sequence ID ）に第２ビットｂ２，第１ビットｂ１及
び第０ビットｂ０が用いられる。なお、第５ビットｂ５
は無定義である。このバイト１については上述したの
で、説明を省略する。なお、本実施の形態に係るシーケ
ンスＩＤは、“１１０”である。
【００７１】新たに、 ユーザデータのバイト２（byte
2）〜バイト３（byte 3）にわたる１２ビットをアサイ
ンして、ｍｖｘを定義し、バイト４（byte 4）〜バイト
５（byte 5）に渡る１２ビットをアサインして、ｍｖｙ
を定義する。
2）〜バイト３（byte 3）にわたる１２ビットをアサイ
ンして、ｍｖｘを定義し、バイト４（byte 4）〜バイト
５（byte 5）に渡る１２ビットをアサインして、ｍｖｙ
を定義する。
【００７２】そして、ｍｖｘ〔１１：０〕には、水平方
向の動きベクトル値を入力し、ｍｖｙ〔１１：０〕に
は、垂直方向の動きベクトル値を入力する。
向の動きベクトル値を入力し、ｍｖｙ〔１１：０〕に
は、垂直方向の動きベクトル値を入力する。
【００７３】すなわち、バイト３の第０ビットｂ０〜第
７ビットｂ７まで、及びバイト２の第８ビットｂ８から
第１１ビットｂ１１までをｍｖｘとする。また、バイト
５の第０ビットｂ０から第７ビットｂ７まで、及びバイ
ト４の第８ビットｂ８から第１１ビットｂ１１までをｍ
ｖｙにアサインする。
７ビットｂ７まで、及びバイト２の第８ビットｂ８から
第１１ビットｂ１１までをｍｖｘとする。また、バイト
５の第０ビットｂ０から第７ビットｂ７まで、及びバイ
ト４の第８ビットｂ８から第１１ビットｂ１１までをｍ
ｖｙにアサインする。
【００７４】そして、ｍｖｘ〔１１：０〕には水平方向
の動きベクトル値を入力し、ｍｖｙ〔１１：０〕には垂
直方向の動きベクトルを入力する。
の動きベクトル値を入力し、ｍｖｙ〔１１：０〕には垂
直方向の動きベクトルを入力する。
【００７５】このように、複数枚の静止画像を順次撮影
する場合において、各フレーム間の動きベクトル量を検
出して、その動きベクトル量を、ＭＰＥＧのビデオシー
ケンスの中のユーザデータにおいて定義するものであ
る。
する場合において、各フレーム間の動きベクトル量を検
出して、その動きベクトル量を、ＭＰＥＧのビデオシー
ケンスの中のユーザデータにおいて定義するものであ
る。
【００７６】次に、上述した記録／再生装置の動作をフ
ローチャートに基づいて説明する。
ローチャートに基づいて説明する。
【００７７】すなわち、本発明の一連の工程は、図９に
示すように、ステップＳＰ１でフレーム毎の動きベクト
ルを検出した後、ステップＳＰ２の式をチェックする。
すなわち、それぞれのｘ、ｙ成分を足していって、ｘ、
ｙの何れかがｍｖｘref ，ｍｖｙref を越えた場合は、
条件が成立と判断する。
示すように、ステップＳＰ１でフレーム毎の動きベクト
ルを検出した後、ステップＳＰ２の式をチェックする。
すなわち、それぞれのｘ、ｙ成分を足していって、ｘ、
ｙの何れかがｍｖｘref ，ｍｖｙref を越えた場合は、
条件が成立と判断する。
【００７８】ステップＳＰ２の条件が不成立（Ｎｏ）の
場合はステップＳＰ３にて、そのフレームに関する処理
は行なわずに、そのまま終了する。
場合はステップＳＰ３にて、そのフレームに関する処理
は行なわずに、そのまま終了する。
【００７９】ステップＳＰ２の条件が成立（Ｙｅｓ）の
場合はステップＳＰ４にて、そのフレームに関するＩピ
クチャーのエンコード処理を行う。
場合はステップＳＰ４にて、そのフレームに関するＩピ
クチャーのエンコード処理を行う。
【００８０】ステップＳＰ５では、実際にどれぐらい動
いた映像であるかを示す、動きベクトル量をＭＰＥＧ２
規格のビットストリームの固有情報であるユーザデータ
（user_data ）領域に書き込み、処理を終了する。
いた映像であるかを示す、動きベクトル量をＭＰＥＧ２
規格のビットストリームの固有情報であるユーザデータ
（user_data ）領域に書き込み、処理を終了する。
【００８１】なお、本発明は、上述の実施の形態には限
定されない。本発明は、例えば、ＭＰＥＧ２規格以外の
ビットストリームに対しても適用することができる。
定されない。本発明は、例えば、ＭＰＥＧ２規格以外の
ビットストリームに対しても適用することができる。
【００８２】
【発明の効果】以上説明したように、本発明によれば、
複数枚の静止画像を順次撮影してそれらをつなぎ合わせ
ることによって、１枚のパノラマ合成画像を生成するよ
うにしたため、普通のＣＣＤ固体撮像素子を用いたパノ
ラマ撮影が可能となる。
複数枚の静止画像を順次撮影してそれらをつなぎ合わせ
ることによって、１枚のパノラマ合成画像を生成するよ
うにしたため、普通のＣＣＤ固体撮像素子を用いたパノ
ラマ撮影が可能となる。
【００８３】また、画面内符号化画像であるＩフレーム
などのフレーム間の移動量である動きベクトル量を検出
して、その動きベクトル量が予め設定された値を越えた
場合に限ってエンコード処理をするようにしたため、全
てのフレームを採用する場合に比べて、パノラマ合成画
像を生成する際の処理効率を向上することができる。
などのフレーム間の移動量である動きベクトル量を検出
して、その動きベクトル量が予め設定された値を越えた
場合に限ってエンコード処理をするようにしたため、全
てのフレームを採用する場合に比べて、パノラマ合成画
像を生成する際の処理効率を向上することができる。
【図１】ＭＰＥＧ符号器の構成を示すブロック図であ
る。
る。
【図２】ＭＰＥＧ復号器の構成を示すブロック図であ
る。
る。
【図３】複数のビデオシーケンスから構成されるムービ
ーシーケンスを説明する図である。
ーシーケンスを説明する図である。
【図４】ビデオシーケンスの構成を示す図である。
【図５】ユーザデータの定義を示す図である。
【図６】パノラマ合成を説明する図である。
【図７】動きベクトルを説明する図である。
【図８】動きベクトルについてのユーザデータの定義を
示す図である。
示す図である。
【図９】パノラマ合成の一連の工程を示すフローチャー
トである。 〔図面の簡単な説明〕 １２ フレームメモリ、１７ 動きベクトル検出器、１
５ 可変長符号化部、１８ 制御部、２２ 可変長復号
化器、２５ 表示制御部、２６ 制御部
トである。 〔図面の簡単な説明〕 １２ フレームメモリ、１７ 動きベクトル検出器、１
５ 可変長符号化部、１８ 制御部、２２ 可変長復号
化器、２５ 表示制御部、２６ 制御部
Claims (16)
- 【請求項１】 移動される複数の撮影領域の画像にてな
る画像信号をビットストリームに符号化する符号化処理
を行う画像信号処理装置において、 上記複数の撮影領域の間の移動量を検出する移動量検出
手段と、 上記移動量検出手段にて検出された移動量を加算し、こ
の加算された移動量が所定の閾値を越えたときに当該画
像を符号化するように制御する制御手段とを有すること
を特徴とする画像信号処理装置。 - 【請求項２】 上記ビットストリームは、画面内符号化
画像、表示順序で順方向に予測符号化された順方向予測
符号化画像並びに表示順序で順方向及び逆方向に予測符
号化された双方向予測符号化画像から構成される画像群
を単位とすることを特徴とする請求項１記載の画像信号
処理装置。 - 【請求項３】 上記加算された移動量を上記ビットスト
リームの所定の記録単位の固有情報領域に識別情報とし
て書き込む識別情報書き込み手段を有し、 上記制御手段は、上記加算された移動量が上記閾値を越
えたときに、当該画像を符号化すると共に、上記識別情
報書き込み手段に上記加算された移動量を上記ビットス
トリームに識別情報として書き込むように制御すること
を特徴とする請求項１記載の画像信号処理装置。 - 【請求項４】 上記ビットストリームの所定の記録単位
内の固有情報領域に識別情報として書き込まれた上記加
算された移動量を読み出す識別情報読み出し手段と、 上記識別情報読み出し手段にて読み出された上記加算さ
れた移動量に基づいて、上記画像信号を再生する際に、
上記ビットストリームを復号して得られた複数の撮影領
域の画像を１枚の画像に合成するように制御する制御手
段とを有することを特徴とする請求項３記載の画像信号
処理装置。 - 【請求項５】 上記制御手段は、１枚の画像に合成され
るように制御される上記複数の撮影領域の画像は、任意
の枚数に設定可能なことを特徴とする請求項４記載の画
像信号処理装置。 - 【請求項６】 上記ビットストリームはＭＰＥＧ２（Mo
ving Pictures Experts Group Phase2）規格によるもの
であり、上記記録単位は上記ＭＰＥＧ２規格のビデオシ
ーケンスであることを特徴とする請求項１記載の画像信
号処理装置。 - 【請求項７】 移動される複数の撮影領域の画像にてな
る画像信号をビットストリームに符号化する符号化処理
を行う画像信号処理方法において、 上記複数の撮影領域の間の移動量を検出する移動量検出
工程と、 上記移動量検出手段にて検出された移動量を加算し、こ
の加算された移動量が所定の閾値を越えたときに当該画
像を符号化するように制御する制御工程とを有すること
を特徴とする画像信号処理方法。 - 【請求項８】 上記ビットストリームは、画面内符号化
画像、表示順序で順方向に予測符号化された順方向予測
符号化画像並びに表示順序で順方向及び逆方向に予測符
号化された双方向予測符号化画像から構成される画像群
を単位とすることを特徴とする請求項７記載の画像信号
処理方法。 - 【請求項９】 上記加算された移動量を上記ビットスト
リームの所定の記録単位の固有情報領域に識別情報とし
て書き込む識別情報書き込み工程を有し、 上記制御工程は、上記加算された移動量が上記閾値を越
えたときに、当該画像を符号化すると共に、上記識別情
報書き込み工程に上記加算された移動量を上記ビットス
トリームに識別情報として書き込むように制御すること
を特徴とする請求項７記載の画像信号処理方法。 - 【請求項１０】 上記ビットストリームの所定の記録単
位内の固有情報領域に識別情報として書き込まれた上記
加算された移動量を読み出す識別情報読み出し工程と、 上記識別情報読み出し工程にて読み出された上記加算さ
れた移動量に基づいて、上記画像信号を再生する際に、
上記ビットストリームを復号して得られた複数の撮影領
域の画像を１枚の画像に合成するように制御する制御工
程とを有することを特徴とする請求項９記載の画像信号
処理方法。 - 【請求項１１】 上記制御手段は、１枚の画像に合成さ
れるように制御される上記複数の撮影領域の画像は、任
意の枚数に設定可能なことを特徴とする請求項１０記載
の画像信号処理方法。 - 【請求項１２】 上記ビットストリームはＭＰＥＧ２
（Moving Pictures Experts Group Phase2）規格による
ものであり、上記記録単位は上記ＭＰＥＧ２規格のビデ
オシーケンスであることを特徴とする請求項９記載の画
像信号処理方法。 - 【請求項１３】 移動される複数の撮影領域の画像にて
なる画像信号について、上記移動される撮影領域の間の
移動量を加算し、この加算された移動量が所定の閾値を
越えたときに上記画像信号を符号化したビットストリー
ムから画像信号を再生する画像信号再生装置であって、 上記ビットストリームの所定の記録単位内の固有情報領
域に識別情報として書き込まれた上記複数の撮影領域の
間の移動量を加算した加算された移動量を読み出す識別
情報読み出し手段と、 上記識別情報読み出し手段にて読み出された上記加算さ
れた移動量に基づいて、上記画像信号を再生する際に、
上記ビットストリームを復号して得られた複数の撮影領
域の画像を１枚の画像に合成するように制御する制御手
段とを有することを特徴とする画像信号再生装置。 - 【請求項１４】 上記ビットストリームは、画面内符号
化画像、表示順序で順方向に予測符号化された順方向予
測符号化画像並びに表示順序で順方向及び逆方向に予測
符号化された双方向予測符号化画像から構成される画像
群を単位とすることを特徴とする請求項１３記載の画像
信号再生装置。 - 【請求項１５】 上記制御手段は、１枚の画像に合成さ
れるように制御される上記複数の撮影領域の画像は、任
意の枚数に設定可能なことを特徴とする請求項１３記載
の画像信号再生装置。 - 【請求項１６】 上記ビットストリームはＭＰＥＧ２
（Moving Pictures Experts Group Phase2）規格による
ものであり、上記記録単位は上記ＭＰＥＧ２規格のビデ
オシーケンスであることを特徴とする請求項１３記載の
画像信号再生装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10794798A JPH11308618A (ja) | 1998-04-17 | 1998-04-17 | 画像信号処理装置及び方法並びに画像信号再生装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP10794798A JPH11308618A (ja) | 1998-04-17 | 1998-04-17 | 画像信号処理装置及び方法並びに画像信号再生装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11308618A true JPH11308618A (ja) | 1999-11-05 |
Family
ID=14472093
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP10794798A Withdrawn JPH11308618A (ja) | 1998-04-17 | 1998-04-17 | 画像信号処理装置及び方法並びに画像信号再生装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11308618A (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100324597B1 (ko) * | 1999-12-30 | 2002-02-16 | 박종섭 | 비트 스트림 프로세서 |
| KR100838606B1 (ko) | 2006-03-28 | 2008-06-16 | 후지쯔 가부시끼가이샤 | 파노라마 화상 작성 장치, 방법 및 파노라마 화상 작성프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체 |
| WO2008087721A1 (ja) * | 2007-01-18 | 2008-07-24 | Fujitsu Limited | 画像合成装置、画像合成方法、プログラム |
| JP2008283695A (ja) * | 2008-06-09 | 2008-11-20 | Sony Corp | 映像処理装置、映像処理方法、プログラム及び記録媒体、並びに映像処理システム |
| JP2009141630A (ja) * | 2007-12-05 | 2009-06-25 | Canon Inc | 画像処理装置、その制御方法、プログラム |
| JP2011217394A (ja) * | 2008-04-03 | 2011-10-27 | Sony Corp | 再生制御装置及び再生制御方法並びにプログラム |
| US8350892B2 (en) | 2008-05-20 | 2013-01-08 | Sony Corporation | Image pickup apparatus, image pickup method, playback control apparatus, playback control method, and program |
-
1998
- 1998-04-17 JP JP10794798A patent/JPH11308618A/ja not_active Withdrawn
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100324597B1 (ko) * | 1999-12-30 | 2002-02-16 | 박종섭 | 비트 스트림 프로세서 |
| KR100838606B1 (ko) | 2006-03-28 | 2008-06-16 | 후지쯔 가부시끼가이샤 | 파노라마 화상 작성 장치, 방법 및 파노라마 화상 작성프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체 |
| WO2008087721A1 (ja) * | 2007-01-18 | 2008-07-24 | Fujitsu Limited | 画像合成装置、画像合成方法、プログラム |
| JPWO2008087721A1 (ja) * | 2007-01-18 | 2010-05-06 | 富士通株式会社 | 画像合成装置、画像合成方法、プログラム |
| JP2009141630A (ja) * | 2007-12-05 | 2009-06-25 | Canon Inc | 画像処理装置、その制御方法、プログラム |
| US8848034B2 (en) | 2007-12-05 | 2014-09-30 | Canon Kabushiki Kaisha | Image processing apparatus, control method thereof, and program |
| JP2011217394A (ja) * | 2008-04-03 | 2011-10-27 | Sony Corp | 再生制御装置及び再生制御方法並びにプログラム |
| US8350892B2 (en) | 2008-05-20 | 2013-01-08 | Sony Corporation | Image pickup apparatus, image pickup method, playback control apparatus, playback control method, and program |
| JP2008283695A (ja) * | 2008-06-09 | 2008-11-20 | Sony Corp | 映像処理装置、映像処理方法、プログラム及び記録媒体、並びに映像処理システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4261630B2 (ja) | 画像符号化装置及び方法、画像符号化プログラムが記録されたコンピュータ可読記録媒体 | |
| JP2000278692A (ja) | 圧縮データ処理方法及び処理装置並びに記録再生システム | |
| JP3092281B2 (ja) | 画像信号の高能率符号化及び復号化装置 | |
| JP2001218213A (ja) | 画像信号変換符号化装置 | |
| WO2009130886A1 (ja) | 動画像符号化装置、撮像装置及び動画像符号化方法 | |
| WO1993003578A1 (fr) | Appareil de haute performance pour le codage et le decodage d'un signal d'image | |
| WO2012046366A1 (ja) | 画像再生方法、画像再生装置、画像再生プログラム、撮像システム、および再生システム | |
| JP3221785B2 (ja) | 撮像装置 | |
| JPH0818979A (ja) | 画像処理装置 | |
| JP3592025B2 (ja) | 撮影画像記録装置 | |
| US20060190625A1 (en) | Video encoding method, video encoder, and personal video recorder | |
| JPH11308618A (ja) | 画像信号処理装置及び方法並びに画像信号再生装置 | |
| JP3487205B2 (ja) | 画像データ編集装置 | |
| US6754272B2 (en) | Picture signal processing method and apparatus, picture signal recording method and apparatus and recording medium | |
| JP3990011B2 (ja) | 復号画像変換回路および復号画像変換装置 | |
| JP2011055023A (ja) | 画像符号化装置及び画像復号化装置 | |
| JP4365941B2 (ja) | 符号化装置、画像処理装置、カメラ一体型画像記録装置、画像処理システム、符号化方法、及び記憶媒体 | |
| JP2004180345A (ja) | 撮影画像記録装置 | |
| JP4178521B2 (ja) | 符号化映像信号の記録方法、及び映像信号符号化装置 | |
| JP3663559B2 (ja) | リアルタイム逆方向再生用動画像符号化方式 | |
| JP4765961B2 (ja) | デジタル動画像記録装置 | |
| JP2009290387A (ja) | エンコーダ、デコーダ、及び記録再生装置 | |
| JP2007142809A (ja) | 映像記録装置 | |
| JP2000156868A (ja) | 画像復号化方法及び装置 | |
| JPH07162853A (ja) | 撮像装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20050705 |