JPH1070703A - 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置 - Google Patents

画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置

Info

Publication number
JPH1070703A
JPH1070703A JP22716196A JP22716196A JPH1070703A JP H1070703 A JPH1070703 A JP H1070703A JP 22716196 A JP22716196 A JP 22716196A JP 22716196 A JP22716196 A JP 22716196A JP H1070703 A JPH1070703 A JP H1070703A
Authority
JP
Japan
Prior art keywords
image
classification
bit stream
data
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP22716196A
Other languages
English (en)
Inventor
Kenjiro Tsuda
賢治郎 津田
Takayasu Miki
孝保 三木
Shoichi Goto
昌一 後藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP22716196A priority Critical patent/JPH1070703A/ja
Publication of JPH1070703A publication Critical patent/JPH1070703A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

(57)【要約】 【課題】 散在している静止画像を時間軸方向に沿って
並べた動画像ビットストリームにすることにより、多数
の画像のブラウジング（通覧）を有利にする。 【解決手段】 画像データ記憶手段１０４は複数の静止
画画像データを記憶している。その静止画画像データを
順次にすべて読み出し、画像選択手段１１３により動画
像ビットストリームの構成要素として選択し、画像順序
決定手段１１４により選択した前記の複数の静止画画像
データについて時間軸方向での並び順序を決定する。そ
の並び順序に従って読み出した静止画画像データを動画
像符号化手段１１５により圧縮符号化して画像圧縮符号
化データを生成して一時格納し、動画像ビットストリー
ム記録手段１１６はその画像圧縮符号化データを前記の
時間軸方向の並び順序で読み出して画像データ記憶手段
１０４に動画像ビットストリームとして記録する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、磁気ディスク・光
磁気ディスク・ハードディスク・磁気テープ・ＣＤ−Ｉ
・ビデオＣＤ・フォトＣＤ・ＣＤ−ＲＯＭ・レーザーデ
ィスク（ＬＤ）・ＤＶＤ（Digital Video DiskまたはDi
gital Versatile Disk）・ＣＤ−Ｒ（ライトワンス型）
などの蓄積メディアに散在する複数の静止画像・動画像
や、ディジタルテレビ放送・ＣＡＴＶなどの放送メディ
アやパソコン通信・インターネットなどの通信メディア
から取得してハードディスクや半導体メモリなどに蓄積
された状態で散在する複数の静止画像・動画像を、コン
テンツ（付加価値をもった内容・作品）等の制作のため
に１つの動画像ビットストリームにまとめて記録する画
像情報管理用記録装置およびその動画像ビットストリー
ムを再生する画像情報管理用再生装置に関するものであ
る。なお、動画像は複数のフレームが連続したものであ
り、その１フレームずつが記録されていることから、動
画像を構成する１フレームも静止画像であるといえる。
この意味で、本明細書では、動画像の構成要素である各
フレームの画像をも静止画像と定義することとする。
【０００２】
【従来の技術】近年、電子スチルカメラやディジタルビ
デオカメラなどの普及に伴い、画像データを容易に扱う
ことが可能となってきている。また、マルチメディアの
コンテンツの流通も盛んになり、コンピュータのファイ
ルシステム（記録媒体としてはハードディスク・ＣＤ−
ＲＯＭ・フロッピーディスク・ＭＯ，ＰＤなどの光磁気
ディスクなど）には、多量の画像データ（動画像・静止
画像）が散在するようになってきている。
【０００３】このような画像を閲覧したり、記録して加
工・編集する場合には、各画像データをコンピュータに
入力し、そこで処理を行うのが一般的である。
【０００４】図６８は従来の一般的なコンピュータのフ
ァイルシステム中で存在する静止画についての階層ディ
レクトリの構造を示す。図６８において、１１はルート
ディレクトリ、１２ａ〜１２ｉは各階層のサブディレク
トリであり、個々の最下層のディレクトリに静止画のフ
ァイル１３ａ1 （静止画１）、１３ｂ1 〜１３ｂ3 （静
止画２〜４）、１３ｃ1 〜１３ｃ2 （静止画５，６）、
１３ｄ1 〜１３ｄ2 （静止画７，８）、１３ｅ1 （静止
画９）が存在している。すなわち、複数の静止画がばら
ばらの状態でファイル化されている。必要な複数の静止
画を読み出すと、図６９に示すように、各１フレーム分
の静止画１４ａ〜１４ｉがただ単に読み出されるだけで
あり、静止画１４ａ〜１４ｉの相互間には時間的な流れ
の中での関連性は全くなかった。
【０００５】
【発明が解決しようとする課題】図６８の階層ディレク
トリ構造の中で静止画のファイルを管理していると、そ
の管理自体がわずらわしいものになるとともに、任意の
静止画を順次に読み出すときにその都度の読み出し処理
が必要となって、操作が非常にわずらわしいだけでな
く、読み出すべきものがどのサブディレクトリにあるか
の判断がその都度必要で、検索に多くの時間がかかり、
表示速度も遅く、全体としてオーバーヘッドが大きくな
ってしまうという問題がある。
【０００６】また、読み出した複数の静止画のデータを
コピーして１箇所にまとめることはできるが、その場合
でもファイル名で管理する必要がある。この場合、ファ
イルシステム中でファイル名を検索してアクセスしなけ
ればならないというオーバーヘッドが生じる。
【０００７】また、図７０（ａ），（ｂ）のように、読
み出した複数の静止画を、ディスプレイ画面１５上にそ
れぞれ子画面として一覧的に表示することも考えられる
が、個数が３×３＝９とか５×５＝２５とかに制限さ
れ、多数の静止画を通覧することはできない。また、子
画面が小さくなるほど見づらいものとなり、要するに、
画像検索時にディスプレイの表示能力に依存するかたち
となるため、高速検索はむずかしいものとならざるを得
ない。
【０００８】また、現在の電子メールはテキストのみの
シンプルなものであるが、将来的には画像ファイルを用
いた表現力豊かな電子メールに発展していくものと考え
られる。その場合に、伝送する画像ファイル数が多い
と、時間、コストの両面で問題が生じるようになる。
【０００９】このように散在する多数の画像を閲覧した
り、記録して加工・編集するようになると、画像データ
を管理する必要が生じてくる。
【００１０】特に、インターネットのホームページを構
成する場合に、ＨＴＭＬ（Hyper Text Markup Languag
e：ホームページに予め作成しておいた文章・画像・音
声を貼り付ける記述形式）のファイル中で画像を扱うと
きには、複数の画像データ（ＧＩＦファイル）を管理す
る必要が生じてくる。小さい画像データを用いてホーム
ページのデザインを構成する場合も多く、非常に多量の
画像データを用いる場合があり、画像データを管理する
ことがどうしても必要となってくる。
【００１１】本発明は、このような事情に鑑みて創案さ
れたものであって、読み出した複数の静止画を時間軸方
向に沿って並べた動画像ビットストリームとすることに
より、多数の画像の（ブラウジング（通覧：中身をさら
っと流し読みすること））を有利に行えるようにするこ
とを目的としている。
【００１２】
【課題を解決するための手段】その解決の手法として有
効であると考えられるのが次のような手法である。すな
わち、静止画像でも、パソコンの分野でのグラフィック
ファイルの形式であるＢＭＰ，ＪＰＧ，ＧＩＦの形式で
はなく、複数の静止画像をまとめてあたかも動画像であ
るかのように扱い、例えばＭＰＥＧ（Moving Picture C
oding ExpertsGroup）のビットストリーム（エンコーダ
により作成されたデータ列）として符号化し、記録する
ケースがある。まとめた画像群をスライド方式で連続再
生することにより、動画のようにして見ながら画像を検
索すること（ブラウジング（通覧）も可能である。この
場合、動画像の１フレームが静止画像１枚に対応してい
る。
【００１３】本発明に係る画像情報管理用記録装置は、
画像データ記憶手段から静止画画像データを順次に読み
出して動画像ビットストリームの構成要素として選択
し、その選択された複数の静止画画像データのそれぞれ
について時間軸方向での並び順序を決定し、時間軸方向
での並び順序に従って読み出した静止画画像データを圧
縮符号化して画像圧縮符号化データを生成して一時的に
格納し、その格納してある画像圧縮符号化データを前記
の時間軸方向での並び順序で読み出して動画像ビットス
トリームとして記録しておくように構成してある。画像
データ記憶手段において散在している静止画像（動画像
の構成要素である各フレームを含めた広い意味での静止
画像）を順次に読み出して選択し、時間軸方向での並び
順序に従って並べた１つの動画像ビットストリームとし
てまとめ、そのまとめた動画像ビットストリームを記録
しておくことができる。そして、このように複数の静止
画像を時間軸方向に沿って並べて生成された動画像ビッ
トストリームを記録しておけば、画像情報管理用再生装
置によって検索する際に低速でも高速でもブラウジング
（通覧、流し見）が可能となる。
【００１４】また、本発明に係る画像情報管理用再生装
置は、複数の静止画画像データの画像圧縮符号化データ
を時間軸方向で並べかつ画像圧縮符号化データごとに分
類のための情報（例えば文字列や色相）が付加された状
態の動画像ビットストリームが記憶されている画像デー
タ記憶手段から前記の動画像ビットストリームを入力し
て解析し、その解析結果に従って動画像ビットストリー
ムを復号化して画像データを再生し、その画像データを
表示するに際して、検索しようとする分類に係る情報を
指定しておき、この分類のための情報が解析の結果割り
出されたものと一致するときに入力している動画像ビッ
トストリームの復号化を行うように構成してある。静止
画像の検索再生に際して、従来の技術の場合のような記
録媒体に散在している静止画像をディレクトリをいちい
ち探りながら検索する場合に比べると、予め複数の静止
画像を選択し、時間軸方向に沿って並べた動画像ビット
ストリームとして再生するので、ブラウジング（通覧、
流し見）を行うことができ、効率良く画像を検索するこ
とができる。そして、オペレータが検索したい分類のた
めの情報を設定しておくことにより、動画像ビットスト
リームからその情報に対応する画像圧縮符号化データを
抽出し自動的に復号化するので、設定した特定の分類の
静止画像を動画像の状態で再生することとなり、すべて
の静止画像を再生する必要がなくなるため、検索したい
画像を素早く見つけ出すことができる。
【００１５】
【発明の実施の形態】本発明に係る請求項１の画像情報
管理用記録装置は、複数の静止画画像データを記憶して
おく画像データ記憶手段と、前記画像データ記憶手段か
ら静止画画像データを順次にすべて読み出して動画像ビ
ットストリームの構成要素として選択する画像選択手段
と、前記の選択された複数の静止画画像データのそれぞ
れについて時間軸方向での並び順序を読み出し順に決定
していく画像順序決定手段と、時間軸方向での並び順序
に従って読み出した静止画画像データを圧縮符号化して
画像圧縮符号化データを生成し一時的に格納する動画像
符号化手段と、前記の画像圧縮符号化データを前記の時
間軸方向での並び順序で読み出して動画像ビットストリ
ームとして記録しておく動画像ビットストリーム記録手
段とを備えたことを特徴としている。画像データ記憶手
段において散在しているすべての静止画像（動画像の構
成要素である各フレームを含めた広い意味での静止画
像）を順次に読み出して選択し、時間軸方向での並び順
序に従って並べた１つの動画像ビットストリームとして
まとめ、そのまとめた動画像ビットストリームを記録し
ておくことができる。すべての静止画像を読み出して自
動的に動画像ビットストリームの構成要素として並べる
ので、人為的な処理の介在が不要であり、きわめて迅速
に動画像ビットストリームを生成することができる。な
お、画像データ記憶手段には各種の蓄積メディアから取
得した静止画画像データや各種の放送メディア・通信メ
ディアから取得した静止画画像データを記憶させること
も可能である。また、静止画画像データを圧縮符号化し
ているから、動画像ビットストリームの記憶のための記
憶容量は相対的に少なくてよい。そして、このようにす
べての静止画像を時間軸方向に沿って並べて生成された
動画像ビットストリームを記録しておけば、画像情報管
理用再生装置によって検索する際に低速でも高速でもブ
ラウジング（通覧、流し見）が可能となる。
【００１６】本発明に係る請求項２の画像情報管理用記
録装置は、複数の静止画画像データを記憶しておく画像
データ記憶手段と、前記画像データ記憶手段から読み出
された静止画画像データを表示する表示手段と、表示さ
れた静止画画像データを動画像ビットストリームの構成
要素として適宜に選択する画像選択手段と、前記の選択
された複数の静止画画像データのそれぞれについて時間
軸方向での並び順序を決定する画像順序決定手段と、前
記の時間軸方向での並び順序に従って前記画像データ記
憶手段から該当する静止画画像データを読み込んで圧縮
符号化して画像圧縮符号化データを生成し一時的に格納
する動画像符号化手段と、前記の画像圧縮符号化データ
を前記の時間軸方向での並び順序で読み出して動画像ビ
ットストリームとして記録しておく動画像ビットストリ
ーム記録手段とを備えたことを特徴としている。画像デ
ータ記憶手段において散在している複数の静止画像（動
画像の構成要素である各フレームを含めた広い意味での
静止画像）を任意に選択し、任意に定めた時間軸方向で
の並び順序に従って並べた１つの動画像ビットストリー
ムとしてまとめ、そのまとめた動画像ビットストリーム
を記録しておくことができる。特に、動画像ビットスト
リームの構成要素としての静止画像を選択する際に、候
補となる静止画像を表示手段に表示してオペレータが目
視確認しながら選択することができるので、静止画像の
選択において無駄や間違いがなく、効率良く動画像ビッ
トストリームを生成することができる。静止画像につい
ての定義上、この動画像ビットストリームには、１つの
動画像における複数シーンを含ませたり、複数の動画像
を含ませたりすることもある。なお、画像データ記憶手
段には各種の蓄積メディアから取得した静止画画像デー
タや各種の放送メディア・通信メディアから取得した静
止画画像データを記憶させることも可能である。また、
静止画画像データを圧縮符号化しているから、動画像ビ
ットストリームの記憶のための記憶容量は相対的に少な
くてよい。そして、このようにオペレータが任意の静止
画像を選択し時間軸方向に沿って適宜に並べて生成され
た動画像ビットストリームを記録しておけば、画像情報
管理用再生装置によって検索する際に低速でも高速でも
ブラウジング（通覧、流し見）が可能となる。
【００１７】本発明に係る請求項３の画像情報管理用記
録装置は、上記請求項１または請求項２において、画像
順序決定手段が画像データ記憶手段から読み出した静止
画画像データに対して画素間間引き処理を実行してから
動画像符号化手段に転送する画素間引き手段を備えたこ
とを特徴としている。このあとの動画像符号化手段は画
素間間引き処理後の静止画画像データに対して圧縮符号
化を行うので、その圧縮符号化の処理を高速に行えると
ともに、圧縮符号化された静止画画像データから生成さ
れた動画像ビットストリームを格納するための記憶容量
を削減することができる。
【００１８】本発明に係る請求項４の画像情報管理用記
録装置は、上記請求項１から請求項３までのいずれかに
おいて、画像順序決定手段が画像データ記憶手段から読
み出した複数の静止画画像データをまとめてマルチ画面
の１フレーム分の静止画画像データに合成して動画像符
号化手段に転送するマルチ画面画像データ生成手段を備
えたことを特徴としている。複数の静止画画像データを
１フレーム分としてまとめたマルチ画面の静止画画像デ
ータの形態で圧縮符号化した動画像ビットストリームを
生成することができる。そして、このように複数の静止
画画像データを１フレーム分にまとめた形態の動画像ビ
ットストリームは、画像情報管理用再生装置によって高
速または低速でブラウジング（通覧）するときに、一度
に閲覧できる静止画の数が多く、画像の検索効率の向上
を有効性のあるものとなし得る。なお、画素間間引き処
理を併用したときには、動画像ビットストリームを格納
するための記憶容量を削減することができるとともに、
さらなる高速検索が可能となる。
【００１９】本発明に係る請求項５の画像情報管理用記
録装置は、上記請求項１から請求項４までのいずれかに
おいて、画像データ記憶手段から読み出された互いに隣
り合う選択静止画画像データの画面間差分を生成する画
面間差分生成手段と、生成された画面間差分を所定値と
大小比較する画面間差分評価手段と、評価の結果、画面
間差分が所定値以下のときに画面間符号化を選択し、画
面間差分が所定値よりも大きいときに画面内符号化を選
択する画面内／画面間選択手段と、画面間圧縮符号化が
選択されたときに起動して選択静止画画像データの画面
間圧縮符号化を行う動画像画面間符号化手段と、画面内
圧縮符号化が選択されたときに起動して選択静止画画像
データの画面内圧縮符号化を行う動画像画面内符号化手
段とを備えたことを特徴としている。フレーム順序番号
の順序に従って読み出された隣り合う２つの選択静止画
画像データの画面間差分が所定値以下のときは画面間圧
縮符号化を行って高いデータ圧縮を行うので、動画像ビ
ットストリーム記録手段に記録するときの容量が少なく
てすむ。
【００２０】本発明に係る請求項６の画像情報管理用記
録装置は、上記請求項１から請求項５までのいずれかに
おいて、入力した検索補助用の音声データを圧縮符号化
して音声圧縮符号化データを生成する音声符号化手段
と、動画像符号化手段からの画像圧縮符号化データと前
記音声符号化手段からの音声圧縮符号化データとを１フ
レーム単位で多重化して画像・音声多重化データを生成
する画像・音声多重化手段と、動画像ビットストリーム
記録手段に代えて、生成された画像・音声多重化データ
を所定の時間軸方向での並び順序に従って読み出して動
画像・音声ビットストリームとして記録しておく動画像
・音声ビットストリーム記録手段とを備えたことを特徴
としている。１フレーム分ずつの選択静止画画像データ
に対して検索補助用の音声データを付加した動画像・音
声ビットストリームを記録することができる。そして、
このような動画像・音声ビットストリームを記録してお
けば、画像情報管理用再生装置によって画像を検索する
ときに同時に音声も再生することにより、その再生され
た音声を検索補助用の音声として利用することが可能と
なる。
【００２１】本発明に係る請求項７の画像情報管理用記
録装置は、上記請求項１から請求項６までのいずれかに
おいて、所定の要件に従って選択静止画画像データに分
類番号としての分類識別子を付加する画像分類手段を備
え、画像順序決定手段は前記分類識別子が付加された選
択静止画画像データに対してその分類識別子の中で時間
軸方向での並び順序としての分類内順序番号を付加する
ように構成されていることを特徴としている。多数の静
止画像を所定の要件に従って分類して、分類識別子と分
類内順序番号とを付けた選択静止画画像データを生成し
ておき、圧縮符号化のために読み出すときに、分類識別
子の若いものを優先し、かつ、同じ分類識別子の場合に
は分類内順序番号の若いものを優先する状態で読み出し
て、圧縮符号化するから、分類識別子と分類内順序番号
とで決まる優先順位を伴った動画像ビットストリームを
生成し、記録することができる。そして、このような動
画像ビットストリームを記録しておけば、画像情報管理
用再生装置によって画像を検索するときに静止画像が動
画像として分類ごとに順番に再生されることになるた
め、粗い検索すなわち高速検索を行っても内容の把握が
容易なものとなる。
【００２２】本発明に係る請求項８の画像情報管理用記
録装置は、上記請求項７において、画像分類手段が静止
画画像データに最も大きい割合で含まれる色合いに基づ
いて分類番号としての分類識別子を付加するように構成
されていることを特徴としている。オペレータがいちい
ち分類する必要がなく、すべて自動的に分類を実行する
ので、作業能率が非常に良いものとなる。
【００２３】本発明に係る請求項９の画像情報管理用記
録装置は、上記請求項７または請求項８において、分類
番号としての分類識別子が同一の選択静止画画像データ
について画面間圧縮符号化を行う動画像画面間符号化手
段を備えたことを特徴としている。動画像ビットストリ
ームの記録に必要な容量が少なくてすむ。
【００２４】本発明に係る請求項１０の画像情報管理用
記録装置は、上記請求項７から請求項９までのいずれか
において、動画像ビットストリームを生成する際に読み
出された画像圧縮符号化データに対して分類番号として
の分類識別子に対応した分類情報を付加する分類情報付
加手段を備え、動画像ビットストリーム記録手段に分類
情報付き動画像ビットストリームを記録するように構成
してあることを特徴としている。分類識別子と分類内順
序番号とで決まる優先順位を伴いかつ文字列からなる具
体的な分類情報が付加された分類情報付き動画像ビット
ストリームを生成し、記録することができる。そして、
このような分類情報付き動画像ビットストリームを記録
しておけば、画像情報管理用再生装置によって画像を検
索するときに、静止画像が動画像として分類ごとに順番
に、しかも分類情報も併せて再生されることになるた
め、粗い検索すなわち高速検索を行っても内容の把握が
容易なものとなる。
【００２５】本発明に係る請求項１１の画像情報管理用
記録装置は、上記請求項１０において、分類情報を画像
圧縮符号化データのヘッダのユーザーデータ領域に記録
するように構成してあることを特徴としている。ヘッダ
のユーザーデータ領域は、ＭＰＥＧなどの場合に予めオ
ペレータにとって特定位置であると分かっているので、
画像情報管理用再生装置で復号するときに付加された分
類情報の検索が容易となる。
【００２６】本発明に係る請求項１２の画像情報管理用
記録装置は、上記請求項７から請求項９までのいずれか
において、動画像ビットストリームを生成する際に読み
出された画像圧縮符号化データに対してその分類識別子
に対応した分類用部分画像データを生成する分類用部分
画像データ生成手段と、生成された分類用部分画像デー
タを読み出された画像圧縮符号化データに対してスーパ
ーインポーズ的に付加する分類用部分画像データ付加手
段とを備え、動画像ビットストリーム記録手段に分類用
部分画像付きの動画像ビットストリームを記録するよう
に構成してあることを特徴としている。分類識別子と分
類内順序番号とで決まる優先順位を伴いかつ検索補助用
の分類用部分画像がスーパーインポーズ的に付加された
分類用部分画像付きの動画像ビットストリームを生成
し、記録することができる。そして、このような分類用
部分画像付きの動画像ビットストリームを記録しておけ
ば、画像情報管理用再生装置によって画像を検索すると
きに、静止画像が動画像として分類ごとに順番に、しか
も検索補助用の分類用部分画像も併せて再生されること
になるため、粗い検索すなわち高速検索を行っても内容
の把握が容易なものとなる。
【００２７】本発明に係る請求項１３の画像情報管理用
記録装置は、上記請求項１２において分類用部分画像デ
ータが色付き矩形枠画像データとして構成されているこ
とを特徴としている。検索補助用の分類用部分画像とし
て画像圧縮符号化データの画像の周辺を取り囲む形態の
色付き矩形枠画像を画像圧縮符号化データに付加するこ
とができる。検索再生のときにも色付き矩形枠は目立ち
やすい。
【００２８】本発明に係る請求項１４の画像情報管理用
記録装置は、上記請求項７から請求項９までのいずれか
において、動画像ビットストリームを生成する際に読み
出された画像圧縮符号化データに対してその分類識別子
に対応した色相の分類用ラベル色データを生成する分類
用ラベル色生成手段と、生成された分類用ラベル色デー
タに対応した１マクロブロック分の分類用ラベル色ビッ
トストリームを生成する分類用ラベル色ビットストリー
ム生成手段と、生成された分類用ラベル色ビットストリ
ームを画像圧縮符号化データにおける第１ラインあるい
は最終ラインの先頭マクロブロックとして付加する分類
用ラベル色ビットストリーム付加手段とを備え、動画像
ビットストリーム記録手段に分類用ラベル色ビットスト
リーム付きの動画像ビットストリームとして記録するよ
うに構成してあることを特徴としている。分類識別子と
分類内順序番号とで決まる優先順位を伴いかつ検索補助
用の分類用ラベル色ビットストリームが付加された動画
像ビットストリームを生成し、記録することができる。
そして、請求項１２の場合のような色付き矩形枠画像デ
ータを生成する必要がなく、単に分類用ラベル色を指定
するビットストリームを生成し、その分類用ラベル色ビ
ットストリームを第１ラインあるいは最終ラインの先頭
マクロブロックとして付加するだけでよいから、請求項
１２の場合に比べて、処理量が少なくてすみ、処理速度
をより速くでき、またメモリ容量も削減できる。また、
このような分類用ラベル色ビットストリーム付きの動画
像ビットストリームを記録しておけば、画像情報管理用
再生装置によって画像を検索するときに、静止画像が動
画像として分類ごとに順番に、しかも検索補助用の分類
用ラベル色画像が画面の上辺または下辺に沿った帯状で
再生されることになるため、粗い検索すなわち高速検索
を行っても内容の把握が容易なものとなる。
【００２９】本発明に係る請求項１５の画像情報管理用
記録装置は、上記請求項７から請求項９までのいずれか
において、画像分類手段は所定の要件に従って静止画像
を分類し、同じ分類の静止画像群を同じＧＯＰ（グルー
プオブピクチャ；ＭＰＥＧで規定されている符号化単
位）としてまとめるために、その静止画画像データに分
類識別子を付けるように構成されており、かつ、動画像
ビットストリームを生成する際に読み出された画像圧縮
符号化データに対してその分類識別子に対応したＧＯＰ
ヘッダに設定するための分類用ＧＯＰスタートコードを
生成する分類用ＧＯＰスタートコード生成手段と、生成
された分類用ＧＯＰスタートコードを画像圧縮符号化デ
ータにおけるＧＯＰヘッダに付加する分類用ＧＯＰスタ
ートコード付加手段とを備え、動画像ビットストリーム
記録手段に分類用ＧＯＰスタートコード付きの動画像ビ
ットストリームとして記録するように構成してあること
を特徴としている。分類識別子と分類内順序番号とで決
まる優先順位を伴いかつ検索補助用の分類用ＧＯＰスタ
ートコードが付加された動画像ビットストリームを生成
し、記録することができる。その分類用ＧＯＰスタート
コードの生成および付加の処理は比較的簡単に行える。
そして、このような分類用ＧＯＰスタートコード付きの
動画像ビットストリームを記録しておけば、画像情報管
理用再生装置によって画像を検索するときに、ある分類
のシーンのＧＯＰの動画像ビットストリームを再生して
いる途中で、別の任意の分類のシーンにジャンプしたい
場合には、分類用ＧＯＰスタートコードの設定によりラ
ンダムアクセスして素早くジャンプすることができる。
【００３０】本発明に係る請求項１６の画像情報管理用
記録装置は、上記請求項７から請求項９までのいずれか
において、動画像ビットストリームを生成する際に読み
出された画像圧縮符号化データに付随している分類識別
子に対応した分類用音声データを生成する分類用音声デ
ータ生成手段と、生成された分類用音声データを圧縮符
号化して分類用音声圧縮符号化データを生成する分類用
音声データ符号化手段と、動画像符号化手段からの画像
圧縮符号化データと前記分類用音声データ符号化手段か
らの分類用音声圧縮符号化データとを多重化して画像・
分類用音声多重化データを生成する画像・音声多重化手
段と、動画像ビットストリーム記録手段に代えて、生成
された画像・分類用音声多重化データを所定の時間軸方
向での並び順序に従って読み出して分類用音声圧縮符号
化データ付きの動画像ビットストリームとして記録して
おく動画像・音声ビットストリーム記録手段とを備えた
ことを特徴としている。分類識別子と分類内順序番号と
で決まる優先順位を伴いかつ時系列的に変化する検索補
助用の音楽や歌唱や人の声などの分類用音声圧縮符号化
データを伴った動画像ビットストリームを生成し、記録
することができる。そして、このような時系列的に変化
する分類用音声圧縮符号化データを伴った動画像ビット
ストリームを記録しておけば、画像情報管理用再生装置
によって画像を検索するときに、分類された画像ごとに
別々に対応した時系列的に変化する音楽や歌唱や人の声
などが同時に再生され、その音声の切り換わりを参照し
て画像の分類の切り換わりを判断することができるか
ら、オペレータはその検索補助用の音楽や歌唱や人の声
などを聞いて、画像再生の的確に行うことができる。
【００３１】本発明に係る請求項１７の画像情報管理用
記録装置は、上記請求項１から請求項１６までのいずれ
かにおいて、動画像ビットストリーム記録手段が画像デ
ータ記憶手段をもって兼用されていることを特徴として
いる。記録媒体の兼用により、スペース面・コスト面で
有利となる。
【００３２】本発明に係る請求項１８の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べかつ画像圧縮符号化データご
とに検索補助用の音声圧縮符号化データが多重化された
状態の動画像・音声ビットストリームが記憶されている
画像データ記憶手段から前記の動画像・音声ビットスト
リームを入力して解析する動画像ビットストリーム解析
手段と、前記動画像・音声ビットストリームを動画像ビ
ットストリームと音声ビットストリームとに分離する動
画像／音声分離手段と、分離された動画像ビットストリ
ームを解析結果に従って復号化して画像データを再生す
る動画像復号化手段と、再生された画像データを表示す
る表示手段と、分離された音声ビットストリームを解析
結果に従って復号化して音声データを再生する音声復号
化手段と、再生された音声データを出力する音声出力手
段とを備えたことを特徴としている。静止画像の検索再
生に際して、従来の技術の場合のような記録媒体に散在
している静止画像をディレクトリをいちいち探りながら
検索する場合に比べると、予め複数の静止画像を選択
し、時間軸方向に沿って並べかつ音声圧縮符号化データ
が多重化された動画像・音声ビットストリームとして再
生するので、ブラウジング（通覧、流し見）を行うこと
ができ、効率良く画像を検索することができる。加え
て、多重化していた検索補助用の音声圧縮符号化データ
が分離されて検索補助用音声として出力されるから、そ
の音声を手掛かりにして静止画像の検索を効率良く行う
ことができる。
【００３３】本発明に係る請求項１９の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べかつ画像圧縮符号化データご
とに分類情報が付加された状態の動画像ビットストリー
ムが記憶されている画像データ記憶手段から前記の動画
像ビットストリームを入力して解析する動画像ビットス
トリーム解析手段と、動画像ビットストリームを解析結
果に従って復号化して画像データを再生する動画像復号
化手段と、再生された画像データを表示する表示手段と
を備えた画像情報管理用再生装置であって、検索しよう
とする分類に係る分類情報を指定する分類情報指定手段
と、前記動画像ビットストリーム解析手段の解析の結果
割り出された分類情報が前記指定した分類情報と一致す
るか否かを判定し一致するときに入力している動画像ビ
ットストリームの復号化を許可する分類情報判定手段と
を備えたことを特徴としている。静止画像の検索再生に
際して、従来の技術の場合のような記録媒体に散在して
いる静止画像をディレクトリをいちいち探りながら検索
する場合に比べると、予め複数の静止画像を選択し、時
間軸方向に沿って並べた動画像ビットストリームとして
再生するので、ブラウジング（通覧、流し見）を行うこ
とができ、効率良く画像を検索することができる。そし
て、オペレータが検索したい分類情報を設定した場合に
は、その設定した分類情報に従って分類情報付き動画像
ビットストリームの画像圧縮符号化データを抽出し自動
的に復号化するので、設定した特定の分類の静止画像を
動画像の状態で再生することとなり、すべての静止画像
を再生する必要がなくなり、検索したい画像を素早く見
つけ出すことができる。
【００３４】本発明に係る請求項２０の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べかつ画像圧縮符号化データご
とに色付き矩形枠画像データが多重化された状態の動画
像ビットストリームが記憶されている画像データ記憶手
段から前記の動画像ビットストリームを入力して解析す
る動画像ビットストリーム解析手段と、動画像ビットス
トリームを解析結果に従って復号化して画像データを再
生する動画像復号化手段と、再生された画像データを表
示する表示手段とを備えた画像情報管理用再生装置であ
って、検索しようとする分類に係る分類色情報を指定す
る分類色情報指定手段と、前記動画像ビットストリーム
解析手段の解析の結果割り出された色付き矩形枠画像デ
ータの分類色情報が前記指定した分類色情報と一致する
か否かを判定し一致するときに入力している動画像ビッ
トストリームの復号化を許可する分類色情報判定手段と
を備えたことを特徴としている。静止画像の検索再生に
際して、従来の技術の場合のような記録媒体に散在して
いる静止画像をディレクトリをいちいち探りながら検索
する場合に比べると、予め複数の静止画像を選択し、時
間軸方向に沿って並べた動画像ビットストリームとして
再生するので、ブラウジング（通覧、流し見）を行うこ
とができ、効率良く画像を検索することができる。そし
て、オペレータが検索したい分類色情報を設定した場合
には、その設定した分類色情報に従って色付き矩形枠画
像データ付きの動画像ビットストリームの画像圧縮符号
化データを抽出し自動的に復号化するので、設定した特
定の分類の静止画像を動画像の状態で再生することとな
り、すべての静止画像を再生する必要がなくなり、検索
したい画像を素早く見つけ出すことができる。
【００３５】本発明に係る請求項２１の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べかつ画像圧縮符号化データに
おける第１ライン先頭マクロブロックに分類用ラベル色
ビットストリームが付加された状態の動画像ビットスト
リームが記憶されている画像データ記憶手段から前記の
動画像ビットストリームを入力して解析する動画像ビッ
トストリーム解析手段と、動画像ビットストリームを解
析結果に従って復号化して画像データを再生する動画像
復号化手段と、再生された画像データを表示する表示手
段とを備えた画像情報管理用再生装置であって、検索し
ようとする分類に係るラベル色情報を指定する分類用ラ
ベル色指定手段と、前記動画像ビットストリーム解析手
段の解析の結果割り出された第１ライン先頭マクロブロ
ックのラベル色情報が前記指定したラベル色情報と一致
するか否かを判定し一致するときに入力している動画像
ビットストリームの第１ライン先頭マクロブロックの復
号化を許可するラベル色情報判定手段と、許可があった
ときに分離された動画像ビットストリームの第１ライン
先頭マクロブロックのみを復号化する動画像１マクロブ
ロック復号化手段とを備えたことを特徴としている。静
止画像の検索再生に際して、従来の技術の場合のような
記録媒体に散在している静止画像をディレクトリをいち
いち探りながら検索する場合に比べると、予め複数の静
止画像を選択し、時間軸方向に沿って並べた動画像ビッ
トストリームとして再生するので、ブラウジング（通
覧、流し見）を行うことができ、効率良く画像を検索す
ることができる。そして、オペレータが検索したいラベ
ル色情報を設定した場合には、その設定したラベル色情
報に従って第１ライン先頭マクロブロックに分類用ラベ
ル色ビットストリームが付加された状態の動画像ビット
ストリームの第１ライン先頭マクロブロックを抽出し自
動的に復号化するので、設定した特定の分類の静止画像
が再生タイミングにきたときに帯状の分類用ラベル色画
像を表示することとなり、すべての静止画像を再生する
必要がなくなるので、検索したい画像を素早く見つけ出
すことができる。
【００３６】本発明に係る請求項２２の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べた状態の動画像ビットストリ
ームが記憶されている画像データ記憶手段から前記の動
画像ビットストリームを入力して解析する動画像ビット
ストリーム解析手段と、動画像ビットストリームを解析
結果に従って復号化して画像データを再生する動画像復
号化手段と、再生された画像データを表示する表示手段
とを備えた画像情報管理用再生装置であって、検索マー
ク情報を書き込みたいフレームの時間軸方向位置を指定
する検索マーク書込位置指定手段と、動画像ビットスト
リーム解析手段の解析結果によって現在入力しているフ
レームの時間軸方向位置と前記検索マーク書込位置指定
手段に設定した時間軸方向位置とが一致したときに各フ
レームの画像圧縮符号化データのユーザーデータ領域の
抽出を行うユーザーデータ領域抽出手段と、抽出したユ
ーザーデータ領域に検索マーク情報を書き込む検索マー
ク書込手段と、再度の検索再生時に前記のユーザーデー
タ領域に書き込まれている検索マーク情報を検出して動
画像ビットストリームの復号化を許可する検索マーク検
出手段とを備えたことを特徴としている。再度の検索再
生のときに再び見たい画像があるときの検索マーク情報
を該当する１フレームに相当する画像圧縮符号化データ
のユーザーデータ領域に書き込むように構成したので、
検索マーク情報の書き込み作業が、検索マーク情報をビ
ットストリームとして付加していた従来の技術に比べて
はるかに簡単で短時間で処理でき、再度の検索再生のと
きには、検索マーク情報の検出に基づいて見たいと思っ
ている画像へとジャンプして再生することができ、検索
再生の作業性を向上することができる。
【００３７】本発明に係る請求項２３の画像情報管理用
再生装置は、上記請求項２２において、検索マーク書込
手段が複数種類の検索マーク情報の中から任意の検索マ
ーク情報を選択してユーザーデータ領域に書き込むよう
に構成されていることを特徴としている。複数の検索マ
ーク情報が書き込まれている動画像ビットストリームに
対して、検索マーク情報の種類を指定することにより、
他の検索マーク情報が書き込まれているフレームを飛ば
して、指定した検索マーク情報が書き込まれているフレ
ームへとジャンプして再生を開始することができ、検索
再生の作業性を一層向上することができる。
【００３８】本発明に係る請求項２４の画像情報管理用
再生装置は、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べた状態の動画像ビットストリ
ームが記憶されている画像データ記憶手段から前記の動
画像ビットストリームを入力して解析する動画像ビット
ストリーム解析手段と、動画像ビットストリームを解析
結果に従って復号化して画像データを再生する動画像復
号化手段と、再生された画像データを表示する表示手段
とを備えた画像情報管理用再生装置であって、検索マー
ク用音声情報を多重化したいフレームの時間軸方向位置
を指定する検索マーク書込位置指定手段と、検索マーク
用の音声データを入力する音声データ入力手段と、入力
した音声データを圧縮符号化する音声符号化手段と、前
記画像データ記憶手段から読み出した動画像ビットスト
リームの画像圧縮符号化データに前記の音声圧縮符号化
データを多重化する画像・音声多重化手段とを備え、前
記動画像ビットストリーム解析手段はその解析結果によ
って現在入力しているフレームの時間軸方向位置と前記
検索マーク書込位置指定手段に設定した時間軸方向位置
とが一致したときに前記画像・音声多重化手段を起動し
てそのフレームの画像圧縮符号化データに対して音声圧
縮符号化データを多重化し、その検索マーク用音声情報
の圧縮符号化データを多重化した動画像ビットストリー
ムを前記画像データ記憶手段に格納するように構成され
ていることを特徴としている。再度の検索再生のときに
再び見たい画像があるときの検索マーク用音声情報を該
当するフレームの画像圧縮符号化データに多重化して改
めて画像データ記憶手段に動画像ビットストリームとし
て更新的に格納したので、検索再生時に検索マーク用音
声情報を聞きながら再生でき、見落としのない正確な画
像検索を高速に行うことができる。
【００３９】本発明に係る請求項２５の画像情報管理用
記録・再生装置は、上記の請求項１から請求項１７まで
に記載のいずれかの画像情報管理用記録装置の機能と、
請求項１８から請求項２４までに記載のいずれかの画像
情報管理用再生装置の機能とを一体化してあることを特
徴としている。記録装置の機能による作用と再生装置の
機能による作用とを併せ有することができる。
【００４０】以下、本発明に係る画像情報管理用記録装
置の具体的な実施の形態について、図面に基づいて詳細
に説明する。画像情報管理用再生装置の実施の形態につ
いては後述する。
【００４１】〔実施の形態１〕順序は逆になるが、実施
の形態１は請求項２に対応するものである。請求項１に
対応する実施の形態２は後述する。図１は実施の形態１
に係る画像情報管理用記録装置の構成を示すブロック図
である。図１において、１０１は装置全体の制御を司る
制御手段、１０２はその制御のためのプログラムを格納
しているプログラム格納手段、１０３はワーキングメモ
リとして機能するワーキングメモリ手段、１０４は画像
データを蓄積するための例えばハードディスクや半導体
メモリで構成される画像データ記憶手段、１０５は画像
データを外部から入力するための画像データ入力手段、
１０６は映像信号受信手段、１０７は電話回線につなが
るモデム、１０８はインターネットなどのネットワーク
から画像データを含むディジタルデータを入力するため
のネットワーク接続手段、１０９は画像データの表示用
に画像データの１フレーム分を一時的に格納するための
フレームバッファ手段、１１０はＣＲＴやＬＣＤなどの
表示手段、１１１は表示制御手段、１１２はオペレータ
が入力操作を行うキーボードやマウスで構成される入力
操作手段、１１３は画像選択手段、１１４は画像順序決
定手段、１１５は動画像符号化手段、１１６は動画像ビ
ットストリーム記録手段、１１７は各手段をつないでデ
ータのやりとりを行うバスである。
【００４２】画像データ入力手段１０５は、磁気ディス
ク・光磁気ディスク・ハードディスク・磁気テープ・Ｃ
Ｄ−Ｉ・ビデオＣＤ・フォトＣＤ・ＣＤ−ＲＯＭ・レー
ザーディスク・ＤＶＤ・ＣＤ−Ｒなどの蓄積メディアの
再生装置（ドライブ）から画像データを入力するもので
あり、映像信号受信手段１０６はデジタルテレビ放送・
ＣＡＴＶなどの放送メディアからの画像データを入力す
るものであり、モデム１０７は電話回線を介してのパソ
コン通信によって画像データなどを入出力するためもの
であり、ネットワーク接続手段１０８はインターネット
などの通信メディアから画像データを含んだディジタル
データを入力するものである。インターネットの場合は
ＨＴＭＬ（Hyper Text Markup Language）形式によるフ
ァイル中で画像が扱われる。画像データ入力手段１０
５、映像信号受信手段１０６、モデム１０７またはネッ
トワーク接続手段１０６から入力した画像データは、一
旦、画像データ記憶手段１０４に転送されて記憶され、
その画像データ記憶手段１０４から読み出されてフレー
ムバッファ手段１０９を介して表示手段１１０に表示さ
れる場合もあるし、入力された直後に１フレームずつが
ダイレクトにフレームバッファ手段１０９を介して表示
手段１１０に表示される場合もある。
【００４３】表示制御手段１１１は、入力操作手段１１
２からの指示に基づいて画像データ記憶手段１０４をア
クセスして、必要な画像データをフレームバッファ手段
１０９に転送する機能をもつ。その転送に際して、画素
の間引きを行って子画面表示することも可能である。
【００４４】画像選択手段１１３は、オペレータが表示
手段１１０に表示された１フレームずつの画像データを
見て、動画像ビットストリームの構成要素とすることを
決めたときの入力操作手段１１２からの指示に基づい
て、その表示されている画像データを選択し、画像デー
タ記憶手段１０４に格納されている画像データの場合は
その選択静止画画像データのアドレス（静止画ファイル
格納番号変数Ｎ）を記憶し、また、画像データ記憶手段
１０４に格納されていない画像データを選択した場合は
その画像データを画像データ記憶手段１０４に格納する
とともにその選択静止画画像データのアドレスを記憶す
るものである。
【００４５】画像順序決定手段１１４は、画像データ記
憶手段１０４に格納されている動画像ビットストリーム
の構成要素とすべき静止画画像データを１フレームずつ
読み出して、動画像ビットストリームにおける順番（フ
レーム順序番号Ｘすなわち時間軸方向での並び順序）を
付加して、画像データ記憶手段１０４から圧縮符号化の
ために読み出すときに動画像ビットストリームの構成要
素として読み出し順序を決定するものである。あるい
は、画像データ記憶手段１０４から複数フレームの選択
静止画画像データのうちの任意の複数の選択静止画画像
データを読み出して（例えば選択静止画画像データが２
００フレームある場合に２５フレームを読み出して）表
示制御手段１１１において間引き処理を行ってフレーム
バッファ手段１０９を介して表示手段１１０に複数の画
像データを例えば５×５＝２５の子画面に子画面表示し
た状態で、どの画像データを何番目にするかを決定する
ときに、入力操作手段１１２からの指示に基づいて該当
する画像データの静止画ファイル格納番号変数Ｎに対し
てフレーム順序番号Ｘを付加した場合に、画像データ記
憶手段１０４から圧縮符号化のために読み出すときに動
画像ビットストリームの構成要素として読み出し順序を
決定するものである。
【００４６】読み出し順序は、全体としての動画像ビッ
トストリームが最終的に完成するまでは正確には決まら
ないため、最初はきわめて大雑把に決めていく。このよ
うな複数の画像データの２５の子画面への表示を繰り返
し行い、次第に細かく読み出し順序を決めていく。この
過程において、同じ画像データが何回も繰り返して読み
出し表示されることがある。フレーム順序番号を変更す
るときには、入力操作手段１１２からの指示によって行
う。
【００４７】動画像符号化手段１１５は、前記のフレー
ム順序番号Ｘに従って画像データ記憶手段１０４から該
当する静止画ファイル格納番号変数Ｎの静止画画像デー
タを読み込んで圧縮符号化して動画像ビットストリーム
の構成要素である画像圧縮符号化データを生成してバッ
ファエリアに一時的に格納しておくものであり、動画像
ビットストリーム記録手段１１６は生成された画像圧縮
符号化データをフレーム順序番号Ｘの順次に従って読み
出して動画像ビットストリームとして記録しておくもの
である。ただし、動画像ビットストリームを画像データ
記憶手段１０４に記録する場合もある。
【００４８】例えば、図２（ａ）に示すように最初に２
５個の子画面の選択静止画画像データＡ1 〜Ａ25を表示
したとする。そして、画像順序決定手段１１４により、
静止画ファイル格納番号変数Ｎが互いに異なる各選択静
止画画像データＡ1 〜Ａ25に飛び飛びのフレーム順序番
号Ｘを付け、それらの選択静止画画像データを動画像ビ
ットストリーム記録手段１１６のバッファエリアに一時
的に格納しておく。次に、図２（ｂ）に示すように、再
び選択静止画画像データＡ1 〜Ａ18と選択静止画画像デ
ータＢ1 〜Ｂ7 を子画面表示し、画像順序決定手段１１
４により、選択静止画画像データＡ13とＡ14の間に選択
静止画画像データＢ1 〜Ｂ7 を挿入するように、選択静
止画画像データＢ1 〜Ｂ7 に選択静止画画像データＡ13
よりも大きく選択静止画画像データＡ14よりも小さいや
はり飛び飛びのフレーム順序番号Ｘを付け、それらの選
択静止画画像データを動画像ビットストリーム記録手段
１１６のバッファエリアに一時的に格納しておく。さら
に、図２（ｃ）に示すように、選択静止画画像データＡ
6 〜Ａ13と選択静止画画像データＢ1 〜Ｂ7 と選択静止
画画像データＣ1 〜Ｃ5 と選択静止画画像データＤ1 〜
Ｄ5 とを子画面表示し、画像順序決定手段１１４によ
り、選択静止画画像データＡ9 とＡ10の間に選択静止画
画像データＣ1 〜Ｃ5 を挿入しかつ選択静止画画像デー
タＢ4 とＢ5 の間に選択静止画画像データＤ1 〜Ｄ5 を
挿入するように、選択静止画画像データＣ1 〜Ｃ5 に選
択静止画画像データＡ9 よりも大きく選択静止画画像デ
ータＡ10よりも小さいフレーム順序番号Ｘを付けるとと
もに、選択静止画画像データＤ1〜Ｄ5 に選択静止画画
像データＢ4 よりも大きく選択静止画画像データＢ5 よ
りも小さいフレーム順序番号Ｘを付け、それらの選択静
止画画像データを動画像ビットストリーム記録手段１１
６のバッファエリアに一時的に格納しておく。そして、
例えば以上で動画像ビットストリーム１０００を完結さ
せたとすると、動画像ビットストリーム記録手段１１６
において動画像ビットストリーム生成完結の処理を行
う。その結果として、動画像ビットストリーム１０００
の構成要素であるフレーム順序番号が付けられた画像デ
ータが動画像ビットストリーム記録手段１１６に図３の
ように記録されたことになる。つまり、フレーム順序番
号Ｘをタイムカウンタとして動画像ビットストリーム１
０００の構成要素の画像データを時間軸方向に並べるこ
とになる。その様子をもう少し分かりやすく示すと、図
４のようになる。動画像ビットストリーム１０００を構
成する画像データ（静止画）がフレーム順序番号Ｘ（時
間軸方向での並び順序）を基準として昇順に並べられて
いる。なお、このあとでも、フレーム順序番号の空いて
いるタイムカウンタの箇所に任意の選択静止画画像デー
タを挿入することができる。なお、動画像ビットストリ
ームを画像データ記憶手段１０４に記録してもよい。
【００４９】次に、以上のように構成された実施の形態
１に係る画像情報管理用記録装置の動作を図５〜図８の
フローチャートに従って説明する。
【００５０】入力操作手段１１２からの指示により動画
像ビットストリーム生成モードが起動されると、ステッ
プＳ１１からの動作が開始される。ステップＳ１１にお
いて制御手段１０１は静止画ファイル格納番号変数Ｎを
イニシャルして“１”にセットする（Ｎ←１）。オペレ
ータは、画像データ記憶手段１０４をアクセスして画像
データ記憶手段１０４に蓄積されている画像ファイルを
読み出して表示するファイルアクセスモードか、画像デ
ータ入力手段１０５・映像信号受信手段１０６・モデム
１０７・ネットワーク接続手段１０８からの画像データ
を直接に表示手段１１０に表示するダイレクト表示モー
ドかを入力操作手段１１２によって指示する。ステップ
Ｓ１２において制御手段１０１はファイルアクセスモー
ドか否かを判断し、ファイルアクセスモードであるとき
は後述するステップＳ２１に進むが、ファイルアクセス
モードでないときはステップＳ１３に進み、ダイレクト
表示モードか否かを判断し、そうでないときはステップ
Ｓ１２に戻るが、ダイレクト表示モードであるときはス
テップＳ１４に進んで表示制御手段１１１をダイレクト
表示モードに設定する。オペレータは表示手段１１０の
画面に表示されている画像（動画像または静止画）を見
ながら、必要と思われる画像が表示されたときは、その
時点での表示画面をフリーズする指示を入力操作手段１
１２により与える。ステップＳ１５において表示制御手
段１１１は表示画面をフリーズするか否かを判断し、し
ないときはステップＳ１４に戻ってダイレクト表示を継
続するが、フリーズするときはステップＳ１６に進んで
表示画面をフリーズするようにフレームバッファ手段１
０９を制御する。オペレータはフリーズされた画面を見
て、ファイリングする画像データとして選択すべきか否
かを判断し、選択するときは選択の指示を入力操作手段
１１２より与え、選択しないときは続行の指示を与え
る。ステップＳ１７において制御手段１０１はフリーズ
された画像データを選択するか否かを判断し、選択しな
いときはステップＳ１８に進んで制御手段１０１は表示
制御手段１１１に指令を与え、表示制御手段１１１はフ
レームバッファ手段１０９を制御して入力画像のダイレ
クト表示を再開し、ステップＳ１５に戻る。選択すると
きはステップＳ１９に進んで制御手段１０１は画像選択
手段１１３に指令を与え、画像選択手段１１３はフリー
ズした画像データをフレームバッファ手段１０９から静
止画画像データのファイルとして画像データ記憶手段１
０４に転送し、格納する。オペレータはダイレクト表示
モードにおいて必要な静止画画像データを次々と選択し
て取り込んでいく。ダイレクト表示モードを終わりにし
たいときは入力操作手段１１２から終了の指示を与え
る。ステップＳ２０において制御手段１０１はダイレク
ト表示モードを終了するか否かを判断し、まだ終了しな
いときはステップＳ１８に進んで前記と同様に表示制御
手段１１１はフレームバッファ手段１０９を制御して入
力画像のダイレクト表示を再開し、ステップＳ１５に戻
る。ステップＳ２０の判断においてダイレクト表示モー
ドを終了することとなったときはステップＳ１２に戻
る。
【００５１】ステップＳ１２の判断においてファイルア
クセスモードが指示されているときはステップＳ２１に
進み、表示制御手段１１１をファイルアクセスモードに
設定する。ステップＳ２２において制御手段１０１は表
示制御手段１１１を駆動し、表示制御手段１１１は画像
データ記憶手段１０４をアクセスして静止画ファイル格
納番号変数Ｎ（Ａ1 ，Ｂ1 など）に対応する静止画画像
データＮ（最初はＮ＝１：ステップＳ１１でイニシャル
されている）を読み出し、フレームバッファ手段１０９
を介して表示手段１１０に表示する。オペレータは表示
された画面を見て、動画像ビットストリームの構成要素
の静止画画像データとして選択すべきか否かを判断し、
選択するときは選択の指示を入力操作手段１１２より与
え、選択しないときは非選択の指示を与える。ステップ
Ｓ２３において制御手段１０１は現在、表示されている
静止画画像データの画像ファイルを選択するか否かを判
断し、選択しないときはステップＳ２４に進んで静止画
ファイル格納番号変数Ｎをインクリメント（Ｎ←Ｎ＋
１）し、ステップＳ２２に戻る。今度は、Ｎ＝２の静止
画画像データが表示される。ステップＳ２３の判断にお
いて表示されている静止画画像データの画像ファイルを
選択するときはステップＳ２５に進み、画像選択手段１
１３はその選択した画像ファイルの静止画ファイル格納
番号変数Ｎを記憶する。ステップＳ２６において画像デ
ータ記憶手段１０４に格納されているすべての画像ファ
イルについて読み出し表示が終了したか否かを判断し、
終了していないときはステップＳ２４に進んで静止画フ
ァイル格納番号変数Ｎをインクリメントしてからステッ
プＳ２２に戻り、以下同様の動作を繰り返す。
【００５２】ステップＳ２６の判断において画像データ
記憶手段１０４に格納されているすべての画像ファイル
について読み出し表示が終了したときはステップＳ２７
に進み、画像選択手段１１３に記憶されている動画像ビ
ットストリームの構成要素の静止画画像データとして選
択されたすべての静止画ファイル格納番号変数Ｎの画像
ファイルのファイル名を表示手段１１０に表示する。こ
こでオペレータは、動画像ビットストリームの構成要素
として選択された画像ファイルの画像データの複数のフ
レームを表示手段１１０において子画面表示することを
入力操作手段１１２によって指示することができる。ス
テップＳ２８において制御手段１０１は子画面表示の指
示があったか否かを判断し、なかったときはステップＳ
３４に進むが、あったときはステップＳ２９に進み、制
御手段１０１は表示制御手段１１１を駆動して画像デー
タ記憶手段１０４をアクセスするとともにフレームバッ
ファ手段１０９を制御し、５×５＝２５の選択された画
像データを表示手段１１０において子画面表示する。な
お、子画面分割数は任意であり、４×４＝１６でも、３
×３＝９でも、その他でもよい。また、必要に応じて切
り換えるようにしておくのが好ましい。オペレータは子
画面表示の必要がなくなったときは、入力操作手段１１
２によりそのモードを解除する。オペレータは子画面表
示を見て、どの画像ファイルを動画像ビットストリーム
のどの位置に配するかを考える。そして、各画像ファイ
ルについて入力操作手段１１２によりフレーム順序番号
を付けていく。必要でないものにはフレーム順序番号を
付けない。ステップＳ３０において子画面表示モードの
中止または終了があったか否かを判断し、ないときはス
テップＳ３１に進んで動画像ビットストリームの構成要
素として選択された画像ファイルの静止画ファイル格納
番号変数Ｎに対してフレーム順序番号Ｘを付けるか否か
を判断する。付けないときはステップＳ３３に進んで次
の５×５＝２５の選択静止画画像データの子画面表示の
状態へとインクリメントし、ステップＳ２９に戻る。な
お、ステップＳ３３の子画面表示のインクリメントにお
いては、現在表示されている２５個の静止画画像データ
のうち静止画ファイル格納番号変数Ｎが最も小さいもの
を消去し、最も大きいものの次のものを新たに付け加え
るようなインクリメントでもよい。選択静止画画像デー
タの静止画ファイル格納番号変数Ｎに対してフレーム順
序番号Ｘを付けたときはステップＳ３２に進んで、制御
手段１０１は画像順序決定手段１１４を起動し、画像順
序決定手段１１４は静止画ファイル格納番号変数Ｎに対
応させてフレーム順序番号Ｘを付け、その対応関係を記
憶する。これは、選択静止画画像データのファイル名だ
けではフレーム順序番号Ｘを付けるのがむずかしいとき
などに選択静止画画像データの子画面表示を行って静止
画を目視確認しながらフレーム順序番号Ｘを付けていく
場合である。
【００５３】ここで、図２との対応関係を説明すると、
静止画ファイル格納番号変数ＮはＡ1 〜Ａ25，Ｂ1 〜Ｂ
7 ，Ｃ1 〜Ｃ5 ，Ｄ1 〜Ｄ5 等であり、フレーム順序番
号Ｘはそれぞれに割り当てられた１０００とか１１００
とかの数値である。ステップＳ３２の次にステップＳ３
３に進んで子画面表示のインクリメントを行い、ステッ
プＳ２９に戻る。
【００５４】オペレータが子画面表示モードを中止した
とき、および子画面表示のインクリメントすべての選択
静止画画像データについて終了したとき、ステップＳ３
０の判断がＹＥＳとなってステップＳ２７に進み、画像
選択手段１１３に記憶されている選択されたすべての静
止画ファイル格納番号変数Ｎの画像ファイルのファイル
名を表示手段１１０に表示する状態に戻る。そして、ス
テップＳ２８の判断がＮＯとなったときは、ステップＳ
３４に進む。オペレータは表示された選択静止画画像デ
ータのファイル名を見て、どの画像ファイルを動画像ビ
ットストリームのどの位置に配するかを考え、各画像フ
ァイルについて入力操作手段１１２によりフレーム順序
番号を付けていく。必要でないものにはフレーム順序番
号を付けない。すなわち、ステップＳ３４において画像
順序決定手段１１４は静止画ファイル格納番号変数Ｎに
対応させてフレーム順序番号Ｘを付け、その対応関係を
記憶する（図２参照）。これは、選択静止画画像データ
の子画面表示を行わずにファイル名だけを見てフレーム
順序番号Ｘを付けていく場合である。
【００５５】ステップＳ３５においてフレーム順序番号
を付ける作業が終了したかどうかを判断する。終了して
いないときはステップＳ２８に戻る。オペレータは入力
操作手段１１２の操作により任意の時点でその作業を終
了することができる。すると、ステップＳ３６に進むこ
とになる。また、すべての選択静止画画像データの画像
ファイルについてフレーム順序番号を付ける作業が終了
したときは自動的にステップＳ３６に進む。
【００５６】ステップＳ３６において制御手段１０１は
画像順序決定手段１１４と動画像符号化手段１１５と動
画像ビットストリーム記録手段１１６とを起動し、ステ
ップＳ３７において画像順序決定手段１１４はそれに記
録されている静止画ファイル格納番号変数Ｎに対応した
フレーム順序番号Ｘに従って画像データ記憶手段１０４
から対応する静止画ファイル格納番号変数Ｎの静止画画
像データを読み出して動画像符号化手段１１５に転送
し、ステップＳ３８において動画像符号化手段１１５は
読み込んだ画像データをＭＰＥＧ等に準拠して圧縮符号
化して、その画像圧縮符号化データをハードディスクの
バッファエリアに一時的に格納する。なお、このときの
ハードディスクとしては、専用のものを用いてもよい
し、画像データ記憶手段１０４を兼用してもよい。ま
た、ハードディスクに代えて半導体メモリを用いてもよ
い。
【００５７】次のステップＳ３９において次のフレーム
順序番号Ｘの未圧縮符号化データがあるか否かを判断
し、あるときはステップＳ４０に進んで次のフレーム順
序番号Ｘを設定して、ステップＳ３７に戻る。以下、同
様にして、各静止画ファイル格納番号変数Ｎに対応した
フレーム順序番号Ｘの順に従って読み出した静止画ファ
イル格納番号変数Ｎの選択静止画画像データを圧縮符号
化して、その画像圧縮符号化データのハードディスクや
半導体メモリのバッファエリアへの一時的格納を繰り返
していく。ステップＳ３９の判断において次のフレーム
順序番号Ｘがなくなったときは、ステップＳ４１に進ん
で動画像ビットストリーム記録手段１１６はハードディ
スクや半導体メモリのバッファエリアに一時的に格納し
ているすべての画像圧縮符号化データをフレーム順序番
号Ｘの順に読み出して、ハードディスクや半導体メモリ
にフレーム順序番号Ｘを伴った動画像ビットストリーム
として格納し、格納が終了すると、すべての動作を終了
する。以上により、動画像ビットストリームの構成要素
として選択した画像ファイルが図３および図４に示すよ
うな動画像ビットストリーム１０００として生成され、
動画像ビットストリーム記録手段１１６に記録されたこ
とになる。なお、図２（ａ）〜（ｃ）から図３にかけて
示した、選択静止画画像データ中への別の選択静止画画
像データの挿入は、ステップＳ２７からステップＳ３５
にかけて実行されるのである。
【００５８】以上のことから、本実施の形態１に係る画
像情報管理用記録装置によれば次のような効果がある。
画像データ記憶手段１０４において散在している複数の
静止画画像データ（動画像の構成要素である各フレーム
を含めた広い意味での静止画像：この定義は本明細書の
全体を通じて一貫したものとする）を任意に選択し、時
間軸を基準として任意の順序に並べた１つの動画像ビッ
トストリーム１０００としてまとめ、そのまとめた動画
像ビットストリーム１０００を記録しておくことができ
る。特に、動画像ビットストリームの構成要素としての
静止画像を選択する際に、候補となる静止画像を表示手
段１１０に表示してオペレータが目視確認しながら選択
することができるので、静止画像の選択において無駄や
間違いがなく、効率良く動画像ビットストリームを生成
することができる。静止画像についての定義上、この動
画像ビットストリームには、１つの動画像における複数
シーンを含ませたり、複数の動画像を含ませたりするこ
ともある。なお、画像データ記憶手段１０４に記憶され
る静止画画像データとしては、各種の蓄積メディアから
取得したものや各種の放送メディア・通信メディアから
取得したものがある。インターネットのブラウジング時
のホームページおよびリンクされた関連ページを静止画
像として関連ごとにまとめて記録することも可能であ
る。あるいは、最初から特定の静止画画像データを専用
に格納してある画像データ記憶手段１０４を使用するよ
うにしてもよい。また、静止画画像データを圧縮符号化
しているから、動画像ビットストリームの記憶のための
記憶容量は相対的に少なくてよい。そして、このように
オペレータが任意の静止画像を選択し時間軸方向に沿っ
て適宜に並べて生成された動画像ビットストリームを記
録しておけば、後述するような画像情報管理用再生装置
によって検索する際に低速でも高速でもブラウジング
（通覧、流し見）が可能となる。圧縮符号化の方式は限
定するものではないが、ＭＰＥＧやＤＶなどの既存の圧
縮符号化方式を採用すれば、再生に際して既存のハード
ウエアデコーダやソフトウエアデコーダを利用すること
が可能となる。ネットワーク接続手段１０８を介して得
られるＨＴＭＬのファイルの中で出現する画像データの
順序に応じてフレーム順序番号を付けて、ＭＰＥＧの動
画像ビットストリームとしてまとめることもできる。複
数の画像データを１つの動画像ビットストリームにまと
めることにより、ネットワーク上での画像データの交換
が容易になる。また、現在の電子メールはテキストファ
イルのみの単純なものであるが、画像ファイルを用いて
メールシステムを構成すると、表現力豊かな電子メール
をやりとりすることができるようになる。このとき、画
像データを同時に送る必要があるが、ＭＰＥＧの動画像
ビットストリームとしてまとめておくことにより、伝送
すべきファイルの容量を削減することが可能となる。
【００５９】なお、上記の実施の形態１に係る画像情報
管理用記録装置では、生成された動画像ビットストリー
ム１０００の記録先として専用の動画像ビットストリー
ム記録手段１１６を設けたが、動画像ビットストリーム
記録手段１１６としては画像データ記憶手段１０４を兼
用してもよい。
【００６０】〔実施の形態２〕実施の形態２は請求項１
に対応するものである。本実施の形態２が実施の形態１
と異なる点は、静止画画像データの人為的な選択を行う
ことなく、画像データ記憶手段に格納されているすべて
の静止画画像データを動画像ビットストリームの構成要
素とすることである。
【００６１】図９は実施の形態２に係る画像情報管理用
記録装置の構成を示すブロック図である。図９におい
て、符号１０１から１０５までと１１２から１１７まで
については図１（実施の形態１）の構成と同様であり、
簡単に説明すると、１０１は制御手段、１０２はプログ
ラム格納手段、１０３はワーキングメモリ手段、１０４
は画像データ記憶手段、１０５は画像データ入力手段、
１１２は入力操作手段、１１３は画像選択手段、１１４
は画像順序決定手段、１１５は動画像符号化手段、１１
６は動画像ビットストリーム記録手段、１１７はバスで
ある。画像データ入力手段１０５は、磁気ディスク・光
磁気ディスク・ハードディスク・磁気テープ・ＣＤ−Ｉ
・ビデオＣＤ・フォトＣＤ・ＣＤ−ＲＯＭ・レーザーデ
ィスク・ＤＶＤ・ＣＤ−Ｒなどの蓄積メディアの再生装
置（ドライブ）から画像データを入力し、画像データ記
憶手段１０４に転送するものである。画像データ記憶手
段１０４はその転送された画像データを格納する。画像
選択手段１１３は、画像データ記憶手段１０４から静止
画画像データを静止画ファイル格納番号変数Ｎの順にす
べて読み出してそれぞれに対して連続したフレーム順序
番号Ｘを付するように構成されている。なお、画像デー
タ入力手段１０５を省略する場合もあり得る。それは、
画像データ記憶手段１０４が着脱交換式のもので、外部
で特定の画像データを入力した画像データ記憶手段１０
４をバス１１７に接続するような場合である。実施の形
態１（図１）の場合の映像信号受信手段１０６、パソコ
ン通信のモデム１０７、ネットワーク接続手段１０８、
フレームバッファ手段１０９、表示手段１１０、表示制
御手段１１１は必ずしも必要ではない。ただし、映像信
号受信手段１０６、パソコン通信のモデム１０７、ネッ
トワーク接続手段１０８は付加しておいて、画像データ
を画像データ記憶手段１０４に取り込むようにしてもよ
い。
【００６２】次に、以上のように構成された実施の形態
２に係る画像情報管理用記録装置の動作を図１０のフロ
ーチャートに従って説明する。
【００６３】入力操作手段１１２からの指示により動画
像ビットストリーム生成モードが起動されると、ステッ
プＳ５１からの動作が開始される。ステップＳ５１にお
いて制御手段１０１は静止画ファイル格納番号変数Ｎお
よびフレーム順序番号Ｘをイニシャルして“１”にセッ
トする（Ｎ←１、Ｘ←１）。ステップＳ５２において制
御手段１０１は画像選択手段１１３と画像順序決定手段
１１４と動画像符号化手段１１５と動画像ビットストリ
ーム記録手段１１６とを起動し、ステップＳ５３におい
て制御手段１０１は画像データ記憶手段１０４をアクセ
スして静止画ファイル格納番号変数Ｎに対応する静止画
画像データＮ（最初はＮ＝１：ステップＳ５１でイニシ
ャルされている）を読み出し、ステップＳ５４において
画像選択手段１１３は読み出した静止画画像データを動
画像ビットストリームの構成要素の静止画画像データと
して選択し、ステップＳ５５において画像順序決定手段
１１４は静止画ファイル格納番号変数Ｎに対応させてフ
レーム順序番号Ｘ（最初はＸ＝１で、これは具体的には
１００１となる）を付け、その対応関係を記憶する。ス
テップＳ５６において画像順序決定手段１１４は読み出
している静止画画像データを動画像符号化手段１１５に
転送し、ステップＳ５７において動画像符号化手段１１
５は読み込んだ画像データをＭＰＥＧ等に準拠して圧縮
符号化して、その画像圧縮符号化データをハードディス
クのバッファエリアに一時的に格納する。なお、このと
きのハードディスクとしては、専用のものを用いてもよ
いし、画像データ記憶手段１０４を兼用してもよい。ま
た、ハードディスクに代えて半導体メモリを用いてもよ
い。
【００６４】次のステップＳ５８において画像データ記
憶手段１０４に格納されているすべての画像ファイルに
対する処理が終了したか否かを判断し、終了していない
ときはステップＳ５９に進んで制御手段１０１は静止画
ファイル格納番号変数Ｎおよびフレーム順序番号Ｘをそ
れぞれインクリメントし（Ｎ←Ｎ＋１，Ｘ←Ｘ＋１）、
ステップＳ５３に戻り、以下、同様にして、各静止画フ
ァイル格納番号変数Ｎに昇順でフレーム順序番号Ｘを付
けながら、選択静止画画像データを圧縮符号化して画像
圧縮符号化データを生成し、その画像圧縮符号化データ
のハードディスクや半導体メモリのバッファエリアへの
一時的格納を繰り返していく。ステップＳ５８の判断に
おいて格納されているすべての画像ファイルに対する処
理が終了したときは、ステップＳ６０に進んで動画像ビ
ットストリーム記録手段１１６はハードディスクや半導
体メモリのバッファエリアに一時的に格納しているすべ
ての画像圧縮符号化データをフレーム順序番号Ｘの順に
読み出して、ハードディスクや半導体メモリにフレーム
順序番号Ｘを伴った動画像ビットストリームとして格納
し、格納が終了すると、すべての動作を終了する。以上
により、動画像ビットストリームの構成要素として選択
したすべての画像ファイルが図１１、図１２に示すよう
な動画像ビットストリーム１０００として生成され、動
画像ビットストリーム記録手段１１６に記録されたこと
になる。
【００６５】画像データ記憶手段１０４に記憶されてい
るすべての静止画画像データがその静止画ファイル格納
番号変数Ｎの順に従って（Ａ1 ，Ａ2 ……Ａ41，Ａ
42…）にそれぞれ対応して、連続のフレーム順序番号Ｘ
（１００１，１００２……１０４２，１０４３…）を付
けられて動画像ビットストリーム１０００となる。
【００６６】以上のことから、本実施の形態２に係る画
像情報管理用記録装置によれば次のような効果がある。
画像データ記憶手段１０４において散在しているすべて
の静止画像（動画像の構成要素である各フレームを含め
た広い意味での静止画像）をフレーム順序番号Ｘの順番
ひいては静止画ファイル格納番号変数Ｎの順番に選択
し、時間軸を基準としてそのフレーム順序番号Ｘ（静止
画ファイル格納番号変数Ｎ）の順序に並べた１つの動画
像ビットストリーム１０００としてまとめ、そのまとめ
た動画像ビットストリーム１０００を記録しておくこと
ができる。静止画像についての定義上、この動画像ビッ
トストリームには、１つの動画像における複数シーンを
含ませたり、複数の動画像を含ませたりすることもあ
る。また、静止画画像データを圧縮符号化しているか
ら、動画像ビットストリームの記憶のための記憶容量は
相対的に少なくてよい。そして、このように画像データ
記憶手段１０４に格納されているすべての静止画像を選
択し時間軸方向に沿って順番に並べて生成された動画像
ビットストリームを記録しておけば、後述するような画
像情報管理用再生装置によって検索する際に低速でも高
速でもブラウジングが可能となる。圧縮符号化の方式は
限定するものではないが、ＭＰＥＧやＤＶなどの既存の
圧縮符号化方式を採用すれば、再生に際して既存のデコ
ーダを利用することが可能となる。
【００６７】なお、上記の実施の形態２に係る画像情報
管理用記録装置では、生成された動画像ビットストリー
ム１０００の記録先として専用の動画像ビットストリー
ム記録手段１１６を設けたが、動画像ビットストリーム
記録手段１１６としては画像データ記憶手段１０４を兼
用してもよい。
【００６８】本実施の形態２の特徴は、必ずしも表示手
段１１０を必要としないという点にある。
【００６９】〔実施の形態３〕実施の形態３は請求項３
に対応するものである。実施の形態３の特徴は選択した
静止画画像データを、それに画素間間引き処理を行って
から符号化する点にある。
【００７０】図１３は実施の形態３に係る画像情報管理
用記録装置の構成を示すブロック図である。図１３にお
いて符号１０１から１１７までについては図１（実施の
形態１）の構成と同様であり、簡単に説明すると、１０
１は制御手段、１０２はプログラム格納手段、１０３は
ワーキングメモリ手段、１０４は画像データ記憶手段、
１０５は画像データ入力手段、１０６は映像信号受信手
段、１０７はモデム、１０８はネットワーク接続手段、
１０９はフレームバッファ手段、１１０は表示手段、１
１１は表示制御手段、１１２は入力操作手段、１１３は
画像選択手段、１１４は画像順序決定手段、１１５は動
画像符号化手段、１１６は動画像ビットストリーム記録
手段、１１７はバスである。そして、符号の１１８は選
択されてフレーム順序番号Ｘが付けられた静止画ファイ
ル格納番号変数Ｎの静止画画像データを画像データ記憶
手段１０４から読み出して動画像符号化手段１１５に渡
す前に、その読み出した静止画画像データに対して画素
間間引き処理を行う画素間引き手段である。
【００７１】本実施の形態３に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートと基本的には同じであるが、ステップ
Ｓ３６〜Ｓ３８が異なる。その異なる部分を図１４の部
分フローチャートに従って説明する。
【００７２】図８に示すステップＳ３５の次のステップ
Ｓ３６ａにおいて画像順序決定手段１１４、動画像符号
化手段１１５、動画像ビットストリーム記録手段１１６
および画素間引き手段１１８を起動する。そして、次の
ステップＳ３７ａにおいて画像順序決定手段１１４はそ
れに記録されている静止画ファイル格納番号変数Ｎに対
応したフレーム順序番号Ｘに従って画像データ記憶手段
１０４から対応する静止画画像データを読み出して画素
間引き手段１１８に転送する。ステップＳ３７ｂにおい
て画素間引き手段１１８は読み出した静止画画像データ
に対して画素間間引き処理を実行し、動画像符号化手段
１１５に転送する。例えば、６４０×４８０画素を１／
４に間引いて３２０×２４０画素とし、動画像符号化手
段１１５に転送する。画素間引き処理には、間引き処理
用のフィルタを用いる。次に、ステップＳ３８ａにおい
て動画像符号化手段１１５は読み込んだ画素間間引き処
理後の静止画画像データをＭＰＥＧ等に準拠して圧縮符
号化して、その画像圧縮符号化データをハードディスク
のバッファエリアに一時的に格納する。なお、このとき
のハードディスクとしては、専用のものを用いてもよい
し、画像データ記憶手段１０４を兼用してもよい。ま
た、ハードディスクに代えて半導体メモリを用いてもよ
い。次は、実施の形態１（図８）と同様にステップＳ３
９からステップＳ４０またはステップＳ４１へと進む。
【００７３】本実施の形態３の技術を実施の形態２に適
用してもよい。そのときの動作については、図１０のス
テップＳ５６，Ｓ５７を図１４のステップＳ３７ａ，Ｓ
３７ｂ，Ｓ３８ａと置き換えればよい。
【００７４】本実施の形態３に係る画像情報管理用記録
装置によれば、動画像符号化手段１１５による圧縮符号
化において、対象の静止画画像データが予め画素間引き
処理されているので、その圧縮符号化の処理を高速に行
うことができる。また、図１４のステップＳ４１または
図１０のステップＳ６０においてフレーム順序番号Ｘを
伴った動画像ビットストリームをハードディスクや半導
体メモリに格納する際の容量を削減することができる。
また、その他の効果として実施の形態１の場合と同様の
効果が発揮される。
【００７５】〔実施の形態４〕実施の形態４は請求項４
に対応するものである。実施の形態４の特徴は、選択し
た静止画画像データの複数枚をマルチ画面の１フレーム
としてまとめた状態で動画像ビットストリームを生成す
る点にある。
【００７６】図１５は実施の形態４に係る画像情報管理
用記録装置の構成を示すブロック図である。図１５にお
いて符号１０１から１１８までについては図１３（実施
の形態３）の構成と同様であり、簡単に説明すると、１
０１は制御手段、１０２はプログラム格納手段、１０３
はワーキングメモリ手段、１０４は画像データ記憶手
段、１０５は画像データ入力手段、１０６は映像信号受
信手段、１０７はモデム、１０８はネットワーク接続手
段、１０９はフレームバッファ手段、１１０は表示手
段、１１１は表示制御手段、１１２は入力操作手段、１
１３は画像選択手段、１１４は画像順序決定手段、１１
５は動画像符号化手段、１１６は動画像ビットストリー
ム記録手段、１１７はバス、１１８は画像データ記憶手
段１０４から読み出した静止画画像データに対して画素
間間引き処理を行う画素間引き手段である。そして、符
号１１９は表示手段１１０のフル画面に相当するサイズ
の静止画画像データについて画素間間引き処理を行った
複数枚分の静止画画像データあるいは元からフル画面よ
りも小さいサイズの複数枚分の静止画画像データを合成
してマルチ画面の１フレームとしてまとめるマルチ画面
画像データ生成手段である。
【００７７】本実施の形態４に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートと基本的には同じであるが、ステップ
Ｓ３６〜Ｓ４０が異なる。その異なる部分を図１６、図
１７の部分フローチャートに従って説明する。
【００７８】図８に示すステップＳ３５の次のステップ
Ｓ３６ｂにおいて制御手段１０１は画像順序決定手段１
１４、動画像符号化手段１１５、動画像ビットストリー
ム記録手段１１６、画素間引き手段１１８およびマルチ
画面画像データ生成手段１１９を起動する。そして、次
のステップＳ３７ｃにおいて画像順序決定手段１１４は
それに記録されている静止画ファイル格納番号変数Ｎに
対応したフレーム順序番号Ｘの順に従って縦ｍ個、横ｎ
個の合計ｍ×ｎ個の静止画画像データを画像データ記憶
手段１０４から読み出す。図１８に、読み出されたｍ×
ｎ個の静止画画像データの一例を示す。図示の例ではｍ
＝２、ｎ＝３で、２×３となっている。フレーム順序番
号Ｘは仮に飛び飛びであっても、昇順となっていて、後
のものは必ず前のものよりも大きい番号となっていると
いう意味では連続している。ステップＳ３７ｄにおいて
画素間間引き処理が必要な静止画画像データがあるか否
かを判断する。画素間間引き処理が必要でないときはス
テップＳ３７ｇに進むが、画素間間引き処理が必要なと
きは、ステップＳ３７ｅに進んでその処理が必要な静止
画画像データを画素間引き手段１１８に転送する。ステ
ップＳ３７ｆにおいて画素間引き手段１１８は読み込ん
だ間引き処理の必要な静止画画像データに対して画素間
間引き処理を実行し、ステップＳ３７ｄに戻る。まだ、
間引き処理が必要な静止画画像データがあれば同様の動
作を繰り返すが、もう間引き処理の必要な静止画画像デ
ータがないときはステップＳ３７ｇに進み、画像順序決
定手段１１４はｍ×ｎ個の静止画画像データをマルチ画
面画像データ生成手段１１９に転送する。ステップＳ３
７ｈにおいてマルチ画面画像データ生成手段１１９はｍ
×ｎ個の静止画画像データをまとめて１フレーム分の静
止画画像データに合成し、合成したマルチ画面の静止画
画像データを動画像符号化手段１１５に転送する。次
に、ステップＳ３８ｂにおいて動画像符号化手段１１５
は読み込んだマルチ画面の静止画画像データをＭＰＥＧ
等に準拠して圧縮符号化して、その画像圧縮符号化デー
タをハードディスクのバッファエリアに一時的に格納す
る。なお、このときのハードディスクとしては、専用の
ものを用いてもよいし、画像データ記憶手段１０４を兼
用してもよい。また、ハードディスクに代えて半導体メ
モリを用いてもよい。次のステップＳ３９において次の
フレーム順序番号Ｘの未圧縮符号化データがあるか否か
を判断し、あるときはステップＳ４０ａに進んで次のｍ
×ｎ個の静止画画像データに対応したフレーム順序番号
Ｘを設定し、ステップＳ３７ｃに戻る。以下、同様にし
て、ｍ×ｎ個のマルチ画面の静止画画像データ１フレー
ム分の静止画画像データに合成する処理を繰り返してい
く。ステップＳ３９の判断において次のフレーム順序番
号Ｘがなくなったときは、ステップＳ４１ａに進んで動
画像ビットストリーム記録手段１１６はハードディスク
や半導体メモリのバッファエリアに一時的に格納してい
るすべての画像圧縮符号化データをマルチ画面のフレー
ム順序番号Ｙの順に読み出して、ハードディスクや半導
体メモリにフレーム順序番号Ｙを伴った動画像ビットス
トリームとして格納し、格納が終了すると、すべての動
作を終了する。以上により、動画像ビットストリームの
構成要素として選択したマルチ画面の画像ファイルが図
１９および図２０に示すような動画像ビットストリーム
１０００として生成され、動画像ビットストリーム記録
手段１１６に記録されたことになる。ここで、Ｈ1 ，Ｈ
2 等はｍ×ｎ個が１フレーム分にまとめられた静止画画
像データのファイル格納番号変数であり、各１フレーム
がマルチ画面のフレーム順序番号Ｙを新たに付与されて
いる。各静止画ファイル格納番号変数Ｈは、それぞれｍ
×ｎ個の元のフレーム順序番号Ｘをもっていることにな
る。なお、動画像ビットストリームを画像データ記憶手
段１０４に記録してもよい。
【００７９】なお、ｍ×ｎのｍおよびｎの値は任意であ
る。また、入力操作手段１１２よりｍおよびｎを値を設
定できるようにしてもよい。
【００８０】本実施の形態４の技術を実施の形態２に適
用してもよい。そのときの動作については、図１０のス
テップＳ５６〜Ｓ６０を図１６、図１７のフローのよう
に置き換えればよい。
【００８１】本実施の形態４に係る画像情報管理用記録
装置によれば、複数の静止画画像データを１フレーム分
としてまとめたマルチ画面の静止画画像データの形態で
動画像ビットストリーム１０００を生成することができ
る。パソコン通信やインターネットなどの通信メディア
から取得する画像データは必ずも表示手段１１０の画面
に対してフル画面の画像データとはなっていないことが
ある。そのような場合には、複数の静止画画像データを
１フレーム分にまとめて扱うことができるようになる。
画像データ入力手段１０５で得られる画像データの場合
も同様である。表示手段１１０の画面に対してフル画面
の画像データの場合には、それ自体で１フレーム分であ
るので、画素間引き手段１１８に転送して画素間間引き
処理を行ってから他の複数の静止画画像データとまとめ
ることになる。
【００８２】このようにして複数の静止画画像データを
１フレーム分にまとめた状態で生成した動画像ビットス
トリームは、後述するような画像情報管理用再生装置に
よって高速または低速でブラウジング（通覧）するとき
に、一度に閲覧できる静止画の数が増えるので、画像の
検索効率が向上する。画素間間引き処理を行ったとき
は、記憶容量の削減に貢献できる。
【００８３】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【００８４】〔実施の形態５〕実施の形態５は請求項５
に対応するものである。実施の形態５の特徴は、隣り合
う選択静止画画像データの画素値の差分が所定値以下の
ときに動画像画面間圧縮符号化を行うようにした点にあ
る。
【００８５】図２１は実施の形態５に係る画像情報管理
用記録装置の構成を示すブロック図である。図２１にお
いて符号１０１から１１４までと１１６，１１７につい
ては図１（実施の形態１）の構成と同様であり、簡単に
説明すると、１０１は制御手段、１０２はプログラム格
納手段、１０３はワーキングメモリ手段、１０４は画像
データ記憶手段、１０５は画像データ入力手段、１０６
は映像信号受信手段、１０７はモデム、１０８はネット
ワーク接続手段、１０９はフレームバッファ手段、１１
０は表示手段、１１１は表示制御手段、１１２は入力操
作手段、１１３は画像選択手段、１１４は画像順序決定
手段、１１６は動画像ビットストリーム記録手段、１１
７はバスである。そして、符号１１５ａは動画像画面内
符号化手段、１１５ｂは動画像画面間符号化手段、１２
０は画像データ記憶手段１０４から読み出された互いに
隣り合う選択静止画画像データの画面間差分Δαを生成
する画面間差分生成手段、１２１は生成された画面間差
分Δαを所定値α0 と大小比較する画面間差分評価手
段、１２２は評価の結果、Δα＞α0 のときは動画像画
面内圧縮符号化を選択し、Δα≦α0 のときは動画像画
面間圧縮符号化を選択する画面内／画面間選択手段であ
る。なお、本明細書でいう画面内圧縮符号化および画面
間圧縮符号化は、ＭＰＥＧの場合には、その規格でいう
フレーム内圧縮符号化、フレーム間圧縮符号化のことで
ある。
【００８６】本実施の形態５に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートと基本的には同じで、ステップＳ１〜
Ｓ３５は同じであるが、ステップＳ３５の次のステップ
から異なる。その異なる部分を図２２の部分フローチャ
ートに従って説明する。
【００８７】図８に示すステップＳ３５の次のステップ
Ｓ７１において画像順序決定手段１１４は記憶している
静止画ファイル格納番号変数Ｎに対応したフレーム順序
番号Ｘに従って画像データ記憶手段１０４から互いに隣
り合うＸとＸ＋１の２つの選択静止画画像データを読み
出し、画面間差分生成手段１２０に転送する。ステップ
Ｓ７２において制御手段１０１は画面間差分生成手段１
２０を起動し、フレーム順序番号Ｘに従って隣り合う２
つの選択静止画画像データの画面間差分Δαを生成す
る。ステップＳ７３において制御手段１０１は画面間差
分評価手段１２１を起動し、画面間差分Δαを所定値α
0 と大小比較する。ステップＳ７４において画面間差分
Δαが所定値α0 以下（Δα≦α0 ）のときは高いデー
タ圧縮が期待できるのでステップＳ７５に進んで画面内
／画面間選択手段１２２は画面間圧縮符号化を選択す
る。そして、ステップＳ７６において制御手段１０１は
動画像画面間符号化手段１１５ｂを起動し、隣り合うＸ
とＸ＋１の２つの選択静止画画像データのうち後者の静
止画画像データをＭＰＥＧ等に準拠して画面間圧縮符号
化し、画像圧縮符号化データをハードディスクや半導体
メモリのバッファエリアに一時的に格納し、ステップＳ
７９に進む。また、ステップＳ７４の判断において画面
間差分Δαが所定値α0 よりも大きい（Δα＞α0 ）と
きはあまり高いデータ圧縮は期待できないのでステップ
Ｓ７７に進んで画面内／画面間選択手段１２２は画面内
圧縮符号化を選択する。そして、ステップＳ７８におい
て制御手段１０１は動画像画面内符号化手段１１５ａを
起動し、隣り合うＸとＸ＋１の２つの選択静止画画像デ
ータのうち後者の静止画画像データをＭＰＥＧ等に準拠
して画面内圧縮符号化し、画像圧縮符号化データをハー
ドディスクや半導体メモリのバッファエリアに一時的に
格納し、ステップＳ７９に進む。次のステップＳ７９に
おいて次のフレーム順序番号Ｘの未圧縮符号化データが
あるか否かを判断し、あるときはステップＳ８０に進ん
で次のフレーム順序番号Ｘを設定して、ステップＳ７１
に戻る。以下、同様にして、各静止画ファイル格納番号
変数Ｎに対応したフレーム順序番号Ｘの順に従って読み
出した隣り合う２つの選択静止画画像データの画面間差
分Δαをとり、その画面間差分Δαが所定値α0 以下か
所定値α0 よりも大きいかに従って画面間圧縮符号化あ
るいは画面内圧縮符号化を選択し圧縮符号化を行い、そ
れらの画像圧縮符号化データのハードディスクや半導体
メモリのバッファエリアへの一時的格納を繰り返してい
く。ステップＳ７９の判断において次のフレーム順序番
号Ｘがなくなったときは、ステップＳ８１に進んで動画
像ビットストリーム記録手段１１６はハードディスクや
半導体メモリのバッファエリアに一時的に格納している
すべての画像圧縮符号化データをフレーム順序番号Ｘの
順に読み出して、ハードディスクや半導体メモリにフレ
ーム順序番号Ｘを伴った動画像ビットストリームとして
格納し、格納が終了すると、すべての動作を終了する。
以上により、動画像ビットストリームの構成要素として
選択した画像ファイルで構成され、画面間圧縮符号化を
伴っている可能性のある動画像ビットストリームが生成
され、動画像ビットストリーム記録手段１１６に記録さ
れたことになる。なお、動画像ビットストリームを画像
データ記憶手段１０４に記録してもよい。
【００８８】本実施の形態５の技術を実施の形態２に適
用してもよい。そのときの動作については、図１０のス
テップＳ５６〜Ｓ６０を図２２のフローのように置き換
えればよい。
【００８９】以上のことから、本実施の形態５に係る画
像情報管理用記録装置によれば、フレーム順序番号Ｘの
順序に従って読み出された隣り合う２つの選択静止画画
像データの画面間差分Δαが所定値α0 以下のときは画
面間圧縮符号化を行って高いデータ圧縮を行うので、動
画像ビットストリーム記録手段１１６に記録するときの
容量が少なくてすむ。
【００９０】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【００９１】〔実施の形態６〕実施の形態６は請求項６
に対応するものである。実施の形態６の特徴は、１フレ
ーム分ずつの選択静止画画像データに対して検索補助用
の音声データを付加した動画像・音声ビットストリーム
を記録するようにした点にある。
【００９２】図２３は実施の形態６に係る画像情報管理
用記録装置の構成を示すブロック図である。図２３にお
いて符号１０１から１１５までと１１７については図１
（実施の形態１）の構成と同様であり、簡単に説明する
と、１０１は制御手段、１０２はプログラム格納手段、
１０３はワーキングメモリ手段、１０４は画像データ記
憶手段、１０５は画像データ入力手段、１０６は映像信
号受信手段、１０７はモデム、１０８はネットワーク接
続手段、１０９はフレームバッファ手段、１１０は表示
手段、１１１は表示制御手段、１１２は入力操作手段、
１１３は画像選択手段、１１４は画像順序決定手段、１
１５は動画像符号化手段、１１７はバスである。そし
て、符号の１２３は音声データ入力手段、１２４は音声
符号化手段、１２５は画像・音声多重化手段、１１６ａ
は動画像・音声ビットストリーム記録手段である。音声
データ入力手段１２３は例えばマイクロフォンから入力
した人の声や何らかの音または声のデータ、あるいはＣ
Ｄプレーヤなどを再生したときの音楽などの音声のデー
タを入力するものであり、出力する段階ではディジタル
の音声データとなっている。音声符号化手段１２４は音
声データ入力手段１２３より読み込んだ音声データをサ
ンプリングし、選択静止画画像データのフレーム順序番
号Ｘに合わせて同じフレーム順序番号Ｘを付加した上
で、ＭＰＥＧ等に準拠して圧縮符号化して音声圧縮符号
化データを生成し、バッファエリアに格納するものであ
る。画像・音声多重化手段１２５は、バッファエリアか
らフレーム順序番号Ｘの画像圧縮符号化データと同じフ
レーム順序番号Ｘの音声圧縮符号化データとを読み出
し、両圧縮符号化データを多重化して画像・音声多重化
データを生成し、それをバッファエリアに一時格納する
ものである。動画像・音声ビットストリーム記録手段１
１６ａはバッファエリアに一時格納している画像・音声
多重化データをフレーム順序番号Ｘの順序で読み出し
て、ハードディスクや半導体メモリにフレーム順序番号
Ｘを伴った動画像・音声ビットストリームとして格納す
るものである。なお、音声データ入力手段１２３から入
力する音声データとしては、例えば、選択静止画画像デ
ータが「山の景色」を表すものである場合に、ＣＤプレ
ーヤで再生した「山」を連想させるような音楽でもよい
し、その雰囲気に見合った曲でもよいし、あるいはオペ
レータが適当に決めたジャンルの曲でもよいし、あるい
はオペレータの肉声で「山です」のようなメッセージで
もよい。
【００９３】本実施の形態６に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートと基本的には同じで、ステップＳ１〜
Ｓ３５は同じであるが、ステップＳ３５の次のステップ
から異なる。また、並列処理される音声データ処理のス
テップが必要となる。その異なる部分を図２４の部分フ
ローチャートに従って説明する。
【００９４】図８に示すステップＳ３５の次のステップ
Ｓ９１において画像順序決定手段１１４は記憶している
静止画ファイル格納番号変数Ｎに対応したフレーム順序
番号Ｘに従って画像データ記憶手段１０４から対応する
選択静止画画像データを読み出し、動画像符号化手段１
１５に転送する。ステップＳ９２において動画像符号化
手段１１５は読み込んだフレーム順序番号Ｘの静止画画
像データをＭＰＥＧ等に準拠して圧縮符号化して画像圧
縮符号化データを生成し、それをバッファエリアに一時
的に格納する。
【００９５】一方、並列処理として音声データの処理が
ある。ステップＳ１００において音声符号化手段１２４
は音声データ入力手段１２３より読み込んだ検索補助用
の音声データをサンプリングし、ステップＳ１０１にお
いて音声符号化手段１２４はサンプリングした音声デー
タに現在のフレーム順序番号Ｘを付加した上で、ＭＰＥ
Ｇ等に準拠して圧縮符号化して音声圧縮符号化データを
生成し、それをバッファエリアに一時的に格納する。
【００９６】なお、画像圧縮符号化データや音声圧縮符
号化データの一時格納に用いるバッファエリアとして
は、専用のハードディスクを用いてもよいし、専用の半
導体メモリを用いてもよい。さらに、画像データ記憶手
段１０４の空きエリアを利用してもよい。
【００９７】ステップＳ９３において画像・音声多重化
手段１２５はバッファエリアからフレーム順序番号Ｘの
画像圧縮符号化データと同じフレーム順序番号Ｘの検索
補助用の音声圧縮符号化データとを同期をとって読み出
し、両データを多重化して画像・音声多重化データを生
成し、前記のバッファエリアに一時的に格納する。
【００９８】次のステップＳ９４において次のフレーム
順序番号Ｘの未圧縮符号化データがあるか否かを判断
し、あるときはステップＳ９５に進んで次のフレーム順
序番号Ｘを設定するとともに、入力音声データについて
次の音声データのサンプリングに移るように設定して、
一方ではステップＳ９１に戻り、他方ではステップＳ１
００に戻る。
【００９９】以下、同様にして、フレーム順序番号Ｘを
更新しながら、選択静止画画像データからの画像圧縮符
号化データの生成と、サンプリング音声データからの検
索補助用の音声圧縮符号化データの生成と、同一のフレ
ーム順序番号Ｘの画像圧縮符号化データと音声圧縮符号
化データとの多重化による画像・音声多重化データの生
成およびその画像・音声多重化データのハードディスク
や半導体メモリのバッファエリアへの一時的格納を繰り
返していく。ステップＳ９４の判断において次のフレー
ム順序番号Ｘがなくなったときは、ステップＳ１１０に
進んで動画像・音声ビットストリーム記録手段１１６ａ
はハードディスクや半導体メモリのバッファエリアに一
時的に格納しているすべての画像・音声多重化データを
フレーム順序番号Ｘの順に読み出して、ハードディスク
や半導体メモリにフレーム順序番号Ｘを伴った動画像・
音声ビットストリームとして格納し、格納が終了する
と、すべての動作を終了する。以上により、動画像・音
声ビットストリームの構成要素として選択した音声デー
タ付きの画像ファイルが図２５に示すような動画像・音
声ビットストリーム１０００ａとして生成され、動画像
・音声ビットストリーム記録手段１１６ａに記録された
ことになる。なお、なお、動画像・音声ビットストリー
ムを画像データ記憶手段１０４に記録してもよい。
【０１００】図２５は実施の形態１の場合の図４の動画
像ビットストリーム１０００に対して検索補助用の音声
データを１フレーム単位で付加したものに相当する。例
えば、１フレームの静止画１に対応して音声１が付加さ
れており、１フレームの静止画２に対応して音声２が付
加されており、１フレームの静止画２０に対応して音声
２０が付加されている。
【０１０１】本実施の形態６の技術を実施の形態２に適
用してもよい。そのときの動作については、図１０のス
テップＳ５６〜Ｓ６０を図２４のフローのように置き換
えればよい。この場合は、ステップＳ９５はフレーム順
序番号Ｘの単純なインクリメントでよい（Ｘ←Ｘ＋
１）。
【０１０２】以上のことから、本実施の形態６に係る画
像情報管理用記録装置によれば、１フレーム分ずつの選
択静止画画像データに対して検索補助用の音声データを
付加した動画像・音声ビットストリーム１０００ａを記
録することができる。そして、このような動画像・音声
ビットストリームを記録しておけば、後述するような画
像情報管理用再生装置によって画像を検索するときに同
時に音声も再生することにより、その再生された音声を
検索補助用の音声として利用することが可能となる。例
えば、高速検索時に「山」を連想させるような音楽が聞
こえてきたり、「山です」というメッセージ音声が聞こ
えてきたときには、オペレータはその検索補助用の音声
を聞いて、画像再生の速度をスローダウンさせたり停止
させたりするといった具合に便利に利用することができ
る。
【０１０３】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１０４】〔実施の形態７〕実施の形態７は請求項７
〜請求項９に対応するものである。実施の形態７の特徴
は、多数の静止画像を所定の要件に従って分類してから
圧縮符号化を行うようにした点にある。
【０１０５】図２６は実施の形態７に係る画像情報管理
用記録装置の構成を示すブロック図である。図２６にお
いて符号１０１から１１７までについては図１（実施の
形態１）の構成と同様であり、簡単に説明すると、１０
１は制御手段、１０２はプログラム格納手段、１０３は
ワーキングメモリ手段、１０４は画像データ記憶手段、
１０５は画像データ入力手段、１０６は映像信号受信手
段、１０７はモデム、１０８はネットワーク接続手段、
１０９はフレームバッファ手段、１１０は表示手段、１
１１は表示制御手段、１１２は入力操作手段、１１３は
画像選択手段、１１４は画像順序決定手段、１１５は動
画像符号化手段、１１６は動画像ビットストリーム記録
手段、１１７はバスである。そして、符号の１２６は画
像分類手段である。画像分類手段１２６は、静止画画像
データに対してフレーム順序番号Ｘを付けるに際して、
所定の要件（例えば、画像の種類やオペレータの好みな
ど）に従って静止画像を分類し、その静止画画像データ
に分類番号を付け、画像順序決定手段１１４との協働に
より個々の分類番号の種別内で分類内順序番号を付ける
ものである。
【０１０６】例えば、図２７に示すように、Ａ1 ，Ａ2
…，Ｂ1 ，Ｂ2 …，Ｃ1 ，Ｃ2 …，Ｄ1 ，Ｄ2 …，Ｅ
1 ，Ｅ2 …，Ｆ1 ，Ｆ2 ……のように一連の画像ファイ
ルが複数種類あって、これらが画像データ記憶手段１０
４に格納されている。そして、これらの画像ファイルの
個々の静止画画像データを所定の要件に従って分類する
こととする。例えば、風景・ドラマのシーン・音楽の演
奏または歌唱のシーン・タレントや俳優や歌手の画像・
絵画・その他に分類する。そして、それぞれに分類番号
９００ａとして、分類識別子γ１，γ２，γ３，γ４，
γ５…を付けていく。さらに、個々の静止画画像データ
について各分類識別子γ１，γ２，γ３，γ４，γ５…
それぞれの中で分類内順序番号９００ｂを付けていく。
分類識別子γ１は分類識別子γ２よりも優先順位が高
く、分類識別子γ２は分類識別子γ３よりも優先順位が
高く、以下同様にして、優先順位は、γ１＞γ２＞γ３
＞γ４＞γ５＞…となっている。より具体的には、選択
静止画画像データＡ1 ，Ａ2 ，Ａ3 …については分類番
号９００ａとしてそれぞれに分類識別子γ２を付けた上
で分類内順序番号９００ｂとしてそれぞれに４００，４
１０，４２０…を付ける。このような分類内順序番号を
付けるのは、選択静止画画像データＡ1 ，Ａ2 ，Ａ3 …
よりも前にもってきたい選択静止画画像データがあると
予め予想しているからであり、選択静止画画像データＣ
1 ，Ｃ2 ，Ｃ3 …には同じ分類識別子γ２を付けるが、
分類内順序番号として１００，１１０，１２０を付けて
おり、選択静止画画像データＤ51，Ｄ52，Ｄ53…には同
じ分類識別子γ２を付けるが、分類内順序番号として２
００，２１０，２２０を付けており、選択静止画画像デ
ータＦ1 ，Ｆ2 ，Ｆ3 …には同じ分類識別子γ２を付け
るが、分類内順序番号として３００，３１０，３２０を
付けている。後に続くものとして、選択静止画画像デー
タＥ10，Ｅ11，Ｅ12…にも同じ分類識別子γ２を付ける
が、分類内順序番号として５００，５１０，５２０…を
付けている。また、分類番号９００ａとして分類識別子
γ１を付けるものについてみると、選択静止画画像デー
タＡ11，Ａ12，Ａ13…については分類番号としてそれぞ
れに分類識別子γ１を付けた上で分類内順序番号として
それぞれに２００，２１０，２２０…を付け、選択静止
画画像データＥ44，Ｅ45，Ｅ46…には同じ分類識別子γ
１を付けるが、分類内順序番号として１００，１１０，
１２０を付けており、選択静止画画像データＢ33，
Ｂ34，Ｂ35…には同じ分類識別子γ１を付けるが、分類
内順序番号として３００，３１０，３２０を付けてお
り、選択静止画画像データＢ1 ，Ｂ2 ，Ｂ3 …には同じ
分類識別子γ１を付けるが、分類内順序番号として４０
０，４１０，４２０を付けている。
【０１０７】このように、各静止画ファイル格納番号変
数Ｎ（Ａ1 ，Ｂ1 など）の静止画ファイルのそれぞれに
ついて、フレーム順序番号Ｘとして分類番号９００ａと
しての分類識別子γ１，γ２，γ３，γ４，γ５…と分
類内順序番号９００ｂとを付けるが、画像データ記憶手
段１０４におけるアドレスはそのままである。
【０１０８】分類識別子γｉ（ｉ＝１，２…）と分類内
順序番号とを付けた選択静止画画像データを圧縮符号化
のために読み出すときに、分類識別子γｉの若いものを
優先し、かつ、同じ分類識別子の場合には分類内順序番
号の若いものを優先するのである。そのようにして圧縮
符号化して、分類識別子および分類内順序番号に従っ
て、図２８、図２９に示すような分類の種別ごとに選択
静止画画像データが並べられた動画像ビットストリーム
１０００が生成されることになる。
【０１０９】本実施の形態７に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートと基本的には同じであるが、ステップ
Ｓ３１以降が異なる。その異なる部分を図３０、図３１
の部分フローチャートに従って説明する。説明の都合
上、ステップＳ２７から示し、ステップＳ２７の次のス
テップをステップＳ２０１とする。
【０１１０】ステップＳ２７において画像選択手段１１
３に記憶されている動画像ビットストリームの構成要素
の静止画画像データとして選択されたすべての静止画フ
ァイル格納番号変数Ｎの画像ファイルのファイル名を表
示手段１１０に表示する。ここでオペレータは、動画像
ビットストリームの構成要素として選択された画像ファ
イルの画像データの複数のフレームを表示手段１１０に
おいて子画面表示することを入力操作手段１１２によっ
て指示することができる。ステップＳ２０１において制
御手段１０１は子画面表示の指示があったか否かを判断
し、なかったときはステップＳ２０８に進むが、あった
ときはステップＳ２０２に進み、制御手段１０１は表示
制御手段１１１を駆動して画像データ記憶手段１０４を
アクセスするとともにフレームバッファ手段１０９を制
御し、例えば５×５＝２５の選択された画像データを表
示手段１１０において子画面表示する。オペレータは子
画面表示の必要がなくなったときは、入力操作手段１１
２によりそのモードを解除する。オペレータは子画面表
示を見て、どの画像ファイルを動画像ビットストリーム
のどの位置に配するかを考えるが、このときに、その画
像ファイルに分類識別子γｉを付与し、かつ、分類内順
序番号を付与する。これらの付与は、入力操作手段１１
２の操作により行う。分類できないものについては、分
類識別子γｉとしてγ１００を付ける。必要でないもの
には分類識別子γｉを付けない。ステップＳ２０３にお
いて子画面表示モードの中止または終了があったか否か
を判断し、ないときはステップＳ２０４に進んで動画像
ビットストリームの構成要素として選択された画像ファ
イルの静止画ファイル格納番号変数Ｎ（Ａ1 ，Ｂ1 な
ど）に対して分類番号９００ａとしての分類識別子γｉ
（ｉ＝１，２…）を付けるか否かを判断する。付けない
ときはステップＳ２０７に進んで次の５×５＝２５の選
択静止画画像データの子画面表示の状態へとインクリメ
ントし、ステップＳ２０２に戻る。なお、ステップＳ２
０７の子画面表示のインクリメントにおいては、現在表
示されている２５個の静止画画像データのうち静止画フ
ァイル格納番号変数Ｎが最も小さいものを消去し、最も
大きいものの次のものを新たに付け加えるようなインク
リメントでもよい。
【０１１１】選択静止画画像データの静止画ファイル格
納番号変数Ｎに対して分類識別子γｉを付けたときには
ステップＳ２０５に進んで制御手段１０１は画像分類手
段１２６を起動し、画像分類手段１２６は静止画ファイ
ル格納番号変数Ｎに対応させて分類識別子γｉ（ｉ＝
１，２…）を付け、その対応関係を記憶する。次のステ
ップＳ２０６において制御手段１０１は画像順序決定手
段１１４を起動し、画像順序決定手段１１４は先に付け
た分類識別子γｉの中での分類内順序番号を付け、その
対応関係を記憶する。これは、選択静止画画像データの
ファイル名だけでは分類識別子γｉを付与することと分
類内順序番号を付与することがむずかしいときなどに選
択静止画画像データの子画面表示を行って静止画を目視
確認しながら分類識別子γｉと分類内順序番号とを付け
ていく場合である。
【０１１２】ステップＳ２０６の次にステップＳ２０７
に進んで子画面表示のインクリメントを行い、ステップ
Ｓ２０２に戻る。
【０１１３】オペレータが子画面表示モードを中止した
とき、および子画面表示のインクリメントすべての選択
静止画画像データについて終了したとき、ステップＳ２
０３の判断がＹＥＳとなってステップＳ２７に進み、画
像選択手段１１３に記憶されている選択されたすべての
静止画ファイル格納番号変数Ｎの画像ファイルのファイ
ル名を表示手段１１０に表示する状態に戻る。そして、
ステップＳ２０１の判断がＮＯとなったときは、ステッ
プＳ２０８に進む。オペレータは表示された選択静止画
画像データのファイル名を見て、どの画像ファイルにど
の分類識別子γｉを付与し、動画像ビットストリームの
どの位置に配するかを考え、各画像ファイルについて入
力操作手段１１２により分類識別子γｉと分類内順序番
号とを付けていく。ステップＳ２０８において制御手段
１０１は画像分類手段１２６を起動し、画像分類手段１
２６は静止画ファイル格納番号変数Ｎに対応させて分類
識別子γｉ（ｉ＝１，２…）を付け、その対応関係を記
憶する。必要でないものには分類識別子γｉを付けな
い。次のステップＳ２０９において制御手段１０１は画
像順序決定手段１１４を起動し、画像順序決定手段１１
４は先に付けた分類識別子γｉの中での分類内順序番号
を付け、その対応関係を記憶する。これは、選択静止画
画像データの子画面表示を行わずにファイル名だけを見
て分類識別子γｉと分類内順序番号とを付けていく場合
である。
【０１１４】ステップＳ２１０において分類識別子γｉ
と分類内順序番号とを付ける作業が終了したかどうかを
判断する。終了していないときはステップＳ２０１に戻
る。オペレータは入力操作手段１１２の操作により任意
の時点でその作業を終了することができる。すると、ス
テップＳ２１１に進むことになる。また、すべての選択
静止画画像データの画像ファイルについて分類識別子γ
ｉと分類内順序番号とを付ける作業が終了したときは自
動的にステップＳ２１１に進む。
【０１１５】ステップＳ２１１において制御手段１０１
は画像順序決定手段１１４と動画像符号化手段１１５と
動画像ビットストリーム記録手段１１６とを起動し、ス
テップＳ２１２において画像順序決定手段１１４はそれ
に記録されている静止画ファイル格納番号変数Ｎに対応
した分類識別子と分類内順序番号とで決まる優先順位に
従って、すなわち図２８に示した順位に従って、画像デ
ータ記憶手段１０４から対応する静止画ファイル格納番
号変数Ｎの静止画画像データを読み出して動画像符号化
手段１１５に転送し、ステップＳ２１３において動画像
符号化手段１１５は読み込んだ画像データをＭＰＥＧ等
に準拠して圧縮符号化して、その画像圧縮符号化データ
をハードディスクのバッファエリアに一時的に格納す
る。なお、このときのハードディスクとしては、専用の
ものを用いてもよいし、画像データ記憶手段１０４を兼
用してもよい。また、ハードディスクに代えて半導体メ
モリを用いてもよい。
【０１１６】次のステップＳ２１４において次の分類識
別子と分類内順序番号とで決まる優先順位の未圧縮符号
化データがあるか否かを判断し、あるときはステップＳ
２１５に進んで次の分類識別子と分類内順序番号とで決
まる優先順位を設定して、ステップＳ２１２に戻る。以
下、同様にして、各静止画ファイル格納番号変数Ｎに対
応した分類識別子と分類内順序番号とで決まる優先順位
に従って読み出した静止画ファイル格納番号変数Ｎの選
択静止画画像データを圧縮符号化して、その画像圧縮符
号化データのハードディスクや半導体メモリのバッファ
エリアへの一時的格納を繰り返していく。ステップＳ２
１４の判断において次の分類識別子と分類内順序番号と
で決まる優先順位がなくなったときは、ステップＳ２１
６に進んで動画像ビットストリーム記録手段１１６はハ
ードディスクや半導体メモリのバッファエリアに一時的
に格納しているすべての画像圧縮符号化データを図２８
に示す分類識別子と分類内順序番号とで決まる優先順位
の順に読み出して、ハードディスクや半導体メモリに優
先順位を伴った動画像ビットストリームとして格納し、
格納が終了すると、すべての動作を終了する。以上によ
り、動画像ビットストリームの構成要素として選択した
画像ファイルが図２８および図２９に示すような分類識
別子と分類内順序番号とで決まる優先順位を伴った動画
像ビットストリーム１０００として生成され、動画像ビ
ットストリーム記録手段１１６に記録されたことにな
る。なお、動画像ビットストリームを画像データ記憶手
段１０４に記録してもよい。
【０１１７】以上のことから、本実施の形態７に係る画
像情報管理用記録装置によれば、多数の静止画像を所定
の要件（例えば、画像の種類やオペレータの好みなど）
に従って分類して、分類識別子γｉ（ｉ＝１，２…）と
分類内順序番号とを付けた選択静止画画像データを生成
しておき、圧縮符号化のために読み出すときに、分類識
別子γｉの若いものを優先し、かつ、同じ分類識別子の
場合には分類内順序番号の若いものを優先する状態で読
み出して、圧縮符号化するから、分類識別子と分類内順
序番号とで決まる優先順位を伴った動画像ビットストリ
ーム１０００を生成し、記録することができる。
【０１１８】そして、このような動画像ビットストリー
ム１０００を記録しておけば、後述するような画像情報
管理用再生装置によって画像を検索するときに、静止画
像が分類ごとに順番に再生されることになり、例えば、
風景・ドラマのシーン・音楽の演奏または歌唱のシーン
・タレントや俳優や歌手の画像・絵画・その他の分類が
それぞれまとまった形で連続的に再生されるため、粗い
検索すなわち高速検索が可能となる。所望する箇所が再
生されるようになったときに、画像再生の速度をスロー
ダウンさせたり停止させたりするといった具合に便利に
利用することができる。
【０１１９】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１２０】本実施の形態７の技術を実施の形態２に適
用してもよい。上記の実施の形態７の場合には、オペレ
ータが選択静止画画像データについての分類作業を行っ
たが、画像分類手段１２６として自動的に分類処理を行
う機能をもたせたものに構成するのでもよい。これが請
求項８に対応する。すなわち、画像分類手段１２６は、
画像データ記憶手段１０４から静止画ファイル格納番号
変数Ｎの順序に従って読み出した個々の静止画画像デー
タについて、画像の色合いを識別し、その色合いに応じ
た大まかな分類を自動的に行う機能を有している。色合
いの識別は、その静止画画像データに含まれる種々の色
相のうち最も占有割合の大きい色相をその静止画画像デ
ータの色合いとする。例えば、人の顔が大きく映出され
るような画像データの場合は肌色の分類識別子を付加
し、山林などの緑色の占める範囲が大きい画像データの
場合は緑色の分類識別子を付加し、水辺や空など青色の
占める範囲が大きい画像データの場合は青色の分類識別
子を付加するものとする。このような実施の形態の場合
には、フレームバッファ手段１０９、表示手段１１０お
よび表示制御手段１１１は省略することができる。ま
た、オペレータがいちいち分類する必要がなく、すべて
自動的に分類を実行するので、作業能率が非常に良いも
のとなる。
【０１２１】実施の形態７の応用の実施の形態として、
分類番号としての分類識別子が同一のものについては、
画像データ記憶手段から読み出された互いに隣り合う選
択静止画画像データの画面間差分が小さくなる傾向が強
いことを利用したものである。これは請求項９に対応し
ている。すなわち、図２６において二点鎖線で示したよ
うに動画像画面間符号化手段１１５ｂと画面内／画面間
選択手段１２２とを付加してある。この場合に、動画像
符号化手段１１５は動画像画面内符号化手段１１５ａと
して機能していることはいうまでもない。
【０１２２】動作については、図３１のステップＳ２１
２において、分類識別子が同一の選択静止画画像データ
についてはその転送先を動画像画面間符号化手段１１５
ｂに定め、その選択静止画画像データを画面間圧縮符号
化すればよい。すなわち、図３２の部分フローチャート
に示すように、図３１のステップＳ２１１の次のステッ
プＳ２１２ａにおいて画像順序決定手段１１４はそれに
記録されている静止画ファイル格納番号変数Ｎに対応し
た分類識別子と分類内順序番号とで決まる優先順位に従
って、すなわち図２８に示した順位に従って、画像デー
タ記憶手段１０４から対応する静止画ファイル格納番号
変数Ｎの静止画画像データを読み出す。次のステップＳ
２１２ｂにおいて分類番号である分類識別子が前回と同
じか否かを判断し、同じ分類識別子が続くときには静止
画像の分類が同一であることから高いデータ圧縮が期待
できるのでステップＳ２１２ｃに進んで画面内／画面間
選択手段１２２は画面間圧縮符号化を選択する。そし
て、ステップＳ２１３ａにおいて制御手段１０１は動画
像画面間符号化手段１１５ｂを起動し、隣り合う２つの
優先順位の選択静止画画像データのうち後者の静止画画
像データをＭＰＥＧ等に準拠して画面間圧縮符号化し、
画像圧縮符号化データをハードディスクや半導体メモリ
のバッファエリアに一時的に格納し、ステップＳ２１４
に進む。また、ステップＳ２１２ｂの判断において分類
識別子が前回とは異なっているときは静止画像の分類が
相違することからあまり高いデータ圧縮は期待できない
のでステップＳ２１２ｄに進んで画面内／画面間選択手
段１２２は画面内圧縮符号化を選択する。そして、ステ
ップＳ２１３ｂにおいて制御手段１０１は動画像画面内
符号化手段１１５ａを起動し、隣り合う２つの優先順位
の選択静止画画像データのうち後者の静止画画像データ
をＭＰＥＧ等に準拠して画面内圧縮符号化し、画像圧縮
符号化データをハードディスクや半導体メモリのバッフ
ァエリアに一時的に格納し、ステップＳ２１４に進む。
ステップＳ２１４以降の動作は実施の形態７（図３１）
の場合と同様である。
【０１２３】〔実施の形態８〕実施の形態８は請求項１
０、請求項１１に対応するものである。実施の形態８の
特徴は、多数の静止画像を所定の要件に従って分類し、
各分類項目に応じた文字列などの分類情報を付加した動
画像ビットストリームを記録するようにした点にある。
【０１２４】図３３は実施の形態８に係る画像情報管理
用記録装置の構成を示すブロック図である。図３３にお
いて符号１０１から１１７までについては図１（実施の
形態１）の構成と同様であり、簡単に説明すると、１０
１は制御手段、１０２はプログラム格納手段、１０３は
ワーキングメモリ手段、１０４は画像データ記憶手段、
１０５は画像データ入力手段、１０６は映像信号受信手
段、１０７はモデム、１０８はネットワーク接続手段、
１０９はフレームバッファ手段、１１０は表示手段、１
１１は表示制御手段、１１２は入力操作手段、１１３は
画像選択手段、１１４は画像順序決定手段、１１５は動
画像符号化手段、１１６は動画像ビットストリーム記録
手段、１１７はバスである。符号の１２６は実施の形態
７（図２６）の場合と同様の画像分類手段であり、静止
画画像データに対してフレーム順序番号Ｘを付けるに際
して、所定の要件（例えば、画像の種類やオペレータの
好みなど）に従って静止画像を分類し、その静止画画像
データに分類番号（分類識別子γｉ（ｉ＝１，２…））
を付け、画像順序決定手段１１４との協働により個々の
分類番号の種別内で分類内順序番号を付けるものであ
る。また、符号の１２７は圧縮符号化された静止画画像
データに対してその分類識別子γｉに対応した分類情報
Ｍｉを付加する分類情報付加手段である。
【０１２５】分類情報付加手段１２７は、図３４に示す
ような分類識別子γｉと分類情報Ｍｉとを対応付ける分
類識別子／分類情報対応テーブル１２７ａを有してい
る。この分類識別子／分類情報対応テーブル１２７ａに
は、分類情報Ｍｉの具体的な内容が文字列データとして
記憶されている。例えば、分類情報Ｍ１は「風景」に関
するものであり、分類情報Ｍ４は「建物」に関するもの
である。
【０１２６】画像分類手段１２６は、静止画画像データ
に対してフレーム順序番号Ｘを付けるに際して、所定の
要件（例えば、画像の種類やオペレータの好みなど）に
従って静止画像を分類し、その静止画画像データに分類
番号９００ａである分類識別子γｉ（ｉ＝１，２…）を
付け、画像順序決定手段１１４との協働により個々の分
類番号すなわち分類識別子γｉの種別内で分類内順序番
号９００ｂを付ける。分類識別子γｉの優先順位につい
ては、前述のとおり、γ１＞γ２＞γ３＞γ４＞γ５＞
…となっている。
【０１２７】画像順序決定手段１１４は、分類識別子γ
ｉ（ｉ＝１，２…）と分類内順序番号とを付けた選択静
止画画像データを圧縮符号化のために読み出すときに、
分類識別子γｉの若いものを優先し、かつ、同じ分類識
別子の場合には分類内順序番号の若いものを優先するの
である。そのようにして圧縮符号化されてバッファエリ
アに一時格納されている画像圧縮符号化データを読み出
したときに、分類情報付加手段１２７は分類番号９００
ａすなわち分類識別子γｉに基づいて分類識別子／分類
情報対応テーブル１２７ａを検索して、その分類識別子
γｉに対応した分類情報Ｍｉを読み出し、前記の画像圧
縮符号化データのヘッダに付加し、そのように分類情報
Ｍｉが付加された画像圧縮符号化データが分類識別子お
よび分類内順序番号に従って時間軸方向に沿って並べら
れて図３５、図３６に示すような分類情報付き動画像ビ
ットストリーム１０００ｂが生成され、動画像ビットス
トリーム記録手段１１６に記録されることになる。
【０１２８】本実施の形態８に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートおよび実施の形態７の場合の図３０、
図３１に示されたフローチャートと基本的には同じであ
るが、ステップＳ２１６の処理が異なる。その異なる部
分を図３７の部分フローチャートに従って説明する。説
明の都合上、ステップＳ２１２から示す。
【０１２９】ステップＳ２１２において画像順序決定手
段１１４はそれに記録されている静止画ファイル格納番
号変数Ｎに対応した分類識別子γｉ（ｉ＝１，２…）と
分類内順序番号とで決まる優先順位に従って、すなわち
図３５に示した順位に従って、画像データ記憶手段１０
４から対応する静止画ファイル格納番号変数Ｎの静止画
画像データを読み出して動画像符号化手段１１５に転送
し、ステップＳ２１３において動画像符号化手段１１５
は読み込んだ画像データをＭＰＥＧ等に準拠して圧縮符
号化して、その画像圧縮符号化データをハードディスク
のバッファエリアに一時的に格納する。なお、このとき
のハードディスクとしては、専用のものを用いてもよい
し、画像データ記憶手段１０４を兼用してもよい。ま
た、ハードディスクに代えて半導体メモリを用いてもよ
い。
【０１３０】次のステップＳ２１４において次の分類識
別子と分類内順序番号とで決まる優先順位の未圧縮符号
化データがあるか否かを判断し、あるときはステップＳ
２１５に進んで次の分類識別子と分類内順序番号とで決
まる優先順位を設定して、ステップＳ２１２に戻る。以
下、同様にして、各静止画ファイル格納番号変数Ｎに対
応した分類識別子と分類内順序番号とで決まる優先順位
に従って読み出した静止画ファイル格納番号変数Ｎの選
択静止画画像データを圧縮符号化して、その画像圧縮符
号化データのハードディスクや半導体メモリのバッファ
エリアへの一時的格納を繰り返していく。
【０１３１】ステップＳ２１４の判断において次の分類
識別子と分類内順序番号とで決まる優先順位がなくなっ
たときは、ステップＳ３０１に進んで動画像ビットスト
リーム記録手段１１６はハードディスクや半導体メモリ
のバッファエリアに一時的に格納しているすべての画像
圧縮符号化データを図３５に示す分類識別子と分類内順
序番号とで決まる優先順位の順に読み出す。ステップＳ
３０２において分類情報付加手段１２７は読み出した画
像圧縮符号化データに付随している分類識別子γｉに従
って、分類識別子／分類情報対応テーブル１２７ａを参
照しながら、分類識別子γｉに対応している分類情報Ｍ
ｉを割り出し、ステップＳ３０３において分類情報付加
手段１２７はハードディスクや半導体メモリのバッファ
エリアから分類識別子と分類内順序番号とで決まる優先
順位に従って読み出している１フレーム分ずつの画像圧
縮符号化データのヘッダに対して、前記の割り出した分
類情報Ｍｉを付加する。そして、ステップＳ３０４にお
いて動画像ビットストリーム記録手段１１６は、このよ
うにして順次に読み出したヘッダに分類情報を伴った画
像圧縮符号化データの列を分類情報付き動画像ビットス
トリーム１０００ｂとして格納し、格納が終了すると、
すべての動作を終了する。
【０１３２】以上により、動画像ビットストリームの構
成要素として選択した画像ファイルが図３５および図３
６に示すような分類識別子と分類内順序番号とで決まる
優先順位を伴い、かつ、分類識別子に対応した分類情報
を付加した分類情報付き動画像ビットストリーム１００
０ｂとして生成され、動画像ビットストリーム記録手段
１１６に記録されたことになる。なお、分類情報付き動
画像ビットストリーム１０００ｂの格納手段として画像
データ記憶手段１０４を兼用してもよい。
【０１３３】以上のことから、本実施の形態８に係る画
像情報管理用記録装置によれば、多数の静止画像を所定
の要件（例えば、画像の種類やオペレータの好みなど）
に従って分類して、分類識別子γｉ（ｉ＝１，２…）と
分類内順序番号とを付けた選択静止画画像データを生成
しておき、圧縮符号化のために読み出すときに、分類識
別子γｉの若いものを優先し、かつ、同じ分類識別子の
場合には分類内順序番号の若いものを優先する状態で読
み出して、圧縮符号化するから、そして、動画像ビット
ストリームを生成する際に、分類識別子γｉに対応する
分類情報Ｍｉを付加して動画像ビットストリームを生成
するから、分類識別子と分類内順序番号とで決まる優先
順位を伴いかつ図３４で示すような文字列からなる具体
的な分類情報が付加された分類情報付き動画像ビットス
トリーム１０００ｂを生成し、記録することができる。
【０１３４】そして、このような分類情報付き動画像ビ
ットストリーム１０００ｂを記録しておけば、後述する
ような画像情報管理用再生装置によって画像を検索する
ときに、静止画像が分類ごとに順番に、しかも分類情報
も併せて再生されることになり、例えば、「風景」とか
「海外旅行」とか「電子メール」などの文字列のメッセ
ージ表示がされた状態で連続的に再生されるため、粗い
検索すなわち高速検索が可能となる。所望する箇所が再
生されるようになったときに、画像再生の速度をスロー
ダウンさせたり停止させたりするといった具合に便利に
利用することができる。
【０１３５】なお、分類情報を画像圧縮符号化データの
ヘッダに付加するに際して、ＭＰＥＧなどの場合には、
オペレータにとって特定位置であると分かっているヘッ
ダのユーザーデータ領域に記録するように構成すること
も可能である。このように構成すると、画像情報管理用
再生装置で復号するときに付加された分類情報の検索が
容易となる。
【０１３６】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１３７】本実施の形態８においても、作業能率の向
上のために、実施の形態７の別の実施の形態として示し
たとおり、分類処理を色合いに基づいて自動的に行うよ
うに構成してもよい。また、記憶容量の削減のために、
実施の形態７の別の実施の形態として示したとおり、分
類番号としての分類識別子が同一のものについては画面
間圧縮符号化を行うように構成してもよい。
【０１３８】なお、この実施の形態８を実施の形態２に
適用してもよい。
【０１３９】〔実施の形態９〕実施の形態９は請求項１
２および請求項１３に対応するものである。実施の形態
９の特徴は、多数の静止画像を所定の要件に従って分類
し、各分類項目に応じた色付き矩形枠などの分類用部分
画像データを付加した動画像ビットストリームを記録す
るようにした点にある。
【０１４０】図３８は実施の形態９に係る画像情報管理
用記録装置の構成を示すブロック図である。図３８にお
いて符号１０１から１１７までについては図１（実施の
形態１）の構成と同様であり、簡単に説明すると、１０
１は制御手段、１０２はプログラム格納手段、１０３は
ワーキングメモリ手段、１０４は画像データ記憶手段、
１０５は画像データ入力手段、１０６は映像信号受信手
段、１０７はモデム、１０８はネットワーク接続手段、
１０９はフレームバッファ手段、１１０は表示手段、１
１１は表示制御手段、１１２は入力操作手段、１１３は
画像選択手段、１１４は画像順序決定手段、１１５は動
画像符号化手段、１１６は動画像ビットストリーム記録
手段、１１７はバスである。符号の１２６は実施の形態
７（図２６）の場合と同様の画像分類手段であり、静止
画画像データに対してフレーム順序番号Ｘを付けるに際
して、所定の要件（例えば、画像の種類やオペレータの
好みなど）に従って静止画像を分類し、その静止画画像
データに分類番号（分類識別子γｉ（ｉ＝１，２…））
を付け、画像順序決定手段１１４との協働により個々の
分類番号の種別内で分類内順序番号を付けるものであ
る。また、符号の１２８は圧縮符号化された静止画画像
データに対してその分類識別子γｉに対応した例えば色
付き矩形枠で構成される分類用部分画像データＱｉを生
成する分類用部分画像データ生成手段、１２９はその生
成された分類用部分画像データＱｉを画像圧縮符号化デ
ータに対してスーパーインポーズ的に付加する分類用部
分画像データ付加手段である。
【０１４１】分類用部分画像データ生成手段１２８は、
図３９に示すような分類識別子γｉと例えば色付き矩形
枠からなる分類用部分画像データＱｉとを対応付ける分
類識別子／分類用部分画像データ対応テーブル１２８ａ
を有している。この分類識別子／分類用部分画像データ
対応テーブル１２８ａには、各分類識別子γｉ（ｉ＝
１，２…）ごとに色相を異にする色付き矩形枠からなる
分類用部分画像データＱｉ（ｉ＝１，２…）が記憶され
ている。したがって、この分類用部分画像データ生成手
段１２８は記録媒体を有しているが、その記録媒体とし
ては、ハードディスク、ＣＤ−ＲＯＭ、ビデオＣＤ、ビ
デオＲＯＭなど任意のものが使用でき、また、画像デー
タ記憶手段１０４を兼用してもよい。分類用部分画像デ
ータＱｉについては、例えば、分類識別子γ２に対応す
る分類項目は「山の景色」であって、緑色の色付き矩形
枠画像データＱ２が生成されるようになっており、ま
た、分類識別子γ３に対応する分類項目は「海岸の景
色」であって、青色の色付き矩形枠画像データＱ３が生
成されるようになっている。
【０１４２】画像分類手段１２６は、静止画画像データ
に対してフレーム順序番号Ｘを付けるに際して、所定の
要件（例えば、画像の種類やオペレータの好みなど）に
従って静止画像を分類し、その静止画画像データに分類
番号９００ａである分類識別子γｉ（ｉ＝１，２…）を
付け、また、実施の形態７の場合と同様に、画像順序決
定手段１１４との協働により個々の分類番号すなわち分
類識別子γｉの種別内で分類内順序番号９００ｂを付け
る。分類識別子γｉの優先順位については、前述のとお
り、γ１＞γ２＞γ３＞γ４＞γ５＞…となっている。
【０１４３】画像順序決定手段１１４は、分類識別子γ
ｉ（ｉ＝１，２…）と分類内順序番号とを付けた選択静
止画画像データを圧縮符号化のために読み出すときに、
分類識別子γｉの若いものを優先し、かつ、同じ分類識
別子の場合には分類内順序番号の若いものを優先するの
である。そのようにして圧縮符号化されてバッファエリ
アに一時格納されている画像圧縮符号化データを読み出
したときに、分類用部分画像データ生成手段１２８は分
類番号９００ａすなわち分類識別子γｉに基づいて分類
識別子／分類用部分画像データ対応テーブル１２８ａを
検索して、その分類識別子γｉに対応した分類用部分画
像データＱｉ（色付き矩形枠画像データＱｉ）を生成
し、分類用部分画像データ付加手段１２９はその生成さ
れた色付き矩形枠画像データＱｉを画像圧縮符号化デー
タに対してスーパーインポーズ的に付加し、そのように
色付き矩形枠画像データＱｉが付加された画像圧縮符号
化データが分類識別子および分類内順序番号に従って時
間軸方向に沿って並べられて図４０、図４１に示すよう
な分類用色付き矩形枠付き動画像ビットストリーム１０
００ｃが生成され、動画像ビットストリーム記録手段１
１６に記録されることになる。なお、図４１において
は、強調のため、分類用色付き矩形枠の画像を太めに描
いてある。
【０１４４】本実施の形態９に係る画像情報管理用記録
装置の動作は実施の形態１の場合の図５〜図８に示され
たフローチャートおよび実施の形態７の場合の図３０、
図３１に示されたフローチャートと基本的には同じであ
るが、ステップＳ２１６の処理が異なる。その異なる部
分を図４２の部分フローチャートに従って説明する。説
明の都合上、ステップＳ２１２から示す。
【０１４５】ステップＳ２１２からステップＳ２１５ま
での処理は前述の実施の形態７，８の場合と同様である
ので、説明を省略する。
【０１４６】ステップＳ２１４の判断において次の分類
識別子と分類内順序番号とで決まる優先順位がなくなっ
たときは、ステップＳ４０１に進んで動画像ビットスト
リーム記録手段１１６はハードディスクや半導体メモリ
のバッファエリアに一時的に格納しているすべての画像
圧縮符号化データを図４０に示す分類識別子と分類内順
序番号とで決まる優先順位の順に読み出す。ステップＳ
４０２において分類用部分画像データ生成手段１２８は
読み出した画像圧縮符号化データに付随している分類識
別子γｉに従って、分類識別子／分類用部分画像データ
対応テーブル１２８ａを参照しながら、分類識別子γｉ
に対応している分類用色付き矩形枠画像データＱｉを割
り出し、ステップＳ４０３において分類用部分画像デー
タ付加手段１２９はハードディスクや半導体メモリのバ
ッファエリアから分類識別子と分類内順序番号とで決ま
る優先順位に従って読み出している１フレーム分ずつの
画像圧縮符号化データに対して、前記の割り出した分類
用色付き矩形枠画像データＱｉをスーパーインポーズ的
に付加する。そして、ステップＳ４０４において動画像
ビットストリーム記録手段１１６は、このようにして順
次に読み出した分類用色付き矩形枠画像データが付加さ
れた画像圧縮符号化データの列を分類用色付き矩形枠付
き動画像ビットストリーム１０００ｃとして格納し、格
納が終了すると、すべての動作を終了する。
【０１４７】以上により、動画像ビットストリームの構
成要素として選択した画像ファイルが図４０および図４
１に示すような分類識別子と分類内順序番号とで決まる
優先順位を伴い、かつ、分類識別子に対応した分類用色
付き矩形枠の画像を付加した分類用色付き矩形枠付き動
画像ビットストリーム１０００ｃとして生成され、動画
像ビットストリーム記録手段１１６に記録されたことに
なる。なお、分類用色付き矩形枠付き動画像ビットスト
リーム１０００ｃの格納手段として画像データ記憶手段
１０４を兼用してもよい。
【０１４８】上記の説明では、分類用部分画像データと
して色付き矩形枠画像データを例にあげたが、分類用部
分画像データとしては、上辺１本の線（または帯：以下
同様）、下辺１本の線、右辺１本の線、左辺１本の線、
あるいはこれらの線の適当な組み合わせ、中央の横線、
中央の縦線、十字の線、中央部分での矩形枠・丸枠な
ど、適当なものを採用できる。
【０１４９】以上のことから、本実施の形態９に係る画
像情報管理用記録装置によれば、多数の静止画像を所定
の要件（例えば、画像の種類やオペレータの好みなど）
に従って分類して、分類識別子γｉ（ｉ＝１，２…）と
分類内順序番号とを付けた選択静止画画像データを生成
しておき、圧縮符号化のために読み出すときに、分類識
別子γｉの若いものを優先し、かつ、同じ分類識別子の
場合には分類内順序番号の若いものを優先する状態で読
み出して、圧縮符号化するから、そして、動画像ビット
ストリームを生成する際に、分類識別子γｉに対応する
例えば色付き矩形枠などの分類用部分画像データＱｉを
付加して動画像ビットストリームを生成するから、分類
識別子と分類内順序番号とで決まる優先順位を伴いかつ
検索補助用の分類用部分画像が付加された動画像ビット
ストリーム１０００ｃを生成し、記録することができ
る。
【０１５０】そして、このような分類用色付き矩形枠付
き動画像ビットストリーム１０００ｃを記録しておけ
ば、後述するような画像情報管理用再生装置によって画
像を検索するときに、静止画像が分類ごとに順番に、し
かも色付き矩形枠などの検索補助用の分類用部分画像も
併せて再生されることになり、例えば、「山の景色」を
意味する緑色の色付き矩形枠とか「海岸の景色」を意味
する青色の色付き矩形枠が同時表示された状態で連続的
に再生されるため、粗い検索すなわち高速検索が可能と
なる。所望する箇所が再生されるようになったときに、
画像再生の速度をスローダウンさせたり停止させたりす
るといった具合に便利に利用することができる。
【０１５１】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１５２】なお、上記の実施の形態の場合と同様に、
分類番号としての分類識別子が同一の選択静止画画像デ
ータについて画面間圧縮符号化を行う動画像画面間符号
化手段を備えた構成とすれば、動画像ビットストリーム
の記録に必要な容量が少なくてすむ。
【０１５３】〔実施の形態１０〕実施の形態１０は請求
項１４に対応するものである。実施の形態１０の特徴
は、多数の静止画像を所定の要件に従って分類し、各分
類項目に応じた分類用ラベル色ビットストリームを付加
した動画像ビットストリームを記録するようにした点に
ある。
【０１５４】図４３は実施の形態１０に係る画像情報管
理用記録装置の構成を示すブロック図である。図４３に
おいて符号１０１から１１７までについては図１（実施
の形態１）の構成と同様であるので、説明を省略する。
符号の１２６は実施の形態７（図２６）や実施の形態９
（図３８）の場合と同様の画像分類手段であり、静止画
画像データに対してフレーム順序番号Ｘを付けるに際し
て、所定の要件（例えば、画像の種類やオペレータの好
みなど）に従って静止画像を分類し、その静止画画像デ
ータに分類番号（分類識別子γｉ（ｉ＝１，２…））を
付け、画像順序決定手段１１４との協働により個々の分
類番号の種別内で分類内順序番号を付けるものである。
また、符号の１３０は圧縮符号化された静止画画像デー
タに対してその分類識別子γｉに対応した色相の分類用
ラベル色データＲｉを生成する分類用ラベル色生成手段
である。この分類用ラベル色生成手段１３０は、図４４
に示すような分類識別子γｉと分類用ラベル色データＲ
ｉとを対応付ける分類識別子／分類用ラベル色データ対
応テーブル１３０ａを有している。この分類識別子／分
類用ラベル色データ対応テーブル１３０ａには、各分類
識別子γｉ（ｉ＝１，２…）ごとに色相を異にする分類
用ラベル色データＲｉ（ｉ＝１，２…）が記憶されてい
る。分類用ラベル色データＲｉについては、例えば、分
類識別子γ２に対応する分類項目は「山の景色」であっ
て、緑色のラベル色データＲ２が生成されるようになっ
ており、また、分類識別子γ３に対応する分類項目は
「海岸の景色」であって、青色のラベル色データＲ３が
生成されるようになっている。
【０１５５】符号の１３１は前記の生成された分類用ラ
ベル色データＲｉに対応した１６画素×１６ラインから
なる１マクロブロック分の分類用ラベル色ビットストリ
ーム１１００を生成する分類用ラベル色ビットストリー
ム生成手段、１３２は図４５（ａ）に示すように画像圧
縮符号化データにおける第１ライン先頭マクロブロック
１０５０として前記の生成された分類用ラベル色ビット
ストリーム１１００を付加する分類用ラベル色ビットス
トリーム付加手段である。
【０１５６】画像圧縮技術の国際標準であるＭＰＥＧ
（Moving Picture Coding Experts Group）において
は、マクロブロック・アドレス・インクリメント（ＭＢ
ＡＩ）は現在のマクロブロックのアドレスと直前の符号
化マクロブロックのアドレスの差分として与えられる。
そして、マクロブロック・アドレス・インクリメント
（ＭＢＡＩ）が１よりも大きい場合は、現在のマクロブ
ロックと直前の符号化マクロブロックの間のマクロブロ
ックはスキップマクロブロックとなり、マクロブロック
内に動きベクトルやＤＣＴ係数情報が全くないことを示
す。これにより、不要なマクロブロック情報の削減を図
るようにしている。したがって、１マクロブロックライ
ンの全体にわたって同じデータが連続するときには、先
頭の１つのみのマクロブロックにおいて符号化すれば、
あとのマクロブロックについては符号化しなくてもよ
い。ピクチャ層における先頭のスライス層（１マクロブ
ロックライン）の先頭の１つ分のマクロブロックにおい
て色の情報をビットストリームで指定しておくことによ
り、再生時に図４５（ｂ）に示すように復号化再生画像
においてその先頭のマクロブロックおよびそのラインの
次のマクロブロックからそのラインの最終のマクロブロ
ックまでの１ライン分にわたるスライス層において指定
した色の情報をもつ分類用ラベル色画像１１１０を第１
マクロブロックラインに検索補助用のラベルとして表示
することができる。本実施の形態１０はそのことを利用
したものである。
【０１５７】分類用ラベル色生成手段１３０は、分類識
別子γｉ（ｉ＝１，２…）と分類内順序番号とを付けた
選択静止画画像データを圧縮符号化のために読み出した
ときに、分類識別子γｉに基づいて分類識別子／分類用
ラベル色データ対応テーブル１３０ａを検索して、その
分類識別子γｉに対応した色相の分類用ラベル色データ
Ｒｉを生成し、分類用ラベル色ビットストリーム生成手
段１３１はその生成された分類用ラベル色データＲｉに
対応した１マクロブロック分の分類用ラベル色ビットス
トリーム１１００を生成し、分類用ラベル色ビットスト
リーム付加手段１３２はその生成された分類用ラベル色
ビットストリーム１１００を画像圧縮符号化データにお
ける第１ライン先頭マクロブロック１０５０に検索補助
用情報として付加し、そのように分類用ラベル色ビット
ストリーム１１００が付加された画像圧縮符号化データ
が分類識別子および分類内順序番号に従って時間軸方向
に沿って並べられて動画像ビットストリームが生成さ
れ、動画像ビットストリーム記録手段１１６に記録され
ることになる。
【０１５８】本実施の形態１０に係る画像情報管理用記
録装置の動作は実施の形態１の場合の図５〜図８に示さ
れたフローチャートおよび実施の形態７の場合の図３
０、図３１に示されたフローチャートと基本的には同じ
であるが、実施の形態９の場合の図４２のステップＳ４
０１以降の処理が異なる。その異なる部分を図４６の部
分フローチャートに従って説明する。
【０１５９】図４２のステップＳ２１４の判断において
次の分類識別子と分類内順序番号とで決まる優先順位が
なくなったとき（判断がＮＯのとき）は、ステップＳ５
０１に進んで動画像ビットストリーム記録手段１１６は
ハードディスクや半導体メモリのバッファエリアに一時
的に格納しているすべての画像圧縮符号化データを分類
識別子と分類内順序番号とで決まる優先順位（図４０参
照）の順に読み出す。ステップＳ５０２において分類用
ラベル色生成手段１３０は読み出した画像圧縮符号化デ
ータに付随している分類識別子γｉに従って、分類識別
子／分類用ラベル色データ対応テーブル１３０ａを参照
しながら、分類識別子γｉに対応している色相の分類用
ラベル色データＲｉを割り出し、ステップＳ５０３にお
いて分類用ラベル色ビットストリーム生成手段１３１は
割り出した分類用ラベル色データＲｉに基づいて対応し
た色相の分類用ラベル色ビットストリーム１１００を生
成し、ステップＳ５０４において分類用ラベル色ビット
ストリーム付加手段１３２はハードディスクや半導体メ
モリのバッファエリアから分類識別子と分類内順序番号
とで決まる優先順位に従って読み出している１フレーム
分ずつの画像圧縮符号化データの第１ライン先頭マクロ
ブロック１０５０として前記の生成した分類用ラベル色
ビットストリーム１１００を付加する。そして、ステッ
プＳ５０５において動画像ビットストリーム記録手段１
１６は、このようにして順次に読み出した分類用ラベル
色ビットストリーム１１００が付加された画像圧縮符号
化データの列を動画像ビットストリームとして格納し、
格納が終了すると、すべての動作を終了する。
【０１６０】以上により、動画像ビットストリームの構
成要素として選択した画像ファイルが分類識別子と分類
内順序番号とで決まる優先順位を伴い、かつ、分類識別
子に対応した分類用ラベル色ビットストリームを付加し
た動画像ビットストリームとして生成され、動画像ビッ
トストリーム記録手段１１６に記録されたことになる。
なお、この動画像ビットストリームの格納手段として画
像データ記憶手段１０４を兼用してもよい。
【０１６１】上記の場合には、第１ラインつまり上辺ラ
インの先頭マクロブロック１０５０において分類用ラベ
ル色ビットストリーム１１００を付加するように構成し
たが、最終ラインつまり下辺ラインの先頭マクロブロッ
クにおいて分類用ラベル色ビットストリームを付加する
ように構成してもよい。
【０１６２】再生時に、予め、所望の分類についてその
分類に対応した分類識別子を設定しておき（例えば「山
の風景」を検索したいときには分類識別子γ２を設定し
ておき）、ブラウジング（通覧）中にその所望の画像の
再生に移行したときに、自動的に再生動作をフリーズす
るように構成することができる。この場合に、上辺ライ
ンの先頭マクロブロックに分類用ラベル色ビットストリ
ームを付加しておいた場合には、その１フレーム分の静
止画像が第１ラインからフリーズされることになる。し
たがって、分類用ラベル色ビットストリームを上辺ライ
ンの先頭マクロブロックに付加するのと下辺ラインの先
頭マクロブロックに付加するのとでは、上辺ラインの先
頭マクロブロックに付加する方がより好ましい。
【０１６３】以上のことから、本実施の形態１０に係る
画像情報管理用記録装置によれば、多数の静止画像を所
定の要件（例えば、画像の種類やオペレータの好みな
ど）に従って分類して、分類識別子γｉ（ｉ＝１，２
…）と分類内順序番号とを付けた選択静止画画像データ
を生成しておき、圧縮符号化のために読み出すときに、
分類識別子γｉの若いものを優先し、かつ、同じ分類識
別子の場合には分類内順序番号の若いものを優先する状
態で読み出して、圧縮符号化するから、そして、動画像
ビットストリームを生成する際に、分類識別子γｉに対
応する分類用ラベル色データＲｉを生成し、その分類用
ラベル色データＲｉに基づいて分類用ラベル色ビットス
トリーム１１００を生成して画像圧縮符号化データに付
加して動画像ビットストリームを生成するから、分類識
別子と分類内順序番号とで決まる優先順位を伴いかつ検
索補助用の分類用ラベル色ビットストリームが付加され
た動画像ビットストリームを生成し、記録することがで
きる。また、実施の形態９の場合のような色付き矩形枠
画像データを生成する必要がなく、単に分類用ラベル色
を指定するビットストリームを生成し、その分類用ラベ
ル色ビットストリームを第１ライン先頭マクロブロック
に付加するだけでよいから、実施の形態９の場合に比べ
て、処理量が少なくてすみ、処理速度をより速くでき、
またメモリ容量も削減できる。
【０１６４】そして、このような分類用ラベル色ビット
ストリーム付きの動画像ビットストリームを記録してお
けば、後述するような画像情報管理用再生装置によって
画像を検索するときに、静止画像が分類ごとに順番に、
しかも図４５（ｂ）に示すように検索補助用の分類用ラ
ベル色画像１１１０も併せて再生されることになり、例
えば、「山の景色」を意味する緑色の帯状のラベル色画
像とか「海岸の景色」を意味する青色の帯状のラベル色
画像が画面の上辺または下辺に沿った帯状に同時表示さ
れた状態で連続的に再生されるため、粗い検索すなわち
高速検索が可能となる。所望する箇所が再生されるよう
になったときに、画像再生の速度をスローダウンさせた
り停止させたりするといった具合に便利に利用すること
ができる。
【０１６５】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１６６】なお、上記の実施の形態の場合と同様に、
分類番号としての分類識別子が同一の選択静止画画像デ
ータについて画面間圧縮符号化を行う動画像画面間符号
化手段を備えた構成とすれば、動画像ビットストリーム
の記録に必要な容量が少なくてすむ。
【０１６７】〔実施の形態１１〕実施の形態１１は請求
項１５に対応するものである。実施の形態１１の特徴
は、多数の静止画像を所定の要件に従って分類し、各分
類ごとの選択静止画画像データ（ピクチャ）をＭＰＥＧ
で規定するＧＯＰ（グループオブピクチャ）にまとめ、
各ＧＯＰごとにＧＯＰヘッダに分類用の情報（ＧＯＰス
タートコード）を付加した状態の動画像ビットストリー
ムを記録するようにした点にある。
【０１６８】なお、ＧＯＰとはＭＰＥＧにおいて規定さ
れている、動画像シーケンスにおける複数フレームのま
とまりであり、復号化再生時のランダムアクセスや画像
編集単位として利用されるものである。
【０１６９】図４７は実施の形態１１に係る画像情報管
理用記録装置の構成を示すブロック図である。図４７に
おいて符号１０１から１１７までについては図１（実施
の形態１）の構成と同様であるので、説明を省略する。
符号の１２６は実施の形態７（図２６）や実施の形態９
（図３８）の場合と同様の画像分類手段であり、静止画
画像データに対してフレーム順序番号Ｘを付けるに際し
て、所定の要件（例えば、画像の種類やオペレータの好
みなど）に従って静止画像を分類し、同じ分類の静止画
像群を同じＧＯＰ（グループオブピクチャ）としてまと
めるために、その静止画画像データに分類番号（分類識
別子γｉ（ｉ＝１，２…））を付け、画像順序決定手段
１１４との協働により個々の分類番号の種別内で分類内
順序番号を付けるものである。また、符号の１３３は個
々のＧＯＰに対してそのＧＯＰの構成要素である静止画
画像データの分類識別子γｉに対応させてＧＯＰヘッダ
に設定するための分類用のＧＯＰスタートコードＴｉを
生成する分類用ＧＯＰスタートコード生成手段である。
図示は省略するが、この分類用ＧＯＰスタートコード生
成手段１３３は、分類識別子γｉと分類用ＧＯＰスター
トコードＴｉとを対応付ける分類識別子／分類用ＧＯＰ
スタートコード対応テーブルを有している。分類用ＧＯ
ＰスタートコードＴｉについては、例えば、分類識別子
γ２に対応する分類項目「山の景色」に対しては分類用
ＧＯＰスタートコードＴ２が生成されるようになってお
り、また、分類識別子γ３に対応する分類項目「海岸の
景色」に対しては分類用ＧＯＰスタートコードＴ３が生
成されるようになっている。
【０１７０】符号の１３４は前記の生成された分類用Ｇ
ＯＰスタートコードＴｉを画像圧縮符号化データにおけ
るＧＯＰヘッダに付加する分類用ＧＯＰスタートコード
付加手段である。なお、本実施の形態１１においては、
動画像符号化手段１１５は、動画像画面内符号化手段と
動画像画面間符号化手段とを兼用しているものとする。
ＧＯＰ（グループオブピクチャ）を生成するに当たり、
Ｉピクチャのほかに、Ｐピクチャ、Ｂピクチャを生成す
るためである。
【０１７１】本実施の形態１１に係る画像情報管理用記
録装置の動作は実施の形態１の場合の図５〜図８に示さ
れたフローチャートおよび実施の形態７の場合の図３
０、図３１に示されたフローチャートと基本的には同じ
であるが、実施の形態９の場合の図４２のステップＳ４
０１以降の処理が異なる。その異なる部分を図４８の部
分フローチャートに従って説明する。
【０１７２】図４２のステップＳ２１４の判断において
次の分類識別子と分類内順序番号とで決まる優先順位が
なくなったとき（判断がＮＯのとき）は、ステップＳ６
０１に進んで動画像ビットストリーム記録手段１１６は
ハードディスクや半導体メモリのバッファエリアに一時
的に格納しているすべての画像圧縮符号化データを分類
識別子と分類内順序番号とで決まる優先順位（図４０参
照）の順に読み出す。ステップＳ６０２において分類用
ＧＯＰスタートコード生成手段１３３は読み出した画像
圧縮符号化データに付随している分類識別子γｉに従っ
て、分類識別子／分類用ＧＯＰスタートコード対応テー
ブル（図示せず）を参照しながら、分類識別子γｉに対
応している分類用ＧＯＰスタートコードＴｉを割り出
し、ステップＳ６０３において分類用ＧＯＰスタートコ
ード付加手段１３４は割り出した分類用ＧＯＰスタート
コードＴｉを、ハードディスクや半導体メモリのバッフ
ァエリアから分類識別子と分類内順序番号とで決まる優
先順位に従って読み出している１つのＧＯＰ（グループ
オブピクチャ）のＧＯＰヘッダに対して付加する。そし
て、ステップＳ６０４において動画像ビットストリーム
記録手段１１６は、このようにして順次に読み出したＧ
ＯＰ単位でＧＯＰヘッダに分類用ＧＯＰスタートコード
Ｔｉが付加された画像圧縮符号化データの列を動画像ビ
ットストリームとして格納し、格納が終了すると、すべ
ての動作を終了する。
【０１７３】以上により、動画像ビットストリームの構
成要素として選択した画像ファイルが分類識別子と分類
内順序番号とで決まる優先順位を伴い、かつ、分類識別
子に対応した分類用ＧＯＰスタートコードをＧＯＰ単位
でＧＯＰヘッダに付加した動画像ビットストリームとし
て生成され、動画像ビットストリーム記録手段１１６に
記録されたことになる。なお、この動画像ビットストリ
ームの格納手段として画像データ記憶手段１０４を兼用
してもよい。
【０１７４】再生時に、ある分類のシーンのＧＯＰの動
画像ビットストリームを再生している途中で、次の分類
のシーンにジャンプしたい場合には、分類用ＧＯＰスタ
ートコードのインクリメントにより素早くジャンプする
ことができるし、また、順番にこだわることなく任意の
シーンにランダムアクセスすることができる。
【０１７５】以上のことから、本実施の形態１１に係る
画像情報管理用記録装置によれば、多数の静止画像を所
定の要件（例えば、画像の種類やオペレータの好みな
ど）に従って分類して、分類識別子γｉ（ｉ＝１，２
…）と分類内順序番号とを付けた選択静止画画像データ
を生成しておき、圧縮符号化のために読み出すときに、
分類識別子γｉの若いものを優先し、かつ、同じ分類識
別子の場合には分類内順序番号の若いものを優先する状
態で読み出して、分類ごとのＧＯＰ（グループオブピク
チャ）を形成する状態で圧縮符号化するから、そして、
動画像ビットストリームを生成する際に、分類識別子γ
ｉに対応する分類用ＧＯＰスタートコードＴｉを生成
し、その分類用ＧＯＰスタートコードＴｉを各ＧＯＰの
ＧＯＰヘッダに付加して動画像ビットストリームを生成
するから、分類識別子と分類内順序番号とで決まる優先
順位を伴いかつ検索補助用の分類用ＧＯＰスタートコー
ドが付加された動画像ビットストリームを生成し、記録
することができる。分類用ＧＯＰスタートコードＴｉの
生成および付加の処理は比較的簡単に行える。
【０１７６】そして、このような分類用ＧＯＰスタート
コード付きの動画像ビットストリームを記録しておけ
ば、後述するような画像情報管理用再生装置によって画
像を検索するときに、ある分類のシーンのＧＯＰの動画
像ビットストリームを再生している途中で、別の任意の
分類のシーンにジャンプしたい場合には、分類用ＧＯＰ
スタートコードの設定によりランダムアクセスして素早
くジャンプすることができる。
【０１７７】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１７８】〔実施の形態１２〕実施の形態１２は請求
項１６に対応するものである。実施の形態１２の特徴
は、多数の静止画像を所定の要件に従って分類し、各分
類項目に応じた分類用音声データを付加した動画像ビッ
トストリームを記録するようにした点にある。実施の形
態６の場合も検索補助用の音声データを付加した動画像
ビットストリームを記録するようにしたが、付加する音
声データの選択は人為的に行うようにしたものである。
これに対して、本実施の形態１２の場合には、まず、静
止画像を所定の要件に従って分類し、かつ、その分類項
目に応じて自動的に分類用音声データを生成するように
した点が異なる。
【０１７９】図４９は実施の形態１２に係る画像情報管
理用記録装置の構成を示すブロック図である。図４９に
おいて符号１０１から１１７までについては図１（実施
の形態１）の構成と同様であるので、説明を省略する。
符号の１２６は実施の形態７（図２６）や実施の形態９
（図３８）の場合と同様の画像分類手段であり、静止画
画像データに対してフレーム順序番号Ｘを付けるに際し
て、所定の要件（例えば、画像の種類やオペレータの好
みなど）に従って静止画像を分類し、その静止画画像デ
ータに分類番号（分類識別子γｉ（ｉ＝１，２…））を
付け、画像順序決定手段１１４との協働により個々の分
類番号の種別内で分類内順序番号を付けるものである。
また、符号の１３５は圧縮符号化された静止画画像デー
タに対してその分類識別子γｉに対応した分類用音声デ
ータＵｉを生成する分類用音声データ生成手段である。
この分類用音声データ生成手段１３５は、図５０に示す
ように分類識別子γｉとそれに対応した分類用音声デー
タＵｉとを対応付ける分類識別子／分類用音声データ対
応テーブル１３５ａを有している。分類用音声データＵ
ｉとしては音楽が好ましいが、人の歌唱でもよい。例え
ば、分類識別子γ２に対応する分類項目は「山の景色」
であって、山のイメージを表現する分類用音声データＵ
２が生成されるようになっており、また、分類識別子γ
３に対応する分類項目は「海岸の景色」であって、海岸
のイメージを表現する分類用音声データＵ３が生成され
るようになっている。
【０１８０】符号の１３６は前記の生成された分類用音
声データＵｉをＭＰＥＧ等に準拠して圧縮符号化して分
類用音声圧縮符号化データＶｉj を生成し、ハードディ
スクや半導体メモリなどのバッファエリアに一時格納す
る分類用音声データ符号化手段である。
【０１８１】本実施の形態１２に係る画像情報管理用記
録装置の動作は実施の形態１の場合の図５〜図８に示さ
れたフローチャートと基本的には同じであり、また、分
類識別子γｉを付加する点については実施の形態７の場
合の図３０、図３１に示されたフローチャートと基本的
には同じである。そこで、図３０のステップＳ２０５と
ステップＳ２０８をひとくくりとする状態でステップＳ
７０１とし、図３０のステップＳ２０６とステップＳ２
０９をひとくくりとする状態でステップＳ７０２とし
て、本実施の形態１２の動作を図５１、図５２のフロー
チャートに基づいて説明する。
【０１８２】オペレータが選択静止画画像データの静止
画ファイル格納番号変数Ｎに対して分類識別子γｉを付
けたときには、ステップＳ７０１に進んで制御手段１０
１は画像分類手段１２６を起動し、画像分類手段１２６
は静止画ファイル格納番号変数Ｎに対応させて分類識別
子γｉ（ｉ＝１，２…）を付け、その対応関係を記憶す
る。次のステップＳ７０２において制御手段１０１は画
像順序決定手段１１４を起動し、画像順序決定手段１１
４は先に付けた分類識別子γｉの中での分類内順序番号
を付け、その対応関係を記憶する。そして、ステップＳ
７０３において分類識別子γｉと分類内順序番号とを付
ける作業が終了したかどうかを判断する。終了していな
いときはステップＳ７０４に進んで静止画ファイル格納
番号変数Ｎをインクリメントして（Ｎ←Ｎ＋１）、ステ
ップＳ７０１に戻る。オペレータは入力操作手段１１２
の操作により任意の時点でその作業を終了することがで
きる。すると、ステップＳ７０５に進むことになる。ま
た、すべての選択静止画画像データの画像ファイルにつ
いて分類識別子γｉと分類内順序番号とを付ける作業が
終了したときは自動的にステップＳ７０５に進む。
【０１８３】ステップＳ７０５において画像順序決定手
段１１４はそれに記録されている静止画ファイル格納番
号変数Ｎに対応した分類識別子と分類内順序番号とで決
まる優先順位に従って、画像データ記憶手段１０４から
対応する静止画ファイル格納番号変数Ｎの静止画画像デ
ータを読み出して動画像符号化手段１１５に転送し、ス
テップＳ７０６において動画像符号化手段１１５は読み
込んだ画像データをＭＰＥＧ等に準拠して圧縮符号化し
て、その画像圧縮符号化データをバッファエリアに一時
的に格納する。
【０１８４】一方、並列処理として分類用音声データＵ
ｉの生成と圧縮符号化の処理がある。ステップＳ８０１
において分類用音声データ生成手段１３５は現在読み出
している静止画画像データに付随している分類識別子γ
ｉに基づいて分類識別子／分類用音声データ対応テーブ
ル１３５ａを検索し、分類識別子γｉに対応した分類用
音声データＵｉを生成し、分類用音声データ符号化手段
１３６に転送する。ステップＳ８０２において分類用音
声データ符号化手段１３６は読み込んだ分類用音声デー
タＵｉをＭＰＥＧ等に準拠して圧縮符号化して分類用音
声圧縮符号化データＶｉj を生成し、それをバッファエ
リアに一時的に格納する。
【０１８５】なお、画像圧縮符号化データや分類用音声
圧縮符号化データの一時格納に用いるバッファエリアと
しては、専用のハードディスクを用いてもよいし、専用
の半導体メモリを用いてもよい。さらに、画像データ記
憶手段１０４の空きエリアを利用してもよい。
【０１８６】ステップＳ７０７において画像・音声多重
化手段１２５はバッファエリアから分類識別子と分類内
順序番号とが同一の画像圧縮符号化データと分類用音声
圧縮符号化データＶｉj とを同期をとって読み出し、両
データを多重化して画像・分類用音声多重化データを生
成し、前記のバッファエリアに一時的に格納する。
【０１８７】次のステップＳ７０８において次の分類識
別子と分類内順序番号とで決まる優先順位の未圧縮符号
化データがあるか否かを判断し、あるときはステップＳ
７０９に進んで次の分類識別子と分類内順序番号とで決
まる優先順位を設定して、一方ではステップＳ７０５に
戻り、他方ではステップＳ８０１に戻る。以下、同様に
して、分類識別子と分類内順序番号とで決まる優先順位
を更新しながら、選択静止画画像データからの画像圧縮
符号化データの生成と、分類用音声データＵｉの生成お
よびそれからの分類用音声圧縮符号化データＶｉj の生
成と、同一の優先順位の画像圧縮符号化データと分類用
音声圧縮符号化データＶｉj との多重化による画像・分
類用音声多重化データの生成と、その画像・分類用音声
多重化データのハードディスクや半導体メモリのバッフ
ァエリアへの一時的格納を繰り返していく。
【０１８８】ステップＳ７０８の判断において次の分類
識別子と分類内順序番号とで決まる優先順位がなくなっ
たときは、ステップＳ７１０に進んで動画像・音声ビッ
トストリーム記録手段１１６ａはハードディスクや半導
体メモリのバッファエリアに一時的に格納しているすべ
ての画像・分類用音声多重化データを分類識別子と分類
内順序番号とで決まる優先順位の順に読み出して、ハー
ドディスクや半導体メモリに優先順位を伴いかつ分類用
音声圧縮符号化データが多重化された画像圧縮符号化デ
ータを動画像ビットストリーム１０００ｄとして格納
し、格納が終了すると、すべての動作を終了する。以上
により、動画像ビットストリームの構成要素として選択
した画像ファイルが図５３に示すような分類識別子と分
類内順序番号とで決まる優先順位を伴いかつ分類用音声
圧縮符号化データが多重化された動画像ビットストリー
ム１０００ｄとして生成され、動画像ビットストリーム
記録手段１１６に記録されたことになる。なお、図５３
において分類用音声圧縮符号化データＶｉj のサフィッ
クス“ｊ”は、各１フレームずつの画像圧縮符号化デー
タ（Ｅ44など）のに対して分類用音声圧縮符号化データ
の内容が異なっていること、および、そのサフィックス
“ｊ”が連続番号となっているのは、分類項目ごとの分
類用音声である音楽や歌唱などのデータが時系列的に記
録されていることを意味している。なお、動画像ビット
ストリームを画像データ記憶手段１０４に記録してもよ
い。
【０１８９】以上のことから、本実施の形態１２に係る
画像情報管理用記録装置によれば、多数の静止画像を所
定の要件（例えば、画像の種類やオペレータの好みな
ど）に従って分類して、分類識別子γｉ（ｉ＝１，２
…）と分類内順序番号とを付けた選択静止画画像データ
を生成しておき、圧縮符号化のために読み出すときに、
分類識別子γｉの若いものを優先し、かつ、同じ分類識
別子の場合には分類内順序番号の若いものを優先する状
態で読み出して、圧縮符号化するから、そして、動画像
ビットストリームを生成する際に、分類識別子γｉに対
応する１フレーム分ずつの選択静止画画像データの画像
圧縮符号化データに対して検索補助用の分類用音声圧縮
符号化データＶｉj を多重化した動画像ビットストリー
ム１０００ｄを記録することができる。そして、このよ
うな分類用音声圧縮符号化データを多重化した動画像ビ
ットストリームを記録しておけば、後述するような画像
情報管理用再生装置によって画像を検索するときに、分
類された画像ごとに別々に対応した時系列的に変化する
音楽や歌唱や人の声などが同時に再生され、その音声の
切り換わりを参照して画像の分類の切り換わりを判断す
ることができるから、オペレータはその検索補助用の音
楽や歌唱や人の声などを聞いて、画像再生の速度をスロ
ーダウンさせたり停止させたりするといった具合に便利
に利用することができる。
【０１９０】また、その他の効果として実施の形態１の
場合と同様の効果が発揮される。
【０１９１】なお、実施の形態１〜１２のうち適当な任
意のものを任意の数だけ複合化して構成した画像情報管
理用記録装置も有効であり、本発明の実施の形態として
含むものである。
【０１９２】以上で、本発明の実施の形態に係る画像情
報管理用記録装置の説明を終了する。次に、本発明に係
る画像情報管理用再生装置の具体的な実施の形態につい
て説明する。
【０１９３】〔実施の形態１３〕実施の形態１３は請求
項１８および請求項１９に対応するものである。図５４
は実施の形態１３に係る画像情報管理用再生装置の構成
を示すブロック図である。図５４において、２０１は装
置全体の制御を司る制御手段、２０２はその制御のため
のプログラムを格納しているプログラム格納手段、２０
３はワーキングメモリとして機能するワーキングメモリ
手段、２０４は画像データを蓄積するための例えばハー
ドディスクや半導体メモリで構成される画像データ記憶
手段、２０５は画像データの表示用に画像データの１フ
レーム分を一時的に格納するためのフレームバッファ手
段、２０６はＣＲＴやＬＣＤなどの表示手段、２０７は
表示制御手段、２０８はスピーカなどの音声出力手段、
２０９はオペレータが入力操作を行うキーボードやマウ
スで構成される入力操作手段、２１０は音声ビットスト
リームを含むことがある動画像ビットストリームを解析
するための動画像ビットストリーム解析手段、２１１は
音声ビットストリームを含む動画像ビットストリームか
ら動画像ビットストリームと音声ビットストリームとを
分離するための動画像／音声分離手段、２１２は動画像
ビットストリームを復号化して画像データを再生する動
画像復号化手段、２１３は音声ビットストリームを復号
化して音声データを再生する音声復号化手段、２１４は
各手段をつないでデータのやりとりを行うバスである。
【０１９４】画像データ記憶手段２０４は、上記した実
施の形態１〜１２のいずれかの画像情報管理用記録装置
において生成された動画像ビットストリームを記憶して
いる。画像情報管理用記録装置と画像情報管理用再生装
置とが一体化された画像情報管理用記録・再生装置にお
いては、画像データ記憶手段２０４は画像データ記憶手
段１０４をもって兼用することが可能である。画像情報
管理用再生装置が単独の場合には、画像データ記憶手段
２０４としては、別体の画像情報管理用記録装置の画像
データ記憶手段１０４から動画像ビットストリームを複
写したものでもよいし、その画像データ記憶手段１０４
を取り外してバス２１４に接続したものでもよい。その
ような画像データ記憶手段２０４としては、ハードディ
スクのほか、磁気ディスク・光磁気ディスク・ＣＤ−Ｉ
・ビデオＣＤ・ＣＤ−ＲＯＭ・レーザーディスク・ＤＶ
Ｄ・ＣＤ−Ｒなどの蓄積メディアがある。あるいは、別
体の画像情報管理用記録装置の画像データ記憶手段２０
４を利用してもよく、そのときはバス２１４に対してそ
の別体の画像データ記憶手段２０４を伝送ライン２１５
を介して接続すればよい。なお、符号の２１６〜２１７
については後述する。
【０１９５】上記のように構成された実施の形態１３に
係る画像情報管理用再生装置の通常再生時の動作を図５
５に示すフローチャートに従って説明する。入力操作手
段２０９において通常再生モードを指示すると、ステッ
プＳ１００１からの処理が開始される。ステップＳ１０
０１において制御手段２０１は画像データ記憶手段２０
４をアクセスして一般に音声ビットストリームを含む動
画像ビットストリームを入力し、動画像ビットストリー
ム解析手段２１０に転送する。ステップＳ１００２にお
いて動画像ビットストリーム解析手段２１０は転送され
てきた動画像ビットストリームを解析する。そして、ス
テップＳ１００３において音声ビットストリームを含む
か否かを判断し、含むときはステップＳ１００４に進ん
で並列処理モードを設定し、次いでステップＳ１００５
において動画像／音声分離手段２１１によって音声ビッ
トストリームを含む動画像ビットストリームを動画像ビ
ットストリームと音声ビットストリームとに分離する。
一方、音声ビットストリームを含まないときはステップ
Ｓ１００６に進んで単独処理モードを設定し、ステップ
Ｓ１００７に進む。ステップＳ１００７において動画像
復号化手段２１２は動画像ビットストリームを動画像ビ
ットストリーム解析手段２１０による解析結果に従って
復号化して画像データを再生し、ステップＳ１００８に
おいて復号化した画像データを表示制御手段２０７の制
御のもとでフレームバッファ手段２０５を介して表示手
段２０６により画像として表示する。このあと、単独処
理モードのときは直ちにステップＳ１０１１に進む。並
列処理モードのときは、ステップＳ１００７，Ｓ１００
８と並行してステップＳ１００９，Ｓ１０１０を実行す
る。すなわち、ステップＳ１００９において音声復号化
手段２１３は音声ビットストリームを前記の解析結果に
従って復号化して音声データを再生し、ステップＳ１０
１０において復号化した音声データを音声出力手段２０
８に出力し、音声として出力する。そして、ステップＳ
１００８とステップＳ１０１０の処理がともに終了する
と、ステップＳ１０１１に進む。ステップＳ１０１１に
おいて再生動作の終了の指示があったか否かを判断し、
なかったときはステップＳ１００２に戻って上記と同様
の動作を繰り返すが、再生動作の終了の指示があったと
きはすべての動作を終了する。
【０１９６】実施の形態１（図１：時間軸方向での静止
画の並び順序の人為的な選択）に係る画像情報管理用記
録装置において生成され、画像データ記憶手段２０４
（１０４）に記憶された動画像ビットストリーム１００
０が再生処理によって図４のように時間軸方向に沿って
連続的に再生され、表示手段２０６に表示されていく。
【０１９７】実施の形態２（図９、図１２：時間軸方向
での静止画の並び順序の自動的な選択）に係る画像情報
管理用記録装置、実施の形態３（図１３：画素間間引き
処理）に係る画像情報管理用記録装置、実施の形態４
（図１５、図２０：マルチ画面）に係る画像情報管理用
記録装置、実施の形態５（図２１：画面内圧縮符号化／
画面間圧縮符号化）に係る画像情報管理用記録装置で生
成された動画像ビットストリーム、実施の形態６（図２
３、図２５：画像・音声多重化）に係る画像情報管理用
記録装置で生成された動画像・音声ビットストリーム、
実施の形態７（図２６、図２９：所定の要件（例えば、
画像の種類やオペレータの好みなど）に従って静止画像
を分類）に係る画像情報管理用記録装置で生成された分
類の種別ごとに選択静止画画像データが並べられた動画
像ビットストリームについても同様である。実施の形態
６で生成された動画像・音声ビットストリームの場合に
は、ステップＳ１００９，Ｓ１０１０の処理が行われ
る。
【０１９８】静止画像の検索再生に際して、従来の技術
の場合のような記録媒体に散在している静止画像をディ
レクトリをいちいち探りながら検索する場合に比べて、
予め複数の静止画像を選択し、時間軸方向に沿って並べ
た動画像ビットストリームとして再生するので、ブラウ
ジング（通覧、流し見）を行うことができ、効率良く画
像を検索することができる。圧縮符号化の方式は限定す
るものではないが、ＭＰＥＧやＤＶなどの既存の圧縮符
号化方式を採用すれば、再生に際して既存のハードウエ
アデコーダやソフトウエアデコーダを利用することが可
能となる。画素間間引き処理を行う実施の形態３による
動画像ビットストリームの場合には、再生の処理速度が
高速になる。実施の形態４によって複数の静止画画像デ
ータを１フレーム分にまとめた状態で生成したマルチ画
面の動画像ビットストリームの場合には、ブラウジング
するときに、一度に閲覧できる静止画の数が増えるの
で、画像の検索効率が向上する。
【０１９９】特に、音声を多重化した実施の形態６によ
る動画像・音声ビットストリームの場合には、画像を検
索するときに同時に音声も再生することにより、その再
生された音声を検索補助用の音声として利用することが
可能となる。例えば、高速検索時に「山」を連想させる
ような音楽が聞こえてきたり、「山です」というメッセ
ージ音声が聞こえてきたときには、オペレータはその検
索補助用の音声を聞いて、画像再生の速度をスローダウ
ンさせたり停止させたりするといった具合に便利に利用
することができる。これが請求項１８に対応する。
【０２００】実施の形態７による動画像ビットストリー
ムの場合には、静止画像が分類ごとに順番に再生される
ことになり、例えば、風景・ドラマのシーン・音楽の演
奏または歌唱のシーン・タレントや俳優や歌手の画像・
絵画・その他の分類がそれぞれまとまった形で連続的に
再生されるため、粗い検索すなわち高速検索が可能とな
る。所望する箇所が再生されるようになったときに、画
像再生の速度をスローダウンさせたり停止させたりする
といった具合に便利に利用することができる。
【０２０１】なお、通常再生モードでは、再生速度（フ
レームレート）は通常、３０フレーム／ｓｅｃである
が、再生速度可変手段２１６を備えておくことにより、
再生速度を任意に設定することができる。その再生速度
可変手段２１６としては一般には機能的に復号化手段の
後段に位置する遅延手段が用いられ、遅延時間の調整を
行うことにより再生速度を可変する。動画像ビットスト
リームを検索再生するときに、３０フレーム／ｓｅｃで
は速すぎる場合に、再生速度を適当に低くして再生すれ
ば、画像の検索を容易かつ効率良く行うことができる。
【０２０２】本実施の形態１１に係る画像情報管理用記
録装置によって生成された分類識別子γｉに対応する分
類用ＧＯＰスタートコードＴｉを各ＧＯＰ（グループオ
ブピクチャ）のＧＯＰヘッダに付加した動画像ビットス
トリームを再生する場合には、分類情報指定手段２１７
の代わりに分類用ＧＯＰスタートコード指定手段を設
け、分類情報判定手段２１８の代わりに分類用ＧＯＰス
タートコード判定手段を設けておけば、ある分類のシー
ンのＧＯＰの動画像ビットストリームを再生している途
中で、別の任意の分類のシーンにジャンプしたい場合に
は、分類用ＧＯＰスタートコードの設定によりランダム
アクセスして素早くジャンプすることができる。
【０２０３】図５４において、符号の２１７は検索した
い分類に係る分類情報Ｍｊを指定するための分類情報指
定手段である。その指定は入力操作手段２０９の操作に
よって行われる。実施の形態８（図３３）に係る画像情
報管理用記録装置において、分類情報Ｍｉは、その分類
情報付加手段１２７が圧縮符号化された選択静止画画像
データに対してその分類識別子γｉに対応して画像圧縮
符号化データのヘッダに付加したものである（図３４〜
図３６および図３７のステップＳ３０２，Ｓ３０３参
照）。そのように分類情報Ｍｉが付加された画像圧縮符
号化データが分類識別子および分類内順序番号に従って
時間軸方向に沿って並べられて図３５、図３６に示すよ
うな分類情報付き動画像ビットストリーム１０００ｂが
生成され、画像データ記憶手段２０４（１０４）に記録
されている。分類情報Ｍｉは具体的には分類の種別を表
す「風景」や「建物」などの文字列データである。ま
た、符号の２１８は動画像ビットストリーム解析手段２
１０が解析した分類情報Ｍｉと分類情報指定手段２１６
が指定している分類情報Ｍｊとが一致するか否かを判断
し、一致したときにのみ、動画像ビットストリーム／音
声ビットストリームの復号化を許可し、一致しないとき
には復号化の許可は行わず、また、一致した後に不一致
となったときは再生処理動作を終了するように機能する
分類情報判定手段である。このような構成の画像情報管
理用再生装置が請求項１９に対応する。
【０２０４】次に、以上のように構成された画像情報管
理用再生装置の分類指定検索再生モード時の動作を図５
６のフローチャートに従って説明する。入力操作手段２
０９によって分類指定検索再生モードを指示すると、ス
テップＳ１１０１からの処理が開始される。ステップＳ
１１０１において分類指定検索再生モードが指定される
のを待ってステップＳ１１０２に進み、入力操作手段２
０９から入力された分類情報Ｍｊを分類情報指定手段２
１７に設定する。ステップＳ１１０３において制御手段
２０１は画像データ記憶手段２０４をアクセスして一般
に音声ビットストリームを含む動画像ビットストリーム
を入力し、動画像ビットストリーム解析手段２１０に転
送する。ステップＳ１１０４において動画像ビットスト
リーム解析手段２１０は転送されてきた動画像ビットス
トリームを解析する。そして、ステップＳ１１０５にお
いて画像圧縮符号化データのヘッダに付加されている分
類情報Ｍｉを割り出す。ステップＳ１１０６において分
類情報判定手段２１８は前記の割り出された分類情報Ｍ
ｉと分類情報指定手段２１７に設定してある分類情報Ｍ
ｊとを比較し、ステップＳ１１０７において動画像ビッ
トストリームから割り出した分類情報Ｍｉが設定した分
類情報Ｍｊと一致しているか否か（Ｍｉ＝Ｍｊ？）を判
断し、不一致のときはビットストリームの復号化の許可
を行うことなく、ステップＳ１１０４に戻って次々と入
力されてくる音声ビットストリームを含む動画像ビット
ストリームの解析を行う。ステップＳ１１０７の判断に
おいて動画像ビットストリームから割り出した分類情報
Ｍｉが設定した分類情報Ｍｊと一致しているときは復号
化の許可を行うためにステップＳ１１０８に進み、動画
像／音声分離手段２１１は音声ビットストリームを含む
動画像ビットストリームを動画像ビットストリームと音
声ビットストリームとに分離する。ステップＳ１１０９
において並列処理により動画像復号化手段２１２は分離
した動画像ビットストリームを解析結果に従って復号化
するとともに音声復号化手段２１３は音声ビットストリ
ームを解析結果に従って復号化し、ステップＳ１１１０
において表示制御手段２０７の制御のもとに復号化した
画像データをフレームバッファ手段２０５を介して表示
手段２０６により画像として表示するとともに音声出力
手段２０８に復号化した音声データを出力し、音声とし
て出力する。そして、ステップＳ１１１１において分類
情報判定手段２１８は動画像ビットストリームの画像圧
縮符号化データのヘッダから割り出した分類情報Ｍｉが
設定した分類情報Ｍｊと一致しなくなったか否かを判断
し、一致した状態を継続しているときはステップＳ１１
０４に戻って上記と同様の処理を繰り返すが、割り出し
た分類情報Ｍｉが設定した分類情報Ｍｊと一致しなくな
ったときはすべての処理を終了する。以上により、オペ
レータが設定した分類情報Ｍｊと一致する分類情報Ｍｉ
をもつ画像圧縮符号化データが入力されてきたときから
自動的に復号化が開始され、また、その一致する画像圧
縮符号化データのみが復号化され、表示手段２０６に表
示される。そして、画像圧縮符号化データの分類情報Ｍ
ｉが設定した分類情報Ｍｊと一致しなくなったときに復
号化が自動的に終了する。なお、音声ビットストリーム
を伴わない動画像ビットストリームの場合には、音声ビ
ットストリームに関する処理は省略されることはいうま
でもない。
【０２０５】なお、割り出した分類情報Ｍｉが設定した
分類情報Ｍｊと一致したときに、再生速度可変手段２１
６を制御して再生速度をスローダウンさせるようにして
もよい。
【０２０６】以上のことから、本実施の形態１３に係る
画像情報管理用再生装置によれば、画像データ記憶手段
２０４（１０４）に分類情報Ｍｉが付加された分類情報
付き動画像ビットストリーム１０００ｂ（図３６参照）
が記憶されており、オペレータが検索したい分類情報Ｍ
ｊを設定して、その設定した分類情報Ｍｊに従って分類
情報付き動画像ビットストリームの画像圧縮符号化デー
タを抽出し自動的に復号化するので、設定した特定の分
類の静止画像を動画像の状態で再生することとなり、検
索したい画像を素早く見つけ出すことができる。
【０２０７】なお、分類情報指定手段２１７と分類情報
判定手段２１８とを起動させないようにすれば、すべて
の分類の静止画像について、静止画像が分類ごとに順番
に、しかも分類情報も併せて再生されることになり、例
えば、「風景」とか「海外旅行」とか「電子メール」な
どの文字列のメッセージ表示がされた状態で連続的に再
生されるため、粗い検索すなわち高速検索が可能とな
る。所望する箇所が再生されるようになったときに、画
像再生の速度をスローダウンさせたり停止させたりする
といった具合に便利に利用することができる。
【０２０８】なお、分類情報を画像圧縮符号化データの
ヘッダに付加するに際して、ＭＰＥＧなどの場合にオペ
レータにとって特定位置であると分かっているヘッダの
ユーザーデータ領域に記録しておけば、画像情報管理用
再生装置で復号するときに付加された分類情報の検索が
容易となる。
【０２０９】なお、実施の形態１２（図４９、図５３：
分類用音声付加）に係る画像情報管理用記録装置で生成
された分類用音声圧縮符号化データ多重化の動画像ビッ
トストリーム１０００ｄの場合には、画像の検索再生の
ときに、分類された画像ごとに別々に対応した時系列的
に変化する音楽や歌唱や人の声などが同時に再生され、
その音声の切り換わりを参照して画像の分類の切り換わ
りを判断することができるから、オペレータはその検索
補助用の音楽や歌唱や人の声などを聞いて、画像再生の
速度をスローダウンさせたり停止させたりするといった
具合に便利に利用することができる。これも請求項１８
に対応する。
【０２１０】〔実施の形態１４〕実施の形態１４は請求
項２０に対応するものである。図５７は実施の形態１４
に係る画像情報管理用再生装置の構成を示すブロック図
である。図５７において、符号２０１から２１６までに
ついては図５４（実施の形態１３）の構成と同様である
ので、説明を省略する。符号の２１９は検索したい分類
に係る色付き矩形枠画像データＱｊに対応した分類色情
報ｑｊを指定するための分類色情報指定手段である。そ
の指定は入力操作手段２０９の操作によって行われる。
実施の形態９（図３８）に係る画像情報管理用記録装置
において、色付き矩形枠画像データＱｉは、その分類用
部分画像データ付加手段１２９が圧縮符号化された選択
静止画画像データに対してその分類識別子γｉに対応し
てスーパーインポーズ的に付加したものである（図３９
〜図４１および図４２のステップＳ４０２，Ｓ４０３参
照）。そのように色付き矩形枠画像データＱｉが付加さ
れた画像圧縮符号化データが分類識別子および分類内順
序番号に従って時間軸方向に沿って並べられて図４０、
図４１に示すような分類用色付き矩形枠付き動画像ビッ
トストリーム１０００ｃが生成され、画像データ記憶手
段２０４（１０４）に記録されている。また、符号の２
２０は動画像ビットストリーム解析手段２１０が解析し
た色付き矩形枠画像データＱｉに対応した分類色情報ｑ
ｉと分類色情報指定手段２１９が指定している分類色情
報ｑｊとが一致するか否かを判断し、一致したときにの
み、動画像ビットストリーム／音声ビットストリームの
復号化を許可し、一致しないときには復号化の許可は行
わず、また、一致した後に不一致となったときは再生処
理動作を終了するように機能する分類色情報判定手段で
ある。
【０２１１】次に、以上のように構成された実施の形態
１４に係る画像情報管理用再生装置の分類指定検索再生
モード時の動作を図５８のフローチャートに従って説明
する。入力操作手段２０９によって分類色指定検索再生
モードを指示すると、ステップＳ１２０１からの処理が
開始される。ステップＳ１２０１において分類色指定検
索再生モードが指定されるのを待ってステップＳ１２０
２に進み、入力操作手段２０９から入力された分類色情
報ｑｊを分類色情報指定手段２１９に設定する。ステッ
プＳ１２０３において制御手段２０１は画像データ記憶
手段２０４をアクセスして一般に音声ビットストリーム
を含む動画像ビットストリームを入力し、動画像ビット
ストリーム解析手段２１０に転送する。ステップＳ１２
０４において動画像ビットストリーム解析手段２１０は
転送されてきた動画像ビットストリームを解析する。そ
して、ステップＳ１２０５において画像圧縮符号化デー
タに付加されている色付き矩形枠画像データＱｉの分類
色情報ｑｉを割り出す。ステップＳ１２０６において分
類色情報判定手段２２０は前記の割り出された分類色情
報ｑｉと分類色情報指定手段２１９に設定してある分類
色情報ｑｊとを比較し、ステップＳ１２０７において動
画像ビットストリームから割り出した分類色情報ｑｉが
設定した分類色情報ｑｊと一致しているか否か（ｑｉ＝
ｑｊ？）を判断し、不一致のときはビットストリームの
復号化の許可を行うことなく、ステップＳ１２０４に戻
って次々と入力されてくる音声ビットストリームを含む
動画像ビットストリームの解析を行う。ステップＳ１２
０７の判断において動画像ビットストリームから割り出
した分類色情報ｑｉが設定した分類色情報ｑｊと一致し
ているときは復号化の許可を行うためにステップＳ１２
０８に進み、動画像／音声分離手段２１１は音声ビット
ストリームを含む動画像ビットストリームを動画像ビッ
トストリームと音声ビットストリームとに分離する。ス
テップＳ１２０９において並列処理により動画像復号化
手段２１２は分離した動画像ビットストリームを解析結
果に従って復号化するとともに音声復号化手段２１３は
音声ビットストリームを解析結果に従って復号化し、ス
テップＳ１２１０において表示制御手段２０７の制御の
もとに復号化した画像データをフレームバッファ手段２
０５を介して表示手段２０６により画像として表示する
とともに音声出力手段２０８に復号化した音声データを
出力し、音声として出力する。そして、ステップＳ１２
１１において分類色情報判定手段２２０は動画像ビット
ストリームの画像圧縮符号化データから割り出した分類
色情報ｑｉが設定した分類色情報ｑｊと一致しなくなっ
たか否かを判断し、一致した状態を継続しているときは
ステップＳ１２０４に戻って上記と同様の処理を繰り返
すが、割り出した分類色情報ｑｉが設定した分類色情報
ｑｊと一致しなくなったときはすべての処理を終了す
る。以上により、オペレータが設定した分類色情報ｑｊ
と一致する分類色情報ｑｉをもつ画像圧縮符号化データ
が入力されてきたときから自動的に復号化が開始され、
また、その一致する画像圧縮符号化データのみが復号化
され、表示手段２０６に表示される。そして、画像圧縮
符号化データの分類色情報ｑｉが設定した分類色情報ｑ
ｊと一致しなくなったときに復号化が自動的に終了す
る。なお、音声ビットストリームを伴わない動画像ビッ
トストリームの場合には、音声ビットストリームに関す
る処理は省略されることはいうまでもない。
【０２１２】なお、割り出した分類色情報ｑｉが設定し
た分類色情報ｑｊと一致したときに、再生速度可変手段
２１６を制御して再生速度をスローダウンさせるように
してもよい。
【０２１３】以上のことから、本実施の形態１４に係る
画像情報管理用再生装置によれば、画像データ記憶手段
２０４（１０４）に色付き矩形枠画像データＱｉが多重
化された分類用色付き矩形枠付き動画像ビットストリー
ム１０００ｃ（図４１参照）が記憶されており、オペレ
ータが検索したい分類色情報ｑｊを設定して、その設定
した分類色情報ｑｊに従って分類用色付き矩形枠付き動
画像ビットストリームの画像圧縮符号化データを抽出し
自動的に復号化するので、設定した特定の分類の静止画
像を動画像の状態で再生することとなり、検索したい画
像を素早く見つけ出すことができる。
【０２１４】なお、分類色情報指定手段２１９と分類色
情報判定手段２２０とを起動させないようにすれば、す
べての分類の静止画像について、静止画像が分類ごとに
順番に、しかも色付き矩形枠画像データＱｉも併せて再
生されることになり、例えば、「山の景色」を意味する
緑色の色付き矩形枠とか「海岸の景色」を意味する青色
の色付き矩形枠が同時に表示された状態で連続的に再生
されるため、粗い検索すなわち高速検索が可能となる。
所望する箇所が再生されるようになったときに、画像再
生の速度をスローダウンさせたり停止させたりするとい
った具合に便利に利用することができる。
【０２１５】なお、実施の形態１２（図４９、図５３：
分類用音声付加）に係る画像情報管理用記録装置で生成
された分類用音声圧縮符号化データ多重化の動画像ビッ
トストリーム１０００ｄの場合には、画像の検索再生の
ときに、分類された画像ごとに別々に対応した時系列的
に変化する音楽や歌唱や人の声などが同時に再生され、
その音声の切り換わりを参照して画像の分類の切り換わ
りを判断することができるから、オペレータはその検索
補助用の音楽や歌唱や人の声などを聞いて、画像再生の
速度をスローダウンさせたり停止させたりするといった
具合に便利に利用することができる。
【０２１６】〔実施の形態１５〕実施の形態１５は請求
項２１に対応するものである。図５９は実施の形態１５
に係る画像情報管理用再生装置の構成を示すブロック図
である。図５９において、符号２０１から２１６までに
ついては図５４（実施の形態１３）の構成と同様である
ので、説明を省略する。符号の２２１は検索したい分類
に係る分類用ラベル色データＲｉに対応したラベル色情
報ｒｊを指定するための分類用ラベル色指定手段であ
る。その指定は入力操作手段２０９の操作によって行わ
れる。実施の形態１０（図４３）に係る画像情報管理用
記録装置において、その分類用ラベル色ビットストリー
ム付加手段１３２は、圧縮符号化された選択静止画画像
データに対してその分類識別子γｉに対応して第１ライ
ン先頭マクロブロック１０５０に分類用ラベル色データ
Ｒｉのビットストリーム１１００を付加する。そのよう
に第１ライン先頭マクロブロックに分類用ラベル色デー
タＲｉのビットストリームが付加された画像圧縮符号化
データが分類識別子および分類内順序番号に従って時間
軸方向に沿って並べられて動画像ビットストリームが生
成され、画像データ記憶手段２０４（１０４）に記録さ
れている。また、符号の２２２は分離された動画像ビッ
トストリームの第１ライン先頭マクロブロックを復号化
する動画像１マクロブロック復号化手段、２２３は動画
像ビットストリーム解析手段２１０が解析した分類用ラ
ベル色データＲｉに対応したラベル色情報ｒｉと分類用
ラベル色指定手段２２１が指定しているラベル色情報ｒ
ｊとが一致するか否かを判断し、一致したときにのみ、
動画像１マクロブロック復号化手段２２２による分離さ
れた動画像ビットストリームの第１ライン先頭マクロブ
ロックの復号化と音声ビットストリームの復号化を許可
し、一致しないときには復号化の許可は行わず、また、
一致した後に不一致となったときは再生処理動作を終了
するように機能するラベル色情報判定手段である。
【０２１７】次に、以上のように構成された実施の形態
１５に係る画像情報管理用再生装置の分類用ラベル色指
定検索再生モード時の動作を図６０および図６１のフロ
ーチャートに従って説明する。入力操作手段２０９によ
って分類用ラベル色指定検索再生モードを指示すると、
ステップＳ１３０１からの処理が開始される。ステップ
Ｓ１３０１において分類用ラベル色指定検索再生モード
が指定されるのを待ってステップＳ１３０２に進み、入
力操作手段２０９から入力されたラベル色情報ｒｊを分
類用ラベル色指定手段２２１に設定する。ステップＳ１
３０３において制御手段２０１は画像データ記憶手段２
０４をアクセスして一般に音声ビットストリームを含む
動画像ビットストリームを入力し、動画像ビットストリ
ーム解析手段２１０に転送する。ステップＳ１３０４に
おいて動画像ビットストリーム解析手段２１０は転送さ
れてきた動画像ビットストリームを解析する。そして、
ステップＳ１３０５において画像圧縮符号化データに付
加されている分類用ラベル色ビットストリームの分類用
ラベル色データＲｉのラベル色情報ｒｉを割り出す。ス
テップＳ１３０６においてラベル色情報判定手段２２３
は前記の割り出されたラベル色情報ｒｉと分類用ラベル
色指定手段２２１に設定してあるラベル色情報ｒｊとを
比較し、ステップＳ１３０７において動画像ビットスト
リームから割り出したラベル色情報ｒｉが設定したラベ
ル色情報ｒｊと一致しているか否か（ｒｉ＝ｒｊ？）を
判断し、不一致のときはビットストリームの復号化の許
可を行うことなく、ステップＳ１３０４に戻って次々と
入力されてくる音声ビットストリームを含む動画像ビッ
トストリームの解析を行う。ステップＳ１３０７の判断
において動画像ビットストリームから割り出したラベル
色情報ｒｉが設定したラベル色情報ｒｊと一致している
ときは復号化の許可を行うためにステップＳ１３０８に
進み、動画像／音声分離手段２１１は音声ビットストリ
ームを含む動画像ビットストリームを動画像ビットスト
リームと音声ビットストリームとに分離する。ステップ
Ｓ１３０９において動画像１マクロブロック復号化手段
２２２は分離した動画像ビットストリームの第１ライン
先頭マクロブロックを解析結果に従って復号化するとと
もに、並列処理により、音声復号化手段２１３は音声ビ
ットストリームを解析結果に従って復号化し、ステップ
Ｓ１３１０において表示制御手段２０７の制御のもとに
第１ライン先頭マクロブロックを復号化した帯状の分類
用ラベル色画像１１１０を図４５（ｂ）のように表示手
段２０６の画面の上辺に沿って表示するとともに音声出
力手段２０８に復号化した音声データを出力し、音声と
して出力する。この段階では、表示手段２０６の画面に
は図４５（ｂ）に示すように帯状の分類用ラベル色画像
１１１０のみが表示されている。そこで、オペレータは
分離された動画像ビットストリームに含まれている全画
面に相当する１フレーム分全体の画像圧縮符号化データ
を再生表示するかどうかを決め、その再生表示を行うと
きは入力操作手段２０９により指示を与える。ステップ
Ｓ１３１１において制御手段２０１は全画面で再生する
か否かを判断し、そうでないときはステップＳ１３１４
に進むが、全画面で再生するときはステップＳ１３１２
に進んで動画像復号化手段２１２を起動し、動画像復号
化手段２１２は１フレーム分全体の画像圧縮符号化デー
タを復号化し、ステップＳ１３１３において復号化した
１フレーム分全体の画像を表示手段２０６に表示する。
そして、ステップＳ１３１４においてラベル色情報判定
手段２２３は動画像ビットストリームの画像圧縮符号化
データから割り出したラベル色情報ｒｉが設定したラベ
ル色情報ｒｊと一致しなくなったか否かを判断し、一致
した状態を継続しているときはステップＳ１３０４に戻
って上記と同様の処理を繰り返すが、割り出したラベル
色情報ｒｉが設定したラベル色情報ｒｊと一致しなくな
ったときはすべての処理を終了する。以上により、オペ
レータが設定したラベル色情報ｒｊと一致するラベル色
情報ｒｉをもつ画像圧縮符号化データが入力されてきた
ときから自動的に復号化が開始され、また、その一致す
る画像圧縮符号化データの第１ライン先頭マクロブロッ
クのみが復号化され、表示手段２０６に表示される。ま
た、指示により全画面の表示も行える。そして、画像圧
縮符号化データのラベル色情報ｒｉが設定したラベル色
情報ｒｊと一致しなくなったときに復号化が自動的に終
了する。なお、音声ビットストリームを伴わない動画像
ビットストリームの場合には、音声ビットストリームに
関する処理は省略されることはいうまでもない。
【０２１８】なお、割り出したラベル色情報ｒｉが設定
したラベル色情報ｒｊと一致したときに、再生速度可変
手段２１６を制御して再生速度をスローダウンさせるよ
うにしてもよい。
【０２１９】以上のことから、本実施の形態１５に係る
画像情報管理用再生装置によれば、画像データ記憶手段
２０４（１０４）に分類用ラベル色データＲｉに対応し
た分類用ラベル色ビットストリームが付加された動画像
ビットストリームが記憶されており、オペレータが検索
したいラベル色情報ｒｊを設定して、その設定したラベ
ル色情報ｒｊに従って分類用ラベル色データＲｉに対応
した分類用ラベル色ビットストリームが付加された動画
像ビットストリームの画像圧縮符号化データを抽出し自
動的に第１ライン先頭マクロブロックのみを復号化する
ので、処理速度が速く、検索したい画像の部分を素早く
見つけ出すことができる。また、指示により、設定した
特定の分類の静止画像の全体を帯状の分類用ラベル色画
像とともに表示することもできる。
【０２２０】〔実施の形態１６〕上記した各実施の形態
１〜１２の画像情報管理用記録装置によって生成された
動画像ビットストリーム、あるいは従来の画像情報管理
用記録装置によって生成された動画像ビットストリーム
を再生してブラウジング（通覧）している際に、オペレ
ータは、あとで再び見たい画像があったときに、しおり
（ブックマーク）としての検索マークを付加しておくと
いったことをしばしば行う。このような場合に、従来で
は、複数の圧縮符号化された静止画画像データ（画像圧
縮符号化データ）が時間軸方向に沿って並んでいる動画
像ビットストリームにおいて、検索マークを付加してお
きたい箇所の１フレーム分の画像圧縮符号化データの前
または後ろの部分に対して検索マーク用ビットストリー
ムを専用の記録手段によって記録するという手法をとっ
ていた。しかし、検索マークをビットストリームのかた
ちで元の動画像ビットストリームに記録する作業は、該
当する１フレーム分全体の画像圧縮符号化データをすべ
て読み出さなければならないため、そして、その画像圧
縮符号化データに対して検索マーク用ビットストリーム
を付加しなければならないので、かなりの手間を要する
ものである。この不都合を解消するのが本実施の形態１
６に係る画像情報管理用再生装置である。実施の形態１
６は請求項２２に対応するものである。
【０２２１】図６２は実施の形態１６に係る画像情報管
理用再生装置の構成を示すブロック図である。図６２に
おいて、符号２０１から２１６までについては図５４
（実施の形態１３）の構成と同様であるので、説明を省
略する。符号の２２４は動画像ビットストリームの再生
の際に所定の要件すなわちオペレータが再度見たいと思
って検索マーク情報を書き込んでおきたい画像の箇所
（そのフレームのタイムカウンタのカウント値に相当）
を指定する検索マーク書込位置指定手段、２２５は再
度、動画像ビットストリームを再生したときに検索マー
ク書込位置指定手段２２４が指定している検索マーク情
報を書き込んでおきたい画像、より詳しくは１フレーム
に相当するピクチャ層のヘッダに続くユーザーデータ領
域に検索マーク情報を書き込む検索マーク書込手段、２
２６はピクチャ層のユーザーデータ領域を抽出するユー
ザーデータ領域抽出手段、２２７は動画像ビットストリ
ームのユーザーデータ領域に書き込まれた検索マーク情
報を検出する検索マーク検出手段である。
【０２２２】次に、以上のように構成された実施の形態
１６に係る画像情報管理用再生装置の検索マーク書込位
置指定モード時の動作を図６３のフローチャートに従っ
て説明する。入力操作手段２０９によって検索マーク書
込位置指定モードを指示すると、ステップＳ１４０１か
らの処理が開始される。ステップＳ１４０１において検
索マーク書込位置指定モードが指示されるのを待ってス
テップＳ１４０２に進み、入力操作手段２０９により検
索マーク情報を書き込んでおきたいフレームのタイムカ
ウンタのカウント値が入力されるのを待ち、そのフレー
ムのタイムカウンタのカウント値が入力されるとステッ
プＳ１４０３において検索マーク書込位置指定手段２２
４はそのタイムカウンタのカウント値を設定する。ステ
ップＳ１４０４において制御手段２０１はこの検索マー
ク書込位置指定モードが終了したか否かを判定し、終了
していないときはステップＳ１４０２に戻って同様の処
理を繰り返す。この繰り返し処理により複数の画像に対
してそれぞれ検索マーク書込位置指定のためのタイムカ
ウンタのカウント値を設定することができる。検索マー
ク書込位置指定モードが終了したときはすべての処理を
終了する。
【０２２３】次に、検索マーク書込モード時の動作を図
６４のフローチャートに従って説明する。入力操作手段
２０９によって検索マーク書込モードを指示すると、ス
テップＳ１５０１からの処理が開始される。ステップＳ
１５０１において検索マーク書込モードが指示されるの
を待ってステップＳ１５０２に進み、ユーザーデータ領
域抽出手段２２６は一般に音声ビットストリームを含む
動画像ビットストリームを格納している画像データ記憶
手段２０４をアクセスして１フレームごとの画像圧縮符
号化データについてのピクチャ層のヘッダのスタートコ
ードを読み出し、ステップＳ１５０３において前記の読
み出したスタートコードを検索マーク書込位置指定手段
２２４に設定されているフレームのタイムカウント値と
比較する。ステップＳ１５０４において読み出したスタ
ートコードと設定してあるタイムカウント値とが一致し
たか否かを判断し、一致しないときはステップＳ１５０
５に進んで次のフレームに進んでからステップＳ１５０
３に戻る。一致したときはステップＳ１５０６に進んで
ユーザーデータ領域抽出手段２２６はそのフレームのピ
クチャ層のヘッダに続くユーザーデータ領域の抽出を行
う。ステップＳ１５０７において検索マーク書込手段２
２５は抽出したピクチャ層のユーザーデータ領域に対し
て、再度の検索再生のときのブックマーク（しおり）と
なる検索マーク情報を書き込む。ステップＳ１５０８に
おいて検索マーク書込位置指定手段２２４に設定されて
いるすべてのタイムカウント値について検索マーク情報
の書き込み処理が終了したか否かを判断し、終了してい
ないときはステップＳ１５０５に進んで次のフレームに
進んでからステップＳ１５０３に戻り、以下同様の処理
を繰り返す。すべてのタイムカウント値について検索マ
ーク情報の書き込み処理が終了したときはすべての処理
を終了する。
【０２２４】次に、検索マーク情報を利用した再生であ
る検索マーク再生モード時の動作を図６５のフローチャ
ートに従って説明する。入力操作手段２０９によって検
索マーク再生モードを指示すると、ステップＳ１６０１
からの処理が開始される。ステップＳ１６０１において
検索マーク再生モードが指示されるのを待ってステップ
Ｓ１６０２に進み、制御手段２０１は画像データ記憶手
段２０４をアクセスして一般に音声ビットストリームを
含む動画像ビットストリームを入力し、動画像ビットス
トリーム解析手段２１０に転送する。ステップＳ１６０
３において動画像ビットストリーム解析手段２１０は転
送されてきた動画像ビットストリームを解析し、ステッ
プＳ１６０４において検索マーク検出手段２２７が検索
マーク情報を検出したか否かを判断する。検出していな
いときはステップＳ１６０５に進んで次のフレームに進
んでからステップＳ１６０３に戻る。検索マーク情報を
検出したとき、すなわち現在入力しているフレームの画
像圧縮符号化データのピクチャ層のヘッダに続くユーザ
ーデータ領域に検索マーク情報が書き込まれているとき
にはステップＳ１６０６に進んで、動画像／音声分離手
段２１１は音声ビットストリームを含む動画像ビットス
トリームを動画像ビットストリームと音声ビットストリ
ームとに分離する。ステップＳ１６０７において並列処
理により動画像復号化手段２１２は分離した動画像ビッ
トストリームを解析結果に従って復号化するとともに音
声復号化手段２１３は音声ビットストリームを解析結果
に従って復号化し、ステップＳ１６０８において表示制
御手段２０７の制御のもとに復号化した画像データをフ
レームバッファ手段２０５を介して表示手段２０６によ
り画像として表示するとともに音声出力手段２０８に復
号化した音声データを出力し、音声として出力する。そ
して、ステップＳ１６０９において次の検索マーク情報
が存在するか否かを判断し、存在しているときはステッ
プＳ１６０５に進んで次のフレームに進んでからステッ
プＳ１６０３に戻り、以下同様の処理を繰り返すが、次
の検索マーク情報が存在しなくなったときはすべての処
理を終了する。
【０２２５】以上のことから、本実施の形態１６に係る
画像情報管理用再生装置によれば、再度の検索再生のと
きに再び見たい画像があるときの検索マーク情報を該当
する１フレームに相当するピクチャ層のヘッダに続くユ
ーザーデータ領域に書き込むように構成したので、検索
マーク情報の書き込み作業が、検索マーク情報をビット
ストリームとして付加するために１フレーム分全体の画
像圧縮符号化データを読み出していた従来の技術に比べ
てはるかに簡単で短時間で処理できる。そして、再度の
検索再生のときには、見たいと思っている画像へとジャ
ンプして再生することができ、検索再生の作業性を向上
することができる。
【０２２６】なお、検索マーク書込手段２２５として、
複数種類の検索マーク情報の中から任意の検索マーク情
報を選択してユーザーデータ領域に書き込むように構成
しておけば、複数の検索マーク情報が書き込まれている
動画像ビットストリームに対して、検索マーク情報の種
類を指定することにより、他の検索マーク情報が書き込
まれているフレームを飛ばして、指定した検索マーク情
報が書き込まれているフレームへとジャンプして再生を
開始することができる。これが請求項２３に対応してい
る。
【０２２７】〔実施の形態１７〕実施の形態１７は請求
項２４に対応するものである。実施の形態１７の特徴
は、ブックマーク（しおり）としての検索マークとして
音声を画像圧縮符号化データに付加するようにした点に
ある。
【０２２８】図６６は実施の形態１７に係る画像情報管
理用再生装置の構成を示すブロック図である。図６６に
おいて、符号２０１から２１６までについては図５４
（実施の形態１３）の構成と同様であるので、説明を省
略する。符号の２２４は動画像ビットストリームの再生
の際に所定の要件すなわちオペレータが再度見たいと思
って検索マーク用音声情報を書き込んでおきたい画像の
箇所（そのフレームのタイムカウンタのカウント値に相
当）を指定する検索マーク書込位置指定手段、２２８は
ＣＤプレーヤやオーディオテープレコーダやマイクに接
続されて検索マーク用の音声データを入力する音声デー
タ入力手段、２２９は入力した検索マーク用の音声デー
タを圧縮符号化する音声符号化手段、２３０は画像・音
声多重化手段である。
【０２２９】以上のように構成された実施の形態１７に
係る画像情報管理用再生装置の検索マーク書込位置指定
モード時の動作は、実施の形態１６の場合の図６３のフ
ローチャートに示すものと同じである。この動作によ
り、検索マーク用音声情報を書き込んでおきたいフレー
ムのタイムカウンタのカウント値が検索マーク書込位置
指定手段２２４に設定される。タイムカウント値の設定
は複数可能である。
【０２３０】次に、検索マーク用音声情報付加モード時
の動作を図６７のフローチャートに従って説明する。入
力操作手段２０９によって検索マーク用音声情報付加モ
ードを指示すると、ステップＳ１７０１からの処理が開
始される。ステップＳ１７０１において検索マーク用音
声情報付加モードが指示されるのを待ってステップＳ１
７０２に進み、制御手段２０１は画像データ記憶手段２
０４をアクセスして一般に音声ビットストリームを含む
動画像ビットストリームを入力し、動画像ビットストリ
ーム解析手段２１０に転送する。ステップＳ１７０３に
おいて動画像ビットストリーム解析手段２１０は転送さ
れてきた動画像ビットストリームを解析し、現在入力し
ているフレームの画像圧縮符号化データのピクチャ層の
ヘッダのスタートコードを検索マーク書込位置指定手段
２２４に設定されているフレームのタイムカウント値と
比較し、ステップＳ１７０４で一致したか否かを判断
し、一致しないときはステップＳ１７０５に進んで次の
フレームに進んでからステップＳ１７０３に戻る。一致
したときはステップＳ１７０６に進んで並列処理モード
を設定し、ステップＳ１７０７において制御手段２０１
は画像データ記憶手段２０４をアクセスしてタイムカウ
ント値に一致したスタートコードをもつフレームの音声
ビットストリームを含むことがある動画像ビットストリ
ームを読み出し、一方で、ステップＳ１７０８において
音声データ入力手段２２８を起動して検索マーク用の音
声データを入力し、ステップＳ１７０９において音声符
号化手段２２９を起動して入力した音声データを圧縮符
号化する。そして、ステップＳ１７１０において画像・
音声多重化手段２３０は前記の読み出した動画像ビット
ストリームの画像圧縮符号化データに対して音声圧縮符
号化データを多重化し、その画像・音声多重化データを
元の画像データ記憶手段２０４に検索マーク用音声情報
が多重化された動画像ビットストリームとして更新的に
格納する。ステップＳ１７１１において検索マーク書込
位置指定手段２２４に設定されているすべてのタイムカ
ウント値について検索マーク用音声情報の多重化処理が
終了したか否かを判断し、終了していないときはステッ
プＳ１７０５に進んで次のフレームに進んでからステッ
プＳ１７０３に戻り、以下同様の処理を繰り返す。すべ
てのタイムカウント値について検索マーク用音声情報の
多重化処理が終了したときはすべての処理を終了する。
多重化する検索マーク用音声情報としては、例えば、そ
のフレームの画像の種類に見合った音楽でもよいし、あ
るいは人の声で「山の風景の画面です」とか「チェック
ポイント１」とかでもよい。
【０２３１】次の再生時には、実施の形態１３の場合の
図５５のフローチャートと同様の処理が行われる。すな
わち、制御手段２０１は画像データ記憶手段２０４をア
クセスして検索マーク用音声情報が多重化された動画像
ビットストリームを入力し、動画像ビットストリーム解
析手段２１０に転送する。動画像ビットストリーム解析
手段２１０は転送されてきた動画像ビットストリームを
解析し、検索マーク用音声情報のビットストリームを含
んでいるので並列処理モードを設定し、動画像／音声分
離手段２１１によって検索マーク用音声情報のビットス
トリームを含む動画像ビットストリームを動画像ビット
ストリームと検索マーク用音声情報のビットストリーム
とに分離する。動画像復号化手段２１２は動画像ビット
ストリームを動画像ビットストリーム解析手段２１０に
よる解析結果に従って復号化して画像データを再生し、
復号化した画像データを表示制御手段２０７の制御のも
とでフレームバッファ手段２０５を介して表示手段２０
６により画像として表示する。同時に、音声復号化手段
２１３は検索マーク用音声情報のビットストリームを前
記の解析結果に従って復号化して検索マーク用音声デー
タを再生し、復号化した検索マーク用音声データを音声
出力手段２０８に出力し、検索マーク用音声として出力
する。
【０２３２】以上のことから、本実施の形態１７に係る
画像情報管理用再生装置によれば、再度の検索再生のと
きに再び見たい画像があるときの検索マーク用音声情報
を該当するフレームの画像圧縮符号化データに多重化し
て改めて画像データ記憶手段２０４に動画像ビットスト
リームとして更新的に格納したので、検索再生時に検索
マーク用音声情報を聞きながら再生でき、見落としのな
い正確な画像検索を高速に行うことができる。
【０２３３】なお、上記の実施の形態１〜１２のいずれ
かの画像情報管理用記録装置の機能と、実施の形態１３
〜１７のいずれかの画像情報管理用再生装置の機能とを
一体化した画像情報管理用記録・再生装置を構成するこ
とも可能であり、この場合は、記録装置の機能による作
用と再生装置の機能による作用とを併せ有することがで
きる。
【０２３４】
【発明の効果】本発明に係る画像情報管理用記録装置に
よれば、画像データ記憶手段から静止画画像データを順
次に読み出して動画像ビットストリームの構成要素とし
て選択し、その選択された複数の静止画画像データのそ
れぞれについて時間軸方向での並び順序を決定し、時間
軸方向での並び順序に従って読み出した静止画画像デー
タを圧縮符号化して画像圧縮符号化データを生成して一
時的に格納し、その格納してある画像圧縮符号化データ
を前記の時間軸方向での並び順序で読み出して動画像ビ
ットストリームとして記録しておくように構成してある
ので、画像データ記憶手段において散在している静止画
像（動画像の構成要素である各フレームを含めた広い意
味での静止画像）を順次に読み出して選択し、時間軸方
向での並び順序に従って並べた１つの動画像ビットスト
リームとしてまとめ、そのまとめた動画像ビットストリ
ームを記録しておくことができる。そして、このように
複数の静止画像を時間軸方向に沿って並べて生成された
動画像ビットストリームを記録しておけば、画像情報管
理用再生装置によって検索する際に低速でも高速でもブ
ラウジング（通覧）が可能となる。
【０２３５】また、本発明に係る画像情報管理用再生装
置によれば、複数の静止画画像データの画像圧縮符号化
データを時間軸方向で並べかつ画像圧縮符号化データご
とに分類のための情報（例えば文字列や色相）が付加さ
れた状態の動画像ビットストリームが記憶されている画
像データ記憶手段から前記の動画像ビットストリームを
入力して解析し、その解析結果に従って動画像ビットス
トリームを復号化して画像データを再生し、その画像デ
ータを表示するに際して、検索しようとする分類に係る
情報を指定しておき、この分類のための情報が解析の結
果割り出されたものと一致するときに入力している動画
像ビットストリームの復号化を行うように構成してある
ので、静止画像の検索再生に際して、従来の技術の場合
のような記録媒体に散在している静止画像をディレクト
リをいちいち探りながら検索する場合に比べると、予め
複数の静止画像を選択し、時間軸方向に沿って並べた動
画像ビットストリームとして再生するので、ブラウジン
グ（通覧、流し見）を行うことができ、効率良く画像を
検索することができる。そして、オペレータが検索した
い分類のための情報を設定しておくことにより、動画像
ビットストリームからその情報に対応する画像圧縮符号
化データを抽出し自動的に復号化するので、設定した特
定の分類の静止画像を動画像の状態で再生することとな
り、すべての静止画像を再生する必要がなくなるため、
検索したい画像を素早く見つけ出すことができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１に係る画像情報管理用記
録装置の構成を示すブロック図である。
【図２】実施の形態１において順次にフレーム順序番号
を付けていく様子の説明図である。
【図３】実施の形態１において順次にフレーム順序番号
を付けていった結果として生成された動画像ビットスト
リームの構成要素を示す図である。
【図４】実施の形態１において生成された動画像ビット
ストリームの模式図である。
【図５】実施の形態１の動作を説明するためのフローチ
ャートである。
【図６】実施の形態１の動作を説明するためのフローチ
ャートである（図５の続き）。
【図７】実施の形態１の動作を説明するためのフローチ
ャートである（図６の続き）。
【図８】実施の形態１の動作を説明するためのフローチ
ャートである（図７の続き）。
【図９】本発明の実施の形態２に係る画像情報管理用記
録装置の構成を示すブロック図である。
【図１０】実施の形態２の動作を説明するためのフロー
チャートである。
【図１１】実施の形態２において生成された動画像ビッ
トストリームの構成要素を示す図である。
【図１２】実施の形態２において生成された動画像ビッ
トストリームの模式図である。
【図１３】本発明の実施の形態３に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図１４】実施の形態３の動作を説明するためのフロー
チャートである。
【図１５】本発明の実施の形態４に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図１６】実施の形態４の動作を説明するためのフロー
チャートである。
【図１７】実施の形態４の動作を説明するためのフロー
チャートである（図１６の続き）。
【図１８】実施の形態４において読み出されて表示され
たｍ×ｎ個の静止画画像データの例を示す図である。
【図１９】実施の形態４におけるマルチ画面の画像ファ
イルをもつ動画像ビットストリームの構成要素を示す図
である。
【図２０】実施の形態４において生成された動画像ビッ
トストリームの模式図である。
【図２１】本発明の実施の形態５に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図２２】実施の形態５の動作を説明するためのフロー
チャートである。
【図２３】本発明の実施の形態６に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図２４】実施の形態６の動作を説明するためのフロー
チャートである。
【図２５】実施の形態６において生成された動画像・音
声ビットストリームの模式図である。
【図２６】本発明の実施の形態７に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図２７】実施の形態７における複数の画像ファイルに
ついての分類の様子を示す図である。
【図２８】実施の形態７において生成された分類識別子
と分類内順序番号の優先順位の順に構成要素が並んだ動
画像ビットストリームの構成図である。
【図２９】実施の形態７において生成された動画像ビッ
トストリームの模式図である。
【図３０】実施の形態７の動作を説明するためのフロー
チャートである。
【図３１】実施の形態７の動作を説明するためのフロー
チャートである（図３０の続き）。
【図３２】実施の形態７を変形した画面間圧縮符号化を
伴う実施の形態の動作を説明するためのフローチャート
である。
【図３３】本発明の実施の形態８に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図３４】実施の形態８における分類識別子／分類情報
対応テーブルの構成図である。
【図３５】実施の形態８において生成された分類識別子
と分類内順序番号の優先順位の順に構成要素が並んだ分
類情報付き動画像ビットストリームの構成図である。
【図３６】実施の形態８において生成された分類情報付
き動画像ビットストリームの模式図である。
【図３７】実施の形態８の動作を説明するためのフロー
チャートである。
【図３８】本発明の実施の形態９に係る画像情報管理用
記録装置の構成を示すブロック図である。
【図３９】実施の形態９における分類識別子／分類用部
分画像データ対応テーブルの構成図である。
【図４０】実施の形態９において生成された分類識別子
と分類内順序番号の優先順位の順に構成要素が並んだ分
類用色付き矩形枠付き動画像ビットストリームの構成図
である。
【図４１】実施の形態９において生成された分類用色付
き矩形枠付き動画像ビットストリームの模式図である。
【図４２】実施の形態９の動作を説明するためのフロー
チャートである。
【図４３】本発明の実施の形態１０に係る画像情報管理
用記録装置の構成を示すブロック図である。
【図４４】実施の形態１０における分類識別子／分類用
ラベル色データ対応テーブルの構成図である。
【図４５】実施の形態１０の動作説明図である。
【図４６】実施の形態１０の動作を説明するためのフロ
ーチャートである。
【図４７】本発明の実施の形態１１に係る画像情報管理
用記録装置の構成を示すブロック図である。
【図４８】実施の形態１１の動作を説明するためのフロ
ーチャートである。
【図４９】本発明の実施の形態１２に係る画像情報管理
用記録装置の構成を示すブロック図である。
【図５０】実施の形態１２における分類識別子／分類用
音声データ対応テーブルの構成図である。
【図５１】実施の形態１２の動作を説明するためのフロ
ーチャートである。
【図５２】実施の形態１２の動作を説明するためのフロ
ーチャートである（図５１の続き）。
【図５３】実施の形態１２において生成された分類識別
子と分類内順序番号の優先順位の順に構成要素が並んだ
分類用音声圧縮符号化データが多重化された動画像ビッ
トストリームの構成図である。
【図５４】本発明の実施の形態１３に係る画像情報管理
用再生装置の構成を示すブロック図である。
【図５５】実施の形態１３の通常再生時の動作を説明す
るためのフローチャートである。
【図５６】実施の形態１３の分類指定検索再生モード時
の動作を説明するためのフローチャートである。
【図５７】本発明の実施の形態１４に係る画像情報管理
用再生装置の構成を示すブロック図である。
【図５８】実施の形態１４の分類指定検索再生モード時
の動作を説明するためのフローチャートである。
【図５９】本発明の実施の形態１５に係る画像情報管理
用再生装置の構成を示すブロック図である。
【図６０】実施の形態１５の分類用ラベル色指定検索再
生モード時の動作を説明するためのフローチャートであ
る。
【図６１】実施の形態１５の分類用ラベル色指定検索再
生モード時の動作を説明するためのフローチャートであ
る（図６０の続き）。
【図６２】本発明の実施の形態１６に係る画像情報管理
用再生装置の構成を示すブロック図である。
【図６３】実施の形態１６の検索マーク書込位置指定モ
ード時の動作を説明するためのフローチャートである。
【図６４】実施の形態１６の検索マーク書込モード時の
動作を説明するためのフローチャートである。
【図６５】実施の形態１６の検索マーク再生モード時の
動作を説明するためのフローチャートである。
【図６６】本発明の実施の形態１７に係る画像情報管理
用再生装置の構成を示すブロック図である。
【図６７】実施の形態１７の検索マーク用音声情報付加
モード時の動作を説明するためのフローチャートであ
る。
【図６８】従来の一般的なコンピュータのファイルシス
テム中で存在する静止画についての階層ディレクトリの
構造を示す図である。
【図６９】従来の技術において複数フレーム分の静止画
を読み出したときの様子を模式的に示す図である。
【図７０】従来の技術において複数の静止画がディスプ
レイ画面に子画面として一覧表示した状態を示す図であ
る。
【符号の説明】
１０１……制御手段 １０２……プログラム格納手段 １０３……ワーキングメモリ手段 １０４……画像データ記憶手段 １０５……画像データ入力手段 １０６……映像信号受信手段 １０７……モデム １０８……ネットワーク接続手段 １０９……フレームバッファ手段 １１０……表示手段 １１１……表示制御手段 １１２……入力操作手段 １１３……画像選択手段 １１４……画像順序決定手段 １１５……動画像符号化手段 １１５ａ…動画像画面内符号化手段 １１５ｂ…動画像画面間符号化手段 １１６……動画像ビットストリーム記録手段 １１６ａ…動画像・音声ビットストリーム記録手段 １１７……バス １１８……画素間引き手段 １１９……マルチ画面画像データ生成手段 １２０……画面間差分生成手段 １２１……画面間差分評価手段 １２２……画面内／画面間選択手段 １２３……音声データ入力手段 １２４……音声符号化手段 １２５……画像・音声多重化手段 １２６……画像分類手段 １２７……分類情報付加手段 １２７ａ…分類識別子／分類情報対応テーブル １２８……分類用部分画像データ生成手段 １２８ａ…分類識別子／分類用部分画像データ対応テー
ブル １２９……分類用部分画像データ付加手段 １３０……分類用ラベル色生成手段 １３０ａ…分類識別子／分類用ラベル色データ対応テー
ブル １３１……分類用ラベル色ビットストリーム生成手段 １３２……分類用ラベル色ビットストリーム付加手段 １３３……分類用ＧＯＰスタートコード生成手段 １３４……分類用ＧＯＰスタートコード付加手段 １３５……分類用音声データ生成手段 １３５ａ…分類識別子／分類用音声データ対応テーブル １３６……分類用音声データ符号化手段 ２０１……制御手段 ２０２……プログラム格納手段 ２０３……ワーキングメモリ手段 ２０４……画像データ記憶手段 ２０５……フレームバッファ手段 ２０６……表示手段 ２０７……表示制御手段 ２０８……音声出力手段 ２０９……入力操作手段 ２１０……動画像ビットストリーム解析手段 ２１１……動画像／音声分離手段 ２１２……動画像復号化手段 ２１３……音声復号化手段 ２１４……バス ２１６……再生速度可変手段 ２１７……分類情報指定手段 ２１８……分類情報判定手段 ２１９……分類色情報指定手段 ２２０……分類色情報判定手段 ２２１……分類用ラベル色指定手段 ２２２……動画像１マクロブロック復号化手段 ２２３……ラベル色情報判定手段 ２２４……検索マーク書込位置指定手段 ２２５……検索マーク書込手段 ２２６……ユーザーデータ領域抽出手段 ２２７……検索マーク検出手段 ２２８……音声データ入力手段 ２２９……音声符号化手段 ２３０……画像・音声多重化手段 ９００……分類番号・分類内順序番号 ９００ａ…分類番号 ９００ｂ…分類内順序番号 １０００……動画像ビットストリーム １０００ａ…動画像・音声ビットストリーム １０００ｂ…分類情報付き動画像ビットストリーム １０００ｃ…分類用色付き矩形枠付き動画像ビットスト
リーム １０００ｄ…分類用音声圧縮符号化データが多重化され
た動画像ビットストリーム １０５０……第１ライン先頭マクロブロック １１００……分類用ラベル色ビットストリーム １１１０……分類用ラベル色画像

Claims (25)

    【特許請求の範囲】
  1. 【請求項１】 複数の静止画画像データを記憶しておく
    画像データ記憶手段と、前記画像データ記憶手段から静
    止画画像データを順次にすべて読み出して動画像ビット
    ストリームの構成要素として選択する画像選択手段と、
    前記の選択された複数の静止画画像データのそれぞれに
    ついて時間軸方向での並び順序を読み出し順に決定して
    いく画像順序決定手段と、時間軸方向での並び順序に従
    って読み出した静止画画像データを圧縮符号化して画像
    圧縮符号化データを生成し一時的に格納する動画像符号
    化手段と、前記の画像圧縮符号化データを前記の時間軸
    方向での並び順序で読み出して動画像ビットストリーム
    として記録しておく動画像ビットストリーム記録手段と
    を備えたことを特徴とする画像情報管理用記録装置。
  2. 【請求項２】 複数の静止画画像データを記憶しておく
    画像データ記憶手段と、前記画像データ記憶手段から読
    み出された静止画画像データを表示する表示手段と、表
    示された静止画画像データを動画像ビットストリームの
    構成要素として適宜に選択する画像選択手段と、前記の
    選択された複数の静止画画像データのそれぞれについて
    時間軸方向での並び順序を決定する画像順序決定手段
    と、前記の時間軸方向での並び順序に従って前記画像デ
    ータ記憶手段から該当する静止画画像データを読み込ん
    で圧縮符号化して画像圧縮符号化データを生成し一時的
    に格納する動画像符号化手段と、前記の画像圧縮符号化
    データを前記の時間軸方向での並び順序で読み出して動
    画像ビットストリームとして記録しておく動画像ビット
    ストリーム記録手段とを備えたことを特徴とする画像情
    報管理用記録装置。
  3. 【請求項３】 画像順序決定手段が画像データ記憶手段
    から読み出した静止画画像データに対して画素間間引き
    処理を実行してから動画像符号化手段に転送する画素間
    引き手段を備えたことを特徴とする請求項１または請求
    項２に記載の画像情報管理用記録装置。
  4. 【請求項４】 画像順序決定手段が画像データ記憶手段
    から読み出した複数の静止画画像データをまとめてマル
    チ画面の１フレーム分の静止画画像データに合成して動
    画像符号化手段に転送するマルチ画面画像データ生成手
    段を備えたことを特徴とする請求項１から請求項３まで
    のいずれかに記載の画像情報管理用記録装置。
  5. 【請求項５】 画像データ記憶手段から読み出された互
    いに隣り合う選択静止画画像データの画面間差分を生成
    する画面間差分生成手段と、生成された画面間差分を所
    定値と大小比較する画面間差分評価手段と、評価の結
    果、画面間差分が所定値以下のときに画面間符号化を選
    択し、画面間差分が所定値よりも大きいときに画面内符
    号化を選択する画面内／画面間選択手段と、画面間圧縮
    符号化が選択されたときに起動して選択静止画画像デー
    タの画面間圧縮符号化を行う動画像画面間符号化手段
    と、画面内圧縮符号化が選択されたときに起動して選択
    静止画画像データの画面内圧縮符号化を行う動画像画面
    内符号化手段とを備えたことを特徴とする請求項１から
    請求項４までのいずれかに記載の画像情報管理用記録装
    置。
  6. 【請求項６】 入力した検索補助用の音声データを圧縮
    符号化して音声圧縮符号化データを生成する音声符号化
    手段と、動画像符号化手段からの画像圧縮符号化データ
    と前記音声符号化手段からの音声圧縮符号化データとを
    １フレーム単位で多重化して画像・音声多重化データを
    生成する画像・音声多重化手段と、動画像ビットストリ
    ーム記録手段に代えて、生成された画像・音声多重化デ
    ータを所定の時間軸方向での並び順序に従って読み出し
    て動画像・音声ビットストリームとして記録しておく動
    画像・音声ビットストリーム記録手段とを備えたことを
    特徴とする請求項１から請求項５までのいずれかに記載
    の画像情報管理用記録装置。
  7. 【請求項７】 所定の要件に従って選択静止画画像デー
    タに分類番号としての分類識別子を付加する画像分類手
    段を備え、画像順序決定手段は前記分類識別子が付加さ
    れた選択静止画画像データに対してその分類識別子の中
    で時間軸方向での並び順序としての分類内順序番号を付
    加するように構成されていることを特徴とする請求項１
    から請求項６までのいずれかに記載の画像情報管理用記
    録装置。
  8. 【請求項８】 画像分類手段が静止画画像データに最も
    大きい割合で含まれる色合いに基づいて分類番号として
    の分類識別子を付加するように構成されていることを特
    徴とする請求項７に記載の画像情報管理用記録装置。
  9. 【請求項９】 分類番号としての分類識別子が同一の選
    択静止画画像データについて画面間圧縮符号化を行う動
    画像画面間符号化手段を備えたことを特徴とする請求項
    ７または請求項８に記載の画像情報管理用記録装置。
  10. 【請求項１０】 動画像ビットストリームを生成する際
    に読み出された画像圧縮符号化データに対して分類番号
    としての分類識別子に対応した分類情報を付加する分類
    情報付加手段を備え、動画像ビットストリーム記録手段
    に分類情報付き動画像ビットストリームを記録するよう
    に構成してあることを特徴とする請求項７から請求項９
    までのいずれかに記載の画像情報管理用記録装置。
  11. 【請求項１１】 分類情報を画像圧縮符号化データのヘ
    ッダのユーザーデータ領域に記録するように構成してあ
    ることを特徴とする請求項１０に記載の画像情報管理用
    記録装置。
  12. 【請求項１２】 動画像ビットストリームを生成する際
    に読み出された画像圧縮符号化データに対してその分類
    識別子に対応した分類用部分画像データを生成する分類
    用部分画像データ生成手段と、生成された分類用部分画
    像データを読み出された画像圧縮符号化データに対して
    スーパーインポーズ的に付加する分類用部分画像データ
    付加手段とを備え、動画像ビットストリーム記録手段に
    分類用部分画像付きの動画像ビットストリームを記録す
    るように構成してあることを特徴とする請求項７から請
    求項９までのいずれかに記載の画像情報管理用記録装
    置。
  13. 【請求項１３】 分類用部分画像データが色付き矩形枠
    画像データとして構成されていることを特徴とする請求
    項１２に記載の画像情報管理用記録装置。
  14. 【請求項１４】 動画像ビットストリームを生成する際
    に読み出された画像圧縮符号化データに対してその分類
    識別子に対応した色相の分類用ラベル色データを生成す
    る分類用ラベル色生成手段と、生成された分類用ラベル
    色データに対応した１マクロブロック分の分類用ラベル
    色ビットストリームを生成する分類用ラベル色ビットス
    トリーム生成手段と、生成された分類用ラベル色ビット
    ストリームを画像圧縮符号化データにおける第１ライン
    あるいは最終ラインの先頭マクロブロックとして付加す
    る分類用ラベル色ビットストリーム付加手段とを備え、
    動画像ビットストリーム記録手段に分類用ラベル色ビッ
    トストリーム付きの動画像ビットストリームとして記録
    するように構成してあることを特徴とする請求項７から
    請求項９までのいずれかに記載の画像情報管理用記録装
    置。
  15. 【請求項１５】 画像分類手段は所定の要件に従って静
    止画像を分類し、同じ分類の静止画像群を同じＧＯＰ
    （グループオブピクチャ；ＭＰＥＧで規定されている符
    号化単位）としてまとめるために、その静止画画像デー
    タに分類識別子を付けるように構成されており、かつ、
    動画像ビットストリームを生成する際に読み出された画
    像圧縮符号化データに対してその分類識別子に対応した
    ＧＯＰヘッダに設定するための分類用ＧＯＰスタートコ
    ードを生成する分類用ＧＯＰスタートコード生成手段
    と、生成された分類用ＧＯＰスタートコードを画像圧縮
    符号化データにおけるＧＯＰヘッダに付加する分類用Ｇ
    ＯＰスタートコード付加手段とを備え、動画像ビットス
    トリーム記録手段に分類用ＧＯＰスタートコード付きの
    動画像ビットストリームとして記録するように構成して
    あることを特徴とする請求項７から請求項９までのいず
    れかに記載の画像情報管理用記録装置。
  16. 【請求項１６】 動画像ビットストリームを生成する際
    に読み出された画像圧縮符号化データに付随している分
    類識別子に対応した分類用音声データを生成する分類用
    音声データ生成手段と、生成された分類用音声データを
    圧縮符号化して分類用音声圧縮符号化データを生成する
    分類用音声データ符号化手段と、動画像符号化手段から
    の画像圧縮符号化データと前記分類用音声データ符号化
    手段からの分類用音声圧縮符号化データとを多重化して
    画像・分類用音声多重化データを生成する画像・音声多
    重化手段と、動画像ビットストリーム記録手段に代え
    て、生成された画像・分類用音声多重化データを所定の
    時間軸方向での並び順序に従って読み出して分類用音声
    圧縮符号化データ付きの動画像ビットストリームとして
    記録しておく動画像・音声ビットストリーム記録手段と
    を備えたことを特徴とする請求項７から請求項９までの
    いずれかに記載の画像情報管理用記録装置。
  17. 【請求項１７】 上記請求項１から請求項１６までのい
    ずれかにおいて、動画像ビットストリーム記録手段が画
    像データ記憶手段をもって兼用されていることを特徴と
    する請求項１から請求項１６までのいずれかに記載の画
    像情報管理用記録装置。
  18. 【請求項１８】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べかつ画像圧縮符号化デー
    タごとに検索補助用の音声圧縮符号化データが多重化さ
    れた状態の動画像・音声ビットストリームが記憶されて
    いる画像データ記憶手段から前記の動画像・音声ビット
    ストリームを入力して解析する動画像ビットストリーム
    解析手段と、前記動画像・音声ビットストリームを動画
    像ビットストリームと音声ビットストリームとに分離す
    る動画像／音声分離手段と、分離された動画像ビットス
    トリームを解析結果に従って復号化して画像データを再
    生する動画像復号化手段と、再生された画像データを表
    示する表示手段と、分離された音声ビットストリームを
    解析結果に従って復号化して音声データを再生する音声
    復号化手段と、再生された音声データを出力する音声出
    力手段とを備えたことを特徴とする画像情報管理用再生
    装置。
  19. 【請求項１９】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べかつ画像圧縮符号化デー
    タごとに分類情報が付加された状態の動画像ビットスト
    リームが記憶されている画像データ記憶手段から前記の
    動画像ビットストリームを入力して解析する動画像ビッ
    トストリーム解析手段と、動画像ビットストリームを解
    析結果に従って復号化して画像データを再生する動画像
    復号化手段と、再生された画像データを表示する表示手
    段とを備えた画像情報管理用再生装置であって、検索し
    ようとする分類に係る分類情報を指定する分類情報指定
    手段と、前記動画像ビットストリーム解析手段の解析の
    結果割り出された分類情報が前記指定した分類情報と一
    致するか否かを判定し一致するときに入力している動画
    像ビットストリームの復号化を許可する分類情報判定手
    段とを備えたことを特徴とする画像情報管理用再生装
    置。
  20. 【請求項２０】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べかつ画像圧縮符号化デー
    タごとに色付き矩形枠画像データが多重化された状態の
    動画像ビットストリームが記憶されている画像データ記
    憶手段から前記の動画像ビットストリームを入力して解
    析する動画像ビットストリーム解析手段と、動画像ビッ
    トストリームを解析結果に従って復号化して画像データ
    を再生する動画像復号化手段と、再生された画像データ
    を表示する表示手段とを備えた画像情報管理用再生装置
    であって、検索しようとする分類に係る分類色情報を指
    定する分類色情報指定手段と、前記動画像ビットストリ
    ーム解析手段の解析の結果割り出された色付き矩形枠画
    像データの分類色情報が前記指定した分類色情報と一致
    するか否かを判定し一致するときに入力している動画像
    ビットストリームの復号化を許可する分類色情報判定手
    段とを備えたことを特徴とする画像情報管理用再生装
    置。
  21. 【請求項２１】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べかつ画像圧縮符号化デー
    タにおける第１ライン先頭マクロブロックに分類用ラベ
    ル色ビットストリームが付加された状態の動画像ビット
    ストリームが記憶されている画像データ記憶手段から前
    記の動画像ビットストリームを入力して解析する動画像
    ビットストリーム解析手段と、動画像ビットストリーム
    を解析結果に従って復号化して画像データを再生する動
    画像復号化手段と、再生された画像データを表示する表
    示手段とを備えた画像情報管理用再生装置であって、検
    索しようとする分類に係るラベル色情報を指定する分類
    用ラベル色指定手段と、前記動画像ビットストリーム解
    析手段の解析の結果割り出された第１ライン先頭マクロ
    ブロックのラベル色情報が前記指定したラベル色情報と
    一致するか否かを判定し一致するときに入力している動
    画像ビットストリームの第１ライン先頭マクロブロック
    の復号化を許可するラベル色情報判定手段と、許可があ
    ったときに分離された動画像ビットストリームの第１ラ
    イン先頭マクロブロックのみを復号化する動画像１マク
    ロブロック復号化手段とを備えたことを特徴とする画像
    情報管理用再生装置。
  22. 【請求項２２】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べた状態の動画像ビットス
    トリームが記憶されている画像データ記憶手段から前記
    の動画像ビットストリームを入力して解析する動画像ビ
    ットストリーム解析手段と、動画像ビットストリームを
    解析結果に従って復号化して画像データを再生する動画
    像復号化手段と、再生された画像データを表示する表示
    手段とを備えた画像情報管理用再生装置であって、検索
    マーク情報を書き込みたいフレームの時間軸方向位置を
    指定する検索マーク書込位置指定手段と、動画像ビット
    ストリーム解析手段の解析結果によって現在入力してい
    るフレームの時間軸方向位置と前記検索マーク書込位置
    指定手段に設定した時間軸方向位置とが一致したときに
    各フレームの画像圧縮符号化データのユーザーデータ領
    域の抽出を行うユーザーデータ領域抽出手段と、抽出し
    たユーザーデータ領域に検索マーク情報を書き込む検索
    マーク書込手段と、再度の検索再生時に前記のユーザー
    データ領域に書き込まれている検索マーク情報を検出し
    て動画像ビットストリームの復号化を許可する検索マー
    ク検出手段とを備えたことを特徴とする画像情報管理用
    再生装置。
  23. 【請求項２３】 検索マーク書込手段が複数種類の検索
    マーク情報の中から任意の検索マーク情報を選択してユ
    ーザーデータ領域に書き込むように構成されていること
    を特徴とする請求項２２に記載の画像情報管理用再生装
    置。
  24. 【請求項２４】 複数の静止画画像データの画像圧縮符
    号化データを時間軸方向で並べた状態の動画像ビットス
    トリームが記憶されている画像データ記憶手段から前記
    の動画像ビットストリームを入力して解析する動画像ビ
    ットストリーム解析手段と、動画像ビットストリームを
    解析結果に従って復号化して画像データを再生する動画
    像復号化手段と、再生された画像データを表示する表示
    手段とを備えた画像情報管理用再生装置であって、検索
    マーク用音声情報を多重化したいフレームの時間軸方向
    位置を指定する検索マーク書込位置指定手段と、検索マ
    ーク用の音声データを入力する音声データ入力手段と、
    入力した音声データを圧縮符号化する音声符号化手段
    と、前記画像データ記憶手段から読み出した動画像ビッ
    トストリームの画像圧縮符号化データに前記の音声圧縮
    符号化データを多重化する画像・音声多重化手段とを備
    え、前記動画像ビットストリーム解析手段はその解析結
    果によって現在入力しているフレームの時間軸方向位置
    と前記検索マーク書込位置指定手段に設定した時間軸方
    向位置とが一致したときに前記画像・音声多重化手段を
    起動してそのフレームの画像圧縮符号化データに対して
    音声圧縮符号化データを多重化し、その検索マーク用音
    声情報の圧縮符号化データを多重化した動画像ビットス
    トリームを前記画像データ記憶手段に格納するように構
    成されていることを特徴とする画像情報管理用再生装
    置。
  25. 【請求項２５】 請求項１から請求項１７までに記載の
    いずれかの画像情報管理用記録装置の機能と、請求項１
    ８から請求項２４までに記載のいずれかの画像情報管理
    用再生装置の機能とを一体化してあることを特徴とする
    画像情報管理用記録・再生装置。
JP22716196A 1996-08-28 1996-08-28 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置 Pending JPH1070703A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP22716196A JPH1070703A (ja) 1996-08-28 1996-08-28 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP22716196A JPH1070703A (ja) 1996-08-28 1996-08-28 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置

Publications (1)

Publication Number Publication Date
JPH1070703A true JPH1070703A (ja) 1998-03-10

Family

ID=16856458

Family Applications (1)

Application Number Title Priority Date Filing Date
JP22716196A Pending JPH1070703A (ja) 1996-08-28 1996-08-28 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置

Country Status (1)

Country Link
JP (1) JPH1070703A (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064154A1 (fr) * 1999-04-15 2000-10-26 Sony Corporation Dispositif d'imagerie et procede de traitement de signaux
JP2007307395A (ja) * 2003-04-25 2007-11-29 Olympus Corp 画像表示装置、画像表示方法および画像表示プログラム
JP2007307397A (ja) * 2003-04-25 2007-11-29 Olympus Corp 画像表示装置、画像表示方法および画像表示プログラム
US8614715B2 (en) 2006-02-20 2013-12-24 Nikon Corporation Moving image file producing method, computer program product and electronic camera

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000064154A1 (fr) * 1999-04-15 2000-10-26 Sony Corporation Dispositif d'imagerie et procede de traitement de signaux
US7027086B1 (en) 1999-04-15 2006-04-11 Sony Corporation Photographing apparatus and signal processing method that allow data of still pictures to be converted into a moving picture file
JP2007307395A (ja) * 2003-04-25 2007-11-29 Olympus Corp 画像表示装置、画像表示方法および画像表示プログラム
JP2007307397A (ja) * 2003-04-25 2007-11-29 Olympus Corp 画像表示装置、画像表示方法および画像表示プログラム
US8614715B2 (en) 2006-02-20 2013-12-24 Nikon Corporation Moving image file producing method, computer program product and electronic camera

Similar Documents

Publication Publication Date Title
US6370316B1 (en) Apparatus for retrieving and administrating moving pictures and related network system
KR100997599B1 (ko) 콘텐츠 처리 방법
KR100564893B1 (ko) 프레임정보 기술방법 및 그 장치, 프레임정보 생성방법 및 그 장치, 특수재생방법 및 그 장치, 특수재생 제어정보 생성장치 및 컴퓨터 독출가능한 기록매체
EP1276108B1 (en) Method for recording multimedia information on an optical disc
WO1998021722A1 (en) Apparatus and method of generating bit stream for information recording disc storage which enables seamless reproduction of a plurality of pieces of image information, and recording medium on which program applied to the generating apparatus is recorded
KR100493674B1 (ko) 멀티미디어 데이터 검색 및 브라우징 시스템
US20020133486A1 (en) Video retrieval and browsing apparatus, video retrieval, browsing and editing apparatus, and recording medium
KR960038892A (ko) 재생 데이타의 속성 정보를 이용하여 재생 데이타를 재생하는 시스템 및 그 재생 방법
JP2011103688A (ja) 再生方法
CN1371502B (zh) 活动图像检索信息记录装置及活动图像检索装置
CN106790558B (zh) 一种影片多版本整合存储和提取系统
JP2002125199A (ja) フレーム情報記述方法、フレーム情報生成装置及び方法、映像再生装置及び方法並びに記録媒体
JP3060919B2 (ja) 圧縮動画像復号・表示装置および圧縮動画像簡易編集装置
JP2012217144A (ja) 画像編集装置、画像編集方法、およびプログラム
KR20080030490A (ko) 기록 및 재생장치 및 기록 및 재생방법
JP2009004999A (ja) 映像データ管理装置
WO2005001835A1 (en) System for authoring a multimedia enabled disc
JP2007336283A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2005142853A (ja) 映像編集装置及び映像編集方法
JPH1070703A (ja) 画像情報管理用記録装置および画像情報管理用再生装置および画像情報管理用記録・再生装置
JP2000516006A (ja) 複数のキーフレームを並列に表示することによりビデオ内容を案内する方法及び装置
JPH08287654A (ja) 記録媒体に記録されているデータを再生する再生装置とその再生方法
JP2004127398A (ja) 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
Smeaton Indexing, browsing, and searching of digital video and digital audio information
JP3581085B2 (ja) 二次コンテンツ生成システム及びその方法並びに二次コンテンツ生成プログラムを記録した記録媒体