JPH09161455A - インデックス自動生成装置 - Google Patents

Abstract

(57)【要約】 【課題】映像データの検索、頭出し、編集、加工等に必
要なインデックスを付与するには、極めて手間のかかる
作業が必要であるという課題。 【解決手段】映像信号を受けとり、前記映像信号の時間
当りの画素変化率があらかじめ設定された値より大きい
場合、カットの切り替わりであると判定するカット切り
替わり判定手段１０１と、カット切り替わり判定手段１
０１がカットの切り替わりであると判定した時、過去の
カットの切り替わりからの経過時間を算出するカット継
続時間測定手段３０６と、カット切り替わり判定手段１
０１がカットの切り替わりであると判定した時、カット
の切り替わりを示す情報とカット継続時間測定手段３０
６が算出した過去のカットの切り替わりからの経過時間
の情報を含むインデックスを作成し、記憶装置１０３に
格納するインデックス記録手段１０２等を備える。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、例えば、ＶＴＲや
ビデオムービーなどのように映像、音声及びその他の付
加データを記録し、その編集、加工等を行なう映像情報
蓄積装置等に使用可能な、インデックス自動生成装置に
関するものである。

【０００２】

【従来の技術】近年、情報記録装置の容量増大、性能向
上、低価格化が急速に進んでいる。一方、マルチメディ
ア化の流れの中で、映像を含む情報の量が爆発的に増加
してきているため、大量の映像情報から必要な情報を効
率良く抽出することが困難になってきている。このよう
な問題の解決のために映像データにインデックス情報を
付加して記憶させ、情報の抽出にはこのインデックス情
報を利用する手法が従来より行なわれている。インデッ
クス情報を付加するのはインデックス生成装置で、一般
的な映像記録編集装置に内蔵されているインデックス生
成装置では、現在記録している、あるいはすでに記録済
の映像を視認しながら必要な箇所にインデックスの挿入
操作を行なっている。

【０００３】以下図面を参照しながら、上記した従来の
インデックス生成装置の一例について説明する。

【０００４】図１１は従来のインデックス生成装置のブ
ロック図を示すものである。図１１において、１１０１
はインデックス挿入位置判定手段、１１０２はインデッ
クス記録手段、１１０３は記憶装置である。

【０００５】インデックス挿入位置判定手段１００１が
インデックス記録手段１１０２に接続され、インデック
ス記録手段１１０２が記憶装置１１０３に接続されてい
る。また、音声データを含む映像信号がインデックス挿
入位置判定手段１１０１に入力されている。また、映像
信号がインデックス挿入位置判定手段１１０１と記憶装
置１１０３に入力されている。

【０００６】以上のように構成された従来のインデック
ス生成装置について、その動作を説明する。

【０００７】インデックス挿入位置判定手段１１０１
は、入力された映像信号に対し、カットやシーンの切替
え、ポイントとなる映像などをオペレータの指示により
抽出する。

【０００８】インデックス記録手段１１０２は、インデ
ックス挿入位置判定手段１１０１によって抽出されたイ
ンデックス挿入位置に基づいてシーン内容などの情報を
含むインデックスを作成し、記録装置１１０３に映像信
号と並行して同期記録する。

【０００９】

【発明が解決しようとする課題】しかしながら上記のよ
うな構成では、映像データの検索、頭出し、編集、加工
等を自動的あるいは効率的に行なうために必要なインデ
ックスの付与を人手によって行なわなければならないた
め、作業工数が多くかかってしまうという問題点を有し
ていた。

【００１０】本発明は上記問題点に鑑み、映像信号ある
いは音声信号に対して、従来に比べてより一層簡単にイ
ンデックスを付与することが可能なインデックス自動生
成装置を提供することを目的とする。

【００１１】

【課題を解決するための手段】請求項１記載のインデッ
クス自動生成装置は、例えば、映像信号を受けとり、前
記映像信号の時間当りの画素変化率があらかじめ設定さ
れた値より大きい場合、カットの切り替わりであると判
定するカット切り替わり判定手段と、前記カット切り替
わり判定手段がカットの切り替わりであると判定した
時、カットの切り替わりを示すインデックスを作成し、
記憶装置に格納するインデックス記録手段とを備えたこ
とを特徴とする。

【００１２】請求項２記載のインデックス自動生成装置
は、例えば、映像信号を受けとり、前記映像信号の時間
当りの画素変化率があらかじめ設定された値より大きい
場合、カットの切り替わりであると判定するカット切り
替わり判定手段と、前記カット切り替わり判定手段がカ
ットの切り替わりであると判定した時、カットの切り替
わり時刻を測定する時刻測定手段と、前記カット切り替
わり判定手段がカットの切り替わりであると判定した
時、カットの切り替わりを示す情報と前記時刻測定手段
が測定したカットの切り替わり時刻の情報を含むインデ
ックスを作成し、記憶装置に格納するインデックス記録
手段とを備えたことを特徴とする。

【００１３】請求項３記載のインデックス自動生成装置
は、例えば、映像信号を受けとり、前記映像信号の時間
当りの画素変化率があらかじめ設定された値より大きい
場合、カットの切り替わりであると判定するカット切り
替わり判定手段と、前記カット切り替わり判定手段がカ
ットの切り替わりであると判定した時、過去のカットの
切り替わりからの経過時間を算出するカット継続時間測
定手段と、前記カット切り替わり判定手段がカットの切
り替わりであると判定した時、カットの切り替わりを示
す情報と前記カット継続時間測定手段が算出した過去の
カットの切り替わりからの経過時間の情報を含むインデ
ックスを作成し、記憶装置に格納するインデックス記録
手段とを備えたことを特徴とする。

【００１４】請求項４記載のインデックス自動生成装置
は、例えば、映像信号を受け取り、前記映像信号のあら
かじめ設定された範囲の各ピクセルの色調の平均値の時
間当りの変化率があらかじめ設定された値より大きい場
合、シーンの切り替わりであると判定するシーン切り替
わり判定手段と、前記シーン切り替わり判定手段がシー
ンの切り替わりであると判定した時、シーンの切り替わ
りを示すインデックスを作成し、記憶装置に格納するイ
ンデックス記録手段とを備えたことを特徴とする。

【００１５】請求項５記載のインデックス自動生成装置
は、例えば、音声信号を受け取り、前記音声信号の時間
当りの音声レベルの変化率があらかじめ設定された値よ
り大きい場合、音声レベルに一定以上の変化があると判
定する音声レベル変化判定手段と、前記音声レベル変化
判定手段が音声レベルに一定以上の変化があると判定し
た時、索引情報を作成し、記憶装置に格納するインデッ
クス記録手段とを備えたことを特徴とする。

【００１６】請求項６記載のインデックス自動生成装置
は、例えば、音声信号を受け取り、前記音声信号から音
階情報を抽出する音階情報抽出手段と、前記音階情報抽
出手段により抽出された音階情報とあらかじめ記憶部に
蓄積されている音階情報とが同一の場合、同一音階情報
であると判定する同一音階情報判定手段と、前記同一音
階情報判定手段が同一音階情報であると判定した時、索
引情報を生成し、記憶装置に格納するインデックス記録
手段とを備えたことを特徴とする。

【００１７】請求項１記載のインデックス自動生成装置
は前記した構成により、例えば、カット切り替わり判定
手段が映像信号を受けとり、前記映像信号の時間当りの
画素変化率があらかじめ設定された値より大きい場合、
カットの切り替わりであると判定し、カット切り替わり
判定手段がカットの切り替わりであると判定した時、イ
ンデックス記録手段がカットの切り替わりを示すインデ
ックスを作成し、記憶装置に格納することを可能とす
る。

【００１８】請求項２記載のインデックス自動生成装置
は前記した構成により、例えば、カット切り替わり判定
手段が映像信号を受けとり、前記映像信号の時間当りの
画素変化率があらかじめ設定された値より大きい場合、
カットの切り替わりであると判定し、カット切り替わり
判定手段がカットの切り替わりであると判定した時、時
刻測定手段がカットの切り替わり時刻を測定し、カット
切り替わり判定手段がカットの切り替わりであると判定
した時、インデックス記録手段がカットの切り替わりを
示す情報とカットの切り替わり時刻の情報を含むインデ
ックスを作成し、記憶装置に格納することを可能とす
る。

【００１９】請求項３記載のインデックス自動生成装置
は前記した構成により、例えば、カット切り替わり判定
手段が映像信号を受けとり、前記映像信号の時間当りの
画素変化率があらかじめ設定された値より大きい場合、
カットの切り替わりであると判定し、カット切り替わり
判定手段がカットの切り替わりであると判定した時、カ
ット継続時間測定手段が過去のカットの切り替わりから
の経過時間を算出し、カット切り替わり判定手段がカッ
トの切り替わりであると判定した時、インデックス記録
手段がカットの切り替わりを示す情報と算出した過去の
カットの切り替わりからの経過時間の情報を含むインデ
ックスを作成し、記憶装置に格納することを可能とす
る。

【００２０】請求項４記載のインデックス自動生成装置
は前記した構成により、例えば、シーン切り替わり判定
手段が映像信号を受け取り、前記映像信号のあらかじめ
設定された範囲の各ピクセルの色調の平均値の時間当り
の変化率があらかじめ設定された値より大きい場合、シ
ーンの切り替わりであると判定し、シーン切り替わり判
定手段がシーンの切り替わりであると判定した時、イン
デックス記録手段がシーンの切り替わりを示すインデッ
クスを作成し、記憶装置に格納することを可能とする。

【００２１】請求項５記載のインデックス自動生成装置
は前記した構成により、音声レベル変化判定手段が音声
信号を受け取り、前記音声信号の時間当りの音声レベル
の変化率があらかじめ設定された値より大きい場合、音
声レベルに一定以上の変化があると判定し、音声レベル
変化判定手段が音声レベルに一定以上の変化があると判
定した時、インデックス記録手段が索引情報を作成し、
記憶装置に格納することを可能とする。

【００２２】請求項６記載のインデックス自動生成装置
は前記した構成により、例えば、音階情報抽出手段が音
声信号を受け取り、前記音声信号から音階情報を抽出
し、同一音階情報判定手段が抽出された音階情報とあら
かじめ記憶部に蓄積されている音階情報とが同一の場
合、同一音階情報であると判定し、同一音階情報判定手
段が同一音階情報であると判定した時、インデックス記
録手段が索引情報を生成し、記憶装置に格納することを
可能とする。

【００２３】

【発明の実施の形態】以下、本発明のインデックス自動
生成装置の実施の形態について、図面を参照しながら説
明する。

【００２４】図１は請求項１記載の発明の実施の形態に
おけるインデックス自動生成装置のブロック図を示すも
のである。図１において、１０１は、本発明の映像切り
替わり判定手段としてのカット切り替わり判定手段、１
０２はインデックス記録手段、１０３は記憶装置であ
る。

【００２５】カット切り替わり判定手段１０１がインデ
ックス記録手段１０２に接続され、インデックス記録手
段１０２が記憶装置１０３に接続されている。また、映
像信号がカット切り替わり判定手段１０１と記憶装置１
０３に入力されている。

【００２６】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００２７】カット切り替わり判定手段１０１は、 （１）サンプリング時間単位Δｔ（例えばΔｔ＝１／３
０秒）ごとに映像信号を８×８画素のブロックに分割
し、各ブロックに対して離散コサイン変換（Ｄｉｓｃｒ
ｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理を行
なう。離散コサイン変換で得られたＤＣＴ係数のうちＤ
Ｃ成分を量子化して各ブロックごとの値を求める。

【００２８】（２）各ブロックごとに、量子化された値
とΔｔ時間前の値との差分を求め、その平均値を求め
る。

【００２９】（３）（２）で得られた差分の平均値があ
らかじめ定められた値より大きい場合カットの切り替わ
りであると判定する。

【００３０】（４）（１）から（３）を繰り返す。

【００３１】インデックス記録手段１０２は、カット切
り替わり判定手段１０１がカットの切り替わりであると
判定した時、カットの切り替わりを示すインデックスを
作成し、記憶装置１０３に映像信号と並行して同期記録
する。

【００３２】以上説明したように本実施の形態によれ
ば、映像信号を記録する時、自動的にカット切り替わり
を示すインデックスを同時記録するので、映像のカット
単位での検索・頭出し・選別・並べ替えが容易に実現で
きる。

【００３３】例えば、膨大な映像記録の中からオペレー
タが所望するカットを検索する場合、カット切り替わり
直後の静止画像を抜きだし、その静止画をディスプレイ
上に複数枚並べることにより、オペレータが簡便かつ迅
速に所望するカットを見つけ出すといった検索方法に利
用出来る。又、例えば、再生時のカットごとの飛び越し
再生などにも利用出来る。

【００３４】尚、本実施の形態は、映像の切り替わり
を、上述のように、画素値の時間的な変化に着目し、離
散コサイン変換を利用することによって、判定しようす
るものである。従って、このようにして、判定される映
像の切り替わりを、ここでは、単にカットの切り替わり
と呼んだにすぎない。

【００３５】本発明はこれらを実現するために必要不可
欠であったインデックスを従来は人為的に作成しなけれ
ばならなかったところを自動化した。

【００３６】以下請求項２記載の発明の一実施の形態の
インデックス自動生成装置について、図面を参照しなが
ら説明する。

【００３７】図２は請求項２記載の発明の実施の形態に
おけるインデックス自動生成装置のブロック図を示すも
のである。図２において、１０１はカット切り替わり判
定手段、１０２はインデックス記録手段、１０３は記憶
装置、２０４は時刻測定手段、２０５は時計である。

【００３８】カット切り替わり判定手段１０１がインデ
ックス記録手段１０２と時刻測定手段２０４に接続さ
れ、時刻測定手段２０４がインデックス記録手段１０２
と時計２０５に接続され、インデックス記録手段１０２
が記憶装置１０３に接続されている。また、映像信号が
カット切り替わり判定手段１０１と記憶装置１０３に入
力されている。

【００３９】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００４０】カット切り替わり判定手段１０１は、 （１）サンプリング時間単位Δｔ（例えばΔｔ＝１／３
０秒）ごとに映像信号を８×８画素のブロックに分割
し、各ブロックに対して離散コサイン変換（Ｄｉｓｃｒ
ｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理を行
なう。離散コサイン変換で得られたＤＣＴ係数のうちＤ
Ｃ成分を量子化して各ブロックごとの値を求める。

【００４１】（２）各ブロックごとに、量子化された値
とΔｔ時間前の値との差分を求め、その平均値を求め
る。

【００４２】（３）（２）で得られた差分の平均値があ
らかじめ定められた値より大きい場合カットの切り替わ
りであると判定する。

【００４３】（４）（１）から（３）を繰り返す。

【００４４】時刻測定手段２０４は、カット切り替わり
判定手段１０１がカットの切り替わりであると判定した
時、時計２０５から時刻を読みとる。

【００４５】インデックス記録手段１０２は、カット切
り替わり判定手段１０１がカットの切り替わりであると
判定した時、カットの切り替わりを示す情報と、時刻測
定手段２０４が測定したカットの切り替わり時刻の情報
を含むインデックスを作成し、記憶装置１０３に映像信
号と並行して同期記録する。

【００４６】以上説明したように本実施の形態によれ
ば、映像信号を記録する時、自動的にカット切り替わり
情報とカット切り替わり時刻を同時記録するので、例え
ば定められた時刻（毎時０分、３０分等）にカット切り
替えがなかった場合、その時刻の前後で番組が継続して
いることを認識することができる。この情報を利用する
ことにより、例えば２１時まで放送予定の野球放送が３
０分延長された時に２１時以降の予約録画開始、終了時
間を３０分遅らせたりすることが可能となる。

【００４７】以下請求項３記載の発明の一実施の形態の
インデックス自動生成装置について、図面を参照しなが
ら説明する。

【００４８】図３は請求項３記載の発明の実施の形態に
おけるインデックス自動生成装置のブロック図を示すも
のである。図３において、１０１はカット切り替わり判
定手段、１０２はインデックス記録手段、１０３は記憶
装置、３０６はカット継続時間測定手段、３０７はメモ
リ、２０５は時計である。

【００４９】カット切り替わり判定手段１０１がインデ
ックス記録手段１０２とカット継続時間測定手段３０６
に接続され、カット継続時間測定手段３０６がインデッ
クス記録手段１０２と時計２０５とメモリ３０７に接続
され、インデックス記録手段１０２が記憶装置１０３に
接続されている。また、映像信号がカット切り替わり判
定手段１０１と記憶装置１０３に入力されている。

【００５０】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００５１】カット切り替わり判定手段１０１は、 （１）サンプリング時間単位Δｔ（例えばΔｔ＝１／３
０秒）ごとに映像信号を８×８画素のブロックに分割
し、各ブロックに対して離散コサイン変換（Ｄｉｓｃｒ
ｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）処理を行
なう。離散コサイン変換で得られたＤＣＴ係数のうちＤ
Ｃ成分を量子化して各ブロックごとの値を求める。

【００５２】（２）各ブロックごとに、量子化された値
とΔｔ時間前の値との差分を求め、その平均値を求め
る。

【００５３】（３）（２）で得られた差分の平均値があ
らかじめ定められた値より大きい場合カットの切り替わ
りであると判定する。

【００５４】（４）（１）から（３）を繰り返す。

【００５５】カット継続時間測定手段３０６は、 （１）カット切り替わり判定手段１０１がカットの切り
替わりであると判定した時、時計２０５から時刻を読み
とりメモリ３０７に記録する。例えばある時刻のメモリ
の状態が図４（ａ）であったとする。カット継続時間測
定手段３０６は、カット切り替わり判定手段１０１がカ
ットの切り替わりであると判定した時の時刻を時計２０
５から読みとり、その時刻「１２時０分１５秒００」を
メモリ３０７に記録する。その時のメモリの状態は図４
（ｂ）のようになる。

【００５６】（２）次に過去のカットの切り替わりから
今回のカットの切り替わりまでのカット継続時間を算出
し、メモリ３０７に記録する。例えばカット継続時間の
測定範囲を０秒から３０秒と設定した時には、「１２時
０分１５秒００」のカットの切り替えまでのカット継続
時間は、過去４回のカットの切り替わりからの時間「７
秒９８」、「１５秒００」、「２２秒３７」、「３０秒
００」となる。従ってメモリの状態は図４（ｃ）のよう
になる。

【００５７】インデックス記録手段１０２は、カット切
り替わり判定手段１０１がカットの切り替わりであると
判定した時、カットの切り替わりを示す情報と、カット
継続時間測定手段３０６が測定したカット継続時間の情
報を含むインデックスを作成し、記憶装置１０３に映像
信号と並行して同期記録する。

【００５８】以上説明したように本実施の形態によれ
ば、映像信号を記録する時、自動的にカット切り替わり
情報とカット継続時間の情報を同時記録するので、ある
定められた時間（例えば１５秒００、３０秒００）のカ
ットを判別することができる。この情報を利用すること
により、例えば映像中の１５秒、３０秒のコマーシャル
を自動的に判別し、再生時にカットすることが可能とな
る。

【００５９】以下請求項４記載の発明の一実施の形態の
インデックス自動生成装置について、図面を参照しなが
ら説明する。

【００６０】図５は請求項４記載の発明の実施の形態に
おけるインデックス自動生成装置のブロック図を示すも
のである。図５において、５０７は、本発明の映像切り
替わり判定手段としてのシーン切り替わり判定手段、１
０２はインデックス記録手段、１０３は記憶装置であ
る。

【００６１】シーン切り替わり判定手段５０７がインデ
ックス記録手段１０２に接続され、インデックス記録手
段１０２が記憶装置１０３に接続されている。また、映
像信号がシーン切り替わり判定手段５０７と記憶装置１
０３に入力されている。

【００６２】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００６３】シーン切り替わり判定手段５０７は、 （１）サンプリング時間単位Δｔ（例えばΔｔ＝１／３
０秒）ごとに映像信号をサンプリングし１フレーム全体
の各ピクセルに関して色のレベルを得る。１フレーム全
体に関して各ピクセルの色レベルの成分ごとの総和（Ｒ
ｓ，Ｇｓ，Ｂｓの３成分）を求める。総和を１フレーム
の画素数で割り平均色（Ｒ，Ｇ，Ｂの３成分）を求め
る。

【００６４】（２）各成分に関してΔｔ時間前の値との
差分（ΔＲ，ΔＧ，ΔＢの３成分）を求める。

【００６５】（３）（２）で得られた差分の成分の内１
成分でも、成分ごとにあらかじめ定められた値より大き
い場合、シーンの切り替わりであると判定する。

【００６６】（４）（１）から（３）を繰り返す。

【００６７】インデックス記録手段１０２は、シーン切
り替わり判定手段５０７がシーンの切り替わりであると
判定した時、シーンの切り替わりを示すインデックスを
作成し、記憶装置１０３に映像信号と並行して同期記録
する。

【００６８】以上説明したように本実施の形態によれ
ば、映像信号を記録する時、自動的にシーン切り替わり
を示すインデックスを同時記録するので、映像のシーン
単位での検索・頭出し・選別・並べ替えが容易に実現で
きる。

【００６９】例えば、膨大な映像記録の中からオペレー
タが所望するシーンを検索する場合、シーン切り替わり
直後の静止画像を抜きだし、その静止画をディスプレイ
上に複数枚並べることにより、オペレータが簡便かつ迅
速に所望するシーンを見つけ出すといった検索方法であ
る。又、例えば、再生時のシーンごとの飛び越し再生な
どである。

【００７０】尚、本実施の形態は、映像の切り替わり
を、上述のように、１フレーム中の各ピクセルに関して
の色レベルの時間的な変化に着目し、色レベルの各成分
ごとの値を利用することによって、判定しようとするも
のである。従って、このようにして、判定される映像の
切り替わりを、ここでは、単にシーンの切り替わりと呼
んだにすぎない。

【００７１】本発明はこれらを実現するために必要不可
欠であったインデックスを従来は人為的に作成しなけれ
ばならなかったところを自動化した。

【００７２】以下請求項４記載の発明の別の一実施の形
態のインデックス自動生成装置について、について図面
を参照しながら説明する。

【００７３】図６は請求項４記載の発明の実施の形態に
おけるインデックス自動生成装置のブロック図を示すも
のである。図６において、５０７はシーン切り替わり判
定手段、１０２はインデックス記録手段、１０３は記憶
装置、６０８はシーン継続時間測定手段、３０７はメモ
リ、２０５は時計である。

【００７４】シーン切り替わり判定手段５０７がインデ
ックス記録手段１０２とシーン継続時間測定手段６０８
に接続され、シーン継続時間測定手段６０８がインデッ
クス記録手段１０２と時計２０５とメモリ３０７に接続
され、インデックス記録手段１０２が記憶装置１０３に
接続されている。また、映像信号がシーン切り替わり判
定手段５０７と記憶装置１０３に入力されている。

【００７５】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００７６】シーン切り替わり判定手段５０７は、 （１）サンプリング時間単位Δｔ（例えばΔｔ＝１／３
０秒）ごとに映像信号をサンプリングし１フレーム全体
の各ピクセルに関して色のレベルを得る。１フレーム全
体に関して各ピクセルの色レベルの成分ごとの総和（Ｒ
ｓ，Ｇｓ，Ｂｓの３成分）を求める。総和を１フレーム
の画素数で割り平均色（Ｒ，Ｇ，Ｂの３成分）を求め
る。

【００７７】（２）各成分に関してΔｔ時間前の値との
差分（ΔＲ，ΔＧ，ΔＢの３成分）を求める。

【００７８】（３）（２）で得られた差分の成分の内１
成分でも、成分ごとにあらかじめ定められた値より大き
い場合、シーンの切り替わりであると判定する。

【００７９】（４）（１）から（３）を繰り返す。

【００８０】シーン継続時間測定手段６０８は、 （１）シーン切り替わり判定手段５０７がシーンの切り
替わりであると判定した時、時計２０５から時刻を読み
とりメモリ３０７に記録する。例えばある時刻のメモリ
の状態が図７（ａ）であったとする。シーン継続時間測
定手段６０８は、シーン切り替わり判定手段５０７がシ
ーンの切り替わりであると判定した時の時刻を時計２０
５から読みとり、その時刻「１２時０分１５秒００」を
メモリ３０７に記録する。その時のメモリの状態は図７
（ｂ）のようになる。

【００８１】（２）次に過去のシーンの切り替わりから
今回のシーンの切り替わりまでのシーン継続時間を算出
し、メモリ３０７に記録する。例えばシーン継続時間の
測定範囲を０秒から３０秒と設定した時には、「１２時
０分１５秒００」のシーンの切り替えまでのシーン継続
時間は、過去４回のシーンの切り替わりからの時間「７
秒９８」、「１５秒００」、「２２秒３７」、「３０秒
００」となる。従ってメモリの状態は図７（ｃ）のよう
になる。

【００８２】インデックス記録手段１０２は、シーン切
り替わり判定手段５０７がシーンの切り替わりであると
判定した時、シーンの切り替わりを示す情報と、シーン
継続時間測定手段６０８が測定したシーン継続時間の情
報を含むインデックスを作成し、記憶装置１０３に映像
信号と並行して同期記録する。

【００８３】以上説明したように本実施の形態によれ
ば、映像信号を記録する時、自動的にシーン切り替わり
情報とシーン継続時間の情報を同時記録するので、ある
定められた時間（例えば１５秒００、３０秒００）のシ
ーンを判別することができる。この情報を利用すること
により、例えば映像中の１５秒、３０秒のコマーシャル
を自動的に判別し、再生時にカットすることが可能とな
る。

【００８４】以下請求項５記載の発明の一実施の形態の
インデックス自動生成装置について、図面を参照しなが
ら説明する。

【００８５】図８において、８０１は音声レベル変化判
定手段、８０２はインデックス記録手段、８０３は記憶
装置、８０４は時計である。

【００８６】音声レベル変化判定手段８０１はインデッ
クス記録手段８０２と時計８０４に接続され、インデッ
クス記録手段８０２は記憶装置８０３に接続されてい
る。また音声信号が音声レベル変化判定手段８０１と記
憶装置８０３に入力されている。 以上のように構成さ
れたインデックス自動生成装置について、その動作を説
明する。

【００８７】音声レベル変化判定手段８０１は、 （１）サンプリング時間単位Δｔごとに音声信号をサン
プリングし、音声レベルを求める。

【００８８】（２）取得された音声レベルのΔｔ時間前
からの変化率を計算する。

【００８９】（３）（２）で得られた変化率があらかじ
め定められた値より大きい場合音声レベルに一定以上の
変化があると判定する。

【００９０】インデックス記録手段８０２は、音声レベ
ル変化判定手段８０１が音声レベルに一定以上の変化が
あると判定した時、音声レベルの変化を示すインデック
スを作成し、記憶装置８０３に音声信号と並行して同期
記録する。

【００９１】以上説明したように本実施の形態によれ
ば、音声信号を記録する時、音声レベルの変化によって
自動的に音声レベルの変化の目安となるインデックスを
同時記録するので、音声レベルの変化単位での検索、頭
出し・選別・並べ替えが容易に実現できる。

【００９２】例えば役者Ａの台詞の後、若干の間があ
り、役者Ｂの台詞が続くような音声信号が入力された場
合、役者Ｂの台詞の直前にインデックスが作成されるの
で、台詞または役者が切り替わった時点を簡便かつ迅速
に見つけ出すことが出来るようになる。

【００９３】なお、記憶装置８０３に音声信号だけでな
く映像信号も同時に記録しても良い。 以下請求項６記
載の発明の一実施の形態のインデックス自動生成装置に
ついて、図面を参照しながら説明する。

【００９４】図９において、９０１は音階情報抽出手
段、９０２は同一音階情報判定手段、９０３はインデッ
クス記録手段、９０４は記憶装置、９０５は時計、９０
６は音階情報記憶装置である。

【００９５】音階情報抽出手段９０１は同一音階情報判
定手段９０２と時計９０５に接続され、同一音階情報判
定手段９０２はインデックス記録手段９０３と音階情報
記憶装置９０６とに接続され、インデックス記録手段９
０３は記憶装置９０４に接続されている。また音声信号
が音階情報抽出手段９０１と記憶装置９０４に入力され
ている。

【００９６】以上のように構成されたインデックス自動
生成装置について、その動作を説明する。

【００９７】ここで、音階情報記憶装置９０６にはあら
かじめ複数の音階情報の並びによって構成された比較判
定の対象となる音階情報列Ｂが格納されているものとす
る。この音階情報列Ｂの例を図１０に示す。

【００９８】（１）音階情報抽出手段９０１はサンプリ
ング単位時間毎に音声信号を取得する。

【００９９】（２）音階情報抽出手段９０１は（１）で
取得した音声信号をフーリエ変換を用いて周波数軸に展
開する。

【０１００】（３）音階情報抽出手段９０１は（２）で
展開された音声信号の基音を調べ、音階を判別する。

【０１０１】（４）同一音階情報判定手段９０２は音階
情報抽出手段９０１により判別された音階情報を受け取
る。

【０１０２】（５）同一音階情報判定手段９０２は
（４）で受け取った音階情報を音階情報記憶装置９０６
に音階情報列Ａとして格納する。サンプリング単位時間
ごとに格納された音階情報列Ａの例を図１０に示す。

【０１０３】（６）同一音階情報判定手段９０２は
（５）で格納された音階情報列Ａとあらかじめ音階情報
記憶装置９０６に格納されている音階情報列Ｂとの間で
音階情報列Ｂの長さ分音階情報が一致しているか比較を
行ない、音階情報列Ｂが音階情報列Ａの部分集合である
場合同一の音階情報であると判定する。図１０において
は８サンプリング単位時間が経過した時点で音階情報列
Ｂが音階情報列Ａの部分集合であることが判り、同一の
音階情報であると判定される。

【０１０４】（７）時計９０５がサンプリング単位時間
（例えば７０ミリ秒）の経過を音階情報抽出手段９０１
に伝えるごとに（１）から（６）を繰り返す。

【０１０５】インデックス記録手段９０３は、入力され
た音声信号が同一音階情報判定手段９０２によって比較
判定の対象となる音階情報と同一であると判定された
時、シーンの切り替わりを示すインデックスを作成し、
記憶装置９０４に音声信号と並行して同期記録する。

【０１０６】以上説明したように本実施の形態によれ
ば、音声信号を記録する時、特定の音階情報が得られた
時に自動的にシーンの切り替わりを示すインデックスを
同時記録するので、シーン切り替わり単位での検索・頭
出し・選別・並べ替えが容易に実現できる。

【０１０７】例えば、ＣＭが始まる直前とＣＭが終った
直後に同一の特定メロディーが流されるような放送を受
信する場合、この特定メロディーを同一音階情報判定の
対象として音階情報記憶装置に音階情報列として記憶さ
せておくことによって、ＣＭの前後に自動的にインデッ
クスを挿入することができる。これにより、自動的にＣ
Ｍカットを行なって放送を記録したり、再生時のＣＭス
キップを簡便かつ容易に行なうことができるようにな
る。

【０１０８】以上のように、本実施の形態によれば、映
像信号からカット、シーン切替え箇所や、ＣＭなどのよ
うに編集後は不要となると思われる箇所を自動的に抽出
し、その部分にインデックスを付与することが出来る。

【０１０９】即ち、上記実施の形態によるインデックス
自動生成装置を用いて、映像信号からカット、シーン切
替え箇所や、ＣＭなどのように編集後は不要となると思
われる箇所を抽出し、自動的にその部分にインデックス
を付与することにより、映像データの検索、頭出し、編
集、加工等を自動的あるいは効率的に行なうことができ
る。

【０１１０】なお、記憶装置９０４に音声信号だけでな
く映像信号も同時に記録しても良い。 なお、本実施の
形態では比較判定の対象となる音階情報があらかじめ音
階情報記憶装置に格納されておるとしたが、外部から音
階情報記憶装置に音階情報を取り込めるとしても良いこ
とはいうまでもない。

【０１１１】また、本実施の形態では比較判定の対象と
なる音階情報が部分集合である場合に同一音階情報であ
ると判定されるとしたが、ファジイ推論などの手法を用
いて同一音階情報であることを判定しても良いことはい
うまでもない。

【０１１２】

【発明の効果】以上述べたことから明らかなように、本
発明は、映像信号あるいは音声信号に対して、従来に比
べてより一層簡単にインデックスを付与することが出来
るという長所を有する。

【図面の簡単な説明】

【図１】本発明の請求項１に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図２】本発明の請求項２に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図３】本発明の請求項３に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図４】図３においてメモリ３０７に記録される内容の
遷移の説明図である。

【図５】本発明の請求項４に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図６】本発明の請求項４に係わる別の一実施の形態の
インデックス自動生成装置の概略構成図である。

【図７】図６においてメモリ３０７に記録される内容の
遷移の説明図である。

【図８】本発明の請求項５に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図９】本発明の請求項６に係わる一実施の形態のイン
デックス自動生成装置のブロック図である。

【図１０】図９において同一音階情報判定手段９０２が
比較する音階情報列の例を示す説明図である。

【図１１】従来のインデックス生成装置のブロック図で
ある。

【符号の説明】

１０１…カット切り替わり判定手段 １０２…インデックス記録手段 １０３…記憶装置 ２０４…時刻測定手段 ２０５…時計 ３０６…カット継続時間測定手段 ３０７…メモリ ５０７…シーン切り替わり判定手段 ６０８…シーン継続時間測定手段 ８０１…音声レベル変化判定手段 ８０２…インデックス記録手段 ８０３…記憶装置 ８０４…時計 ９０１…音階情報抽出手段 ９０２…同一音階情報判定手段 ９０３…インデックス記録手段 ９０４…記憶装置 ９０５…時計 ９０６…音階情報記憶装置 １１０１…インデックス挿入位置判定手段 １１０２…インデックス記録手段 １１０３…記憶装置

───────────────────────────────────────────────────── フロントページの続き (72)発明者 石井 雅博 大阪府門真市大字門真1006番地 松下電器 産業株式会社内

Claims (6)

【特許請求の範囲】
1. 【請求項１】映像信号を受けとり、前記映像信号の所定
   時間当りの画素変化率があらかじめ設定された値より大
   きい場合、映像の切り替わりであると判定する映像切り
   替わり判定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、映像の切り替わりを示すインデックス
   を作成し、所定の記憶装置に格納するインデックス記録
   手段と、を備えたことを特徴とするインデックス自動生
   成装置。
2. 【請求項２】映像信号を受けとり、前記映像信号の所定
   時間当りの画素変化率があらかじめ設定された値より大
   きい場合、映像の切り替わりであると判定する映像切り
   替わり判定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、映像の切り替わり時刻を測定する時刻
   測定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、映像の切り替わりを示す情報と前記時
   刻測定手段が測定した映像の切り替わり時刻の情報を含
   むインデックスを作成し、所定の記憶装置に格納するイ
   ンデックス記録手段と、を備えたことを特徴とするイン
   デックス自動生成装置。
3. 【請求項３】映像信号を受けとり、前記映像信号の所定
   時間当りの画素変化率があらかじめ設定された値より大
   きい場合、映像の切り替わりであると判定する映像切り
   替わり判定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、過去の映像の切り替わりからの経過時
   間を算出する映像継続時間測定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、映像の切り替わりを示す情報と前記映
   像継続時間測定手段が算出した過去の映像の切り替わり
   からの経過時間の情報を含むインデックスを作成し、所
   定の記憶装置に格納するインデックス記録手段と、を備
   えたことを特徴とするインデックス自動生成装置。
4. 【請求項４】映像信号を受け取り、前記映像信号のあら
   かじめ設定された範囲の各ピクセルの色調の平均値の所
   定時間当りの変化率があらかじめ設定された値より大き
   い場合、映像の切り替わりであると判定する映像切り替
   わり判定手段と、 前記映像切り替わり判定手段が映像の切り替わりである
   と判定した場合、映像の切り替わりを示すインデックス
   を作成し、所定の記憶装置に格納するインデックス記録
   手段と、を備えたことを特徴とするインデックス自動生
   成装置。
5. 【請求項５】音声信号を受け取り、前記音声信号の所定
   時間当りの音声レベルの変化率があらかじめ設定された
   値より大きい場合、音声レベルに一定以上の変化がある
   と判定する音声レベル変化判定手段と、 前記音声レベル変化判定手段が音声レベルに一定以上の
   変化があると判定した場合、索引情報を作成し、所定の
   記憶装置に格納するインデックス記録手段と、を備えた
   ことを特徴とするインデックス自動作成装置。
6. 【請求項６】音声信号を受け取り、前記音声信号から音
   階情報を抽出する音階情報抽出手段と、 前記音階情報抽出手段により抽出された音階情報とあら
   かじめ記憶部に蓄積されている音階情報とが同一の場
   合、同一音階情報であると判定する同一音階情報判定手
   段と、 前記同一音階情報判定手段が同一音階情報であると判定
   した場合、索引情報を生成し、所定の記憶装置に格納す
   るインデックス記録手段と、を備えたことを特徴とする
   インデックス自動生成装置。