JP2013051645A - 映像処理装置及び映像処理方法 - Google Patents

Abstract

【課題】 １つの録画コンテンツを複数のチャプターに自動的に分割することができ、番組の本編の先頭から確実に再生でき、しかも本編チャプターのサムネイル画像は本編の画像とすることがきる映像処理装置及び映像処理方法を提供すること。
【解決手段】 実施形態によれば、映像処理装置はチャプター設定手段と、サムネイル位置決定手段と、サムネイル生成手段と、を具備する。チャプター設定手段は、記録されたコンテンツの内容に応じてチャプターを設定し、各チャプターにチャプターマークを設定する。サムネイル位置決定手段は、チャプター設定手段により設定されたチャプターのうち所定のチャプターのチャプターマークを時間的に所定時間だけ後にずらしてサムネイル位置を求める。サムネイル生成手段は、サムネイル位置決定手段により求められたサムネイル位置のサムネイル画像を生成する。
【選択図】図４

Description

本発明の実施形態は映像情報を記録再生する映像処理装置及び映像処理方法に関する。

映像処理装置の一例として、放送番組を記録するハードディスクレコーダや光ディスクレコーダ、放送番組を記録するハードディスクを具備するテレビジョン受像機がある。このようなディジタル記録においては、録画した１つの放送番組内にチャプターが設定可能である。これにより、番組の中の次のチャプターの開始位置に素早くジャンプでき、当該チャプターを直ぐに再生したり、同じ番組あるいは別の番組のチャプターを自由に組み合わせて（編集して）新たなコンテンツを作成することができる。チャプター設定は番組の内容を判断して自動的に行うこともできるし、視聴者が視聴中に任意の位置でチャプターの開始位置（チャプターマーク）を設定することにより視聴者が行うこともできる。

チャプターの利用態様の１つに番組をＣＭチャプターと本編チャプターとに分割し、本編チャプターの再生が終わると、ＣＭチャプターをスキップして本編チャプターのみを順次視聴する例がある。ここで、本編のチャプターマークの位置が実際の本編の開始位置より少しでも時間的に後にずれると、本編の先頭が再生されなくなってしまう。これはＣＭのみを飛ばし、本編は最初から最後まで完全に見たい視聴者にとっては重大な問題であるので、本編のチャプターマークの位置を実際の本編の開始位置より時間的に少し前の位置に設定している。これにより、本編の最初の数秒が再生されない事態を防止することができる。

一方、チャプターの編集のため、あるいは見たいチャプターを決めるために、チャプターのサムネイル画像の一覧を表示する機能がある。チャプターサムネイル画像は各チャプターのチャプターマークの位置の静止画の縮小画像であることが多い。そのため、本編の開始位置よりも時間的に少し前の位置に本編のチャプターマークを設定すると、本編チャプターのサムネイル画像が本編ではなくＣＭの画像となってしまう。

特開２００７−１８０６０３号公報 特許第４５３９８８４号公報 特開２００４−１４７２０４号公報 特開２０００−１７５１３３号公報

従来の映像処理装置では、１つの録画コンテンツに対して、その内容に応じて自動的にチャプターを設定する場合、番組の本編の先頭の数秒が再生されない事態を防ぐために本編のチャプターマークを本編の開始位置から時間的に僅かに前にずらして設定すると、本編チャプターのサムネイル画像が本編ではなくＣＭの画像となってしまうという課題があった。

本発明の目的は、１つの録画コンテンツに対して、その内容に応じて自動的にチャプターを設定することができ、番組の本編の先頭から確実に再生でき、しかも本編チャプターのサムネイル画像は本編の画像とすることがきる映像処理装置及び映像処理方法を提供することである。

実施形態によれば、映像処理装置はチャプター設定手段と、サムネイル位置決定手段と、サムネイル生成手段とを具備する。チャプター設定手段は記録されたコンテンツの内容に応じてチャプターを設定し、各チャプターにチャプターマークを設定する。サムネイル位置決定手段はチャプター設定手段により設定されたチャプターのうち所定のチャプターのチャプターマークを時間的に所定時間だけ後にずらしてサムネイル位置を求める。サムネイル生成手段はサムネイル位置決定手段により求められたサムネイル位置のサムネイル画像を生成する。

実施形態の映像処理装置の構成の一例を示すブロック図である。 録画終了時のチャプター分割処理を示すフローチャートである。 チャプターサムネイルの一覧表示処理を示すフローチャートである。 チャプターマーク（チャプター位置）とサムネイル位置との関係を示す図である。

以下、実施の形態について図面を参照して説明する。

図１は映像処理装置の実施形態の概略構成を示すブロック図である。映像処理装置は２種類のディスクドライブ部２１、２３を有する。ここでは、記録媒体としてＤＶＤとハードディスクの双方を取り扱うことができる装置として示しているが、これらに限らず、何れか一方のみでもよいし、これらに加えて、あるいはこれらの代わりに半導体メモリからなる記録媒体等を用いてもよい。

ディスクドライブ部２３はビデオファイルを構築できる情報記録媒体である第１のメディアとしてのＤＶＤメディアを回転駆動し、情報の読み書きを実行する。ディスクドライブ部２３は、ＤＶＤメディアに対する回転制御系、レーザ駆動系、光学系などを有する。ハードディスクドライブ部２１は第２のメディアとしてのハードディスクを駆動する。ハードディスクドライブ部２１は録画コンテンツ２１Ａ、サムネイル画像２１Ｂ、チャプター情報２１Ｃとを記憶する。

データプロセッサ部２２は、ディスクドライブ部２３及びハードディスクドライブ部２１に記録データを供給することができるとともに、再生された信号を受け取ることができる。データプロセッサ部２２は、記録または再生単位のデータを取り扱うもので、バッファ回路、変調・復調回路、エラー訂正部などを含む。データプロセッサ部２２にはサムネイル生成判定部８２と、サムネイル生成部８４が接続される。

図１の各ブロックは大きく分けて左側は記録部の主なブロックを示し、右側は再生部の主なブロックを示している。映像処理装置は、録画側を構成するエンコーダ部５０と、再生側を構成するデコーダ部６０と、装置本体の動作を制御するマイクロコンピュータ部３０とを主たる構成要素としている。

エンコーダ部５０は、入力されたアナログビデオ信号やアナログオーディオ信号をディジタル化するビデオ用及びオーディオ用のアナログ／ディジタルコンバータと、ビデオエンコーダと、オーディオエンコーダと、副映像エンコーダとを含む。

エンコーダ部５０の出力は、バッファメモリを含むフォーマッタ５１にてＤＶＤ−ＶＲフォーマットに変換され、データプロセッサ部２２に供給される。すなわち、ＶＲ(Video-Recording)規格（例えば、ＤＶＤ−ＲＡＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷなどに記録する規格）で規定されたフォーマットに変換される。

エンコーダ部５０には、ＡＶ入力部４０からの外部アナログビデオ信号と外部アナログオーディオ信号、またはＴＶチューナ部４２からのアナログビデオ信号とアナログオーディオ信号が入力される。なお、アナログビデオ信号とアナログオーディオ信号ではなくディジタルビデオ信号とディジタルオーディオ信号でもよい。エンコーダ部５０は、圧縮されたディジタルビデオ信号やディジタルオーディオ信号が直接入力されるときは、圧縮ディジタルビデオ信号やディジタルオーディオ信号を直接フォーマッタ５１に供給することもできる。また、エンコーダ部５０は、アナログ／ディジタル変換されたディジタルビデオ信号やオーディオ信号を、ビデオ（Ｖ）ミキシング部７１やオーディオセレクタ７６に直接供給することもできる。エンコーダ部５０に含まれるビデオエンコーダでは、ディジタルビデオ信号はＭＰＥＧ２、または、ＭＰＥＧ１規格に基づいた可変ビットレートで圧縮されたディジタルビデオ信号に変換される。ディジタルオーディオ信号は、ＭＰＥＧ、またはＡＣ−３規格に基づいて固定ビットレートで圧縮されたディジタルオーディオ信号、またはリニアＰＣＭのディジタルオーディオ信号に変換される。

副映像信号がＡＶ入力部４０から入力された場合（例えば、副映像信号の独立出力端子付ＤＶＤビデオプレーヤからの信号等が入力された場合）、またはこのようなデータ構成のＤＶＤビデオ信号が放送され、それがＴＶチューナ４２で受信された場合は、ＤＶＤビデオ信号中の副映像信号が副映像エンコーダでエンコード（ランレングス符号化）されて副映像のビットマップとなる。

エンコードされたディジタルビデオ信号、ディジタルオーディオ信号、副映像データは、フォーマッタ５１にてパック化され、ビデオパック、オーディオパック、副映像パックとなり、更にこれらが集合されてＶＲ規格で規定されたフォーマットに変換される。

フォーマッタ５１でフォーマット化された情報（ビデオ、オーディオ、副映像データなどのパック）及び作成された管理情報は、データプロセッサ部２２を介してハードディスクドライブ部２１またはデータディスクドライブ部２３に供給され、ハードディスクまたはＤＶＤメディアに記録することができる。ハードディスク又はＤＶＤメディアに記録された情報を、データプロセッサ部２２、ディスクドライブ部２３またはハードディスクドライブ部２１を介してＤＶＤメディア又はハードディスクに記録することもできる。

ハードディスク又はＤＶＤメディアに記録されている複数番組のビデオオブジェクトを、一部削除したり、異なる番組のオブジェクトをつなげたり、といった編集処理を行うこともできる。編集の単位としてチャプターが使用されてもよい。

マイクロコンピュータ部３０は、ＭＰＵ（マイクロプロセッシングユニット）、またはＣＰＵ（セントラルプロセッシングユニット）と、制御プログラム等が書きこまれたＲＯＭと、プログラム実行に必要なワークエリアを提供するためのＲＡＭとを含んでいる。ＭＰＵの処理結果のうち、ユーザに通知すべき内容は、映像処理装置の表示部４３に表示されるか、またはモニターディスプレイ４５にＯＳＤ（オンスクリーンディスプレイ）表示される。マイクロコンピュータ部３０は、この装置を操作するための操作信号を与えるキー入力部４４を有する。

デコーダ部６０は、パック構造を持つＤＶＤフォーマットの信号から各パックを分離して取り出すセパレータと、パック分離やその他の信号処理実行時に使用するメモリと、セパレータで分離された主映像データ（ビデオパックの内容）をデコードするＶデコーダと、セパレータで分離された副映像データ（副映像パックの内容）をデコードするＳＰデコーダと、セパレータで分離されたオーディオデータ（オーディオパックの内容）をデコードするＡデコーダとを有する。デコーダ部６０は、デコードされた主映像にデコードされた副映像を適宜合成し、主映像にメニュー、ハイライトボタン、字幕やその他の副映像を重ねて出力するビデオプロセッサをさらに備えている。

デコーダ部６０の出力ビデオ信号は、ビデオミキシング部７１に入力される。ビデオミキシング部７１では、テキストデータの合成が行われる。ビデオミキシング部７１には、ＴＶチューナ部４２やＡ／Ｖ入力部４０からの信号を直接取り込むラインも接続されている。ビデオミキシング部７１には、バッファとして用いるフレームメモリ７２が接続されている。ビデオミキシング部７１の出力がアナログ出力の場合はＩ／Ｆ（インタフェース）７３を介して外部出力され、ディジタル出力の場合はディジタル／アナログ変換器７４を介して外部へ出力される。なお、ディジタル出力の場合はこのディジタル／アナログ変換器７４がなくてもよい。

デコーダ部６０の出力オーディオ信号は、セレクタ７６を介してディジタル／アナログ変換器７７でアナログ信号に変換され外部に出力される。セレクタ７６は、マイクロコンピュータ部３０からのセレクト信号により制御される。これにより、セレクタ７６は、ＴＶチューナ部４２やＡ／Ｖ入力部４０からのディジタル信号を直接モニター４５する時、エンコーダ部５０をスルーした信号を直接選択することも可能である。

本実施形態では、ビデオファイルは１ディスクに１ファイルとしている。データをアクセス（シーク）している間に、途切れないで再生を続けるために、最低限連続する情報単位（サイズ）を決めている。この単位をＣＤＡ（コンティギュアス・データ・エリア）という。ＣＤＡサイズは、ＥＣＣ（エラー訂正コード）ブロック（１６セクタ）の倍数であり、ファイルシステムではこのＣＤＡ単位で記録を行っている。

データプロセッサ部２２は、エンコーダ部５０のフォーマッタからＶＯＢＵ単位のデータを受け取り、ＣＤＡ単位のデータをディスクドライブ部２３又はハードディスクドライブ部２１に供給している。マイクロコンピュータ部３０のＭＰＵは、記録したデータを再生するのに必要な管理情報を作成し、データ記録終了のコマンドを認識すると、作成した管理情報をデータプロセッサ部２２に送る。これにより、管理情報がディスクに記録される。従って、エンコードが行われているとき、エンコーダ部５０からマイクロコンピュータ部３０のＭＰＵは、データ単位の情報（切り分け情報など）を受け取る。又、マイクロコンピュータ部３０のＭＰＵは、記録開始時には光ディスク及びハードディスクから読み取った管理情報（ファイルシステム）を認識し、各ディスクの未記録エリアを認識し、データ上の記録エリアをデータプロセッサ部２２を介してディスクに設定している。

図２のフローチャートを参照してデータプロセッサ部２２による録画終了時のチャプター自動設定処理を説明する。放送番組の録画が終了すると、図２の処理が開始され、ブロック２０２でハードディスクドライブ部２１から１つの録画コンテンツ２１Ａを読出し、読み出したコンテンツにチャプターを自動的に設定する。ここでは、録画コンテンツの内容を分析して、本編とＣＭとを識別し、本編とＣＭの開始位置にチャプターマークを設定する。前述したように、本編チャプターを先頭から完全に再生できるように、本編のチャプターマークの位置を本編の開始位置より時間的に少し前の位置に設定する。ＣＭのチャプターマークの位置はＣＭの開始位置に設定する。なお、コンテンツの再生時にリモートコントローラを用いて任意の位置にユーザがチャプターマークを設定することもできる。チャプターマークの位置とチャプターの属性（本編、ＣＭ等）等のチャプター情報２１Ｃはハードディスクドライブ部２１に格納される。

コンテンツに自動的にチャプターマークを設定した後、ブロック２０４でハードディスクドライブ部２１からコンテンツの一番初めのチャプターマークを読み出す。ブロック２０６で当該チャプターの属性が本編か否かを判定する。本編以外、すなわちＣＭである場合は、ブロック２１４に移る。チャプターの属性が本編である場合は、ブロック２０８で当該チャプターの属性（本編）に「自動チャプター」を設定する。

ブロック２１０で本編チャプターの内容をさらに分析して、映像中の音楽を検出し、曲の変わり目にチャプターマークを設定する。このチャプターマークは音楽チャプターの開始位置を示す。ただし、音楽チャプターのチャプターマークの位置も本編のチャプターマークと同様に、実際の音楽の開始位置より時間的に少し前の位置に設定する。音楽チャプターの終了位置は例えばトークチャプターの開始位置であり、ここにもトークチャプターのチャプターマークが設定される。トークチャプターのチャプターマークの位置はＣＭと同様に、トークチャプターの開始位置である。ブロック２１２で音楽チャプターの属性にも「自動チャプター」を設定する。

ブロック２１４で１つの録画コンテンツの全てのチャプターの処理が終了したか否か判定される。否の場合は、ブロック２０４に戻り、次のチャプターマークを読出し、同様な処理が行われる。

このように、自動的に設定された本編チャプター及び音楽チャプターには「自動チャプター」の属性が与えられ、ユーザが任意に設定したチャプターと区別される。図２の処理により得られたチャプター情報はチャプター情報２１Ｃとしてハードディスクドライブ部２１に記憶される。

図３のフローチャートを参照してデータプロセッサ部２２によるチャプターサムネイルの一覧を作成するチャプター画面表示処理を説明する。ある録画コンテンツのチャプターサムネイルの一覧表示をリモートコントローラから指示すると、ブロック３０２でハードディスクドライブ部２１のチャプター情報２１Ｃから当該コンテンツの一番初めのチャプターマークを読み出す。ブロック３０４でサムネイル生成判定部８２により当該チャプターの属性に「自動チャプター」が設定されているか否かを判定する。「自動チャプター」が設定されている場合は、ブロック３０６でチャプターマークの位置を所定時間だけ後にずらした位置をチャプターサムネイルの位置とする。所定時間は、本編のチャプターマークの位置が本編の開始位置よりずれている時間を考慮して、ずらした後の位置が確実に本編チャプター内に位置するような時間に決められている。例えば、本編のチャプターマークの位置が本編の開始位置より２秒前にずれている場合は、所定時間は３秒とされる。

「自動チャプター」が設定されていない場合は、ブロック３０８でチャプターマークの位置をチャプターサムネイルの位置とする。

ブロック３０６、３０８の次に、ブロック３１０でサムネイル生成部８４によりチャプターサムネイル位置の静止画を圧縮してチャプターサムネイル画像を生成する。ブロック３１２で１つの録画コンテンツの全てのチャプターの処理が終了したか否か判定される。否の場合は、ブロック３０２に戻り、次のチャプターマークを読出し、同様な処理が行われる。全てのチャプターの処理が終了した場合は、ブロック３１４で全てのチャプターサムネイル画像をハードディスクドライブ２１内にサムネイル情報２１Ｂとして格納する。この後、この保存したチャプターサムネイル画像が表示される。

このように、自動的なチャプター分割により実際の開始位置よりも時間的に前の位置にチャプターマークが設定された場合は、サムネイル位置をチャプターマークの位置よりも時間的に後にずらしている。これにより、本編チャプター、音楽チャプターのサムネイル画像がＣＭ画像となることが防止される。

図４はチャプターマークの設定位置（チャプター位置）とサムネイル位置との関係を説明する図である。コンテンツはＣＭ、本編、ＣＭ、本編からなり、最初の本編はトーク、音楽、トーク、音楽からなるとする。自動チャプター分割により設定された本編チャプター、音楽チャプターについては、実際の開始位置よりも時間的に前の位置がチャプター位置とされる。ＣＭチャプター、トークチャプターについては、実際の開始位置がチャプター位置とされる。サムネイル位置は、本編チャプター、音楽チャプターについては、チャプター位置から所定時間後の位置とされ、ＣＭチャプター、トークチャプターについてはチャプター位置とされる。このようにサムネイル位置をチャプター位置からずらしているが、チャプター位置そのものは保存されているので、再生時にチャプタースキップする場合のスキップ位置はチャプターマークの設定位置となるので、本編チャプターや音楽チャプターを最初から最後まで完全に見ることができる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。実施形態としては２種類の記録媒体を有する映像情報記録装置を説明したが、これに限らず、映像コンテンツを記録可能なパーソナルコンピュータ等でもよい。また、実施形態では、コンテンツを本編チャプターとＣＭチャプターとに分けてから、本編チャプターをさらに音楽チャプターとトークチャプターとに細分し、音楽チャプターとトークチャプターは本編チャプター内のサブチャプターとして説明したが、これに限らず、コンテンツを音楽チャプター、トークチャプター、ドラマチャプター、ＣＭチャプター等に分割してもよい。この場合、図２のブロック２０２でコンテンツをこれらの各種のチャプターに分割し、ブロック２１０、２１２は省略される。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

２１…ハードディスクドライブ部、２１Ａ…録画コンテンツ、２１Ｂ…サムネイル画像、２１Ｃ…チャプター情報、２３…ディスクドライブ部、２２…データプロセッサ部、３０…マイクロコンピュータ部、５０…エンコーダ部、６０…デコーダ部、８２…サムネイル生成判定部、８４…サムネイル生成部。

Claims (10)

1. 記録されたコンテンツの内容に応じてチャプターを設定し、各チャプターにチャプターマークを設定するチャプター設定手段と、
   前記チャプター設定手段により設定されたチャプターのうち所定のチャプターのチャプターマークを時間的に所定時間だけ後にずらしてサムネイル位置を求めるサムネイル位置決定手段と、
   前記サムネイル位置決定手段により求められたサムネイル位置のサムネイル画像を生成するサムネイル生成手段と、
   を具備する映像処理装置。
2. 前記サムネイル位置決定手段は、前記チャプター設定手段により設定されたチャプターのうち所定のチャプター以外のチャプターについては、当該チャプターのチャプターマークをサムネイル位置とする請求項１記載の映像処理装置。
3. 前記所定のチャプターは本編チャプターあるいは音楽チャプターであり、
   前記所定のチャプターのチャプターマークは本編チャプターあるいは音楽チャプターの開始位置より時間的に前の位置に設定される請求項１記載の映像処理装置。
4. ユーザ操作により任意の位置にチャプターマークを設定するユーザ設定手段をさらに具備し、
   前記サムネイル位置決定手段は、前記ユーザ設定手段により設定されたチャプターマークをサムネイル位置とする請求項１記載の映像処理装置。
5. 前記チャプター設定手段は、設定したチャプターが前記所定のチャプターであるか否かを示す属性をチャプターに設定し、
   前記サムネイル生成手段は、チャプターが前記所定のチャプターであることを示す属性が設定されている場合は、チャプターマークより時間的に所定時間だけ後の位置のサムネイル画像を生成し、チャプターが前記所定のチャプターであることを示す属性が設定されていない場合は、チャプターマークの位置のサムネイル画像を生成する請求項１記載の映像処理装置。
6. 記録されたコンテンツの内容に応じてチャプターを設定し、各チャプターにチャプターマークを設定することと、
   前記設定されたチャプターのうち所定のチャプターのチャプターマークを時間的に所定時間だけ後にずらしてサムネイル位置を求めることと、
   前記求められたサムネイル位置のサムネイル画像を生成することと、
   を具備する映像処理方法。
7. 前記サムネイル位置を求めることは、前記設定されたチャプターのうち所定のチャプター以外のチャプターについては、当該チャプターのチャプターマークをサムネイル位置とする請求項６記載の映像処理方法。
8. 前記所定のチャプターは本編チャプターあるいは音楽チャプターであり、
   前記所定のチャプターのチャプターマークは本編チャプターあるいは音楽チャプターの開始位置より時間的に前の位置に設定される請求項６記載の映像処理方法。
9. ユーザ操作により任意の位置にチャプターマークを設定することをさらに具備し、
   前記サムネイル位置を求めることは、前記設定されたチャプターマークをサムネイル位置とする請求項６記載の映像処理方法。
10. 前記チャプター及びチャプターマークを設定することは、設定したチャプターが前記所定のチャプターであるか否かを示す属性をチャプターに設定することをさらに具備し、
    前記サムネイル画像を生成することは、チャプターが前記所定のチャプターであることを示す属性が設定されている場合は、チャプターマークより時間的に所定時間だけ後の位置のサムネイル画像を生成し、チャプターが前記所定のチャプターであることを示す属性が設定されていない場合は、チャプターマークの位置のサムネイル画像を生成する請求項６記載の映像処理方法。

Images