JPH05130557A - マルチメデイアデータの編集方法 - Google Patents

Abstract

(57)【要約】 〔目的〕ビデオデータとオーディオデータとを含むマル
チメディアデータの編集方法において、ビデオデータと
オーディオデータとの組合せの変更などが容易な編集方
法を実現する。 〔構成〕編集対象のビデオデータとオーディオデータの
それぞれに対しデータ圧縮のための符号化を行い再生タ
イミングに関し相互に対応付け可能なビデオキャプチャ
ーファイルとオーディオキャプチャーファイルとを再生
する中間段階と、この再生済みのビデオキャプチャーフ
ァイルとオーディオキャプチャーファイルとを上記再生
タイミングに関する対応付けを行いながら組合せること
によりコンビネーションファイルを作成する最終段階と
を含む。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ゲーム用や教育用など
のマルチメディア情報の編集に利用されるマルチメディ
アデータの編集方法に関するものである。

【０００２】

【従来の技術】現在、ゲーム用や教育用などのフレーム
構成のビデオデータにデータ量を圧縮するための符号化
を施すと共にオーディオデータと組合せるための編集を
行いながらＣＤーＲＯＭに記録し、再生するマルチメデ
ィアデータの記録・再生システムが開発中である。

【０００３】

【発明が解決しようとする課題】上記マルチメディアデ
ータの記録に際しては、圧縮・編集対象のビデオデータ
とオーディオデータが同期状態にあることが前提となっ
ており、両データに対し同時進行的にリアルタイムの圧
縮・編集を行っている。このため、アフターレコーディ
ングなどのように、圧縮・編集後にオーディオデータだ
けを別のものに変更しようとする場合、ビデオデータに
ついても圧縮をやり直さなければならず融通性に欠ける
という問題がある。

【０００４】

【課題を解決するための手段】本発明に係わるマルチメ
ディアデータの編集方法は、編集対象のビデオデータと
オーディオデータのそれぞれに対しデータ圧縮のための
符号化を行い再生タイミングに関し相互に対応付けが可
能なビデオキャプチャーファイルとオーディオキャプチ
ャーファイルとを作成する中間段階と、この作成済みの
ビデオキャプチャーファイルとオーディオキャプチャー
ファイルとを上記再生タイミングに関する対応付けを行
いながら組合せることによりコンビネーションファイル
を作成する最終段階とを含んでいる。

【０００５】

【作用】本発明に係わるマルチメディアデータの編集方
法は、再生タイミングに関し相互に対応付け可能なビデ
オキャプチャーファイルとオーディオキャプチャーファ
イルとを作成する中間段階を含み、しかもこの中間段階
で作成する各キャプチャーファイルは必ずしも同時進行
的に作成することを要しない。このため、アフターレコ
ーディングなどのように圧縮・編集後にオーディオデー
タだけを別のものに変更しようとする場合、この別のオ
ーディオデータのみについてキャプチャーファイルを作
成し直したのち、既に作成済みのビデオキャプチャーフ
ァイルと組合わせる最終段階だけを反復すればよく、融
通性に富むという利点がある。以下、本発明の作用につ
いては実施例と共に更に詳細に説明する。

【０００６】

【実施例】図１は、本発明の一実施例に係わるマルチメ
ディア編集装置の構成を示すブロック図であり、１，４
はＡ／Ｄ変換器、２，５はタイムコード（ＴＣ）書込み
回路、３はビデオエンコーダ、６はオーディオエンコー
ダ、７はタイムコード読取回路、８はホストコンピュー
タ、９はバス、１０はメモリである。更に、１１はバッ
ファメモリ、１２はビデオデコーダ、１３，１５はＤ／
Ａ変換器、１４はオーディオデコーダ、１６はモニタで
ある。

【０００７】Ａ／Ｄ変換器１，４とタイムコード読取回
路７には、業務用のビデオテープレコーダ（ＶＴＲ）か
らフレーム構成のアナログ・ビデオデータと、アナログ
・オーディオデータと、タイムコード（ＴＣ）とが供給
される。テープレコーダから供給されるアナログ・ビデ
オデータはＡ／Ｄ変換器１でディジタル・ビデオデータ
に変換され、タイムコード書込回路２によるタイムコー
ドの書込みを受け、ビデオエンコーダ３でデータ圧縮の
ための符号化、すなわち離散コサイン変換、量子化及び
可変長符号化を組合せたハイブリッド符号化を受ける。
圧縮済みのビデオデータは、バス９を介してホストコン
ピュータ８に転送され、ここで各種の編集を受けたのち
ビデオ・キャプチャーファイルとしてバス９を介して一
旦メモリ１０に書込まれる。

【０００８】テープレコーダから供給されるアナログ・
オーディオデータはＡ／Ｄ変換器４でディジタル・オー
ディオデータに変換され、タイムコード書込回路５でタ
イムコードが書込まれ、オーディオエンコーダ３でデー
タ圧縮のためのＡＤＰＣＭによる符号化が行われる。圧
縮済みのオーディオデータは、バス９を介してホストコ
ンピュータ８に転送され、ここで各種の編集を受けたの
ちバス９を介してオーディオ・キャプチャーファイルと
して一旦メモリ１０に書込まれる。

【０００９】上記ビデオ・キャプチャーファイルとオー
ディオ・キャプチャーファイルの作成とメモリ１０への
書込みは、まず、ビデオ・キャプチャーファイルの作成
とメモリ１０への書込みが行われ、続いてオーディオ・
キャプチャーファイルの作成とメモリ１０への書込みが
行われるという具合に、２回に分けて行われる。ビデオ
・キャプチャーファイルは、図２に示すように、ビデオ
・データファイルと、ビデオ・アトリビュートファイル
から構成される。オーディオ・キャプチャーファイル
は、図３に示すように、オーディオ・データファイルと
オーディオ・アトリビュートファイルから構成される。

【００１０】図２に示したビデオ・キャプチャーファイ
ルを構成するビデオ・データファイルは、図４に示すよ
うに、フレーム＃１，フレーム＃２・・・・のようにフ
レーム単位で編成される可変長のブロックデータを含
み、それぞれの先頭には固定長のヘッダが付加される。
ここでブロックは、離散コサイン変換の先立って等分割
されるフレーム内の単位領域である。固定長のヘッダ
は、タイムコード（ＴＣ）と、ビデオデータが動画であ
るか静止画であるかを示すビデオタイプ（Ｔ）と、フレ
ーム（Ｙ信号）の水平・垂直の画素数を示すフレームサ
イズ（ＤＸ，ＤＹ）と、Ｙ信号とＣ信号のそれぞれに適
用された量子化テーブルをブロックスキャン順に記録す
る量子化テーブル（ＱＹ，ＱＣ）から構成されている。
ハイブリッド符号化における量子化に際しては、フレー
ム単位に変更可能な量子化テーブルが適用される。復号
時には、上記量子化テーブルからフレーム単位に逆量子
化テーブルが生成され、符号化時に適用された量子化に
対応する逆量子化が行われる。

【００１１】図２に示したビデオ・キャプチャーファイ
ルを構成するビデオ・アトリビュートファイルは、図５
に示すように、先頭フレームだけに付加される部分と、
各フレームごとに作成される部分から構成される。先頭
フレームだけに付加される部分は、圧縮に際しユーザが
指定する指定フレームレート（ＦＲ）と、指定ビットレ
ート（ＢＲ）と、予備領域とから構成される。また、各
フレームごとに作成される部分は、基準時刻からの経過
時間を時・分・秒で示す時間情報とフレームの連番を含
むタイムコード（ＴＣ）、動画であるか静止画であるか
を示すビデオタイプ（Ｔ）、フレーム保持時間（Ｆ）、
前述したフレームサイズ（ＤＸ，ＤＹ）、圧縮に際しユ
ーザが指定した圧縮領域の開始位置を示す取込み位置
（Ｘ，Ｙ）、１フレーム分の圧縮済みデータの総量をバ
イト数で示すデータ長（ＤＬ）から構成されている。フ
レーム保持時間（Ｆ）は、再生表示の際に該当のフレー
ムを毎秒３０フレームを基準に何フレーム分保持するか
を示す。例えば、毎秒３０フレームのフレームレートの
原動画を毎秒１５フレームとなるように間引きを行いな
がら圧縮する場合には、再生時のフレーム保持時間
（Ｆ）として「２」が指定される。

【００１２】図３に示したオーディオ・キャプチャーフ
ァイルを構成するオーディオ・データファイルは、圧縮
されたオーディオ・データのみから成り、ヘッダは付加
されない。また、オーディオ・アトリビュートファイル
は、図６に示すように、圧縮モード（Ｍ）、時・分・秒
で示される記録時間（ＲＴ）、記録開始時点のタイムコ
ード（ＳＴＣ）、データ長（ＤＬ）から構成されてい
る。本実施例によれば、オーディオ・データの圧縮モー
ド（Ｍ）としては、サブバンドＡＤＰＣＭ、１６ＫＨｚ
のＡＤＰＣＭ、８ＫＨｚのＡＤＰＣＭ、４ＫＨｚのＡＤ
ＰＣＭの４種類がある。

【００１３】ホストコンピュータ８は、上述したビデオ
・キャプチャーファイルとオーディオ・キャプチャーフ
ァイルとに加えて、これらを結合してマルチメディア情
報であるコンビネーションファイルを作成するのに必要
な種々のパラメータを含む図７に示すようなパラメータ
ファイルをユーザからの指定に従って作成し、メモリ１
０に記録する。上記ビデオ・キャプチャーファイルと、
オーディオ・キャプチャーファイルと、パラメータファ
イルと、コンビネーションファイルとの関係を図示する
と、図８に示すようなものとなる。

【００１４】図７のパラメータファイルにおいて、「Ｃ
Ｈ」は記録先のチャンネルを指定する情報であり、ビデ
オデータについては１チャンネルの「Ｖ０」だけが指定
でき、オーディオデータについては「Ａ０」から「Ａ１
５」までの１６チャンネルが指定できる。「ＶＦＩＬ
Ｅ」はビデオ・キャプチャーファイルのファイル名、
「ＡＦＩＬＥ」はオーディオ・キャプチャーファイルの
ファイル名である。「ＳＴＩＭＥ」はオーディオ・キャ
プチャーファイルの記録開始時刻を指定する情報であ
り、コンビネーションファイルの先頭を基準にして時・
分・秒・フレーム番号で指定される。「ＳＢＹＴＥ」
は、オーディオ・キャプチャーファイルの先頭を基準
（第０バイト）として、コンビネーションファイルへの
オーディオデータの記録を何バイト目から開始するかを
指定するスタートバイトである。「ＲＢＹＴＥ」はオー
ディオデータの総記録バイト数を指そす情報である。
「ＦＩＮ」と「ＦＯＵＴ」は、それぞれオーディオのフ
ェードイン速度とフェードアウト速度を指定する情報で
ある。

【００１５】ホストコンピュータ８が図８の関係に従っ
て作成し、メモリ１０に記録するコンビネーションファ
イルは、図９に示すように、ビデオデータのファイルを
単位として構成されており、「ＳＣ」は、各フレームの
先頭に付加される２バイトのスタートコードである。
「ＤＴ」はデータタイプを指定する１バイトの情報であ
り、図１０に示すように、データの種類（動画／静止画
／音声）、チャンネル番号及びフレーム内に後続データ
が存在するか否かを示すリンクビットを含んでいる。図
９の「ＤＬ」はデータ長でありデータの総バイト数を示
す、「ＤＡＴＡ」は圧縮された可変長のビデオデータ又
はオーディオデータである。「ＢＬ」は可変長のブラン
クエリアであり、コンビネーションファイルのサイズが
ＣＤーＲＯＭの１セクタのバイト数の整数倍になるよう
に、コンビネーション・ファイルの末尾にオールゼロの
ダミーデータが記録される。

【００１６】ホストコンピュータ８は、上記コンビネー
ションファイルの作成に際し、ビデオデータとオーディ
オデータとのフレーム単位の同期化を図る。すなわち、
ホストコンピュータ８は、オーディオ・アトリビュート
ファイルに含まれる圧縮モード（Ｍ）で定まるオーディ
オデータのビットレートと、ビデオ・アトリビュートフ
ァイルの先頭に含まれるフレームレート（ＦＲ）とから
１フレーム分のビデオデータに付加すべきオーディオデ
ータのビット量を算定し、記録開始タイムコード（ＳＴ
Ｃ）を始点として上記算定したビット量でオーディオデ
ータを区切りながら、各フレームのビデオデータのヘッ
ダに含まれるタイムコード（ＴＣ）に基きビデオデータ
とオーディオデータをフレーム単位で結合してゆくこと
により、ビデオデータとオーディオデータの同期を実現
する。

【００１７】上述のようにして作成されたコンビネーシ
ョンファイルは、図１１に示すように、クリップ、シー
ン、チャプタからなる階層化が行われると共に、先頭に
インデックスが付加される。クリップは、記録媒体とな
るＣＤーＲＯＭの最小アクセス単位（セクタ）の整数倍
（例えば２２５倍）分の記録容量に相当する可変長デー
タを含む最小記録単位であり、このクリップが複数個集
合してシーンが形成され、このシーンが複数個集合して
チャプタが形成される。

【００１８】上記データの階層化に伴い、その先頭に付
加されるインデックスも図１２乃至１５に示すように階
層化されている。インデックスの先頭に配置されるルー
トインデックスは、各チャプタのチャプタインデックス
の記録アドレスと専有セクタ数を示している。このルー
トインデックスに続いて配列されるチャプタインデック
スは、図１３に示すように、先頭チャプタ＃１から最終
チャプタ＃Ｎまで順に配列され、任意のチャプタ（例え
ばチャプタ＃ｉ）のチャプタインデックスは、図１４に
示すように、シーン数（Ｍ）、各シーンに含まれるクリ
ップ数（Ｃ１，Ｃ２・・・・ＣＭ）、各シーンのクリッ
プインデックスから構成されている。任意のシーン（例
えばシーン＃１）のクリップインデックスは、図１５に
示すように、このシーンに含まれる全てのクリップにつ
いて記録アドレス、専有セクタ数、属性（動画／音声チ
ャンネル）を含んでいる。

【００１９】

【発明の効果】以上詳細に説明したように、本発明に係
わるマルチメディアデータの編集方法は、再生タイミン
グに関し相互に対応付けが可能なビデオキャプチャーフ
ァイルとオーディオキャプチャーファイルとを作成する
中間段階を含み、しかもこの中間段階で作成する各キャ
プチャーファイルは必ずしも同時進行的に作成すること
を要しない。このため、アフターレコーディングなどの
ように圧縮・編集後にオーディオデータだけを別のもの
に変更しようとする場合、この別のオーディオデータの
みについてキャプチャーファイルを作成し直したのち、
既に作成済みのビデオキャプチャーファイルと組合わせ
る最終段階だけを反復すればよく、融通性に富むという
利点がある。

【図面の簡単な説明】

【図１】本発明の一実施例に係わるマルチメディアデー
タの編集方法を適用する編集装置の構成の一例を示すブ
ロック図である。

【図２】ビデオ・キャプチャーファイルの構成を示す概
念図である。

【図３】オーディオ・キャプチャーファイルの構成を示
す概念図である。

【図４】ビデオ・データファイルの構成を示す概念図で
ある。

【図５】ビデオ・アトリビュートファイルの構成を示す
概念図である。

【図６】オーディオ・アトリビュートファイルの構成を
示す概念図である。

【図７】パラメータファイルの構成を示す概念図であ
る。

【図８】ビデオ・キャプチャーファイル、オーディオ・
キャプチャーファイル、パラメータファイルオーディオ
コンビネーション・ファイル相互の関係を説明するため
の概念図である。

【図９】コンビネーション・ファイルの構成を示す概念
図である。

【図１０】データタイプの構成を示す概念図である。

【図１１】圧縮データとインデックスとの関係を示す概
念図である。

【図１２】図１１のインデックスの構成を示す概念図で
ある。

【図１３】図１２のチャプタインデックスの構成を示す
概念図である。

【図１４】図１３のチャプタインデックスの構成を示す
概念図である。

【図１５】図１４の任意のチャプタのクリップインデッ
クスを示す概念図である。

【符号の説明】

２，５ タイムコード書込み回路 ３ ビデオエンコーダ ６ オーディオエンコーダ ７ タイムコード読取回路 ８ ホストコンピュータ １０ メモリ １１ バッファメモリ １２ ビデオデコーダ １４ オーディオデコーダ １６ モニタ

Claims (1)

【特許請求の範囲】
1. 【請求項１】ビデオデータとオーディオデータとを含む
   マルチメディアデータを編集する方法において、 編集対象のビデオデータとオーディオデータのそれぞれ
   に対しデータ圧縮のための符号化を行い再生タイミング
   に関し相互に対応付けが可能なビデオキャプチャーファ
   イルとオーディオキャプチャーファイルとを作成する中
   間段階と、 前記作成済みのビデオキャプチャーファイルとオーディ
   オキャプチャーファイルとを前記再生タイミングに関す
   る対応付けを行いながら組合せることによりコンビネー
   ションファイルを作成する最終段階とを含むことを特徴
   とするマルチメディアデータの編集方法。