JP4514928B2 - 編集装置及び方法 - Google Patents
編集装置及び方法 Download PDFInfo
- Publication number
- JP4514928B2 JP4514928B2 JP2000274132A JP2000274132A JP4514928B2 JP 4514928 B2 JP4514928 B2 JP 4514928B2 JP 2000274132 A JP2000274132 A JP 2000274132A JP 2000274132 A JP2000274132 A JP 2000274132A JP 4514928 B2 JP4514928 B2 JP 4514928B2
- Authority
- JP
- Japan
- Prior art keywords
- metadata
- source
- template
- editing
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/40—Combinations of multiple record carriers
- G11B2220/41—Flat as opposed to hierarchical combination, e.g. library of tapes or discs, CD changer, or groups of record carriers that together store one title
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/90—Tape-like record carriers
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、ソースコンテンツ（source content）を編集して編集コンテンツシーケンス（edited content sequence）を作成する編集装置及び方法、コンピュータプログラム並びにテンプレートに関する。ソースコンテンツは、例えばビデオ及び／又はオーディオ素材（video/audio material）である。
【０００２】
【従来の技術】
ソースコンテンツの編集は、従来から負担が大きい作業であり、熟練した編集者によって編集装置（editorial suite）で行われる。編集装置（editing system）は、通常は編集者の管理下でソースコンテンツを編集するのに用いられる。現在の編集装置は洗練されたツールを有し、編集者は、ソースコンテンツを複雑な編集効果で処理することができる。
【０００３】
【発明が解決しようとする課題】
しかし、編集者は、このような編集の前に、ソースコンテンツをレビュー（review）して編集する素材を理解するために相当の時間を要している。編集作業の効率は、最初にソースコンテンツを理解するために時間を費やすことで、悪くなっている。
【０００４】
本発明は、上述の実情に鑑みて提案されるものであって、編集の前に編集者が素材を理解するために費やす時間を削減することにより、編集効率を向上させるような編集装置及び方法、コンピュータプログラム並びにテンプレートを提供することを目的とする。
【０００５】
【課題を解決するための手段】
本発明は、ソースコンテンツを編集して編集コンテンツシーケンス、ソースコンテンツの部分（portion）に対応するソースメタデータ（source metadata）を作成する編集装置を提供する。この編集装置は、所望のスタイルのコンテンツ、所望のスタイルを規定するテンプレート（template）におけるテンプレートメタデータ（template metadata）を格納する記憶装置（storage）と、ソースメタデータ（source metadata）をテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用し、この比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成する処理装置（processing unit）とを備える。
【０００６】
本発明は、コンテンツの所望のスタイルを規定するテンプレート、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータを提供する。本具体例において、テンプレートは、所望のスタイルを規定するように連係（link）する複数の離散的なセクションからなり、各離散セクションは対応するテンプレートメタデータを有している。従って、本発明のこの観点によると、多数のテンプレートが用意されて編集コンテンツシーケンスに必要な特定のフォーマットを規定し、これらのテンプレートは本発明の編集装置の使用に適するように選択される。
【０００７】
本発明は、ソースコンテンツを編集して編集ソースコンテンツを作成するように編集装置を操作する編集方法を提供し、この編集方法は、（ａ）編集されるソースコンテンツ、ソースコンテンツの部分に対応するソースメタデータを受け取るステップと、（ｂ）コンテンツ、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータを提供するステップと、（ｃ）ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するステップと、（ｄ）ステップ（ｃ）の比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成するステップとを有する。
【０００８】
本発明は、ソースコンテンツ、ソースコンテンツに部分に対応するソースコンテンツメタデータを編集して編集コンテンツシーケンスを作成するように編集装置を操作するコンピュータプログラムを提供し、コンピュータプログラムは編集装置に、（ａ）記憶装置から所望のスタイルを規定するテンプレート、テンプレートにおける所望のスタイルを規定するテンプレートメタデータを検索するステップと、（ｂ）ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するステップと、（ｃ）ステップ（ｂ）における比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成するステップとを実行させる。
【０００９】
【発明の実施の形態】
以下、本発明に係る編集装置及び方法、コンピュータプログラム並びにテンプレートの実施の形態について、図面を参照しながら詳細に説明する。
【００１０】
図１は、本発明を適用した編集装置１０の具体的な構成を示すブロック図である。この図１に示すように、編集装置１０は、編集コンテンツを作成するためにソースコンテンツを受け取って編集操作をソースコンテンツに施す処理装置（processing unit）１２、例えばマイクロプロセッサを備えている。内蔵メモリ１４は、例えばリードオンリーメモリ（read only memory: ＲＯＭ）、ランダムアクセスメモリ（random access memory： ＲＡＭ）などであり、処理装置１２で使用されるデータとともに、処理装置１２で実行されるソフトウェアを格納する。
【００１１】
編集装置１０は、表示ドライバ１６を備え、表示ドライバ１６は、表示信号を編集装置１０に接続された表示装置２０に出力する。また、編集装置１０は、入出力インターフェース１８を備え、入出力インタフェース１８は、入力装置２２、例えばキーボード、マウス、ジョグシャトルダイアル、ペンとタブレットなどを編集装置１０に接続するインターフェースを司る。編集装置１０のユーザは、表示装置２０及び入力装置２２を介して、編集装置１０によって実行される編集処理と対話（interact）することができる。
【００１２】
本具体例では、編集装置１０によって編集されるソースコンテンツは、デジタルカメラ３０から出力されたようなオーディオ／ビデオ（audio/vide: 以下、Ａ／Ｖという。）素材であるとされる。Ａ／Ｖ素材は、アナログデータでも作成されるが、本具体例の編集装置１０はデジタルデータによって動作するので、アナログＡ／Ｖ素材は編集装置１０への入力される前にデジタルデータに変換される。
【００１３】
Ａ／Ｖ素材がデジタルカメラ３０によって生成されると、適切な媒体３２、例えばデジタルテープ又はデジタルディスクに格納される。最近のデジタル技術では、Ａ／Ｖ素材が最初に作成された時点において、あるメタデータがＡ／Ｖ素材に対応させられる。本具体例では、このようなメタデータは、適切な媒体３２として、例えばデジタルテープ又はディスクに格納される。なお、メタデータは、対応するＡ／Ｖ素材と同一の物理記憶媒体３２に記録されるが、別の物理記録媒体３４にも記録することもできる。
【００１４】
Ａ／Ｖ素材が編集装置１０に送られる前のある時点において、例えば手作業でメタデータを加えることによって、追加のメタデータを加えることもできる。Ａ／Ｖ素材が編集されるとき、Ａ／Ｖ素材は、対応するメタデータ（以下では、ソースメタデータと呼ぶ。）とともに、入力Ａ／Ｖ記憶装置（input A/V store）２４、例えばデジタルテーププレーヤ、デジタルディスクプレーヤ又はサーバに格納される。
【００１５】
本具体例では、１以上のテンプレートが記憶装置、例えばデータベースやネットワークを介してアクセスされる記憶装置から提供される。ここで、図１ではテンプレート記憶装置２６は別個の構成要素として表されているが、テンプレートは編集装置１０において局所的に、例えばメモリ５５に格納することもできる。多くの種類の編集素材、例えばニュース報告は、似通ったパターンに従うことが認められる。したがって、本具体例では、各テンプレートはＡ／Ｖ素材の所望のスタイルを規定し、テンプレートメタデータは各テンプレートにおいて所望のスタイルを規定する。
【００１６】
編集装置１０は、テンプレート記憶装置２６から適切なテンプレートを検索し、テンプレートメタデータをソースＡ／Ｖ素材に対応するソースメタデータと比較することで、テンプレートを入力Ａ／Ｖ記憶装置２４から供給されるソースＡ／Ｖ素材に適用するようになされている。この作業は、処理装置１２によって実行され、ソースＡ／Ｖ素材は、ソースメタデータとテンプレートメタデータの比較に応じて、編集コンテンツシーケンスを作成するよう配列される。編集コンテンツシーケンスは、処理装置１２から出力Ａ／Ｖ記憶装置２８へ出力される。この出力は、編集装置１０のユーザによってさらに変更することができる。入力Ａ／Ｖ記憶装置２４と同様に、出力Ａ／Ｖ記憶装置２８は、デジタルテープ、デジタルディスクプレーヤ又はサーバなどから構成される。
【００１７】
本具体例において、テンプレートは、編集するＡ／Ｖ素材に対するユーザの理解に基づいて、編集装置のユーザにより選ばれると想定される。例えば、ユーザーは、Ａ／Ｖ素材の編集を求めている人からテンプレートの選択について明示的な指示を与えられる。したがって、例えば、編集装置１０のユーザは、テンプレート記憶装置２６に格納された特定のニュース向けのテンプレートを使用するという指示とともに、ニュース事項に関係するあるＡ／Ｖ素材を受け取る。なお、ユーザは、編集するＡ／Ｖ素材のタイプに基づいて、使用するテンプレートを自分で決めることもできる。テンプレートは、テンプレート記憶装置２６から具体的には手動で選択されるが、編集装置１０によるテンプレートの自動選択のように、編集するＡ／Ｖ素材に対応するメタデータが、どのテンプレートを使用するか処理装置１２に直接に指示することも考えられる。
【００１８】
本具体例では、編集装置１０は、１以上のプラグイン認識ツールの形態を有する多くの認識処理装置３６に接続することができる。これらの認識ツールは、編集装置１０によってメタデータの生成の補助に用いられる。例えば、顔を検出する認識ツールは、ソースＡ／Ｖをスキャンしてビデオに含まれる顔を探すために用いられる。一旦これらの顔が識別されると、これらは編集装置１０のユーザに提示され、ユーザが検出された顔の識別に関係するメタデータを入力するように促す。なお、認識ツール又は編集装置１０の何れかが人の顔の適切なデータベースにアクセスできるなら、顔の自動的な認識もできる。同様に、音声を認識し、Ａ／Ｖソースにおけるオーディオ素材に関連するメタデータの追加ができるような認識ツールも提供される。
【００１９】
次に、編集装置１０によって用いられるテンプレートを、図２を用いて説明する。図２は、テンプレート記憶装置２６に格納された具体的なテンプレートを示す図である。Ａ／Ｖシーケンスを記述するテンプレートは、５つ主要セクション４０、４２、４４、４６、４８からなる。第１セクション４０は導入（introduction）を提供する素材からなり、第２セクション４２は１以上の静止画（still）からなり、第３セクション４４は特定のショット（shot）の場面を与え、第４セクション４６はさらにショットの場面を与え、最後のセクション４８は終了シーケンスを提供する。さらにセクション５０のボイスオーバ（voice over）は、素材にオーディオボイス（audio voice）与え、セクション４０、４４及び４６に対応するオーディオを与えるために用いられる。
【００２０】
（ビデオワイプ（video wipe）、ページターン（page turn）、オーディオフェード（audio fade）、クロスフェード（cross fade）などのような）多数の特定の編集効果、キーイング及び／又は技術的な調整は、各セクションに対応し、編集コンテンツシーケンスの生成の間、ユーザは、これら対応する効果、キーイングまたは調整のどれを使うか入力を催促される。例えばセクション４０は、（ブロック４１に示すように）導入の最後に適用される右上から左下へのボックスワイプ（box wipe）を示す編集効果に対応し、セクション４２は、（ブロック４３に示すように）静止画の最後に適用される左下から右上へのボックスワイプを示す編集効果に対応している。同様に、ストレートカット（straight cut）は、ブロック４５及び４７の間に示されるように、セクション４４及び４６の間、及びセクション４６及び４８の間で特定される。また、ブロック５２に示されるように、オーディオフェードアップ（audio fade up）はセクション５０の最初に特定され、ブロック５２及び５３に示すように、ビデオフェードイン（video fade in）及びビデオフェードアウト（video fade out）はセクション４６のキャプションに対応している。例えばセクション４０及び４６にそれぞれ対応するブロック５４及び５５に示すように、ユーザにキャプションが提案される。
【００２１】
各セクションは、対応する１以上のメタデータの事項を有する。このようなメタデータは、以下でテンプレートメタデータと呼ばれる。特定のセクションに対応するテンプレートメタデータは、そのセクションに対応するコンテンツの種類を規定するのに用いられる。メタデータには、テンプレートの各セクションに対応する多くの種類がある。次の表１は、メタデータの種類のある例を示す。
【００２２】
【表１】
【００２３】
最近、メタデータ、コンテンツを記述するメタデータの生成に関心が持たれている。メータデータとコンテンツの対応関係は、保管（archive）の際に有益であると考えられている。メタデータは、所望のコンテンツの後の探索（search）及び検索（retrieve）の処理における補助に用いられる。メタデータには、例えば、ＳＭＰＴＥ−ＥＢＵ（Society of Motion Picture and Television Engineers - European Broadcast Union）、ＭＰＥＧ−７（Motion Pictures Expert Group）のように、多くの規格が開発されている。ここで、Motion Pictures Expert Groupは、ISO/IEC standards body SG29＼WG11を意味する。
【００２４】
一定量のメタデータ、例えば（良いショットであることを示す）グッドショットマーカ（good shot marker）、（どこで記録を開始／停止したかを示す）録音マーカ、ＧＰＳ(global positioning system)位置、日時、固有素材識別子（unique material identifier: 以下、ＵＭＩＤという。）、カメラ設定、焦点、ズームなどは、ソースに自動的に追加することができる。これに加えて、コンテンツからメタデータを自動抽出する技術の進歩は大きく、例えば顔及び特徴検出ツール、音声認識ツールなどの認識ツールなどを利用することで、コンテンツの特徴を識別し、適切なメタデータを追加することができる。
【００２５】
本発明は、ソースコンテンツに対応するメタデータ（以下では、ソースメタデータという。）技術の最近の発展を利用し、編集処理の効率を改善することを図っている。具体的に、本発明では、テンプレートは、コンテンツ、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータの所望のスタイルを規定する。テンプレートメタデータは、本質的にソースメタデータの選択又はソースメタデータの適合基準を表す。ハードディスク、フロッピーディスク、ＣＤＲＯＭなどに格納されたテンプレートは、編集装置によって検索され、ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するようなされている。ソースコンテンツの部分は、この比較に応じて配列され、編集コンテンツシーケンスが作成される。
【００２６】
本発明においては、多くの種類の編集素材、例えばニュース報道、スポーツクリップ／概要、ビデオモンタージュ、ドキュメンタリなどは、かなり類似のパターンに従うものとされる。例えば、国会における討論の報道は、導入（introduction）に始まり、国会議事堂の外側のショット（shot）、政治家の討論のカット（cut）、再び国会議事堂の他のカットに進み、最後に終わりのコメントを述べるレポータに戻る。ショットに対して適用される編集効果、又はショットの間で適用される編集効果も、類似のパターンに従っている。本発明は、このような事実と、メタデータが入手しやすくなっていることを利用し、様々な所望のスタイルに対して作成されたテンプレートについて、これらのテンプレートにおけるテンプレートメタデータが所望のスタイルを規定する編集装置を提供する。所望のスタイルは、ショットの一般的なシーケンス、ソースコンテンツから部分を選択するのに用いる基準、適用される編集効果などのような特徴を特定する。
【００２７】
編集コンテンツシーケンスを作成するために、ソースメタデータをテンプレートメタデータと比較することで、選ばれたテンプレートがソースコンテンツに適用される。この編集コンテンツシーケンスは、編集者にソースコンテンツが所望のスタイルで配列された「第１カット（first cut）」を提供するので、ユーザがソースコンテンツの編集を行う前にコンテンツを理解するために時間を割く必要がなくなる。この第１カットから、ユーザは適当であると思われる変更に進むことができる。
【００２８】
ソースコンテンツを配列して編集コンテンツシーケンスを作成するには、１以上のステップを要する。例えば、ソースコンテンツの配列は、ソースコンテンツの部分の記録、ソースコンテンツからの部分の選択、ソースコンテンツへの編集効果の適用、キャプションの挿入などのステップを１以上含む。本具体例では、ソースコンテンツの部分を配列する編集コンテンツシーケンスの作成は、少なくとも、ソースメタデータとテンプレートメタデータとの比較に基づくソースコンテンツの部分のサブセットの選択または順序付けを有する。したがって、例えば、本具体例では、ソースコンテンツは同じショットの多重「テーク（take）」を含み、ソースメタデータはどのテークが好ましいかを例えばテークに対応するグッドショットマーカを用いて示す。グッドショットマーカがテンプレートメタデータによって特定されると、テンプレートメタデータとソースメタデータとの比較は、編集コンテンツシーケンスの作成において、特定のショットから使用する所望のテークだけを選択するために用いられる。このアプローチにより、原ソースコンテンツ（original source content）よりかなり短い編集コンテンツシーケンスが作成されると考えられる。
【００２９】
テンプレートは様々の形を取るが、本具体例では、テンプレートは所望のスタイルを規定するために連携する複数の離散セクション（discrete section）を規定し、各離散セクションは対応するテンプレートメタデータを有している。
各離散セクションは、本具体例では、所望のシーケンスの部分に対応する所望のコンテンツのタイプを規定すると考えられ、テンプレートメタデータの１以上の項目（item）は、各離散セクションに対応してこの離散セクションに対応するコンテンツの種類を規定する。
【００３０】
本具体例において、ソースコンテンツは、ビデオ素材からなり、多数の離散セクションはビデオ素材の種類を特定し、このような離散セクションに対応するテンプレートメタデータは、少なくとも、対応するビデオ素材の種類を特定するメタデータからなる。たとえば、１つの離散セクションは、「静止（still）」ショットとされ、この離散セクションに対するメタデータは、たとえばソースコンテンツにおける静止ショットを特定する種類である。このアプローチによって、この離散セクションのテンプレートメタデータがソースメタデータと比較されると、ソースコンテンツにおける静止ショットが特定され、これらの静止ショットを表すソースコンテンツの１以上の部分は、編集コンテンツシーケンスの作成に用いられる離散セクションに対応させられる。
【００３１】
例えば、ビデオ素材に加えて、又はビデオ素材とは別に、コンテンツはオーディオ素材からなり、多数の離散セクションに対応するテンプレートメタデータはオーディオ素材に関連するメタデータを含む。このようなメタデータは、例えば高い暗騒音（background noise）、低い暗騒音、リズム、周期的音響イベントなどを表し、テンプレートメタデータをソースメタデータと比較して所望のタイプのオーディオを含むソースコンテンツの部分を特定するときに使うことができる。
【００３２】
上述したように、メタデータは、ソースコンテンツにソースにおいて加えられるか、ソースコンテンツが記録された後のある段階で例えば手動で加えられる。これに加えて、本具体例では、編集装置は、ソースメタデータを生成してソースコンテンツに対応させるために１以上の所定の認識ツールにアクセスし、ソースコンテンツを１以上の認識ツールによってレビューさせるメタデータ処理要素と、このように生成され、ソースメタデータをテンプレートメタデータと比較することによってテンプレートをソースコンテンツに適用するときに処理装置によって使用されるソースメタデータとから構成される。メタデータ処理要素（metadata processing element）は、ハードウェア、ファームウェア及び／又はソフトウェアに、１以上の所定の認識ツール（recognition tool）へのアクセス、及びこれらのツールを用いたメタデータの生成の制御に適するように組み込まれる。したがって、例えば顔を識別する認識ツールは、ビデオをスキャンしてビデオに含まれる顔を探すように使用される。一旦これらの顔が識別されると、自動又は手動による顔の認識が用いられて関係ある人を特定し、認識に応じた適切なメタデータを加える。
【００３３】
本具体例において、メタデータ処理要素は、ユーザ入力に応じてソースメタデータの生成の間にユーザとの対話（interaction）をすることができる。したがって、上記の例では、見いだされた顔がユーザに提示され、ユーザはこれらの画像に関するメタデータ、例えば画像に示された人物を識別するように促される。
【００３４】
特定のテンプレートが選択されると、編集装置１０の処理装置１２は、編集コンテンツシーケンスを生成するために、テンプレートをソースＡ／Ｖ素材に適用する。これは、ソースＡ／Ｖ素材の個々の部分をテンプレートの特定のセクションに対応させるため、ソースメタデータをテンプレートメタデータと比較することにより行われる。例えば、ソースＡ／Ｖ素材の特定の部分は、セクション４２に対応するテンプレートメタデータに対応するソースメタデータを有し、Ａ／Ｖ素材のこれらの部分が静止画に関係していることを特定する。同様に、Ａ／Ｖ素材の他の部分は、第１の特定のショットを特定するセクション４４に対応するテンプレートメタデータに対応するソースメタデータを有している。また、ソース素材のある部分は、ボイスオーバ素材に関連することを特定するソースメタデータを有し、セクション５０に関連すること特定するソースメタデータを有し、メタデータのセクション５０に関連するテンプレートメタデータとの対応は、ソース素材をテンプレートのセクション５０に対応させるために用いられる。
【００３５】
テンプレートメタデータとソースメタデータとの比較に応じて、ソースＡ／Ｖ素材の関連する部分は、例えば比較に応じて配列され、テンプレートによって規定される一般スタイルに従う編集コンテンツシーケンスを生成する。これは、好ましくはソース素材の部分のサブセットの選択を含み、これらの部分を再び順序付けしてテンプレートによって規定されたスタイルに従うようにする。特定されたどんな編集効果なども、この時点で適用される。したがって、適切なテンプレートを選択することによって編集装置のユーザは自動的に編集シーケンスの第１カットを提供され、ソースコンテンツの所望の部分は選択されて順序付けられ、編集効果が適用される。したがって、ユーザは編集コンテンツシーケンスをレビューし、さらに変更する必要があるかどうか判定することができる。
【００３６】
使用に適切な追加の場面（footage）を検索するため、編集装置１０がある保管素材（archive material）を探索するように、あるタグを特定のセクションに対応させることもできる。この探索は、このセクションに関連する適切な場面を検索するために、例えばタグが対応する特定のセクションのテンプレートメタデータと保管メタデータに対応するメタデータを比較することで開始される。図２の例を参照すると、この処理はセクション４６に対応するブロック４６によって示され、注記の形のソースＡ／Ｖ素材に対応するソースメタデータは特定の保管場面の選択を有することを示している。
【００３７】
テンプレートのソースコンテンツへの適用は、図３から図４の例を用いて説明される。図３は、ニュース事項に関係のある特定のソースＡ／Ｖ素材の制作者により特定されるニューステンプレートＡを示している。ニューステンプレートＡに応じて、所望のスタイルは、６つのセクション６１、６２、６３、６４、６５及び６６によって規定される。第１セクション６１は報告するニュース項目についての導入に関連し、第２セクション６２は国会議事堂の外のショットを与え、第３セクション６３はレーポータのショットを与え、第４セクション６４は政治家のショットを与え、第５セクション６５は国会議事堂の静止画を与え、最後のセクション３５０はこれまでのトピックについて建物の外での終わりのコメントを与える。図２を参照して記述されたテンプレートと同様に、特定の編集効果などは各セクションに対応するが、簡単のためにこれらは図３では省略されている。各セクションは、対応する多数のテンプレートメタデータの項目を有し、ソースコンテンツをレビューしてどのテンプレートのセクションにソースコンテンツの特定の部分が対応させられるかを決定する。
【００３８】
図４のＡは、ソース媒体に現れるように、原ソースＡ／Ｖ素材を示している。この例では、ソース素材は、個々のショット又はキャプチャされたテークに関連する１０個の部分からなる。ある部分の間で、カメラ設定の間に記録された素材のように、具体的に興味のない雑多な素材があり、この素材は図４の領域ａによって表されている。具体的な先行技術の編集装置において、編集装置のユーザは、（しばしばソースコンテンツの制作に関わった誰か、例えばジャーナリストに伴われ）、編集コンテンツシーケンスの最終版の特定の部分にどの部分が用いられるか決めるために、原ソースを数回スキャンしてソース素材の全コンテンツを理解しなければならない。しかし、本具体例では、ソースコンテンツの制作に関わった誰か、例えばプロデューサは、編集コンテンツシーケンスは、ニューステンプレートＡに従うことを特定する。これに応じて、ニューステンプレートＡは編集装置１０により使用されるテンプレート記憶装置２６から選択される。
【００３９】
テンプレートをソースコンテンツへの適用する前に、ソースメタデータは、ソースコンテンツの様々な部分に対応させられる。ソースメタデータは、例えば最初にキャプチャされたときにコンテンツに対応させられ、又は適切なメタデータの手動の挿入によって後で加えられる。対応するソースメタデータとともに、ソースコンテンツを編集装置１０が受け取ると、編集装置１０は、テンプレートＡの各セクションに対応するテンプレートメタデータをソース素材の部分に対応するソース素材と比較することで、ニューステンプレートＡをソース素材に適用する。
【００４０】
このように、図３において、導入セクション６１は、ソース素材における導入部分を一般に特定するタイプのテンプレートメタデータを含み、ソースメタデータのレビューにおいては、図４に示すように、セクション６１に対応するテンプレートメタデータの項目は導入の２つのテークを表す部分７４及び７５に対応するソースメタデータに対応することが見いだされる。例えば部分７４及び７５は、これらの部分を導入として特定するソースメタデータの手作業による挿入によって導入することで、テークであると識別される。
【００４１】
なお、例えば、これらの部分は、例えばグッドショットマーカの使用によって、導入の２つのテークのどちらが好ましいか識別するメタデータを含む。セクション６１に対応するテンプレートメタデータがソース素材において良好としてマークされた部分の識別をサポートするテンプレートを含むこともできれば、テンプレートをソースコンテンツに適用することによって導入の所望のテークが選択されることになる。したがって、図４の例において、このようなソースメタデータが加えられ、好ましい第１のテークを表す導入１の部分７４が好ましいとされる。同様に、部分７１はセクション６１に対応している。
【００４２】
同様に、セクション６２に対応するテンプレートデータは、具体的にはメタデータであり、国会議事堂のショットの特定をサポートする。例えば、国会議事堂のＧＰＳ位置を識別するメタデータは、セクション６２に対応している。ソースコンテンツをレビューするときに、ＧＰＳメタデータが部分７０及び７１に対応していることが見いだされると、これらの部分は、制作される編集コンテンツシーケンスにおける部分の順序を決定する目的で、部分６２に対応させられなければならない。なお、本具体例においては、ソースメタデータは、ショットの１つをより良好であるとして特定し、この場合には部分７１によって表されるショット、テンプレートメタデータは、ソースメタデータを介して良好なショットを識別する種類を含む。したがって、ショット７１が、セクション６２に対応する。
【００４３】
同様に、レポータと政治家にそれぞれ関係するセクション６３及び６４に関して、メタデータは、レポータのテークに関係するソースコンテンツの部分と、政治家のテークに関係するコンテンツの部分とを特定するソースコンテンツに加えられる。これは、直接に適用されるが、ユーザには、顔のショットを提供するソース素材のこれらの部分を識別するために使われ、これらの部分を適切なメタデータでラベル付けしてレポータに関係する部分と政治家に関係する部分とを特定する顔検出ツールのような認識ツールが提供されている。したがって、ソース素材をレビューするとき、編集装置１０は、部分７６及び７７がセクション６３に適切に対応し、部分７２及び７３がセクション６４に適切に対応することを特定する。しかし、この例では、グッドショットマーカは、部分７６に対応するので、部分７７より優先して選択される。
【００４４】
この例では、グッドショットマーカは部分７２及び７３に対応することはなく、好ましい具体例では両方の位置はセクション６４に対応し、ユーザは後で２つのテークの選択ができる。これは、例えばテンプレートメタデータがグッドショットマーカなどの特定をサポートする種類を含まない場合のように、セクション６４が好ましいショット又はテークの識別ができるテンプレートメタデータのタイプを含まない場合に当てはまる。
【００４５】
適切なメタデータは、セクション６５及び６６に対応し、静止画像、又は外でのコメントのそれぞれに関係するソースコンテンツのどの部分の識別もサポートする。したがって、テンプレートメタデータをソースメタデータと比較することにより、図３に示されたニューステンプレートＡが図４のＡに示されたソースコンテンツに適用され、再配列されたソースコンテンツが図４のＢで特定される編集ソースコンテンツが得られる。
【００４６】
ソースコンテンツをニューステンプレートＡと比較することによって編集装置１０によって自動的に生成された編集コンテンツシーケンスは、編集装置のユーザが必要な調整をさらに行えるように表示される。本具体例では、ソースコンテンツのある部分が好ましい二者択一のテーク／ショットで優先して落とされ、断片化された様々なソースコンテンツの部分が最終編集素材の適切な順序に再配列されるので、ユーザがソースコンテンツの編集を行う前にコンテンツを理解するために時間を割く必要がなくなると考えられる。この第１カットから、ユーザは、適切であると思われるさらなる変更の作成にさらに進むことができる。これによって、編集処理の効率は著しく改善される。
【００４７】
図５は、第１の具体例において、編集装置１０で行われる処理を示すフローチャートである。ステップ８１において、ソース素材が供給され、例えば入力Ａ／Ｖ記憶装置２４に読み込まれる。ステップ８２において、編集装置１０は、テンプレートが選択されているかどうかを判定する。本具体例では、ユーザが入力装置２２を介して適切な選択をすることによって手動で行われる。なお、上述したように、使用するテンプレートを特定し、編集装置１０によって直接に認識できるメタデータは、ソース素材にすでに対応しているので、編集装置１０が自動的に所望のテンプレートを選択することができる。
【００４８】
処理はステップ８３に進み、編集装置１０は、テンプレートをテンプレート記憶装置２６から検索し、テンプレートメタデータをソースメタデータと比較することによりソース素材に適用する。比較の結果、ステップ８４において、ユーザによるレビューのために編集コンテンツシーケンスが作成される。上述したように、編集コンテンツシーケンスは、ステップ８３で実行したテンプレートメタデータとソースメタデータの比較に応じて、原ソース素材の部分を配列することにより作成される。例えば、この処理は、ソース素材の部分の選択及び順序付けを含む編集コンテンツシーケンスを生成するが、編集効果のアプリケーションなども含む。
【００４９】
図５では、ソース素材が適切なメタデータを含むテンプレートのソース素材への適用するものとしている。図６は、ソースメタデータが編集処理の間に補給される第２の具体例を示す。
【００５０】
図６の最初の３つのステップ８１、８２及び８３は、前に図５で示したものと同様である。しかし、テンプレートメタデータをソースメタデータと比較することにより、一旦テンプレートがソース素材に適用されると、ステップ９１においてテンプレートの部分が占められていない（not populated）こと、すなわちどのセクションもこれらに対応するソース素材の部分を持たないかどうかが判定される。これが当てはまると、ソース素材は、テンプレートのセクションに関連する部分を含まない。テンプレートのこれらのセクションに対応させることができるには不十分なソース間メタデータを有するソース素材の部分があることもある。本発明の他の具体例は、このような後の場合を、メタデータをこれらの部分にさらに対応させて扱うことを目的としている。
【００５１】
したがって、編集装置１０が、ステップ９１において占められていないテンプレートのセクションがある（YES）と判定すると、処理はステップ９２に進み、編集装置１０は、さらにメタデータを追加しようとする。上述したように、これには多くの方法がある。第１に、編集装置１０は、ユーザにテンプレートのセクションにまだ対応していないソース素材の部分を表示し、ユーザにメタデータをこれらの部分に加えることを催促する。ここで、認識処理装置３６は編集装置１０によって使用され、顔、声のような特徴を、ソース素材のこれらの部分において識別し、自動または手動によってメタデータをさらに生成することを容易にする。
【００５２】
一旦この処理が完了すると、ステップ９３においてテンプレートは補給されたメタデータを使用するソース素材に再適用される。メタデータを補給することで、テンプレートを再適用するときに、以前に占められていなかったテンプレートの部分は、ここでこれらに対応するソース素材の部分を有することができる。
【００５３】
処理はステップ８４に進み、編集コンテンツシーケンスは、ステップ９３におけるテンプレートメタデータとソースメタデータとの比較に応じて、ソース素材の部分を配列することにより生成される。ステップ９１で、占められていないテンプレートのセクションはない（NO）と判定されると、処理はステップ９１からステップ８４に直接に進む。
【００５４】
本発明の特定の具体例について説明してきたが、本発明はこれに限られるものではなく、本発明の趣旨を逸脱しない範囲で変更することができる。
【００５５】
【発明の効果】
上述したように、本発明によると、編集の前にソースコンテンツをレビューして編集する素材を理解する必要がなくなる。したがって、従来にはソースコンテンツをレビューするために費やしていた時間を削減することができ、編集作業の効率は著しく向上する。
【図面の簡単な説明】
【図１】図１は、編集装置の具体的な構成をを示す図である。
【図２】図２は、本具体例のテンプレートを示す図である。
【図３】図３は、本具体例のテンプレートのソースコンテンツへの適用を示す図である。
【図４】図４は、本具体例のテンプレートのソースコンテンツへの適用を示す図である。
【図５】第１の具体例による編集装置の操作を示すフローチャートである。
【図６】第２の具体例による編集装置の操作を示すフローチャートである。
【符号の説明】
１０ 編集装置、１２ 処理装置、１４ メモリ、１６ 表示ドライバ、１８入出力インターフェース、２０ 表示装置、２２ 入力装置、２４ 入力オーディオ／ビデオ記憶装置、２６ テンプレート記憶装置、２８ 出力オーディオ／ビデオ記憶装置、３６ 認識処理装置
【発明の属する技術分野】
本発明は、ソースコンテンツ（source content）を編集して編集コンテンツシーケンス（edited content sequence）を作成する編集装置及び方法、コンピュータプログラム並びにテンプレートに関する。ソースコンテンツは、例えばビデオ及び／又はオーディオ素材（video/audio material）である。
【０００２】
【従来の技術】
ソースコンテンツの編集は、従来から負担が大きい作業であり、熟練した編集者によって編集装置（editorial suite）で行われる。編集装置（editing system）は、通常は編集者の管理下でソースコンテンツを編集するのに用いられる。現在の編集装置は洗練されたツールを有し、編集者は、ソースコンテンツを複雑な編集効果で処理することができる。
【０００３】
【発明が解決しようとする課題】
しかし、編集者は、このような編集の前に、ソースコンテンツをレビュー（review）して編集する素材を理解するために相当の時間を要している。編集作業の効率は、最初にソースコンテンツを理解するために時間を費やすことで、悪くなっている。
【０００４】
本発明は、上述の実情に鑑みて提案されるものであって、編集の前に編集者が素材を理解するために費やす時間を削減することにより、編集効率を向上させるような編集装置及び方法、コンピュータプログラム並びにテンプレートを提供することを目的とする。
【０００５】
【課題を解決するための手段】
本発明は、ソースコンテンツを編集して編集コンテンツシーケンス、ソースコンテンツの部分（portion）に対応するソースメタデータ（source metadata）を作成する編集装置を提供する。この編集装置は、所望のスタイルのコンテンツ、所望のスタイルを規定するテンプレート（template）におけるテンプレートメタデータ（template metadata）を格納する記憶装置（storage）と、ソースメタデータ（source metadata）をテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用し、この比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成する処理装置（processing unit）とを備える。
【０００６】
本発明は、コンテンツの所望のスタイルを規定するテンプレート、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータを提供する。本具体例において、テンプレートは、所望のスタイルを規定するように連係（link）する複数の離散的なセクションからなり、各離散セクションは対応するテンプレートメタデータを有している。従って、本発明のこの観点によると、多数のテンプレートが用意されて編集コンテンツシーケンスに必要な特定のフォーマットを規定し、これらのテンプレートは本発明の編集装置の使用に適するように選択される。
【０００７】
本発明は、ソースコンテンツを編集して編集ソースコンテンツを作成するように編集装置を操作する編集方法を提供し、この編集方法は、（ａ）編集されるソースコンテンツ、ソースコンテンツの部分に対応するソースメタデータを受け取るステップと、（ｂ）コンテンツ、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータを提供するステップと、（ｃ）ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するステップと、（ｄ）ステップ（ｃ）の比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成するステップとを有する。
【０００８】
本発明は、ソースコンテンツ、ソースコンテンツに部分に対応するソースコンテンツメタデータを編集して編集コンテンツシーケンスを作成するように編集装置を操作するコンピュータプログラムを提供し、コンピュータプログラムは編集装置に、（ａ）記憶装置から所望のスタイルを規定するテンプレート、テンプレートにおける所望のスタイルを規定するテンプレートメタデータを検索するステップと、（ｂ）ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するステップと、（ｃ）ステップ（ｂ）における比較に応じてソースコンテンツの部分を配列して編集コンテンツシーケンスを作成するステップとを実行させる。
【０００９】
【発明の実施の形態】
以下、本発明に係る編集装置及び方法、コンピュータプログラム並びにテンプレートの実施の形態について、図面を参照しながら詳細に説明する。
【００１０】
図１は、本発明を適用した編集装置１０の具体的な構成を示すブロック図である。この図１に示すように、編集装置１０は、編集コンテンツを作成するためにソースコンテンツを受け取って編集操作をソースコンテンツに施す処理装置（processing unit）１２、例えばマイクロプロセッサを備えている。内蔵メモリ１４は、例えばリードオンリーメモリ（read only memory: ＲＯＭ）、ランダムアクセスメモリ（random access memory： ＲＡＭ）などであり、処理装置１２で使用されるデータとともに、処理装置１２で実行されるソフトウェアを格納する。
【００１１】
編集装置１０は、表示ドライバ１６を備え、表示ドライバ１６は、表示信号を編集装置１０に接続された表示装置２０に出力する。また、編集装置１０は、入出力インターフェース１８を備え、入出力インタフェース１８は、入力装置２２、例えばキーボード、マウス、ジョグシャトルダイアル、ペンとタブレットなどを編集装置１０に接続するインターフェースを司る。編集装置１０のユーザは、表示装置２０及び入力装置２２を介して、編集装置１０によって実行される編集処理と対話（interact）することができる。
【００１２】
本具体例では、編集装置１０によって編集されるソースコンテンツは、デジタルカメラ３０から出力されたようなオーディオ／ビデオ（audio/vide: 以下、Ａ／Ｖという。）素材であるとされる。Ａ／Ｖ素材は、アナログデータでも作成されるが、本具体例の編集装置１０はデジタルデータによって動作するので、アナログＡ／Ｖ素材は編集装置１０への入力される前にデジタルデータに変換される。
【００１３】
Ａ／Ｖ素材がデジタルカメラ３０によって生成されると、適切な媒体３２、例えばデジタルテープ又はデジタルディスクに格納される。最近のデジタル技術では、Ａ／Ｖ素材が最初に作成された時点において、あるメタデータがＡ／Ｖ素材に対応させられる。本具体例では、このようなメタデータは、適切な媒体３２として、例えばデジタルテープ又はディスクに格納される。なお、メタデータは、対応するＡ／Ｖ素材と同一の物理記憶媒体３２に記録されるが、別の物理記録媒体３４にも記録することもできる。
【００１４】
Ａ／Ｖ素材が編集装置１０に送られる前のある時点において、例えば手作業でメタデータを加えることによって、追加のメタデータを加えることもできる。Ａ／Ｖ素材が編集されるとき、Ａ／Ｖ素材は、対応するメタデータ（以下では、ソースメタデータと呼ぶ。）とともに、入力Ａ／Ｖ記憶装置（input A/V store）２４、例えばデジタルテーププレーヤ、デジタルディスクプレーヤ又はサーバに格納される。
【００１５】
本具体例では、１以上のテンプレートが記憶装置、例えばデータベースやネットワークを介してアクセスされる記憶装置から提供される。ここで、図１ではテンプレート記憶装置２６は別個の構成要素として表されているが、テンプレートは編集装置１０において局所的に、例えばメモリ５５に格納することもできる。多くの種類の編集素材、例えばニュース報告は、似通ったパターンに従うことが認められる。したがって、本具体例では、各テンプレートはＡ／Ｖ素材の所望のスタイルを規定し、テンプレートメタデータは各テンプレートにおいて所望のスタイルを規定する。
【００１６】
編集装置１０は、テンプレート記憶装置２６から適切なテンプレートを検索し、テンプレートメタデータをソースＡ／Ｖ素材に対応するソースメタデータと比較することで、テンプレートを入力Ａ／Ｖ記憶装置２４から供給されるソースＡ／Ｖ素材に適用するようになされている。この作業は、処理装置１２によって実行され、ソースＡ／Ｖ素材は、ソースメタデータとテンプレートメタデータの比較に応じて、編集コンテンツシーケンスを作成するよう配列される。編集コンテンツシーケンスは、処理装置１２から出力Ａ／Ｖ記憶装置２８へ出力される。この出力は、編集装置１０のユーザによってさらに変更することができる。入力Ａ／Ｖ記憶装置２４と同様に、出力Ａ／Ｖ記憶装置２８は、デジタルテープ、デジタルディスクプレーヤ又はサーバなどから構成される。
【００１７】
本具体例において、テンプレートは、編集するＡ／Ｖ素材に対するユーザの理解に基づいて、編集装置のユーザにより選ばれると想定される。例えば、ユーザーは、Ａ／Ｖ素材の編集を求めている人からテンプレートの選択について明示的な指示を与えられる。したがって、例えば、編集装置１０のユーザは、テンプレート記憶装置２６に格納された特定のニュース向けのテンプレートを使用するという指示とともに、ニュース事項に関係するあるＡ／Ｖ素材を受け取る。なお、ユーザは、編集するＡ／Ｖ素材のタイプに基づいて、使用するテンプレートを自分で決めることもできる。テンプレートは、テンプレート記憶装置２６から具体的には手動で選択されるが、編集装置１０によるテンプレートの自動選択のように、編集するＡ／Ｖ素材に対応するメタデータが、どのテンプレートを使用するか処理装置１２に直接に指示することも考えられる。
【００１８】
本具体例では、編集装置１０は、１以上のプラグイン認識ツールの形態を有する多くの認識処理装置３６に接続することができる。これらの認識ツールは、編集装置１０によってメタデータの生成の補助に用いられる。例えば、顔を検出する認識ツールは、ソースＡ／Ｖをスキャンしてビデオに含まれる顔を探すために用いられる。一旦これらの顔が識別されると、これらは編集装置１０のユーザに提示され、ユーザが検出された顔の識別に関係するメタデータを入力するように促す。なお、認識ツール又は編集装置１０の何れかが人の顔の適切なデータベースにアクセスできるなら、顔の自動的な認識もできる。同様に、音声を認識し、Ａ／Ｖソースにおけるオーディオ素材に関連するメタデータの追加ができるような認識ツールも提供される。
【００１９】
次に、編集装置１０によって用いられるテンプレートを、図２を用いて説明する。図２は、テンプレート記憶装置２６に格納された具体的なテンプレートを示す図である。Ａ／Ｖシーケンスを記述するテンプレートは、５つ主要セクション４０、４２、４４、４６、４８からなる。第１セクション４０は導入（introduction）を提供する素材からなり、第２セクション４２は１以上の静止画（still）からなり、第３セクション４４は特定のショット（shot）の場面を与え、第４セクション４６はさらにショットの場面を与え、最後のセクション４８は終了シーケンスを提供する。さらにセクション５０のボイスオーバ（voice over）は、素材にオーディオボイス（audio voice）与え、セクション４０、４４及び４６に対応するオーディオを与えるために用いられる。
【００２０】
（ビデオワイプ（video wipe）、ページターン（page turn）、オーディオフェード（audio fade）、クロスフェード（cross fade）などのような）多数の特定の編集効果、キーイング及び／又は技術的な調整は、各セクションに対応し、編集コンテンツシーケンスの生成の間、ユーザは、これら対応する効果、キーイングまたは調整のどれを使うか入力を催促される。例えばセクション４０は、（ブロック４１に示すように）導入の最後に適用される右上から左下へのボックスワイプ（box wipe）を示す編集効果に対応し、セクション４２は、（ブロック４３に示すように）静止画の最後に適用される左下から右上へのボックスワイプを示す編集効果に対応している。同様に、ストレートカット（straight cut）は、ブロック４５及び４７の間に示されるように、セクション４４及び４６の間、及びセクション４６及び４８の間で特定される。また、ブロック５２に示されるように、オーディオフェードアップ（audio fade up）はセクション５０の最初に特定され、ブロック５２及び５３に示すように、ビデオフェードイン（video fade in）及びビデオフェードアウト（video fade out）はセクション４６のキャプションに対応している。例えばセクション４０及び４６にそれぞれ対応するブロック５４及び５５に示すように、ユーザにキャプションが提案される。
【００２１】
各セクションは、対応する１以上のメタデータの事項を有する。このようなメタデータは、以下でテンプレートメタデータと呼ばれる。特定のセクションに対応するテンプレートメタデータは、そのセクションに対応するコンテンツの種類を規定するのに用いられる。メタデータには、テンプレートの各セクションに対応する多くの種類がある。次の表１は、メタデータの種類のある例を示す。
【００２２】
【表１】
最近、メタデータ、コンテンツを記述するメタデータの生成に関心が持たれている。メータデータとコンテンツの対応関係は、保管（archive）の際に有益であると考えられている。メタデータは、所望のコンテンツの後の探索（search）及び検索（retrieve）の処理における補助に用いられる。メタデータには、例えば、ＳＭＰＴＥ−ＥＢＵ（Society of Motion Picture and Television Engineers - European Broadcast Union）、ＭＰＥＧ−７（Motion Pictures Expert Group）のように、多くの規格が開発されている。ここで、Motion Pictures Expert Groupは、ISO/IEC standards body SG29＼WG11を意味する。
【００２４】
一定量のメタデータ、例えば（良いショットであることを示す）グッドショットマーカ（good shot marker）、（どこで記録を開始／停止したかを示す）録音マーカ、ＧＰＳ(global positioning system)位置、日時、固有素材識別子（unique material identifier: 以下、ＵＭＩＤという。）、カメラ設定、焦点、ズームなどは、ソースに自動的に追加することができる。これに加えて、コンテンツからメタデータを自動抽出する技術の進歩は大きく、例えば顔及び特徴検出ツール、音声認識ツールなどの認識ツールなどを利用することで、コンテンツの特徴を識別し、適切なメタデータを追加することができる。
【００２５】
本発明は、ソースコンテンツに対応するメタデータ（以下では、ソースメタデータという。）技術の最近の発展を利用し、編集処理の効率を改善することを図っている。具体的に、本発明では、テンプレートは、コンテンツ、テンプレートにおいて所望のスタイルを規定するテンプレートメタデータの所望のスタイルを規定する。テンプレートメタデータは、本質的にソースメタデータの選択又はソースメタデータの適合基準を表す。ハードディスク、フロッピーディスク、ＣＤＲＯＭなどに格納されたテンプレートは、編集装置によって検索され、ソースメタデータをテンプレートメタデータと比較することでテンプレートをソースコンテンツに適用するようなされている。ソースコンテンツの部分は、この比較に応じて配列され、編集コンテンツシーケンスが作成される。
【００２６】
本発明においては、多くの種類の編集素材、例えばニュース報道、スポーツクリップ／概要、ビデオモンタージュ、ドキュメンタリなどは、かなり類似のパターンに従うものとされる。例えば、国会における討論の報道は、導入（introduction）に始まり、国会議事堂の外側のショット（shot）、政治家の討論のカット（cut）、再び国会議事堂の他のカットに進み、最後に終わりのコメントを述べるレポータに戻る。ショットに対して適用される編集効果、又はショットの間で適用される編集効果も、類似のパターンに従っている。本発明は、このような事実と、メタデータが入手しやすくなっていることを利用し、様々な所望のスタイルに対して作成されたテンプレートについて、これらのテンプレートにおけるテンプレートメタデータが所望のスタイルを規定する編集装置を提供する。所望のスタイルは、ショットの一般的なシーケンス、ソースコンテンツから部分を選択するのに用いる基準、適用される編集効果などのような特徴を特定する。
【００２７】
編集コンテンツシーケンスを作成するために、ソースメタデータをテンプレートメタデータと比較することで、選ばれたテンプレートがソースコンテンツに適用される。この編集コンテンツシーケンスは、編集者にソースコンテンツが所望のスタイルで配列された「第１カット（first cut）」を提供するので、ユーザがソースコンテンツの編集を行う前にコンテンツを理解するために時間を割く必要がなくなる。この第１カットから、ユーザは適当であると思われる変更に進むことができる。
【００２８】
ソースコンテンツを配列して編集コンテンツシーケンスを作成するには、１以上のステップを要する。例えば、ソースコンテンツの配列は、ソースコンテンツの部分の記録、ソースコンテンツからの部分の選択、ソースコンテンツへの編集効果の適用、キャプションの挿入などのステップを１以上含む。本具体例では、ソースコンテンツの部分を配列する編集コンテンツシーケンスの作成は、少なくとも、ソースメタデータとテンプレートメタデータとの比較に基づくソースコンテンツの部分のサブセットの選択または順序付けを有する。したがって、例えば、本具体例では、ソースコンテンツは同じショットの多重「テーク（take）」を含み、ソースメタデータはどのテークが好ましいかを例えばテークに対応するグッドショットマーカを用いて示す。グッドショットマーカがテンプレートメタデータによって特定されると、テンプレートメタデータとソースメタデータとの比較は、編集コンテンツシーケンスの作成において、特定のショットから使用する所望のテークだけを選択するために用いられる。このアプローチにより、原ソースコンテンツ（original source content）よりかなり短い編集コンテンツシーケンスが作成されると考えられる。
【００２９】
テンプレートは様々の形を取るが、本具体例では、テンプレートは所望のスタイルを規定するために連携する複数の離散セクション（discrete section）を規定し、各離散セクションは対応するテンプレートメタデータを有している。
各離散セクションは、本具体例では、所望のシーケンスの部分に対応する所望のコンテンツのタイプを規定すると考えられ、テンプレートメタデータの１以上の項目（item）は、各離散セクションに対応してこの離散セクションに対応するコンテンツの種類を規定する。
【００３０】
本具体例において、ソースコンテンツは、ビデオ素材からなり、多数の離散セクションはビデオ素材の種類を特定し、このような離散セクションに対応するテンプレートメタデータは、少なくとも、対応するビデオ素材の種類を特定するメタデータからなる。たとえば、１つの離散セクションは、「静止（still）」ショットとされ、この離散セクションに対するメタデータは、たとえばソースコンテンツにおける静止ショットを特定する種類である。このアプローチによって、この離散セクションのテンプレートメタデータがソースメタデータと比較されると、ソースコンテンツにおける静止ショットが特定され、これらの静止ショットを表すソースコンテンツの１以上の部分は、編集コンテンツシーケンスの作成に用いられる離散セクションに対応させられる。
【００３１】
例えば、ビデオ素材に加えて、又はビデオ素材とは別に、コンテンツはオーディオ素材からなり、多数の離散セクションに対応するテンプレートメタデータはオーディオ素材に関連するメタデータを含む。このようなメタデータは、例えば高い暗騒音（background noise）、低い暗騒音、リズム、周期的音響イベントなどを表し、テンプレートメタデータをソースメタデータと比較して所望のタイプのオーディオを含むソースコンテンツの部分を特定するときに使うことができる。
【００３２】
上述したように、メタデータは、ソースコンテンツにソースにおいて加えられるか、ソースコンテンツが記録された後のある段階で例えば手動で加えられる。これに加えて、本具体例では、編集装置は、ソースメタデータを生成してソースコンテンツに対応させるために１以上の所定の認識ツールにアクセスし、ソースコンテンツを１以上の認識ツールによってレビューさせるメタデータ処理要素と、このように生成され、ソースメタデータをテンプレートメタデータと比較することによってテンプレートをソースコンテンツに適用するときに処理装置によって使用されるソースメタデータとから構成される。メタデータ処理要素（metadata processing element）は、ハードウェア、ファームウェア及び／又はソフトウェアに、１以上の所定の認識ツール（recognition tool）へのアクセス、及びこれらのツールを用いたメタデータの生成の制御に適するように組み込まれる。したがって、例えば顔を識別する認識ツールは、ビデオをスキャンしてビデオに含まれる顔を探すように使用される。一旦これらの顔が識別されると、自動又は手動による顔の認識が用いられて関係ある人を特定し、認識に応じた適切なメタデータを加える。
【００３３】
本具体例において、メタデータ処理要素は、ユーザ入力に応じてソースメタデータの生成の間にユーザとの対話（interaction）をすることができる。したがって、上記の例では、見いだされた顔がユーザに提示され、ユーザはこれらの画像に関するメタデータ、例えば画像に示された人物を識別するように促される。
【００３４】
特定のテンプレートが選択されると、編集装置１０の処理装置１２は、編集コンテンツシーケンスを生成するために、テンプレートをソースＡ／Ｖ素材に適用する。これは、ソースＡ／Ｖ素材の個々の部分をテンプレートの特定のセクションに対応させるため、ソースメタデータをテンプレートメタデータと比較することにより行われる。例えば、ソースＡ／Ｖ素材の特定の部分は、セクション４２に対応するテンプレートメタデータに対応するソースメタデータを有し、Ａ／Ｖ素材のこれらの部分が静止画に関係していることを特定する。同様に、Ａ／Ｖ素材の他の部分は、第１の特定のショットを特定するセクション４４に対応するテンプレートメタデータに対応するソースメタデータを有している。また、ソース素材のある部分は、ボイスオーバ素材に関連することを特定するソースメタデータを有し、セクション５０に関連すること特定するソースメタデータを有し、メタデータのセクション５０に関連するテンプレートメタデータとの対応は、ソース素材をテンプレートのセクション５０に対応させるために用いられる。
【００３５】
テンプレートメタデータとソースメタデータとの比較に応じて、ソースＡ／Ｖ素材の関連する部分は、例えば比較に応じて配列され、テンプレートによって規定される一般スタイルに従う編集コンテンツシーケンスを生成する。これは、好ましくはソース素材の部分のサブセットの選択を含み、これらの部分を再び順序付けしてテンプレートによって規定されたスタイルに従うようにする。特定されたどんな編集効果なども、この時点で適用される。したがって、適切なテンプレートを選択することによって編集装置のユーザは自動的に編集シーケンスの第１カットを提供され、ソースコンテンツの所望の部分は選択されて順序付けられ、編集効果が適用される。したがって、ユーザは編集コンテンツシーケンスをレビューし、さらに変更する必要があるかどうか判定することができる。
【００３６】
使用に適切な追加の場面（footage）を検索するため、編集装置１０がある保管素材（archive material）を探索するように、あるタグを特定のセクションに対応させることもできる。この探索は、このセクションに関連する適切な場面を検索するために、例えばタグが対応する特定のセクションのテンプレートメタデータと保管メタデータに対応するメタデータを比較することで開始される。図２の例を参照すると、この処理はセクション４６に対応するブロック４６によって示され、注記の形のソースＡ／Ｖ素材に対応するソースメタデータは特定の保管場面の選択を有することを示している。
【００３７】
テンプレートのソースコンテンツへの適用は、図３から図４の例を用いて説明される。図３は、ニュース事項に関係のある特定のソースＡ／Ｖ素材の制作者により特定されるニューステンプレートＡを示している。ニューステンプレートＡに応じて、所望のスタイルは、６つのセクション６１、６２、６３、６４、６５及び６６によって規定される。第１セクション６１は報告するニュース項目についての導入に関連し、第２セクション６２は国会議事堂の外のショットを与え、第３セクション６３はレーポータのショットを与え、第４セクション６４は政治家のショットを与え、第５セクション６５は国会議事堂の静止画を与え、最後のセクション３５０はこれまでのトピックについて建物の外での終わりのコメントを与える。図２を参照して記述されたテンプレートと同様に、特定の編集効果などは各セクションに対応するが、簡単のためにこれらは図３では省略されている。各セクションは、対応する多数のテンプレートメタデータの項目を有し、ソースコンテンツをレビューしてどのテンプレートのセクションにソースコンテンツの特定の部分が対応させられるかを決定する。
【００３８】
図４のＡは、ソース媒体に現れるように、原ソースＡ／Ｖ素材を示している。この例では、ソース素材は、個々のショット又はキャプチャされたテークに関連する１０個の部分からなる。ある部分の間で、カメラ設定の間に記録された素材のように、具体的に興味のない雑多な素材があり、この素材は図４の領域ａによって表されている。具体的な先行技術の編集装置において、編集装置のユーザは、（しばしばソースコンテンツの制作に関わった誰か、例えばジャーナリストに伴われ）、編集コンテンツシーケンスの最終版の特定の部分にどの部分が用いられるか決めるために、原ソースを数回スキャンしてソース素材の全コンテンツを理解しなければならない。しかし、本具体例では、ソースコンテンツの制作に関わった誰か、例えばプロデューサは、編集コンテンツシーケンスは、ニューステンプレートＡに従うことを特定する。これに応じて、ニューステンプレートＡは編集装置１０により使用されるテンプレート記憶装置２６から選択される。
【００３９】
テンプレートをソースコンテンツへの適用する前に、ソースメタデータは、ソースコンテンツの様々な部分に対応させられる。ソースメタデータは、例えば最初にキャプチャされたときにコンテンツに対応させられ、又は適切なメタデータの手動の挿入によって後で加えられる。対応するソースメタデータとともに、ソースコンテンツを編集装置１０が受け取ると、編集装置１０は、テンプレートＡの各セクションに対応するテンプレートメタデータをソース素材の部分に対応するソース素材と比較することで、ニューステンプレートＡをソース素材に適用する。
【００４０】
このように、図３において、導入セクション６１は、ソース素材における導入部分を一般に特定するタイプのテンプレートメタデータを含み、ソースメタデータのレビューにおいては、図４に示すように、セクション６１に対応するテンプレートメタデータの項目は導入の２つのテークを表す部分７４及び７５に対応するソースメタデータに対応することが見いだされる。例えば部分７４及び７５は、これらの部分を導入として特定するソースメタデータの手作業による挿入によって導入することで、テークであると識別される。
【００４１】
なお、例えば、これらの部分は、例えばグッドショットマーカの使用によって、導入の２つのテークのどちらが好ましいか識別するメタデータを含む。セクション６１に対応するテンプレートメタデータがソース素材において良好としてマークされた部分の識別をサポートするテンプレートを含むこともできれば、テンプレートをソースコンテンツに適用することによって導入の所望のテークが選択されることになる。したがって、図４の例において、このようなソースメタデータが加えられ、好ましい第１のテークを表す導入１の部分７４が好ましいとされる。同様に、部分７１はセクション６１に対応している。
【００４２】
同様に、セクション６２に対応するテンプレートデータは、具体的にはメタデータであり、国会議事堂のショットの特定をサポートする。例えば、国会議事堂のＧＰＳ位置を識別するメタデータは、セクション６２に対応している。ソースコンテンツをレビューするときに、ＧＰＳメタデータが部分７０及び７１に対応していることが見いだされると、これらの部分は、制作される編集コンテンツシーケンスにおける部分の順序を決定する目的で、部分６２に対応させられなければならない。なお、本具体例においては、ソースメタデータは、ショットの１つをより良好であるとして特定し、この場合には部分７１によって表されるショット、テンプレートメタデータは、ソースメタデータを介して良好なショットを識別する種類を含む。したがって、ショット７１が、セクション６２に対応する。
【００４３】
同様に、レポータと政治家にそれぞれ関係するセクション６３及び６４に関して、メタデータは、レポータのテークに関係するソースコンテンツの部分と、政治家のテークに関係するコンテンツの部分とを特定するソースコンテンツに加えられる。これは、直接に適用されるが、ユーザには、顔のショットを提供するソース素材のこれらの部分を識別するために使われ、これらの部分を適切なメタデータでラベル付けしてレポータに関係する部分と政治家に関係する部分とを特定する顔検出ツールのような認識ツールが提供されている。したがって、ソース素材をレビューするとき、編集装置１０は、部分７６及び７７がセクション６３に適切に対応し、部分７２及び７３がセクション６４に適切に対応することを特定する。しかし、この例では、グッドショットマーカは、部分７６に対応するので、部分７７より優先して選択される。
【００４４】
この例では、グッドショットマーカは部分７２及び７３に対応することはなく、好ましい具体例では両方の位置はセクション６４に対応し、ユーザは後で２つのテークの選択ができる。これは、例えばテンプレートメタデータがグッドショットマーカなどの特定をサポートする種類を含まない場合のように、セクション６４が好ましいショット又はテークの識別ができるテンプレートメタデータのタイプを含まない場合に当てはまる。
【００４５】
適切なメタデータは、セクション６５及び６６に対応し、静止画像、又は外でのコメントのそれぞれに関係するソースコンテンツのどの部分の識別もサポートする。したがって、テンプレートメタデータをソースメタデータと比較することにより、図３に示されたニューステンプレートＡが図４のＡに示されたソースコンテンツに適用され、再配列されたソースコンテンツが図４のＢで特定される編集ソースコンテンツが得られる。
【００４６】
ソースコンテンツをニューステンプレートＡと比較することによって編集装置１０によって自動的に生成された編集コンテンツシーケンスは、編集装置のユーザが必要な調整をさらに行えるように表示される。本具体例では、ソースコンテンツのある部分が好ましい二者択一のテーク／ショットで優先して落とされ、断片化された様々なソースコンテンツの部分が最終編集素材の適切な順序に再配列されるので、ユーザがソースコンテンツの編集を行う前にコンテンツを理解するために時間を割く必要がなくなると考えられる。この第１カットから、ユーザは、適切であると思われるさらなる変更の作成にさらに進むことができる。これによって、編集処理の効率は著しく改善される。
【００４７】
図５は、第１の具体例において、編集装置１０で行われる処理を示すフローチャートである。ステップ８１において、ソース素材が供給され、例えば入力Ａ／Ｖ記憶装置２４に読み込まれる。ステップ８２において、編集装置１０は、テンプレートが選択されているかどうかを判定する。本具体例では、ユーザが入力装置２２を介して適切な選択をすることによって手動で行われる。なお、上述したように、使用するテンプレートを特定し、編集装置１０によって直接に認識できるメタデータは、ソース素材にすでに対応しているので、編集装置１０が自動的に所望のテンプレートを選択することができる。
【００４８】
処理はステップ８３に進み、編集装置１０は、テンプレートをテンプレート記憶装置２６から検索し、テンプレートメタデータをソースメタデータと比較することによりソース素材に適用する。比較の結果、ステップ８４において、ユーザによるレビューのために編集コンテンツシーケンスが作成される。上述したように、編集コンテンツシーケンスは、ステップ８３で実行したテンプレートメタデータとソースメタデータの比較に応じて、原ソース素材の部分を配列することにより作成される。例えば、この処理は、ソース素材の部分の選択及び順序付けを含む編集コンテンツシーケンスを生成するが、編集効果のアプリケーションなども含む。
【００４９】
図５では、ソース素材が適切なメタデータを含むテンプレートのソース素材への適用するものとしている。図６は、ソースメタデータが編集処理の間に補給される第２の具体例を示す。
【００５０】
図６の最初の３つのステップ８１、８２及び８３は、前に図５で示したものと同様である。しかし、テンプレートメタデータをソースメタデータと比較することにより、一旦テンプレートがソース素材に適用されると、ステップ９１においてテンプレートの部分が占められていない（not populated）こと、すなわちどのセクションもこれらに対応するソース素材の部分を持たないかどうかが判定される。これが当てはまると、ソース素材は、テンプレートのセクションに関連する部分を含まない。テンプレートのこれらのセクションに対応させることができるには不十分なソース間メタデータを有するソース素材の部分があることもある。本発明の他の具体例は、このような後の場合を、メタデータをこれらの部分にさらに対応させて扱うことを目的としている。
【００５１】
したがって、編集装置１０が、ステップ９１において占められていないテンプレートのセクションがある（YES）と判定すると、処理はステップ９２に進み、編集装置１０は、さらにメタデータを追加しようとする。上述したように、これには多くの方法がある。第１に、編集装置１０は、ユーザにテンプレートのセクションにまだ対応していないソース素材の部分を表示し、ユーザにメタデータをこれらの部分に加えることを催促する。ここで、認識処理装置３６は編集装置１０によって使用され、顔、声のような特徴を、ソース素材のこれらの部分において識別し、自動または手動によってメタデータをさらに生成することを容易にする。
【００５２】
一旦この処理が完了すると、ステップ９３においてテンプレートは補給されたメタデータを使用するソース素材に再適用される。メタデータを補給することで、テンプレートを再適用するときに、以前に占められていなかったテンプレートの部分は、ここでこれらに対応するソース素材の部分を有することができる。
【００５３】
処理はステップ８４に進み、編集コンテンツシーケンスは、ステップ９３におけるテンプレートメタデータとソースメタデータとの比較に応じて、ソース素材の部分を配列することにより生成される。ステップ９１で、占められていないテンプレートのセクションはない（NO）と判定されると、処理はステップ９１からステップ８４に直接に進む。
【００５４】
本発明の特定の具体例について説明してきたが、本発明はこれに限られるものではなく、本発明の趣旨を逸脱しない範囲で変更することができる。
【００５５】
【発明の効果】
上述したように、本発明によると、編集の前にソースコンテンツをレビューして編集する素材を理解する必要がなくなる。したがって、従来にはソースコンテンツをレビューするために費やしていた時間を削減することができ、編集作業の効率は著しく向上する。
【図面の簡単な説明】
【図１】図１は、編集装置の具体的な構成をを示す図である。
【図２】図２は、本具体例のテンプレートを示す図である。
【図３】図３は、本具体例のテンプレートのソースコンテンツへの適用を示す図である。
【図４】図４は、本具体例のテンプレートのソースコンテンツへの適用を示す図である。
【図５】第１の具体例による編集装置の操作を示すフローチャートである。
【図６】第２の具体例による編集装置の操作を示すフローチャートである。
【符号の説明】
１０ 編集装置、１２ 処理装置、１４ メモリ、１６ 表示ドライバ、１８入出力インターフェース、２０ 表示装置、２２ 入力装置、２４ 入力オーディオ／ビデオ記憶装置、２６ テンプレート記憶装置、２８ 出力オーディオ／ビデオ記憶装置、３６ 認識処理装置
Claims (7)
- 複数の種類の編集素材を含むソースコンテンツを取得するソースコンテンツ取得部と、
前記取得したソースコンテンツの編集素材毎の特徴を識別して、この特徴を識別可能なソースメタデータを生成するソースメタデータ生成部と、
複数のセクションの配列からなるテンプレートと、前記各々のセクションに対応する前記編集素材の種類を規定するテンプレートメタデータとを記憶するテンプレート記憶部と、
前記生成されたソースメタデータと前記記憶されたテンプレートメタデータとを比較して前記テンプレートの前記各セクションに適用する前記編集素材をそれぞれ選択しつつ配列して編集コンテンツシーケンスを作成する処理部とを具備し、
前記ソースメタデータ生成部は、前記編集素材の特徴の識別結果をもとに前記ソースメタデータに対して選択的にグッドショットマーカを付加し、
前記処理部は、グッドショットマーカの付加されたソースメタデータにより識別される編集素材を優先的に選択して前記編集コンテンツシーケンスを作成する
編集装置。 - 前記編集素材はビデオ素材であり、前記テンプレートメタデータは対応する前記ビデオ素材の種類を規定する
ことを特徴とする請求項１記載の編集装置。 - 前記編集素材はオーディオ素材であり、前記テンプレートメタデータは対応する前記オーディオ素材の種類を規定する
ことを特徴とする請求項１記載の編集装置。 - ユーザ入力を受け付ける入力装置を接続する入出力部をさらに具備し、
前記ソースメタデータ生成部は、前記入出力部を介して入力されたユーザ入力に応じて上記ソースメタデータの生成の間にユーザとの対話を可能にする
ことを特徴とする請求項１記載の編集装置。 - 前記テンプレートメタデータは、前記ソースメタデータに付加されたグッドショットマーカの識別をサポートするテンプレートを含む
ことを特徴とする請求項１記載の編集装置。 - 複数の種類の編集素材を含むソースコンテンツを取得するソースコンテンツ取得ステップと、
前記取得したソースコンテンツの編集素材毎の特徴を識別して、この特徴を識別可能なソースメタデータを生成するソースメタデータ生成ステップと、
複数のセクションの配列からなるテンプレートと、前記各々のセクションに対応する前記編集素材の種類を規定するテンプレートメタデータとを記憶するテンプレート記憶ステップと、
前記生成されたソースメタデータと前記記憶されたテンプレートメタデータとを比較して前記テンプレートの前記各セクションに適用する前記編集素材をそれぞれ選択しつつ配列して編集コンテンツシーケンスを作成する処理ステップとを具備し、
前記ソースメタデータ生成ステップは、前記編集素材の特徴の識別結果をもとに前記ソースメタデータに対して選択的にグッドショットマーカを付加し、
前記処理ステップは、グッドショットマーカの付加されたソースメタデータにより識別される編集素材を優先的に選択して前記編集コンテンツシーケンスを作成する
編集方法。 - 複数の種類の編集素材を含むソースコンテンツを取得するソースコンテンツ取得部と、
前記取得したソースコンテンツの編集素材毎の特徴を識別して、この特徴を識別可能なソースメタデータを生成するソースメタデータ生成部と、
複数のセクションの配列からなるテンプレートと、前記各々のセクションに対応する前記編集素材の種類を規定するテンプレートメタデータとを記憶するテンプレート記憶部と、
前記生成されたソースメタデータと前記記憶されたテンプレートメタデータとを比較して前記テンプレートの前記各セクションに適用する前記編集素材をそれぞれ選択しつつ配列して編集コンテンツシーケンスを作成する処理部
としてコンピュータを機能させ、
前記ソースメタデータ生成部は、前記編集素材の特徴の識別結果をもとに前記ソースメタデータに対して選択的にグッドショットマーカを付加し、
前記処理部は、グッドショットマーカの付加されたソースメタデータにより識別される編集素材を優先的に選択して前記編集コンテンツシーケンスを作成する
コンピュータプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| GB9921234.2 | 1999-09-08 | ||
| GB9921234A GB2354104A (en) | 1999-09-08 | 1999-09-08 | An editing method and system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001143445A JP2001143445A (ja) | 2001-05-25 |
| JP4514928B2 true JP4514928B2 (ja) | 2010-07-28 |
Family
ID=10860578
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000274132A Expired - Fee Related JP4514928B2 (ja) | 1999-09-08 | 2000-09-08 | 編集装置及び方法 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US6970639B1 (ja) |
| EP (1) | EP1083567A3 (ja) |
| JP (1) | JP4514928B2 (ja) |
| GB (1) | GB2354104A (ja) |
Families Citing this family (77)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| AU4264501A (en) * | 2000-04-05 | 2001-10-15 | Sony United Kingdom Limited | Audio/video reproducing apparatus and method |
| CA2375688A1 (en) | 2000-04-05 | 2001-10-11 | Sony United Kingdom Limited | Identifying and processing of audio and/or video material |
| EP1939878A3 (en) | 2000-04-05 | 2014-11-05 | Sony United Kingdom Limited | Identifying, recording and reproducing information |
| WO2001084375A1 (en) * | 2000-04-28 | 2001-11-08 | D4 Media, Inc. | Goal seeking engine and method for generating custom media presentations |
| US7490092B2 (en) | 2000-07-06 | 2009-02-10 | Streamsage, Inc. | Method and system for indexing and searching timed media information based upon relevance intervals |
| US9292516B2 (en) * | 2005-02-16 | 2016-03-22 | Sonic Solutions Llc | Generation, organization and/or playing back of content based on incorporated parameter identifiers |
| EP1332585B1 (de) * | 2000-11-09 | 2005-03-09 | Swisscom AG | Verfahren zur aggregation und zum übermitteln von multimediadaten |
| JP4713060B2 (ja) * | 2000-12-28 | 2011-06-29 | ソニー株式会社 | コンテンツ形成装置及び方法 |
| US7840634B2 (en) * | 2001-06-26 | 2010-11-23 | Eastman Kodak Company | System and method for managing images over a communication network |
| JP3780252B2 (ja) * | 2001-12-25 | 2006-05-31 | キヤノン株式会社 | 記録再生装置および記録再生方法 |
| US7873260B2 (en) * | 2002-02-15 | 2011-01-18 | Acoustic Technology Llc | Video and audio processing control |
| JP4335492B2 (ja) | 2002-03-05 | 2009-09-30 | キヤノン株式会社 | 動画像管理方法及び装置 |
| US7222300B2 (en) * | 2002-06-19 | 2007-05-22 | Microsoft Corporation | System and method for automatically authoring video compositions using video cliplets |
| AU2003256326A1 (en) * | 2002-06-28 | 2004-01-19 | Dupont Photomasks, Inc. | Method and system for electronic order entry and automatic processing of photomask orders |
| JP5951184B2 (ja) * | 2002-09-13 | 2016-07-13 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニーＢｒｉｔｉｓｈ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｐｕｂｌｉｃ Ｌｉｍｉｔｅｄ Ｃｏｍｐａｎｙ | 媒体製品を構成する方法及び装置 |
| GB0221328D0 (en) | 2002-09-13 | 2002-10-23 | British Telecomm | Media article composition |
| AU2003252878B2 (en) * | 2002-10-08 | 2006-02-02 | Canon Kabushiki Kaisha | Auto-editing Video Material Using Multiple Templates |
| US7680393B2 (en) | 2002-11-13 | 2010-03-16 | Sony Corporation | Content editing assistance system, video processing apparatus, playback apparatus, editing apparatus, computer program, and content processing method |
| AU2003901314A0 (en) * | 2003-03-21 | 2003-04-03 | Canon Information Systems Research Australia Pty Ltd | Automatic track generation |
| JP3637910B2 (ja) * | 2003-04-04 | 2005-04-13 | ソニー株式会社 | データ処理方法およびそのシステム |
| US6906643B2 (en) * | 2003-04-30 | 2005-06-14 | Hewlett-Packard Development Company, L.P. | Systems and methods of viewing, modifying, and interacting with “path-enhanced” multimedia |
| US7352952B2 (en) * | 2003-10-16 | 2008-04-01 | Magix Ag | System and method for improved video editing |
| US20050132293A1 (en) * | 2003-12-10 | 2005-06-16 | Magix Ag | System and method of multimedia content editing |
| JP2007536614A (ja) * | 2004-05-07 | 2007-12-13 | サムスン エレクトロニクス カンパニー リミテッド | メタデータの同期化方法、装置及びその方法を行うためのプログラムが保存された記録媒体 |
| JP2006005682A (ja) * | 2004-06-17 | 2006-01-05 | Toshiba Corp | 動画像のメタデータのデータ構造及びその再生方法 |
| WO2006009663A1 (en) * | 2004-06-22 | 2006-01-26 | Digimarc Corporation | Digital asset management, targeted searching and desktop searching using digital watermarks |
| JP4250574B2 (ja) * | 2004-08-05 | 2009-04-08 | 株式会社東芝 | メタデータのデータ構造及びメタデータの再生方法 |
| JP4133981B2 (ja) * | 2004-09-09 | 2008-08-13 | 株式会社東芝 | メタデータと動画像の再生装置 |
| WO2006039357A1 (en) * | 2004-09-29 | 2006-04-13 | Technicolor Inc. | Method and apparatus for color decision metadata generation |
| US20060224613A1 (en) * | 2005-03-31 | 2006-10-05 | Bermender Pamela A | Method and system for an administrative apparatus for creating a business rule set for dynamic transform and load |
| US20060251382A1 (en) * | 2005-05-09 | 2006-11-09 | Microsoft Corporation | System and method for automatic video editing using object recognition |
| US8527540B2 (en) * | 2005-05-24 | 2013-09-03 | Business Objects Software Ltd. | Augmenting a report with metadata for export to a non-report document |
| WO2007004699A1 (ja) * | 2005-07-06 | 2007-01-11 | Sharp Kabushiki Kaisha | ダイジェスト化装置、ダイジェスト化システム、ダイジェスト化プログラムプロダクト、およびダイジェスト化プログラムを記録したコンピュータ読取り可能な記録媒体 |
| EP1941423A4 (en) * | 2005-09-16 | 2010-06-30 | Flixor Inc | CUSTOMIZING A VIDEO |
| JP2007213385A (ja) | 2006-02-10 | 2007-08-23 | Sony Corp | 情報処理装置、情報処理方法、プログラム |
| WO2007127695A2 (en) | 2006-04-25 | 2007-11-08 | Elmo Weber Frank | Prefernce based automatic media summarization |
| GB0608529D0 (en) * | 2006-04-28 | 2006-06-07 | Oxwest Media Ltd | Generating a media program |
| JP4519805B2 (ja) * | 2006-05-25 | 2010-08-04 | 日本電信電話株式会社 | 映像編集方法及び装置 |
| US20080065695A1 (en) * | 2006-09-11 | 2008-03-13 | Pivi Unlimited Llc | System and method for nondeterministic media playback selected from a plurality of distributed media libraries |
| US8375302B2 (en) * | 2006-11-17 | 2013-02-12 | Microsoft Corporation | Example based video editing |
| US8347213B2 (en) | 2007-03-02 | 2013-01-01 | Animoto, Inc. | Automatically generating audiovisual works |
| US20090003712A1 (en) * | 2007-06-28 | 2009-01-01 | Microsoft Corporation | Video Collage Presentation |
| KR20090017170A (ko) * | 2007-08-14 | 2009-02-18 | 삼성전자주식회사 | 미디어 파일 관리 방법 및 장치 |
| JP4424389B2 (ja) * | 2007-08-24 | 2010-03-03 | ソニー株式会社 | 動画作成装置、動画作成方法、およびプログラム |
| JP4962783B2 (ja) * | 2007-08-31 | 2012-06-27 | ソニー株式会社 | 情報処理装置および情報処理方法、並びにプログラム |
| US8245124B1 (en) * | 2008-03-20 | 2012-08-14 | Adobe Systems Incorporated | Content modification and metadata |
| US8750684B2 (en) * | 2008-10-02 | 2014-06-10 | Microsoft Corporation | Movie making techniques |
| US9442933B2 (en) * | 2008-12-24 | 2016-09-13 | Comcast Interactive Media, Llc | Identification of segments within audio, video, and multimedia items |
| US8713016B2 (en) | 2008-12-24 | 2014-04-29 | Comcast Interactive Media, Llc | Method and apparatus for organizing segments of media assets and determining relevance of segments to a query |
| US11531668B2 (en) * | 2008-12-29 | 2022-12-20 | Comcast Interactive Media, Llc | Merging of multiple data sets |
| US8176043B2 (en) | 2009-03-12 | 2012-05-08 | Comcast Interactive Media, Llc | Ranking search results |
| US8533223B2 (en) * | 2009-05-12 | 2013-09-10 | Comcast Interactive Media, LLC. | Disambiguation and tagging of entities |
| US9892730B2 (en) | 2009-07-01 | 2018-02-13 | Comcast Interactive Media, Llc | Generating topic-specific language models |
| EP2491536B1 (en) * | 2009-10-20 | 2019-06-12 | Oath Inc. | Method and system for assembling animated media based on keyword and string input |
| US8818175B2 (en) | 2010-03-08 | 2014-08-26 | Vumanity Media, Inc. | Generation of composited video programming |
| US8406608B2 (en) * | 2010-03-08 | 2013-03-26 | Vumanity Media, Inc. | Generation of composited video programming |
| US8935487B2 (en) | 2010-05-05 | 2015-01-13 | Microsoft Corporation | Fast and low-RAM-footprint indexing for data deduplication |
| US20110276744A1 (en) | 2010-05-05 | 2011-11-10 | Microsoft Corporation | Flash memory cache including for use with persistent key-value store |
| US9053032B2 (en) | 2010-05-05 | 2015-06-09 | Microsoft Technology Licensing, Llc | Fast and low-RAM-footprint indexing for data deduplication |
| US9208472B2 (en) | 2010-12-11 | 2015-12-08 | Microsoft Technology Licensing, Llc | Addition of plan-generation models and expertise by crowd contributors |
| US20120151348A1 (en) * | 2010-12-11 | 2012-06-14 | Microsoft Corporation | Using Cinematographic Techniques for Conveying and Interacting with Plan Sagas |
| US9110936B2 (en) | 2010-12-28 | 2015-08-18 | Microsoft Technology Licensing, Llc | Using index partitioning and reconciliation for data deduplication |
| WO2012108090A1 (ja) * | 2011-02-10 | 2012-08-16 | 日本電気株式会社 | 映像間対応関係表示システム及び映像間対応関係表示方法 |
| US9271035B2 (en) | 2011-04-12 | 2016-02-23 | Microsoft Technology Licensing, Llc | Detecting key roles and their relationships from video |
| US8763042B2 (en) * | 2012-10-05 | 2014-06-24 | Motorola Mobility Llc | Information provision |
| TWI474201B (zh) * | 2012-10-17 | 2015-02-21 | Inst Information Industry | Construction system scene fragment, method and recording medium |
| US9870800B2 (en) | 2014-08-27 | 2018-01-16 | International Business Machines Corporation | Multi-source video input |
| US10102285B2 (en) * | 2014-08-27 | 2018-10-16 | International Business Machines Corporation | Consolidating video search for an event |
| KR102306538B1 (ko) | 2015-01-20 | 2021-09-29 | 삼성전자주식회사 | 콘텐트 편집 장치 및 방법 |
| US10659505B2 (en) * | 2016-07-09 | 2020-05-19 | N. Dilip Venkatraman | Method and system for navigation between segments of real time, adaptive and non-sequentially assembled video |
| JP7133367B2 (ja) * | 2018-06-08 | 2022-09-08 | 秀輝 衣斐 | 動画編集装置、動画編集方法、及び動画編集プログラム |
| EP3959896A1 (en) * | 2019-04-22 | 2022-03-02 | Soclip! | Automated audio-video content generation |
| US12283290B2 (en) | 2019-07-12 | 2025-04-22 | Smule, Inc. | Template-based excerpting and rendering of multimedia performance |
| US10726874B1 (en) * | 2019-07-12 | 2020-07-28 | Smule, Inc. | Template-based excerpting and rendering of multimedia performance |
| US11450047B2 (en) * | 2019-07-26 | 2022-09-20 | PicsArt, Inc. | Systems and methods for sharing image data edits |
| CN111695505B (zh) * | 2020-06-11 | 2024-05-24 | 北京市商汤科技开发有限公司 | 视频处理方法及装置、电子设备和存储介质 |
| CN117493641B (zh) * | 2024-01-02 | 2024-03-22 | 中国电子科技集团公司第二十八研究所 | 一种基于语义元数据的二次模糊搜索方法 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2260007A (en) * | 1991-09-20 | 1993-03-31 | Hitachi Ltd | Information storage/retrieval system and display method |
| GB2294355B (en) * | 1992-04-10 | 1996-12-04 | Avid Technology Inc | Digital storage and display of video information |
| JP2994164B2 (ja) * | 1993-02-12 | 1999-12-27 | 日本電気株式会社 | シナリオ編集装置 |
| JPH06253255A (ja) * | 1993-02-25 | 1994-09-09 | Toshiba Corp | 映像インデックス表示装置 |
| EP1456780A4 (en) * | 1997-04-01 | 2007-04-25 | Medic Interactive Inc | SYSTEM FOR THE AUTOMATIC GENERATION OF MEDIA PROGRAMS FROM A MEDIA ELEMENTS DATABASE |
| JPH11289512A (ja) * | 1998-04-03 | 1999-10-19 | Sony Corp | 編集リスト作成装置 |
| AU2217700A (en) * | 1998-12-30 | 2000-07-31 | Earthnoise.Com Inc. | Creating and editing digital video movies |
| US6236395B1 (en) * | 1999-02-01 | 2001-05-22 | Sharp Laboratories Of America, Inc. | Audiovisual information management system |
-
1999
- 1999-09-08 GB GB9921234A patent/GB2354104A/en not_active Withdrawn
-
2000
- 2000-07-21 EP EP00306227A patent/EP1083567A3/en not_active Ceased
- 2000-09-07 US US09/656,968 patent/US6970639B1/en not_active Expired - Fee Related
- 2000-09-08 JP JP2000274132A patent/JP4514928B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| EP1083567A2 (en) | 2001-03-14 |
| EP1083567A3 (en) | 2002-03-20 |
| GB2354104A (en) | 2001-03-14 |
| GB9921234D0 (en) | 1999-11-10 |
| JP2001143445A (ja) | 2001-05-25 |
| US6970639B1 (en) | 2005-11-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4514928B2 (ja) | 編集装置及び方法 | |
| US6799180B1 (en) | Method of processing signals and apparatus for signal processing | |
| JP4065142B2 (ja) | オーサリング装置およびオーサリング方法 | |
| US7432940B2 (en) | Interactive animation of sprites in a video production | |
| JP4250301B2 (ja) | 映像シーケンスを編集する方法及びシステム | |
| US6954894B1 (en) | Method and apparatus for multimedia editing | |
| JP4794740B2 (ja) | オーディオ／ビデオ信号生成装置、及びオーディオ／ビデオ信号生成方法 | |
| US8644683B2 (en) | Moving image data processing apparatus and method | |
| JP4607987B2 (ja) | エンハンス・コンテンツを有するタイム・ベース・メディアの編集 | |
| US20020019833A1 (en) | Data editing apparatus and method | |
| JPH1021261A (ja) | マルチメディアデータベース検索方法及びシステム | |
| JP2001028722A (ja) | 動画像管理装置及び動画像管理システム | |
| JP2004228779A (ja) | 情報処理装置 | |
| JPH0643839A (ja) | マルチメディア情報を表示しかつ編集する方法と装置 | |
| JP3914643B2 (ja) | 番組情報管理編集システムとそれに使用される階層化番組情報蓄積管理装置 | |
| JPH11266422A (ja) | 放送番組管理装置、放送番組管理方法、及び放送番組管理処理プログラムを記録した記録媒体 | |
| US20240179366A1 (en) | Mutable composite media | |
| JP3456176B2 (ja) | 録画再生処理装置及び録画再生処理システム | |
| JP4016424B2 (ja) | 動画像編集装置および動画像編集方法 | |
| JP2007037031A (ja) | 編集装置及び編集方法 | |
| AU2002301447B2 (en) | Interactive Animation of Sprites in a Video Production | |
| JP2001169237A (ja) | 動画編集再生装置 | |
| JP2005148801A (ja) | 関連情報提供方法、関連情報提供装置、関連情報提供プログラム、および、関連情報提供プログラムの記録媒体 | |
| JP4323172B2 (ja) | 情報編集システム、情報編集装置、および情報編集プログラム | |
| JP3619005B2 (ja) | 映像処理システム制御方法および装置，並びにそのプログラム記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070411 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080411 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20080415 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091016 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091027 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100127 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100427 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100512 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |