JPH06176542A - マルチメディアオーサリングシステム - Google Patents
マルチメディアオーサリングシステムInfo
- Publication number
- JPH06176542A JPH06176542A JP4325094A JP32509492A JPH06176542A JP H06176542 A JPH06176542 A JP H06176542A JP 4325094 A JP4325094 A JP 4325094A JP 32509492 A JP32509492 A JP 32509492A JP H06176542 A JPH06176542 A JP H06176542A
- Authority
- JP
- Japan
- Prior art keywords
- information
- multimedia
- data
- tape
- voice recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】
【目的】 マルチメディアシステムのデータ作成の支
援を行う場合に、マルチメディア融合データの作成を容
易にする。 【構成】 テープ制御手段２はビデオテープ１を制御し
て該ビデオテープ１から音声情報Ｓ２ｂを読み出すと共
に、テープ走行情報Ｓ２ａを出力する。音声認識データ
作成手段４は、テキストファイル３のテキスト情報Ｓ３
から音声認識データを作成する。音声認識手段５は、音
声認識データＳ４に基づき、音声情報Ｓ２ｂを文字列に
変換してその文書番号Ｓ５を出力する。マルチメディア
融合データ作成手段６は、テキスト情報Ｓ３、文書番号
Ｓ５、及びテープ走行情報Ｓ２ａから、該テープ走行情
報Ｓ２ａの入ったマルチメディア融合データＳ６を作成
する。
援を行う場合に、マルチメディア融合データの作成を容
易にする。 【構成】 テープ制御手段２はビデオテープ１を制御し
て該ビデオテープ１から音声情報Ｓ２ｂを読み出すと共
に、テープ走行情報Ｓ２ａを出力する。音声認識データ
作成手段４は、テキストファイル３のテキスト情報Ｓ３
から音声認識データを作成する。音声認識手段５は、音
声認識データＳ４に基づき、音声情報Ｓ２ｂを文字列に
変換してその文書番号Ｓ５を出力する。マルチメディア
融合データ作成手段６は、テキスト情報Ｓ３、文書番号
Ｓ５、及びテープ走行情報Ｓ２ａから、該テープ走行情
報Ｓ２ａの入ったマルチメディア融合データＳ６を作成
する。
Description
【０００１】
【産業上の利用分野】本発明は、音声情報や映像情報等
といったマルチメディアの編集や加工（オーサリング）
を行うために、マルチメディア融合データの作成を支援
するためのマルチメディアオーサリングシステムに関す
るものである。
といったマルチメディアの編集や加工（オーサリング）
を行うために、マルチメディア融合データの作成を支援
するためのマルチメディアオーサリングシステムに関す
るものである。
【０００２】
【従来の技術】従来、このような分野の技術としては、
例えば次のような文献に記載されるものがあった。 文献；日経バイト（１９９１−１）「特集 出番が来た
マルチメディア」Ｐ．２０２−２４３ 前記文献には、マルチメディアオーサリングシステムに
おいて、音声と動画情報を格納したビデオディスクか
ら、必要な部分部分を切り出してコンピュータ上のデー
タとしてうまく取り扱うための技術が記載されている。
さらに、この技術を使ってビデオディスク上に格納され
ているシーン毎に、そのシーンの内容を簡潔に表すテキ
ストを付与し、ビデオディスクの情報とシーンを表すテ
キストをコンピュータ上のデータとして扱えるようなプ
ログラムについても記載されている。
例えば次のような文献に記載されるものがあった。 文献；日経バイト（１９９１−１）「特集 出番が来た
マルチメディア」Ｐ．２０２−２４３ 前記文献には、マルチメディアオーサリングシステムに
おいて、音声と動画情報を格納したビデオディスクか
ら、必要な部分部分を切り出してコンピュータ上のデー
タとしてうまく取り扱うための技術が記載されている。
さらに、この技術を使ってビデオディスク上に格納され
ているシーン毎に、そのシーンの内容を簡潔に表すテキ
ストを付与し、ビデオディスクの情報とシーンを表すテ
キストをコンピュータ上のデータとして扱えるようなプ
ログラムについても記載されている。
【０００３】従来のマルチメディアオーサリングシステ
ムでは、プログラムの利用者は、ビデオディスクを再生
しながら、始点にしたい画面や、終点にしたい画面が現
れたタイミングで、それぞれコンピュータの画面上に表
示される“始点のメニュー”や“終点のメニュー”を選
択することで、必要な部分の切り出しを行うことができ
る。その後、プログラムの利用者は、切り出した領域に
対して適当なテキスト情報等を付与することができる。
コンピュータは、プログラムの利用者（ユーザ）によっ
て選択された箇所のレーザディスクのアドレスとテキス
ト情報を、該コンピュータ上のデータとして取り込むよ
うになっている。
ムでは、プログラムの利用者は、ビデオディスクを再生
しながら、始点にしたい画面や、終点にしたい画面が現
れたタイミングで、それぞれコンピュータの画面上に表
示される“始点のメニュー”や“終点のメニュー”を選
択することで、必要な部分の切り出しを行うことができ
る。その後、プログラムの利用者は、切り出した領域に
対して適当なテキスト情報等を付与することができる。
コンピュータは、プログラムの利用者（ユーザ）によっ
て選択された箇所のレーザディスクのアドレスとテキス
ト情報を、該コンピュータ上のデータとして取り込むよ
うになっている。
【０００４】
【発明が解決しようとする課題】しかしながら、従来の
マルチメディアオーサリングシステムでは、予めビデオ
ディスクに格納されている映像の音声部分の台本があっ
た場合でも、その音声情報をビデオから必要な部分を切
り出す処理に使用することができず、人間が、直接ビデ
オを見て、始点と終点を決めなければならず、マルチメ
ディア融合データを簡単に作成することができないとい
う問題があった。本発明は、前記従来技術が持っていた
課題として、マルチメディア融合データを簡単に作成で
きないという点について解決したマルチメディアオーサ
リングシステムを提供するものである。
マルチメディアオーサリングシステムでは、予めビデオ
ディスクに格納されている映像の音声部分の台本があっ
た場合でも、その音声情報をビデオから必要な部分を切
り出す処理に使用することができず、人間が、直接ビデ
オを見て、始点と終点を決めなければならず、マルチメ
ディア融合データを簡単に作成することができないとい
う問題があった。本発明は、前記従来技術が持っていた
課題として、マルチメディア融合データを簡単に作成で
きないという点について解決したマルチメディアオーサ
リングシステムを提供するものである。
【０００５】
【課題を解決するための手段】本発明は、前記課題を解
決するために、音声情報と映像情報が入ったマルチメデ
ィアの記録媒体と、前記マルチメディアに入っている音
声情報に関するテキスト情報とから、前記記録媒体の情
報と前記テキスト情報とを融合した情報を作成するため
にデータの作成を支援するマルチメディアオーサリング
システムにおいて、次のような手段を備えている。即
ち、本発明では、前記記録媒体をアクセス制御して該記
録媒体から音声情報を読み出すと共に該アクセス制御情
報を出力する記録媒体制御手段と、前記テキスト情報か
ら音声認識データを作成する音声認識データ作成手段
と、前記音声認識データに基づき前記音声情報を文字列
に変換して出力する音声認識手段と、前記テキスト情
報、文字列、及びアクセス制御情報から、該アクセス制
御情報の入ったマルチメディア融合データを作成するマ
ルチメディア融合データ作成手段とを、備えている。
決するために、音声情報と映像情報が入ったマルチメデ
ィアの記録媒体と、前記マルチメディアに入っている音
声情報に関するテキスト情報とから、前記記録媒体の情
報と前記テキスト情報とを融合した情報を作成するため
にデータの作成を支援するマルチメディアオーサリング
システムにおいて、次のような手段を備えている。即
ち、本発明では、前記記録媒体をアクセス制御して該記
録媒体から音声情報を読み出すと共に該アクセス制御情
報を出力する記録媒体制御手段と、前記テキスト情報か
ら音声認識データを作成する音声認識データ作成手段
と、前記音声認識データに基づき前記音声情報を文字列
に変換して出力する音声認識手段と、前記テキスト情
報、文字列、及びアクセス制御情報から、該アクセス制
御情報の入ったマルチメディア融合データを作成するマ
ルチメディア融合データ作成手段とを、備えている。
【０００６】
【作用】本発明によれば、以上のようにマルチメディア
オーサリングシステムを構成したので、マルチメディア
システムのデータ作成の支援を行う場合、記録媒体制御
手段は、音声情報や映像情報等のマルチメディアが記録
された記録媒体を制御して音声情報を読み出し、さらに
該記録媒体の走行情報等のアクセス制御情報を出力し、
該音声情報を音声認識手段へ送ると共に、該アクセス制
御情報をマルチメディア融合データ作成手段へ送る。音
声認識データ作成手段では、記録媒体に格納された音声
情報に関するテキスト情報から、音声認識データを作成
し、それを音声認識手段へ送る。音声認識手段では、音
声認識データ作成手段からの音声認識データに基づき、
記録媒体制御手段からの音声情報を文字列に変換してマ
ルチメディア融合データ作成手段へ送る。マルチメディ
ア融合データ作成手段では、入力されたテキスト情報、
文字列、及びアクセス制御情報から、マルチメディア融
合データを作成する。これにより、マルチメディア融合
データの作成が容易になる。従って、前記課題を解決で
きるのである。
オーサリングシステムを構成したので、マルチメディア
システムのデータ作成の支援を行う場合、記録媒体制御
手段は、音声情報や映像情報等のマルチメディアが記録
された記録媒体を制御して音声情報を読み出し、さらに
該記録媒体の走行情報等のアクセス制御情報を出力し、
該音声情報を音声認識手段へ送ると共に、該アクセス制
御情報をマルチメディア融合データ作成手段へ送る。音
声認識データ作成手段では、記録媒体に格納された音声
情報に関するテキスト情報から、音声認識データを作成
し、それを音声認識手段へ送る。音声認識手段では、音
声認識データ作成手段からの音声認識データに基づき、
記録媒体制御手段からの音声情報を文字列に変換してマ
ルチメディア融合データ作成手段へ送る。マルチメディ
ア融合データ作成手段では、入力されたテキスト情報、
文字列、及びアクセス制御情報から、マルチメディア融
合データを作成する。これにより、マルチメディア融合
データの作成が容易になる。従って、前記課題を解決で
きるのである。
【０００７】
【実施例】図１は、本発明の実施例を示すマルチメディ
アオーサリングシステムの機能ブロック図である。この
マルチメディアオーサリングシステムは、音声情報や映
像情報等といったマルチメディアのデータ作成を支援す
るためのもので、音声情報と映像情報が入ったマルチメ
ディアの記憶媒体（例えば、ビデオテープ）１をアクセ
ス制御する記録媒体制御手段（例えば、テープ制御手
段）２を有している。テープ制御手段２は、本システム
の入力であるビデオテープ１の走行を制御する機能と、
該ビデオテープに記録された音声情報Ｓ２ｂを読み出し
て出力する機能と、該ビデオテープ１のアクセス制御情
報（例えば、ビデオテープ１の走行位置を数値データで
表したテープ走行情報）Ｓ２ａを出力する機能とを持つ
サブシステムであり、ハードウェア等で構成されてい
る。
アオーサリングシステムの機能ブロック図である。この
マルチメディアオーサリングシステムは、音声情報や映
像情報等といったマルチメディアのデータ作成を支援す
るためのもので、音声情報と映像情報が入ったマルチメ
ディアの記憶媒体（例えば、ビデオテープ）１をアクセ
ス制御する記録媒体制御手段（例えば、テープ制御手
段）２を有している。テープ制御手段２は、本システム
の入力であるビデオテープ１の走行を制御する機能と、
該ビデオテープに記録された音声情報Ｓ２ｂを読み出し
て出力する機能と、該ビデオテープ１のアクセス制御情
報（例えば、ビデオテープ１の走行位置を数値データで
表したテープ走行情報）Ｓ２ａを出力する機能とを持つ
サブシステムであり、ハードウェア等で構成されてい
る。
【０００８】また、本システムには、テキスト情報Ｓ３
を格納したテキストファイル３と、該テキスト情報Ｓ３
から音声認識データＳ４を作成する音声認識データ作成
手段４とが設けられ、その音声認識データ作成手段４及
びテープ制御手段２の出力側に、音声認識手段５、及び
マルチメディア融合データ作成手段６が接続されてい
る。音声認識手段５は、音声認識データＳ４に基づき、
入力された音声情報Ｓ２ｂを文字列に変換し、その文書
番号Ｓ５をマルチメディア融合データ作成手段６へ出力
する機能を有している。本システムでは、音声認識デー
タＳ４として、予め音声認識手段５に与えられた範囲の
中で、入力された音声情報Ｓ２ｂに最も近いものを出力
するようになっている。マルチメディア融合データ作成
手段６は、テキストファイル３のテキスト情報Ｓ３と、
音声認識手段５からの文書番号Ｓ５と、テープ走行情報
Ｓ２ａとから、ビデオテープ１のテープ走行情報Ｓ２ａ
の入ったマルチメディア融合データＳ６を作成する機能
を有している。
を格納したテキストファイル３と、該テキスト情報Ｓ３
から音声認識データＳ４を作成する音声認識データ作成
手段４とが設けられ、その音声認識データ作成手段４及
びテープ制御手段２の出力側に、音声認識手段５、及び
マルチメディア融合データ作成手段６が接続されてい
る。音声認識手段５は、音声認識データＳ４に基づき、
入力された音声情報Ｓ２ｂを文字列に変換し、その文書
番号Ｓ５をマルチメディア融合データ作成手段６へ出力
する機能を有している。本システムでは、音声認識デー
タＳ４として、予め音声認識手段５に与えられた範囲の
中で、入力された音声情報Ｓ２ｂに最も近いものを出力
するようになっている。マルチメディア融合データ作成
手段６は、テキストファイル３のテキスト情報Ｓ３と、
音声認識手段５からの文書番号Ｓ５と、テープ走行情報
Ｓ２ａとから、ビデオテープ１のテープ走行情報Ｓ２ａ
の入ったマルチメディア融合データＳ６を作成する機能
を有している。
【０００９】図２は、図１のビデオテープ１のデータ構
成例を示す図である。ビデオテープ１は、テープ走行情
報Ｓ２ａ、音声情報Ｓ２ｂ、映像情報Ｓ２ｃ、及び制御
情報Ｓ２ｄより構成され、それらの内容がレコード１
１，１２，１３，１４，…として記録されている。テー
プ走行情報Ｓ２ａ、音声情報Ｓ２ｂ、映像情報Ｓ２ｃ、
及び制御情報Ｓ２ｄは、図２では文書で記述している
が、実際は磁気テープ上に適当に符号化されて記述され
ている。
成例を示す図である。ビデオテープ１は、テープ走行情
報Ｓ２ａ、音声情報Ｓ２ｂ、映像情報Ｓ２ｃ、及び制御
情報Ｓ２ｄより構成され、それらの内容がレコード１
１，１２，１３，１４，…として記録されている。テー
プ走行情報Ｓ２ａ、音声情報Ｓ２ｂ、映像情報Ｓ２ｃ、
及び制御情報Ｓ２ｄは、図２では文書で記述している
が、実際は磁気テープ上に適当に符号化されて記述され
ている。
【００１０】制御情報Ｓ２ｄの「インデックス」は、映
像情報Ｓ２ｃの１つのシーンの区切りを表すための印で
ある。テープ制御手段２が、インデックスに当る部分を
読み出しているときには、ビデオテープ１の映像情報Ｓ
２ｃ、及び音声情報Ｓ２ｂには意味のあるデータが格納
されていないとする。テープ走行情報Ｓ２ａは、ビデオ
テープ１の先頭からの位置を示す数値である。この例で
は、走行情報１００の位置は、インデックスの先頭であ
り、該インデックスの後ろには「裁判官が開廷を告げる
シーン」の映像情報Ｓ２ｃと、「これより裁判を始めま
す」という音声情報Ｓ２ｂとが格納されている。
像情報Ｓ２ｃの１つのシーンの区切りを表すための印で
ある。テープ制御手段２が、インデックスに当る部分を
読み出しているときには、ビデオテープ１の映像情報Ｓ
２ｃ、及び音声情報Ｓ２ｂには意味のあるデータが格納
されていないとする。テープ走行情報Ｓ２ａは、ビデオ
テープ１の先頭からの位置を示す数値である。この例で
は、走行情報１００の位置は、インデックスの先頭であ
り、該インデックスの後ろには「裁判官が開廷を告げる
シーン」の映像情報Ｓ２ｃと、「これより裁判を始めま
す」という音声情報Ｓ２ｂとが格納されている。
【００１１】図３は、図１のテキストファイル３の例を
示す図である。テキストファイル３は、文書番号Ｓ５と
テキスト情報Ｓ３とから構成され、それらの内容を示す
レコード３１，３２，３３，３４…が格納されている。
テキスト情報Ｓ３は、いわゆる台本である。図２に示す
ビデオテープ１の情報とこのテキスト情報Ｓ３とは、同
じ順序で並んでいなくても良い。図４は、図１の音声認
識データ作成手段４から出力される音声認識データＳ４
の例を示す図である。音声認識データＳ４の形式は、音
声認識手段５が使用するデータと同じ形式である。図４
では、音声認識データＳ４をひらがなばかりで表してお
り、その内容がレコード４１，４２，４３，４４，…に
記述されている。図５は、図１のマルチメディア融合デ
ータ作成手段６で作成されるマルチメディア融合データ
Ｓ６の例を示す図である。マルチメディア融合データＳ
６は、テープ走行情報Ｓ２ａとテキスト情報Ｓ３とから
構成され、ビデオテープ１上の１つのシーンのテープ開
始位置及び終了位置とテキスト情報Ｓ３とが、それぞれ
１つのレコード６１，６２，６３，６４，…として格納
される。図６は、図１のマルチメディアオーサリングシ
ステムの処理内容を示すフローチャートであり、この図
を参照しつつ、図１の動作を説明する。先ず、ステップ
１０１において、音声認識データ作成手段４はテキスト
ファイル３からテキスト情報Ｓ３を読み取って音声認識
データＳ４に変換し、ステップ１０２へ進む。ステップ
１０２では、テープ制御手段２がビデオテープ１の内容
を読取り、ステップ１０３へ進む。ステップ１０３で
は、ビデオテープ１が終了か否かを判定し、終了の場合
はステップ１１０へ進み、終了でない場合はステップ１
０４へ進む。ステップ１０４では、ビデオテープ１の制
御情報Ｓ２ｄがインデックスか否かを調べ、インデック
スの場合はステップ１０６へ進み、インデックスでない
場合はステップ１０５へ進む。ステップ１０５では、テ
ープ制御手段２がビデオテープ１から音声情報Ｓ２ｂを
再生し、その音声情報Ｓ２ｂを音声認識手段５へ送り、
ステップ１０２へ戻り、前記の処理を繰り返す。
示す図である。テキストファイル３は、文書番号Ｓ５と
テキスト情報Ｓ３とから構成され、それらの内容を示す
レコード３１，３２，３３，３４…が格納されている。
テキスト情報Ｓ３は、いわゆる台本である。図２に示す
ビデオテープ１の情報とこのテキスト情報Ｓ３とは、同
じ順序で並んでいなくても良い。図４は、図１の音声認
識データ作成手段４から出力される音声認識データＳ４
の例を示す図である。音声認識データＳ４の形式は、音
声認識手段５が使用するデータと同じ形式である。図４
では、音声認識データＳ４をひらがなばかりで表してお
り、その内容がレコード４１，４２，４３，４４，…に
記述されている。図５は、図１のマルチメディア融合デ
ータ作成手段６で作成されるマルチメディア融合データ
Ｓ６の例を示す図である。マルチメディア融合データＳ
６は、テープ走行情報Ｓ２ａとテキスト情報Ｓ３とから
構成され、ビデオテープ１上の１つのシーンのテープ開
始位置及び終了位置とテキスト情報Ｓ３とが、それぞれ
１つのレコード６１，６２，６３，６４，…として格納
される。図６は、図１のマルチメディアオーサリングシ
ステムの処理内容を示すフローチャートであり、この図
を参照しつつ、図１の動作を説明する。先ず、ステップ
１０１において、音声認識データ作成手段４はテキスト
ファイル３からテキスト情報Ｓ３を読み取って音声認識
データＳ４に変換し、ステップ１０２へ進む。ステップ
１０２では、テープ制御手段２がビデオテープ１の内容
を読取り、ステップ１０３へ進む。ステップ１０３で
は、ビデオテープ１が終了か否かを判定し、終了の場合
はステップ１１０へ進み、終了でない場合はステップ１
０４へ進む。ステップ１０４では、ビデオテープ１の制
御情報Ｓ２ｄがインデックスか否かを調べ、インデック
スの場合はステップ１０６へ進み、インデックスでない
場合はステップ１０５へ進む。ステップ１０５では、テ
ープ制御手段２がビデオテープ１から音声情報Ｓ２ｂを
再生し、その音声情報Ｓ２ｂを音声認識手段５へ送り、
ステップ１０２へ戻り、前記の処理を繰り返す。
【００１２】ステップ１０４で、ビデオテープ１がイン
デックスと判定されると、ステップ１０６へ進み、その
インデックスがビデオテープ１の先頭のものかどうかを
調べる。もし、インデックスがビデオテープ１の先頭な
らばステップ１０９へ進み、そうでなければステップ１
０７へ進む。ステップ１０７では、音声認識手段５が入
力音声情報Ｓ２ｂから音声を認識し、その認識結果の文
書番号Ｓ５をマルチメディア融合データ作成手段６へ送
り、ステップ１０８へ進む。ステップ１０８では、マル
チメディア融合データ作成手段６が、テープ走行情報Ｓ
２ａと文書番号Ｓ５とから、マルチメディア融合データ
Ｓ６を作成し、ステップ１０２へ戻り、前記の動作を繰
り返す。ステップ１０６において、インデックスがビデ
オテープ１の先頭ならば、ステップ１０９へ進む。ステ
ップ１０９では、マルチメディア融合データ作成手段６
が、図５のテープ走行情報の開始のところにテープ走行
情報Ｓ２ａを書き込み、ステップ１０２へ戻って前記の
動作を繰り返す。ステップ１０３において、ビデオテー
プ１が最終と判断されると、ステップ１１０へ進み、マ
ルチメディア融合データ作成手段６がマルチメディア融
合データＳ６を作成し、処理を終了する。次に、実際の
例を使って図１の動作を説明する。図２に示すようなビ
デオテープ１と図３のテキストファイル３とを入力とし
て、図１のマルチメディアオーサリングシステムが次の
ように動作する。先ず、図６のステップ１０１におい
て、音声認識データ作成手段４は、図３のテキストファ
イル３のテキスト情報Ｓ３を、図４の音声認識データＳ
４に変換する。ここで、図３のレコード３１，３２，３
３，３４は、図４のレコード４１，４２，４３，４４に
それぞれ対応している。ステップ１０２では、テープ制
御手段２が図２のビデオテープ１の内容を読み取る。読
み取った内容は終了ではないので、ステップ１０３を経
てステップ１０４へ進む。ステップ１０４では、ビデオ
テープ１の内容がインデックスかどうかを調べるる。こ
の場合は、インデックスなので、ステップ１０６へ進
む。ステップ１０６では、前記のインデックスがビデオ
テープ１の先頭のものかどうかを調べる。この場合は先
頭なので、ステップ１０９へ進み、マルチメディア融合
データ作成手段６から、図５に示すマルチメディア融合
データＳ６のデータ走行情報の開始の位置に、テープ制
御手段２からのテープ走行情報Ｓ２ａを書き込み、ステ
ップ１０２へ戻る。ステップ１０２では、テープ制御手
段２がビデオテープ１を読み取る。この時点では、ビデ
オテープ１はインデックスではないところに来ているの
で、次のインデックスが現れるまで、ステップ１０２，
１０３，１０４，１０５を繰り返す。図２においてテー
プ走行情報Ｓ２ａが１００の位置までビデオテープ１が
進むと、該ビデオテープ１の制御情報Ｓ２ｄがインデッ
クスになる。そのため、この時点で、ステップ１０４か
らステップ１０６へ進む。
デックスと判定されると、ステップ１０６へ進み、その
インデックスがビデオテープ１の先頭のものかどうかを
調べる。もし、インデックスがビデオテープ１の先頭な
らばステップ１０９へ進み、そうでなければステップ１
０７へ進む。ステップ１０７では、音声認識手段５が入
力音声情報Ｓ２ｂから音声を認識し、その認識結果の文
書番号Ｓ５をマルチメディア融合データ作成手段６へ送
り、ステップ１０８へ進む。ステップ１０８では、マル
チメディア融合データ作成手段６が、テープ走行情報Ｓ
２ａと文書番号Ｓ５とから、マルチメディア融合データ
Ｓ６を作成し、ステップ１０２へ戻り、前記の動作を繰
り返す。ステップ１０６において、インデックスがビデ
オテープ１の先頭ならば、ステップ１０９へ進む。ステ
ップ１０９では、マルチメディア融合データ作成手段６
が、図５のテープ走行情報の開始のところにテープ走行
情報Ｓ２ａを書き込み、ステップ１０２へ戻って前記の
動作を繰り返す。ステップ１０３において、ビデオテー
プ１が最終と判断されると、ステップ１１０へ進み、マ
ルチメディア融合データ作成手段６がマルチメディア融
合データＳ６を作成し、処理を終了する。次に、実際の
例を使って図１の動作を説明する。図２に示すようなビ
デオテープ１と図３のテキストファイル３とを入力とし
て、図１のマルチメディアオーサリングシステムが次の
ように動作する。先ず、図６のステップ１０１におい
て、音声認識データ作成手段４は、図３のテキストファ
イル３のテキスト情報Ｓ３を、図４の音声認識データＳ
４に変換する。ここで、図３のレコード３１，３２，３
３，３４は、図４のレコード４１，４２，４３，４４に
それぞれ対応している。ステップ１０２では、テープ制
御手段２が図２のビデオテープ１の内容を読み取る。読
み取った内容は終了ではないので、ステップ１０３を経
てステップ１０４へ進む。ステップ１０４では、ビデオ
テープ１の内容がインデックスかどうかを調べるる。こ
の場合は、インデックスなので、ステップ１０６へ進
む。ステップ１０６では、前記のインデックスがビデオ
テープ１の先頭のものかどうかを調べる。この場合は先
頭なので、ステップ１０９へ進み、マルチメディア融合
データ作成手段６から、図５に示すマルチメディア融合
データＳ６のデータ走行情報の開始の位置に、テープ制
御手段２からのテープ走行情報Ｓ２ａを書き込み、ステ
ップ１０２へ戻る。ステップ１０２では、テープ制御手
段２がビデオテープ１を読み取る。この時点では、ビデ
オテープ１はインデックスではないところに来ているの
で、次のインデックスが現れるまで、ステップ１０２，
１０３，１０４，１０５を繰り返す。図２においてテー
プ走行情報Ｓ２ａが１００の位置までビデオテープ１が
進むと、該ビデオテープ１の制御情報Ｓ２ｄがインデッ
クスになる。そのため、この時点で、ステップ１０４か
らステップ１０６へ進む。
【００１３】ステップ１０６ではビデオテープ１の先頭
でないので、ステップ１０７へ進み、音声認識手段５が
テープ走行情報０〜１００までの間の音声を認識する。
この認識結果は、図４に示すレコード４１となり、その
結果、文書番号〈１〉をマルチメディア融合データ作成
手段６へ送り、ステップ１０８へ進む。ステップ１０８
では、マルチメディア融合データ作成手段６が、送られ
てきたテープ制御情報１００を図５の終了の位置に書き
込み、文書番号〈１〉に該当する図３のテキストファイ
ル３のテキスト情報Ｓ３の文「この映画は、実在の事件
に基づいて作成された。」をマルチメディア融合データ
Ｓ６に書き込む。ここまでで、図５に示すマルチメディ
ア融合データＳ６のレコード６１ができあがったことに
なる。
でないので、ステップ１０７へ進み、音声認識手段５が
テープ走行情報０〜１００までの間の音声を認識する。
この認識結果は、図４に示すレコード４１となり、その
結果、文書番号〈１〉をマルチメディア融合データ作成
手段６へ送り、ステップ１０８へ進む。ステップ１０８
では、マルチメディア融合データ作成手段６が、送られ
てきたテープ制御情報１００を図５の終了の位置に書き
込み、文書番号〈１〉に該当する図３のテキストファイ
ル３のテキスト情報Ｓ３の文「この映画は、実在の事件
に基づいて作成された。」をマルチメディア融合データ
Ｓ６に書き込む。ここまでで、図５に示すマルチメディ
ア融合データＳ６のレコード６１ができあがったことに
なる。
【００１４】同じくステップ１０８では、図５に示すマ
ルチメディア融合データＳ６のレコード６２のテープ走
行情報の開始位置に１００を書き込み、ステップ１０２
へ戻る。この時点では、図２に示すビデオテープ１の制
御情報Ｓ２ｄがデータになっているので、次にインデッ
クスが現れるまで、ステップ１０２，１０３，１０４，
１０５を繰り返す。
ルチメディア融合データＳ６のレコード６２のテープ走
行情報の開始位置に１００を書き込み、ステップ１０２
へ戻る。この時点では、図２に示すビデオテープ１の制
御情報Ｓ２ｄがデータになっているので、次にインデッ
クスが現れるまで、ステップ１０２，１０３，１０４，
１０５を繰り返す。
【００１５】図２に示すようにテープ走行情報Ｓ２ａが
１９０になった時点で、ステップ１０４において、テー
プ制御手段２がインデックスを読むことになる。この時
点で、処理はステップ１０４からステップ１０６，１０
７，１０８をたどり、マルチメディア融合データＳ６が
作成される。この場合は、図２のレコード１２の音声を
認識した結果が図４のレコード４４となるので、文書番
号〈４〉のテキストファイル３のレコード３４を使って
マルチメディア融合データＳ６が作成される。その結
果、図５のレコード６２ができる。ステップ１０８で
は、さらに図５のレコード６３のテープ走行情報の開始
の位置にデータを書き込む。
１９０になった時点で、ステップ１０４において、テー
プ制御手段２がインデックスを読むことになる。この時
点で、処理はステップ１０４からステップ１０６，１０
７，１０８をたどり、マルチメディア融合データＳ６が
作成される。この場合は、図２のレコード１２の音声を
認識した結果が図４のレコード４４となるので、文書番
号〈４〉のテキストファイル３のレコード３４を使って
マルチメディア融合データＳ６が作成される。その結
果、図５のレコード６２ができる。ステップ１０８で
は、さらに図５のレコード６３のテープ走行情報の開始
の位置にデータを書き込む。
【００１６】以上の処理を繰り返し、図２に示すビデオ
テープ１のテープ走行情報６００のところで、制御情報
Ｓ２ｄの終了を読み出すと、ステップ１０３から１１０
へ進む。ステップ１１０では、マルチメディア融合デー
タ作成手段６が、マルチメディア融合データＳ６のレコ
ード６４のテープ走行情報の終了の位置に、テープ走行
情報６００を書き込み、処理を終了する。
テープ１のテープ走行情報６００のところで、制御情報
Ｓ２ｄの終了を読み出すと、ステップ１０３から１１０
へ進む。ステップ１１０では、マルチメディア融合デー
タ作成手段６が、マルチメディア融合データＳ６のレコ
ード６４のテープ走行情報の終了の位置に、テープ走行
情報６００を書き込み、処理を終了する。
【００１７】以上のように、本実施例では、次のような
利点を有している。従来のマルチメディアオーサリング
システムでは、予めビデオディスクに格納されている映
像の音声部分の台本があった場合でも、その音声情報を
ビデオから必要な部分を切り出す処理に、その台本を使
用することができず、人間が、直接ビデオを見て、始点
と終点を決めなければならなかった。これに対し、本実
施例では、マルチメディア融合データ作成手段６等によ
って人間がビデオテープ１の内容をいちいち見なくて
も、テープ走行情報Ｓ２ａの開始と終了の位置が決めら
れるので、マルチメディアシステムのデータ作成支援を
行う際に、マルチメディア融合データＳ６の作成が容易
に行える。
利点を有している。従来のマルチメディアオーサリング
システムでは、予めビデオディスクに格納されている映
像の音声部分の台本があった場合でも、その音声情報を
ビデオから必要な部分を切り出す処理に、その台本を使
用することができず、人間が、直接ビデオを見て、始点
と終点を決めなければならなかった。これに対し、本実
施例では、マルチメディア融合データ作成手段６等によ
って人間がビデオテープ１の内容をいちいち見なくて
も、テープ走行情報Ｓ２ａの開始と終了の位置が決めら
れるので、マルチメディアシステムのデータ作成支援を
行う際に、マルチメディア融合データＳ６の作成が容易
に行える。
【００１８】なお、本発明は上記実施例に限定されず、
種々の実施例が考えられる。他の実施例としては、例え
ば次のようなものがある。 （ａ） 図１のビデオテープ１は、ランダムアクセス可
能なコンパクトディスクやハードディスク等の他の記憶
媒体であっても良い。 （ｂ） 図１のビデオテープ１に記録される音声情報Ｓ
２ｂの全てが、テキストファイル３に存在する必要はな
い。ビデオテープ１内の音声情報Ｓ２ｂの全てが、テキ
ストファイル３に存在しないときには、図５に示すマル
チメディア融合データＳ６中のレコード６１，６２，６
３，６４，…の幾つかが、テキスト情報Ｓ３を持たない
ものになるが、上記実施例とほぼ同様の効果は得られ
る。 （ｃ） 上記実施例では、図２に示すビデオテープ１の
インデックスから該インデックスの範囲を単位として音
声認識手段５で音声認識するようになっているが、その
音声認識が自動的に認識単位の区切りを見つけられるよ
うになっているならば、図６のフローチャートにおいて
ステップ１０７をステップ１０５の下に移動させた処理
フローでも、上記実施例とほぼ同様の効果を実現でき
る。図６のステップ１０７をステップ１０５の下に移動
させた処理内容を表す他のフローチャートを、図７に示
す。 （ｄ） 図５に示したマルチメディア融合データＳ６の
形式も、この図の形式だけにとらわれるものではなく、
種々の形式にすることが可能である。
種々の実施例が考えられる。他の実施例としては、例え
ば次のようなものがある。 （ａ） 図１のビデオテープ１は、ランダムアクセス可
能なコンパクトディスクやハードディスク等の他の記憶
媒体であっても良い。 （ｂ） 図１のビデオテープ１に記録される音声情報Ｓ
２ｂの全てが、テキストファイル３に存在する必要はな
い。ビデオテープ１内の音声情報Ｓ２ｂの全てが、テキ
ストファイル３に存在しないときには、図５に示すマル
チメディア融合データＳ６中のレコード６１，６２，６
３，６４，…の幾つかが、テキスト情報Ｓ３を持たない
ものになるが、上記実施例とほぼ同様の効果は得られ
る。 （ｃ） 上記実施例では、図２に示すビデオテープ１の
インデックスから該インデックスの範囲を単位として音
声認識手段５で音声認識するようになっているが、その
音声認識が自動的に認識単位の区切りを見つけられるよ
うになっているならば、図６のフローチャートにおいて
ステップ１０７をステップ１０５の下に移動させた処理
フローでも、上記実施例とほぼ同様の効果を実現でき
る。図６のステップ１０７をステップ１０５の下に移動
させた処理内容を表す他のフローチャートを、図７に示
す。 （ｄ） 図５に示したマルチメディア融合データＳ６の
形式も、この図の形式だけにとらわれるものではなく、
種々の形式にすることが可能である。
【００１９】
【発明の効果】以上詳細に説明したように、本発明によ
れば、記録媒体制御手段、音声認識データ作成手段、音
声認識手段、及びマルチメディア融合データ作成手段を
備えているので、例えば記録媒体に格納されている映像
の音声部分の必要な箇所を切り出す処理を行う場合、そ
の記録媒体を再生しなくとも、マルチメディア融合デー
タ作成手段等により、切り出し箇所の始点と終点が決定
されてマルチメディア融合データが作成されるので、該
マルチメディア融合データの作成が容易になる。
れば、記録媒体制御手段、音声認識データ作成手段、音
声認識手段、及びマルチメディア融合データ作成手段を
備えているので、例えば記録媒体に格納されている映像
の音声部分の必要な箇所を切り出す処理を行う場合、そ
の記録媒体を再生しなくとも、マルチメディア融合デー
タ作成手段等により、切り出し箇所の始点と終点が決定
されてマルチメディア融合データが作成されるので、該
マルチメディア融合データの作成が容易になる。
【図１】本発明の実施例を示すマルチメディアオーサリ
ングシステムの機能ブロック図である。
ングシステムの機能ブロック図である。
【図２】図１のビデオテープのデータ構成例を示す図で
ある。
ある。
【図３】図１のテキストファイルの例を示す図である。
【図４】図１の音声認識データの例を示す図である。
【図５】図１のマルチメディア融合データの例を示す図
である。
である。
【図６】図１の処理内容を示すフローチャートである。
【図７】図１の他の処理内容を示すフローチャートであ
る。
る。
１ ビデオテープ ２ テープ制御手段 ３ テキストファイル ４ 音声認識データ作成手段 ５ 音声認識手段 ６ マルチメディア融合データ作成手段 Ｓ２ａ テープ走行情報 Ｓ２ｂ 音声情報 Ｓ３ テキスト情報 Ｓ４ 音声認識データ Ｓ５ 文書番号 Ｓ６ マルチメディア融合データ
フロントページの続き (51)Int.Cl.5 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｎ 5/76 Ｚ 7916−5Ｃ (72)発明者 澤山 ゆかり 愛知県名古屋市千種区内山三丁目８番10号 株式会社沖テクノシステムズラボラトリ 内 (72)発明者 平山 輝 大阪府大阪市中央区平野町四丁目１番２号 大阪瓦斯株式会社内 (72)発明者 大場 克哉 大阪府大阪市西区千代崎３丁目２番95号 株式会社オージス総研内
Claims (1)
- 【請求項１】 音声情報と映像情報が入ったマルチメデ
ィアの記録媒体と、前記マルチメディアに入っている音
声情報に関するテキスト情報とから、前記記録媒体の情
報と前記テキスト情報とを融合した情報を作成するため
のマルチメディアオーサリングシステムにおいて、 前記記録媒体をアクセス制御して該記録媒体から音声情
報を読み出すと共に該アクセス制御情報を出力する記録
媒体制御手段と、 前記テキスト情報から音声認識データを作成する音声認
識データ作成手段と、 前記音声認識データに基づき前記音声情報を文字列に変
換して出力する音声認識手段と、 前記テキスト情報、文字列、及びアクセス制御情報か
ら、該アクセス制御情報の入ったマルチメディア融合デ
ータを作成するマルチメディア融合データ作成手段と
を、備えたことを特徴とするマルチメディアオーサリン
グシステム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4325094A JPH06176542A (ja) | 1992-12-04 | 1992-12-04 | マルチメディアオーサリングシステム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4325094A JPH06176542A (ja) | 1992-12-04 | 1992-12-04 | マルチメディアオーサリングシステム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH06176542A true JPH06176542A (ja) | 1994-06-24 |
Family
ID=18173074
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4325094A Pending JPH06176542A (ja) | 1992-12-04 | 1992-12-04 | マルチメディアオーサリングシステム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH06176542A (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108847246A (zh) * | 2018-06-15 | 2018-11-20 | 上海与德科技有限公司 | 一种动画制作方法、装置、终端及可读介质 |
| WO2020100438A1 (ja) * | 2018-11-13 | 2020-05-22 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
-
1992
- 1992-12-04 JP JP4325094A patent/JPH06176542A/ja active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108847246A (zh) * | 2018-06-15 | 2018-11-20 | 上海与德科技有限公司 | 一种动画制作方法、装置、终端及可读介质 |
| WO2020100438A1 (ja) * | 2018-11-13 | 2020-05-22 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
| JPWO2020100438A1 (ja) * | 2018-11-13 | 2021-09-30 | ソニーグループ株式会社 | 情報処理装置、情報処理方法及びプログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI247295B (en) | Reproducing method and apparatus for interactive mode using markup documents | |
| KR960701442A (ko) | 정보 기록 매체 및 정보 재생 장치(Data recording medium and data reproduction apparatus) | |
| KR900000756A (ko) | 선 구입 수단의 시스템 | |
| JPH05100699A (ja) | 音声記録再生装置 | |
| JP4100992B2 (ja) | 再生装置 | |
| JP2004350042A (ja) | 記録装置および記録方法、再生装置および再生方法、並びに記憶媒体 | |
| JP2006528864A (ja) | シナリオを記録した情報記録媒体、記録装置及び記録方法、その情報記録媒体の再生装置及びシナリオの検索方法 | |
| US20030142954A1 (en) | Moving image reproduction description method, moving image reproduction recording apparatus, storage medium and control program | |
| KR20050012101A (ko) | 시나리오를 기록한 정보저장매체, 기록장치 및 기록방법,그 정보저장매체의 재생장치 및 시나리오의 검색방법 | |
| US5481511A (en) | Address table editing system for voice data recorded in an optical disk | |
| JP2006510162A (ja) | 記録再生システム、記録装置、再生装置、記録媒体、記録再生方法、記録方法、再生方法、プログラム、および記録媒体 | |
| JPH03291752A (ja) | データ検索装置 | |
| JP3277507B2 (ja) | データ検索方法及びデータ検索再生装置 | |
| JPH01300779A (ja) | 静止画ファイル編集装置 | |
| US7929830B2 (en) | Recording, reproducing, and recording/reproducing apparatuses for recording input data in a recording medium capable of non-linear access and methods thereof | |
| JPH01102791A (ja) | データ編集装置 | |
| CA2124406A1 (en) | Interactive training system and training material therefor | |
| JPH0447580A (ja) | ディスク記録装置 | |
| JP2006127571A (ja) | ディスク再生装置 | |
| JP4028246B2 (ja) | 情報記録編集装置及び情報記録媒体 | |
| JP2865906B2 (ja) | シナリオ従属データの記録方法及びシナリオ従属データ再生システム | |
| JP3491981B2 (ja) | マルチメディア・プレゼンテーション方法およびシステム，ならびにマルチメディア・データ作成方法およびシステム | |
| JP3263443B2 (ja) | アニメーション編集装置 | |
| JP2003032634A (ja) | 再生装置及びその方法 | |
| KR20000072678A (ko) | 미디어 파일 재생 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 19990727 |