JPH0567184A - Multimedium scenario processing method - Google Patents
Multimedium scenario processing methodInfo
- Publication number
- JPH0567184A JPH0567184A JP22799591A JP22799591A JPH0567184A JP H0567184 A JPH0567184 A JP H0567184A JP 22799591 A JP22799591 A JP 22799591A JP 22799591 A JP22799591 A JP 22799591A JP H0567184 A JPH0567184 A JP H0567184A
- Authority
- JP
- Japan
- Prior art keywords
- segment
- media
- data
- deletion
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】
【目的】 削除方法を指定した単一メディアの特性およ
びセグメント毎の依存関係を規定したメディア間の関連
データに基づき、任意メディアの削除に際して連動した
他メディアの削除方法を制御するマルチメディアシナリ
オ加工方法を提供することにある。
【構成】 任意の提示時間を持つ連続したデータの集合
（セグメント）で管理されているメディアを、複数関連
付けて構成したマルチメディアシナリオに対する加工方
法において、加工制御データ蓄積部３１に単一メディア
特性データ３１Ｂおよびメディア間関連データ３１Ａを
蓄積しておき、その単一メディア特性データに基づい
て、セグメント補正部３４により、セグメントの部分的
削除や提示時間の圧縮等によってセグメントの提示時間
を補正するとともに、削除処理部３２によって、そのメ
ディア間関連データに基づき、関連した他メディアの削
除を行い、削除したセグメントの提示時間に存在する他
メディアに対し、補正制御部３３の制御で、セグメント
補正部３４がそのセグメントの提示時間を補正する。
(57) [Summary] [Purpose] Control the deletion method of other media linked with deletion of arbitrary media based on the relational data between media that specifies the characteristics of a single media that specifies the deletion method and the dependency relationship for each segment. The present invention is to provide a multimedia scenario processing method. [Structure] In a processing method for a multimedia scenario in which a plurality of media managed by a set (segment) of continuous data having an arbitrary presentation time are associated with each other, a single media characteristic data is stored in a processing control data storage unit 31. 31B and inter-media related data 31A are accumulated, and based on the single media characteristic data, the segment correction unit 34 corrects the presentation time of the segment by partially deleting the segment, compressing the presentation time, and the like. The deletion processing unit 32 deletes other related media based on the inter-media related data, and the segment correction unit 34 controls the other media existing at the presentation time of the deleted segment under the control of the correction control unit 33. Correct the presentation time for that segment.
Description
【０００１】[0001]
【産業上の利用分野】本発明は、セグメントで管理され
ているメディアを関連付けて構成したマルチメディアシ
ナリオの加工方法に関し、特に任意のメディアの削除に
際して連動した他メディアの削除方法を制御するマルチ
メディアシナリオ加工方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method for processing a multimedia scenario constructed by associating media managed by segments, and more particularly, a multimedia for controlling a method for deleting other media linked with deletion of arbitrary media. It relates to a scenario processing method.
【０００２】[0002]
【従来の技術】マルチメディアの編集技術において、任
意のメディアを削除する際、シナリオの自然性を保つた
めに関連する他メディアを時間的、意味的に矛盾なく処
理することが要求されている。従来は、削除を指定した
メディアと関連のあるメディアから削除するセグメント
あるいは一部のデータを一つ一つ検索して処理するた
め、膨大な時間を必要とした。この点に関して、描画か
ら関連する音声を検索し、編集の効率化を図った技術
「マルチメディア通信端末における同期編集制御法、電
子情報学会誌、Vol.J70,No.2,1987」がある。この方法
において、音声セグメントには有音部分（音声レベルが
ある閾値以上継続する部分）からなるセグメントと、無
音部分からなるセグメントがある。また、描画セグメン
トは入力時に連続して描かれた文字や図形等の描画デー
タ（画面上の座標値とその点のＯＮ／ＯＦＦ情報等）を
示し、描画データのあるセグメントとないセグメントが
ある。この技術における音声検索処理の原理を図２に示
す。同図において、ＣＲＴディスプレイに表示された静
止図と描画から任意の描画を指定し（２０１〜２０
３）、指定された描画セグメント、または、開始時刻
ｔ’後もっとも初めに出力される音声セグメントを検索
する（２０４〜２０６）。図３に上記検索方法の適用例
を示す。s1、s2は描画セグメント、s3、s4、s5は音声セ
グメント、s6は静止画セグメントである。例えば、描画
セグメントs1を指定した場合は関連したセグメントとし
て音声セグメントs3を、また描画セグメントs2を指定し
た場合は音声セグメントs5を検索結果とする。2. Description of the Related Art In multimedia editing technology, when deleting an arbitrary medium, it is required to process other related media consistently in terms of time and meaning in order to maintain the naturalness of the scenario. In the past, a huge amount of time was required to search for and process each segment or part of data to be deleted from the media related to the specified deletion media. In this regard, there is a technology "synchronous editing control method in multimedia communication terminals, Journal of the Institute of Electronics, Information and Communication Engineers, Vol.J70, No.2, 1987" in which a related voice is searched from a drawing to improve editing efficiency. In this method, the voice segment includes a segment including a voiced portion (a portion where the voice level continues above a certain threshold) and a segment including a silent portion. The drawing segment indicates drawing data such as characters and figures continuously drawn at the time of input (coordinate values on the screen and ON / OFF information of the point), and there are segments with and without drawing data. The principle of voice search processing in this technique is shown in FIG. In the figure, an arbitrary drawing is designated from the still image and the drawing displayed on the CRT display (201 to 20
3) The designated drawing segment or the voice segment which is output first after the start time t'is searched (204 to 206). FIG. 3 shows an application example of the search method. s 1 and s 2 are drawing segments, s 3 , s 4 and s 5 are audio segments, and s 6 is a still image segment. For example, when the drawing segment s 1 is specified, the audio segment s 3 is set as the related segment, and when the drawing segment s 2 is specified, the audio segment s 5 is set as the search result.
【０００３】[0003]
【発明が解決しようとする課題】上記従来技術では、関
連のある音声セグメントと描画セグメントの出力開始時
刻の比較により関連のある他メディアのセグメントを判
断している。しかし、図４において、例えば花火が飛び
散る映像s1とドーンという爆発音s4のように出力開始時
刻に遅延がある場合、従来方式ではs1セグメントの関連
セグメントとしてs3を検索し、s2の関連セグメントとし
てs4を検索してしまうという不都合が生じる。つまり、
時刻だけでメディアの関連性を機械的に規定する従来方
式は、汎用的なメディアの多重表現には不適切であると
いう第１の問題点があった。また、単一メディアにおい
てセグメント全体の把握、提示速度の維持等の提示内容
の目的によって削除方法を変更するのが情報伝達効率を
高め、シナリオの自然性を保つ上で望ましい。例えば音
声メディアにおいて、ナレーションのような説明の音声
は説明内容全体の把握が重要であるからデータの間引き
等で時間を圧縮し、ＢＧＭはデータの提示速度を維持す
るため後尾を削除するのが適している。しかし、従来方
式ではこのようなセグメントの提示内容に依存した削除
を人間が常に指定しており、自動的に変化させることが
できないという第２の問題点があった。本発明の目的
は、このような問題点を改善するため、削除方法を指定
した単一メディアの特性およびセグメント毎の依存関係
を規定したメディア間の関連データに基づき、任意メデ
ィアの削除に際して連動した他メディアの削除方法を制
御するマルチメディアシナリオ加工方法を提供すること
にある。In the above prior art, the related other media segment is determined by comparing the output start times of the related audio segment and the drawing segment. However, in FIG. 4, when there is a delay in the output start time such as the image s 1 of scattered fireworks and the explosion sound s 4 of Dawn, in the conventional method, s 3 is searched as a related segment of s 1 segment, and s 2 There is an inconvenience of searching s 4 as a related segment of. That is,
The first method has a first problem in that the conventional method of mechanically defining the relevance of media only by time is unsuitable for general-purpose multiplex representation of media. In addition, it is desirable to change the deletion method according to the purpose of the presentation content such as grasping the entire segment and maintaining the presentation speed in a single medium in order to improve the information transmission efficiency and keep the scenario natural. For example, in audio media, since it is important to grasp the entire content of explanations such as narration, it is suitable to compress the time by thinning out the data, and to remove the tail of BGM in order to maintain the data presentation speed. ing. However, in the conventional method, there is a second problem that the deletion depending on the presentation content of such a segment is always specified by a human and cannot be changed automatically. In order to improve such a problem, the object of the present invention is linked with the deletion of an arbitrary medium based on the characteristic of a single medium specifying the deletion method and the related data between the media which defines the dependency relationship for each segment. It is to provide a multimedia scenario processing method for controlling a deletion method of another medium.
【０００４】[0004]
【課題を解決するための手段】上記目的を達成するた
め、本発明のマルチメディアシナリオ加工方法は、任意
の提示時間を持つ連続したデータの集合（セグメント）
で管理されているメディアを、複数関連付けて構成した
マルチメディアシナリオに対する加工方法において、加
工制御データ蓄積部に単一メディア特性データおよびメ
ディア間関連データを蓄積しておき、その単一メディア
特性データに基づいて、セグメント補正部により、セグ
メントの部分的削除や提示時間の圧縮等によってセグメ
ントの提示時間を補正するとともに、削除処理部によっ
て、そのメディア間関連データに基づき、関連した他メ
ディアの削除を行い、補正制御部がセグメント補正部を
制御することにより、削除したセグメントの提示時間に
存在する他メディアのセグメントに対して、提示時間の
補正を行うことに特徴がある。In order to achieve the above object, the multimedia scenario processing method of the present invention has a set (segment) of continuous data having an arbitrary presentation time.
In a processing method for a multimedia scenario that is configured by associating multiple media managed by, the single media characteristic data and the inter-media related data are stored in the processing control data storage unit, and the single media characteristic data is stored in the single media characteristic data. Based on this, the segment correction unit corrects the presentation time of the segment by partially deleting the segment or compressing the presentation time, and the deletion processing unit deletes other related media based on the inter-media related data. The correction control unit controls the segment correction unit to correct the presentation time for a segment of another medium existing at the presentation time of the deleted segment.
【０００５】[0005]
【作用】本発明においては、マルチメディアシナリオ加
工処理部の加工制御データ蓄積部に、単一メディアの特
性データおよびメディア間の関連データを格納してお
き、その加工処理部は、単一メディア特性データおよび
メディア間関連データに基づいて関連メディアの削除方
法を制御する。これにより、マルチメディアシナリオの
自然性を損なうことなく、効率の良い削除を自動的に行
うことができる。また、メディアの提示時刻が離れてい
る場合でも、その関連データに基づいて関連メディアの
セグメントを削除することができる。According to the present invention, characteristic data of a single medium and related data between media are stored in the processing control data storage section of the multimedia scenario processing section, and the processing section stores the single medium characteristics. Control how to delete related media based on data and media related data. As a result, efficient deletion can be automatically performed without impairing the naturalness of the multimedia scenario. Further, even when the presentation time of media is far, the segment of the related media can be deleted based on the related data.
【０００６】[0006]
【実施例】以下、本発明の一実施例を図面により説明す
る。図１は本発明の第１の実施例における構成図であ
る。同図において、１はユーザとの対話制御を行うイン
タフェース部、２はシナリオを構成するセグメントを管
理するシナリオ構造、再生のための同期情報およびデー
タ等からなるマルチメディアデータ蓄積部、３はマルチ
メディアシナリオ加工処理部であり、その処理部はマル
チメディアシナリオにおけるメディア間関連データ３１
Ａと単一メディア特性データ３１Ｂを各々蓄積する加工
制御データ蓄積部３１と、ユーザの削除要求により前記
メディア間関連データ３１Ａを参照することにより関連
メディアと削除要求のセグメントを削除する削除処理部
３２と、前記単一メディア特性データ３１Ｂを参照する
ことにより、セグメントの補正が必要か否かを判断し、
削除範囲あるいは圧縮率の設定により補正方法を制御す
る補正制御部３３と、その補正制御部３３で決定された
補正方法を実行するセグメント補正部３４とで構成され
ている。DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram of the first embodiment of the present invention. In the figure, 1 is an interface unit for controlling interaction with a user, 2 is a scenario data structure for managing segments constituting a scenario, a multimedia data storage unit including synchronization information and data for reproduction, and 3 is a multimedia. It is a scenario processing processing unit, and the processing unit is the inter-media related data 31 in the multimedia scenario.
A and a single medium characteristic data 31B are respectively stored in the processing control data storage unit 31, and a deletion processing unit 32 that deletes the related media and the segment of the deletion request by referring to the inter-media related data 31A by the user's deletion request. By referring to the single media characteristic data 31B, it is determined whether or not segment correction is necessary,
The correction control unit 33 controls the correction method by setting the deletion range or the compression rate, and the segment correction unit 34 executes the correction method determined by the correction control unit 33.
【０００７】図５は、本発明の一実施例におけるメディ
ア間関連データの構造図である。メディア間関連データ
３１Ａは、セグメント識別子３１ａと複数の関連セグメ
ント識別子からなる関連セグメント識別子リスト３１ｂ
とで構成される。セグメント識別子３１ａに対して関連
セグメントリスト３１ｂは一意に決定される。本実施例
では、対象とするメディアを、動画像、音声、静止画、
描画とする。また、動画像はカット単位、音声は有音部
分、静止画は１枚単位、描画は連続した文字や図形をセ
グメントとする。以下の例においても同様のセグメント
単位を用いる。なお、セグメント間の関連づけは、マル
チメディアシナリオを作成するユーザが指定する。ここ
で、ユーザインタフェースの例を記述する。時系列にそ
ってセグメントのアイコンを表示する。１つのセグメン
トをクリックし、セグメントの属性に関するメニュー
（特性データ参照、特性データ設定、関連セグメント参
照、関連セグメント設定、etc.）を表示し、関連セグメ
ント設定を選択する。その後、関連するセグメントをマ
ウスクリック等で指定することにより図５に提示したテ
ーブルをシステムが作成する。図６は、本発明の一実施
例における単一メディア特性データの構造図である。単
一メディア特性データ３１Ｂは、メディア識別子３１c1
と時刻シフト可否データ３１c2と切断可否指定データ３
１c3と圧縮可否指定データ３１c4からなるメディア共通
データ３１cとセグメント識別子３１d1と切断可否指定
データ３１d2と圧縮可否指定データ３１d3とからなるセ
グメント特異データ３１dから構成される。これらのデ
ータは、マルチメディアシナリオ加工前に予めユーザが
入力するものとする。ここで、時刻シフト可否データ３
１c2は削除後に後続のデータを前方にシフト可能か否か
を指定し、切断可否指定データはデータの切断が可能か
否か、さらに可能な場合は削除制御方法（中断、後尾切
断等）を指定する。圧縮可否指定データは、データの圧
縮が可能か否か、さらに可能な場合は圧縮制御方法（コ
マ落し、音声の再生時間圧縮等）を指定する。また、メ
ディア識別子３１c1は、セグメント識別子３１d1から検
出可能である。セグメント特異データ３１dは、同一メ
ディアであってもメディア共通データ３１cと異なる切
断制御や圧縮制御を必要とする特異なセグメントの集合
である。本実施例は、ユーザからの１セグメント削除要
求に対して関連するメディアの加工処理を行う例であ
る。この実施例の動作を説明すると、図１に示したイン
タフェース部１は、ユーザの削除要求に対してマルチメ
ディアデータ蓄積部２に蓄積されているシナリオ管理構
造を参照することにより該当するセグメント識別子を削
除処理部３２に転送する。この削除処理部３２は、転送
されたセグメント識別子に基づきそのセグメントを削除
し、さらにメディア間関連データ３１Ａを参照すること
により関連セグメントを順次削除する。関連セグメント
の削除終了後、ユーザからの削除要求セグメント識別子
を補正制御部３３に転送する。補正制御部３３は、転送
されたセグメント識別子に基づき単一メディア特性デー
タ３１Ｂを参照することにより、削除セグメントの存在
時間を消去し後続のデータを前方にシフトするかどうか
を判定し、その際補正が必要なセグメントの検出と削除
範囲あるいは圧縮率を設定し、セグメント補正部３４に
転送する。但し、単一メディア特性データ３１Ｂにおい
て、セグメントは削除と圧縮のどちらか一方が可能とな
るように設定されている。セグメント補正部３４は、転
送された削除範囲あるいは圧縮率に基づきマルチメディ
アデータ蓄積部２に蓄積されているセグメントデータを
変更する。FIG. 5 is a structural diagram of inter-media related data in one embodiment of the present invention. The inter-media related data 31A includes a related segment identifier list 31b including a segment identifier 31a and a plurality of related segment identifiers.
Composed of and. The related segment list 31b is uniquely determined for the segment identifier 31a. In the present embodiment, the target media is a moving image, a sound, a still image,
Let's draw. A moving image is cut, a voice is a voiced portion, a still image is a unit, and drawing is a continuous character or figure. Similar segment units are used in the following examples. Note that the association between the segments is specified by the user who creates the multimedia scenario. Here, an example of the user interface will be described. Display segment icons in chronological order. Click one segment to display the menu related to segment attributes (characteristic data reference, characteristic data setting, related segment reference, related segment setting, etc.) and select the related segment setting. After that, the system creates the table shown in FIG. 5 by designating the relevant segment by mouse click or the like. FIG. 6 is a structural diagram of single media characteristic data according to an embodiment of the present invention. The single media characteristic data 31B has the media identifier 31c 1
And time shift permission / inhibition data 31c 2 and disconnection permission / inhibition designation data 3
1c 3 and media common data 31c composed of compression propriety specification data 31c 4 , segment identifier 31d 1 , segment propriety specification data 31d 2 and compression propriety specification data 31d 3 . It is assumed that these data are input by the user in advance before processing the multimedia scenario. Here, time shift availability data 3
1c 2 specifies whether or not subsequent data can be shifted forward after deletion, and whether or not the data can be cut is specified by the data indicating whether cutting is possible, and if possible, the deletion control method (interruption, tail cutting, etc.) specify. The compressibility designation data designates whether or not the data can be compressed, and if so, designates a compression control method (frame drop, audio reproduction time compression, etc.). Also, the media identifier 31c 1 can be detected from the segment identifier 31d 1 . The segment peculiar data 31d is a set of peculiar segments that require different cutting control and compression control than the medium common data 31c even for the same medium. The present embodiment is an example in which a related medium is processed in response to a 1-segment deletion request from a user. The operation of this embodiment will be described. The interface unit 1 shown in FIG. 1 refers to the scenario management structure stored in the multimedia data storage unit 2 in response to a user's deletion request and determines the corresponding segment identifier. Transfer to the deletion processing unit 32. The deletion processing unit 32 deletes the segment based on the transferred segment identifier, and further deletes the related segment by referring to the inter-media related data 31A. After the deletion of the related segment, the deletion request segment identifier from the user is transferred to the correction control unit 33. The correction control unit 33 refers to the single media characteristic data 31B based on the transferred segment identifier to determine whether to delete the existence time of the deleted segment and shift the following data forward, and at this time, the correction is performed. Detects the required segment and sets the deletion range or compression ratio, and transfers it to the segment correction unit 34. However, in the single media characteristic data 31B, the segment is set so that either one of deletion and compression is possible. The segment correction unit 34 changes the segment data stored in the multimedia data storage unit 2 based on the transferred deletion range or compression rate.
【０００８】図７は、図１の削除処理部の構成図であ
る。この構成例の動作を説明すると、メモリ部３２Ａ
は、インタフェース部１から転送されてくるセグメント
識別子を内部メモリに蓄積するとすぐにインタフェース
部１へデータの送信を中断する命令を転送する。次に、
最も新しく蓄積されたセグメント識別子をセグメントリ
スト参照部３２Ｂとセグメント削除部３２Ｃに転送す
る。セグメント識別子を転送されたセグメントリスト参
照部３２Ｂは、メディア間関連データ３１Ａを参照する
ことにより関連セグメント識別子リストを取り出し、こ
の関連セグメント識別子リストをメモリ部３２Ａに転送
する。メモリ部３２Ａは転送されたセグメント識別子を
蓄積し、最も新しく蓄積されたセグメント識別子をセグ
メントリスト参照部３２Ｂに転送する。そのセグメント
識別子の転送後、セグメントリスト参照部３２Ｂより関
連セグメント識別子リストが転送されてこない場合、上
記セグメント識別子をセグメント削除部３２Ｃに転送す
る。セグメント削除部３２Ｃはセグメント識別子が転送
される度にマルチメディアデータ蓄積部２を参照しシナ
リオ管理構造、同期情報等からそのセグメントを削除す
る。上記の処理は、メモリが空になるまで繰り返され、
終了と同時に最後のセグメント識別子つまりユーザから
の削除要求セグメント識別子を補正制御部３３に転送す
る。図８は、図７のメモリ部におけるセグメント識別子
と格納順の関係を示す図、図９は図７のメモリ部におけ
る関連セグメントの蓄積処理を示す図である。図８で
は、メモリ内におけるセグメント識別子と格納順の関係
を示している。s1は、ユーザからの削除要求セグメント
を示し、s1の受け取ったメモリ部３２Ａは直ちにセグメ
ントリスト参照部３２Ｂとセグメント削除部３２Ｃにs1
を転送する。セグメントリスト参照部３２Ｂは転送され
たs1に基づき関連セグメント識別子s10、s11、s12をメ
モリ部３２Ａに転送し、メモリ部３２Ａは転送されてき
たセグメント識別子リストを蓄積する。次に最も新しい
セグメント識別子s12をセグメントリスト参照部３２Ｂ
とセグメント削除部３２Ｃに転送する。以下同様にs12
の関連セグメントs120、s121、s121の関連セグメントs
1210、s11の関連セグメントs110を順に蓄積し(図９)、
関連セグメントがなくなるまで上記処理を繰り返す。FIG. 7 is a block diagram of the deletion processing section of FIG. The operation of this configuration example will be described. The memory unit 32A
Immediately stores the segment identifier transferred from the interface unit 1 in the internal memory, and immediately transfers to the interface unit 1 an instruction for interrupting data transmission. next,
The most recently accumulated segment identifier is transferred to the segment list reference unit 32B and the segment deletion unit 32C. The segment list reference unit 32B, to which the segment identifier has been transferred, retrieves the related segment identifier list by referring to the inter-media related data 31A, and transfers this related segment identifier list to the memory unit 32A. The memory unit 32A stores the transferred segment identifier, and transfers the latest accumulated segment identifier to the segment list reference unit 32B. After the transfer of the segment identifier, if the related segment identifier list is not transferred from the segment list reference unit 32B, the segment identifier is transferred to the segment deletion unit 32C. The segment deletion unit 32C refers to the multimedia data storage unit 2 every time the segment identifier is transferred, and deletes the segment from the scenario management structure, the synchronization information and the like. The above process is repeated until the memory is empty,
Simultaneously with the end, the last segment identifier, that is, the deletion request segment identifier from the user is transferred to the correction control unit 33. FIG. 8 is a diagram showing the relationship between the segment identifier and the storage order in the memory unit of FIG. 7, and FIG. 9 is a diagram showing the accumulation processing of the related segment in the memory unit of FIG. FIG. 8 shows the relationship between the segment identifier in the memory and the storage order. s 1 indicates a deletion request segment from the user, s 1 to the memory unit 32A immediately segment list see section 32B and the segment deleting unit 32C having received the s 1
To transfer. The segment list reference unit 32B transfers the related segment identifiers s 10 , s 11 , and s 12 to the memory unit 32A based on the transferred s 1 , and the memory unit 32A stores the transferred segment identifier list. The latest segment identifier s 12 is assigned to the segment list reference unit 32B.
And the segment deletion unit 32C. Same as below 12
Related segment of s 120 , s 121 , related segment of s 121 s
1210 , s 11 related segments s 110 are sequentially accumulated (Fig. 9),
The above process is repeated until there are no related segments.
【０００９】図１０は、図１の補正制御部の構成図であ
る。この構成例の動作を説明すると、時刻シフト判定部
３３Ａは、削除処理部３２から転送されてくるセグメン
ト識別子に基づき単一メディアの特性データを参照する
ことにより、削除セグメントの存在時間を消去し、後続
のデータを前方にシフトするかどうか判定する。時刻シ
フト不可能と判断された場合はインタフェース部１に制
御を移す。時刻シフト可能と判断された場合は上記セグ
メント識別子をセグメント検出部３３Ｂに転送する。セ
グメント検出部３３Ｂは、転送されたセグメント識別子
に基づきマルチメディアデータ蓄積部２のシナリオ構
造、同期情報等を参照し、削除セグメントが存在してい
た時刻に存在する他のセグメントを検出する。セグメン
トが検出された場合、そのセグメントの識別子と存在時
間を順次削除範囲設定部３３Ｃと圧縮率設定部３３Ｄに
転送する。削除範囲設定部３３Ｃでは、転送されたセグ
メント識別子に基づき単一メディア特性データ中の切断
可否指定データ３１c3を参照し、削除時間と比較するこ
とにより削除可能かどうかを判定する。可能な場合のみ
削除範囲設定しセグメント補正部３４にセグメント識別
子と削除範囲を転送する。圧縮率設定部３３Ｄでは、転
送されたセグメント識別子に基づき単一メディア特性デ
ータ中の圧縮可否指定データ３１c4を参照し、圧縮方法
に基づいた圧縮可能時間と実際に削除する時間とを比較
することにより圧縮可能かどうか判定する。可能な場合
のみ圧縮率（削除後のセグメント提示時間／削除前のセ
グメント提示時間×１００％）を設定しセグメント補正
部３４にセグメント識別子と圧縮率を転送する。削除範
囲設定部３３Ｃと圧縮率設定部３３Ｄにおいて補正処理
が不可能な場合は、ユーザインタフェース部１に制御を
戻し、メッセージ表示等でユーザに削除が不可能なこと
を伝える。マルチメディアシナリオ加工システムは次に
発せられるユーザからの加工要求により再び動作を始め
る。図１１および図１２は、本発明の一実施例における
加工制御データに基づく加工処理を示す図である。図１
１において、メディアＡはユーザが直接削除を指示する
処理の主体メディアであり、セグメントs1の削除が要求
された場合である。メディアＡと関連するメディアＢの
セグメントs10は削除セグメントs1に関連し、メディア
Ｃのセグメントs100はセグメントs10に関連している。
セグメントs1、s10、s100の関係は、メディア間関連デ
ータ３１Ａに蓄積されており、削除処理部３２はその蓄
積データを参照することにより、s1に関連したs10をま
ず削除し、続いてs10に関連したs100を削除する（タイ
プ（１）の削除）。s100はこれ以上関連するメディアを
持たないため、削除処理部３２はs1を削除し、s1の識別
子を補正制御部３３に転送することで処理を終える。補
正制御部３３では、単一メディア特性データ３１Ｂから
s1の特性を参照し、その特性データによりセグメントs2
の補正方法を制御する（図１２）。まず、メディアＡの
時刻シフト可否データからs1以降の時刻をシフトするか
判定する。シフトしない場合は処理を終了し、シフトす
る場合は切断可否指定データと圧縮可否指定データを参
照することにより補正制御を決定する。タイプ（２）−
０はデータの中断が可能な場合、タイプ（２）−１は中
断が不可能で後尾の切断が可能な場合、タイプ（２）−
２は切断が不可能でデータの間引きによる圧縮が可能な
場合である。なお、切断可否指定データと圧縮可否指定
データに格納する制御方法の種類を増やすことで、上記
以外の処理を可能とすることは容易である。FIG. 10 is a block diagram of the correction controller of FIG. Explaining the operation of this configuration example, the time shift determination unit 33A erases the existence time of the deleted segment by referring to the characteristic data of the single medium based on the segment identifier transferred from the deletion processing unit 32, Determine whether to shift the following data forward. When it is determined that the time shift is impossible, the control is transferred to the interface unit 1. When it is determined that the time shift is possible, the segment identifier is transferred to the segment detection unit 33B. The segment detection unit 33B refers to the scenario structure, the synchronization information, and the like of the multimedia data storage unit 2 based on the transferred segment identifier, and detects another segment existing at the time when the deleted segment existed. When the segment is detected, the identifier and the existence time of the segment are sequentially transferred to the deletion range setting unit 33C and the compression rate setting unit 33D. Deleting range setting unit 33C, whether or not it is possible to remove by referring to the cut propriety specified data 31c 3 in a single media characteristic data based on the transferred segment identifier is compared with deletion time. The deletion range is set only when possible and the segment identifier and the deletion range are transferred to the segment correction unit 34. In the compression ratio setting unit 33D, comparing the time reference compressed propriety specified data 31c 4 in a single media characteristic data based on the transferred segment identifier, actually remove the compressible time based on the compression method Determines whether or not compression is possible. Only when possible, the compression rate (segment presentation time after deletion / segment presentation time before deletion × 100%) is set, and the segment identifier and the compression rate are transferred to the segment correction unit 34. When the correction processing is impossible in the deletion range setting unit 33C and the compression ratio setting unit 33D, the control is returned to the user interface unit 1 and a message is displayed to inform the user that the deletion cannot be performed. The multimedia scenario processing system starts operation again in response to the next processing request from the user. 11 and 12 are diagrams showing the processing process based on the processing control data in the embodiment of the present invention. Figure 1
In No. 1, the medium A is the main medium of the process in which the user directly instructs the deletion, and the deletion of the segment s 1 is requested. Segment s 10 of media B associated with media A is associated with deleted segment s 1 , and segment s 100 of media C is associated with segment s 10 .
The relationship between the segments s 1 , s 10 , and s 100 is stored in the inter-media related data 31A, and the deletion processing unit 32 first deletes s 10 related to s 1 by referring to the stored data, then remove the s 100 associated with s 10 (deletion of type (1)). Since s 100 do not have the media associated anymore deletion processing unit 32 deletes the s 1, the process ends by transferring the identifier of s 1 to the correction control unit 33. In the correction control unit 33, from the single media characteristic data 31B
Refer to the characteristic of s 1 and use the characteristic data to segment s 2
The correction method of is controlled (FIG. 12). First, it is determined from the time shift permission / inhibition data of the medium A whether to shift the time after s 1 . When the shift is not to be performed, the processing is ended, and when the shift is to be performed, the correction control is determined by referring to the cut availability designation data and the compression availability designation data. Type (2)-
0 indicates that the data can be interrupted, type (2) -1 indicates that the data cannot be interrupted, and the tail can be disconnected.
No. 2 is a case in which cutting is impossible and data can be compressed by thinning. It should be noted that it is easy to enable processing other than the above by increasing the types of control methods stored in the disconnectability designating data and the compression availability designating data.
【００１０】[0010]
【発明の効果】本発明によれば、セグメントの削除にお
いて、メディア間の関連データに基づき提示時刻が離れ
ている場合でも関連メディアの処理ができる第１の利点
がある。また、セグメント全体の把握、提示速度の維持
等の提示内容の目的により削除方法を変化させること
で、シナリオの自然性が保たれた効率良い加工処理を自
動的に提供できるという第２の利点がある。According to the present invention, in deleting a segment, there is a first advantage that related media can be processed even when presentation times are different based on related data between media. In addition, by changing the deletion method depending on the purpose of the presentation content such as grasping the entire segment and maintaining the presentation speed, the second advantage is that it is possible to automatically provide efficient processing that preserves the naturalness of the scenario. is there.
【００１１】[0011]
【図１】本発明の一実施例におけるマルチメディア端末
の構成図である。FIG. 1 is a configuration diagram of a multimedia terminal according to an embodiment of the present invention.
【図２】従来の音声検索処理方法を示すフローチャート
である。FIG. 2 is a flowchart showing a conventional voice search processing method.
【図３】図２の検索方法の適用例図である。FIG. 3 is an application example diagram of the search method of FIG.
【図４】図２の検索方法の適用例図である。FIG. 4 is an application example diagram of the search method of FIG.
【図５】本発明の一実施例におけるメディア間関連デー
タの構造図である。FIG. 5 is a structural diagram of inter-media related data according to an embodiment of the present invention.
【図６】本発明の一実施例における単一メディア特性デ
ータの構造図である。FIG. 6 is a structural diagram of single media characteristic data according to an embodiment of the present invention.
【図７】図１の削除処理部の構成図である。FIG. 7 is a configuration diagram of a deletion processing unit in FIG. 1.
【図８】図７のメモリ部におけるセグメント識別子と格
納順の関係を示す図である。8 is a diagram showing a relationship between a segment identifier and a storage order in the memory unit of FIG.
【図９】図７のメモリ部における関連セグメントの蓄積
処理を示す図である。9 is a diagram showing a process of accumulating related segments in the memory unit of FIG. 7.
【図１０】図１の補正制御部の構成図である。10 is a configuration diagram of a correction control unit in FIG.
【図１１】本発明の一実施例における加工制御データに
基づく加工処理を示す図である。FIG. 11 is a diagram showing a processing process based on processing control data according to an embodiment of the present invention.
【図１２】本発明の一実施例における加工制御データに
基づく加工処理を示す図である。FIG. 12 is a diagram showing a processing process based on processing control data according to an embodiment of the present invention.
１ インタフェース部 ２ マルチメディアデータ蓄積部 ３ マルチメディアデータ加工処理部 ３１ 加工制御データ蓄積部 ３１Ａ メディア間関連データ ３１Ｂ 単一メディア特性データ ３２ 削除処理部 ３２Ａ メモリ部 ３２Ｂ セグメントリスト参照部 ３２Ｃ セグメント削除部 ３３ 補正制御部 ３３Ａ 時刻シフト判定部 ３３Ｂ セグメント検出部 ３３Ｃ 削除範囲設定部 ３３Ｄ 圧縮率設定部 ３４ セグメント補正部 1 Interface Section 2 Multimedia Data Storage Section 3 Multimedia Data Processing Section 31 Processing Control Data Storage Section 31A Media Related Data 31B Single Media Characteristic Data 32 Deletion Processing Section 32A Memory Section 32B Segment List Reference Section 32C Segment Deletion Section 33 Correction control unit 33A Time shift determination unit 33B Segment detection unit 33C Deletion range setting unit 33D Compression ratio setting unit 34 Segment correction unit
Claims (1)
複数関連付けて構成したマルチメディアシナリオに対す
る加工方法において、単一メディアの特性データを蓄積
する手段と、メディア間の関連データを蓄積する手段と
を備え、該単一メディア特性データに基づいて、セグメ
ントの部分的削除および提示時間の圧縮を含む処理によ
りセグメントの提示時間を補正するとともに、該メディ
ア間関連データに基づき、関連した他メディアの削除を
行い、削除したセグメントの提示時間に存在する他メデ
ィアのセグメントに対して、部分的削除および提示時間
の圧縮を含む処理により該セグメントの提示時間を補正
することを特徴とするマルチメディアシナリオ加工方
法。1. A processing method for a multimedia scenario configured by associating a plurality of media managed in a segment, comprising means for accumulating characteristic data of a single medium and means for accumulating related data between media. Correcting the presentation time of the segment by a process including partial deletion of the segment and compression of the presentation time based on the single media characteristic data, and deletion of other related media based on the inter-media related data A method for processing a multimedia scenario, characterized in that a presentation time of a segment is corrected by a process including partial deletion and compression of the presentation time for a segment of another medium existing at the presentation time of the deleted segment.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22799591A JP2646903B2 (en) | 1991-09-09 | 1991-09-09 | Multimedia scenario processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22799591A JP2646903B2 (en) | 1991-09-09 | 1991-09-09 | Multimedia scenario processing method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0567184A true JPH0567184A (en) | 1993-03-19 |
| JP2646903B2 JP2646903B2 (en) | 1997-08-27 |
Family
ID=16869529
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP22799591A Expired - Fee Related JP2646903B2 (en) | 1991-09-09 | 1991-09-09 | Multimedia scenario processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2646903B2 (en) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08212388A (en) * | 1995-02-03 | 1996-08-20 | Fujitsu Ltd | 3D image processing device |
| JPH09138790A (en) * | 1995-11-14 | 1997-05-27 | Nec Corp | Scenario editing device |
| US5734262A (en) * | 1995-03-01 | 1998-03-31 | Matsushita Electric Industrial Co., Ltd. | Matrix of switched antenna elements having a conductor pattern supported on individual insulators for measuring electromagnetic radiation |
| US5912554A (en) * | 1995-10-30 | 1999-06-15 | Matsushita Electric Industrial Co., Ltd. | Electromagnetic radiation measuring apparatus for high frequency analysis of radiation produced by a circuit board |
| JP2000099520A (en) * | 1998-09-17 | 2000-04-07 | Fuji Xerox Co Ltd | Multimedia editing device |
| US6184693B1 (en) | 1997-12-04 | 2001-02-06 | Kyodo Kumiai Joint-Labo Sendai | Electromagnetic noise measurement apparatus |
| JP2014230003A (en) * | 2013-05-20 | 2014-12-08 | キヤノン株式会社 | Compiler and control method thereof, program, and storage medium |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62269567A (en) * | 1986-05-19 | 1987-11-24 | Nippon Telegr & Teleph Corp <Ntt> | Data editing system |
-
1991
- 1991-09-09 JP JP22799591A patent/JP2646903B2/en not_active Expired - Fee Related
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS62269567A (en) * | 1986-05-19 | 1987-11-24 | Nippon Telegr & Teleph Corp <Ntt> | Data editing system |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08212388A (en) * | 1995-02-03 | 1996-08-20 | Fujitsu Ltd | 3D image processing device |
| US5734262A (en) * | 1995-03-01 | 1998-03-31 | Matsushita Electric Industrial Co., Ltd. | Matrix of switched antenna elements having a conductor pattern supported on individual insulators for measuring electromagnetic radiation |
| US5912554A (en) * | 1995-10-30 | 1999-06-15 | Matsushita Electric Industrial Co., Ltd. | Electromagnetic radiation measuring apparatus for high frequency analysis of radiation produced by a circuit board |
| US5932999A (en) * | 1995-10-30 | 1999-08-03 | Matsushita Electric Industrial Co., Ltd. | Scannable antenna matrix having an amplifying element for each antenna element |
| JPH09138790A (en) * | 1995-11-14 | 1997-05-27 | Nec Corp | Scenario editing device |
| US6546558B1 (en) | 1995-11-14 | 2003-04-08 | Nec Corporation | Visual scenario editor for editing links between presentation screens in a multi-media application |
| US6184693B1 (en) | 1997-12-04 | 2001-02-06 | Kyodo Kumiai Joint-Labo Sendai | Electromagnetic noise measurement apparatus |
| JP2000099520A (en) * | 1998-09-17 | 2000-04-07 | Fuji Xerox Co Ltd | Multimedia editing device |
| JP2014230003A (en) * | 2013-05-20 | 2014-12-08 | キヤノン株式会社 | Compiler and control method thereof, program, and storage medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2646903B2 (en) | 1997-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8468157B2 (en) | Information processing apparatus and method and program storage medium | |
| EP0753820B1 (en) | Multimedia playing apparatus utilizing synchronization of scenario-defined processing time points with playing of finite-time monomedia item | |
| US6668102B2 (en) | Document image data storing and controlling system | |
| US7792790B2 (en) | System and method of synchronizing data between a server and a client | |
| US20020065841A1 (en) | Device for retaining important data on a preferential basis | |
| US7548951B2 (en) | Minute file creation method, minute file management method, conference server, and network conference system | |
| US8706857B2 (en) | Information processing apparatus, information processing method, data management server and data synchronization system | |
| EP2178244A1 (en) | A method and device for merging bill and saving the state of the buffer queue | |
| JP2003259268A (en) | Moving image management method and apparatus | |
| CN101271376A (en) | System and method for scrolling display screen, mobile terminal, and recording medium | |
| CN101000614A (en) | File delete method and file open method | |
| JPH09185570A (en) | Multimedia data acquisition and reproduction method and system | |
| JP2646903B2 (en) | Multimedia scenario processing method | |
| JP3031393B2 (en) | Dynamic change method of the number of buffer planes by class | |
| JP2005244523A (en) | Network conference system, conference terminal and conference server | |
| US20070094274A1 (en) | Content transfer apparatus, content transfer method and content transfer program | |
| US20060129661A1 (en) | Controlling execution of files transmitted to clients | |
| JP2003140950A (en) | Database synchronization method, apparatus, and program | |
| JPH10111821A (en) | Client server system | |
| JPH08153077A (en) | Cooperative work system | |
| JP3140365B2 (en) | Facsimile mail device | |
| JPH0962590A (en) | Multimedia data delivery method and apparatus | |
| JP3072240B2 (en) | Moving image data providing system | |
| CN116017076B (en) | Media data playing method and device, storage medium and electronic device | |
| CN111045997A (en) | Centralized storage data deleting method and device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090509 Year of fee payment: 12 |
|
| LAPS | Cancellation because of no payment of annual fees |