JPH0635661A

JPH0635661A - 画像と音声の同期再生方式

Info

Publication number: JPH0635661A
Application number: JP4210843A
Authority: JP
Inventors: Soji Fujitani; 聡司藤谷
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 1992-07-15
Filing date: 1992-07-15
Publication date: 1994-02-10

Abstract

(57)【要約】【目的】音声データと画像データとの同期ズレの少な
い画像と音声の同期再生方式を提供する。【構成】音声データおよび画像データは、いずれもホ
ストコンピュータ１を経由して制御装置３に送られ、か
つ、データ構造は例えば音声データと画像データとが交
互に構成される。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は画像と音声の同期再生方
式に係り、特にマルチメディアにおける画像と音声の同
期再生方式に関する。

【０００２】

【従来の技術】近年、マルチメディアを構成するコンピ
ュータの処理結果の提示手段（表示手段）として、音や
絵（動画を含む）を提示することが盛んになってきた
（例えば、ＣＤ−ＲＯＭＸＡ，ＣＤ−Ｉ，コンピュータ
ゲーム，シミュレーション，プレゼンテーション等）。
従来の一般的なマルチメディア用のデータ処理装置にお
いては、表示データはホストコンピュータで処理された
後、制御装置に送られ、この制御装置が画像出力装置を
制御して画像を出力している。また、音声データは直接
音声出力装置に送られ、音声を出力している。このよう
なデータ処理装置（マルチメディア）では、当然のこと
ながら「画像の表示」と「音声の再生」とは同期がとら
れていなければならない。

【０００３】

【発明が解決しようとする課題】しかしながら、ホスト
コンピュータが割り込み処理等の外的要因に基づく処理
を実行すると、「音声の再生」に比較し、「画像の表
示」が遅れることがある。即ち、「音声の再生」と「画
像の表示」との間にズレがあった。例えば、図８に示す
ように、ＣＤ５１のドライブ装置（図示せず）からは、
画像データと音声データとが出力される。「画像デー
タ」は、符号ｉの経路でホストコンピュータ５２に送ら
れ、ホストコンピュータ５２で処理された後、符号ｉｉ
の経路で画像出力装置５３から画像が出力される。一
方、「音声データ」は、符号ｉａの経路でホストコンピ
ュータ５２を介さずに直接音声出力装置５４に送られ
る。そのため、ホストコンピュータ５１において前記外
的要因があると、「音声の再生」と「画像の表示」との
同期がズレてしまうことになる。特に、ＣＤの場合に
は、音声データ・画像データの単位が１セクタ（２３４
０）バイトと長く、１セクタのズレは０．０１３秒にも
なってしまう。かかる不都合（音声と画像とのズレ）を
防止する手段として、従来は特殊で高価なハードウェア
によっていた。

【０００４】そこで、本発明の目的は、安価・簡易な手
段により音声と画像との同期再生が可能な画像と音声の
同期再生方式を提供することにある。

【０００５】

【課題を解決するための手段】請求項１記載の発明で
は、音声データおよび画像データを処理するホストコン
ピュータと、このホストコンピュータから送られる前記
データの送り先を決定する制御装置と、この制御装置か
ら送られるデータを音声として再生する音声再生装置
と、前記制御装置から送られるデータを画像として表示
する画像出力装置とを備えたデータ処理装置において、
前記音声データおよび画像データからなる一連のデータ
はホストコンピュータを介して制御装置に送られ、か
つ、前記一連のデータは、音声データと画像データとを
交互に配置した。請求項２記載の発明では、音声データ
および画像データを処理するホストコンピュータと、こ
のホストコンピュータから送られる前記データの送り先
を決定する制御装置と、この制御装置から送られるデー
タを音声として再生する音声再生装置と、前記制御装置
から送られるデータを画像として表示する画像出力装置
とを備えたデータ処理装置において、前記音声データお
よび画像データからなる一連のデータはホストコンピュ
ータを介して制御装置に送られ、かつ、前記一連のデー
タは、個々のデータのまとまり毎にヘッダを付した。

【０００６】請求項３記載の発明では、音声データおよ
び画像データを処理するホストコンピュータと、このホ
ストコンピュータから送られる前記データの送り先を決
定する複数の制御装置と、これら複数の制御装置から個
別に送られるデータを音声として再生する音声再生装置
と、前記制御装置から個別に送られるデータを画像とし
て表示する画像出力装置とを備えたデータ処理装置であ
って、前記音声データおよび画像データからなる一連の
データはホストコンピュータを介して制御装置に送ら
れ、かつ、前記一連のデータは、音声データと画像デー
タとを交互に配したデータ構造、または個々のデータの
まとまり毎にヘッダが付されたデータ構造からなり、こ
れらのデータ構造を有するデータを前記制御装置に転送
することにより、音声および画像を同時かつ独立に再生
表示するようにした。

【０００７】

【作用】請求項１記載の画像と音声の同期再生方式で
は、音声データおよび画像データは、いずれもホストコ
ンピュータを介して制御装置に送られ、同期表示再生の
ズレが非常に小さくなる。また、音声データと画像デー
タとは交互に送られ、コンピュータの割り込み処理が発
生すると、影響を受けるのは限られた音声データと画像
データの１組だけとなる。従って、前記割り込みが終了
した後は、再び音声データと画像データとが連続して処
理されるので、音声の再生と画像の表示とにはズレが発
生しない。請求項２記載の画像と音声の同期再生方式で
は、音声データおよび画像データは、いずれもホストコ
ンピュータを介して制御装置に送られ、同期表示再生の
ズレが非常に小さくなる。また、ヘッダを付したことに
より、このヘッダに基づいて音声データと画像データと
を組み合わせて処理ができ、ズレを無くすことができ
る。請求項３記載の画像と音声の同期再生方式では、音
声データおよび画像データは、いずれもホストコンピュ
ータを介して制御装置に送られ、同期表示再生のズレが
非常に小さくなる。また、同期ズレの少ない各制御装置
は独立に構成されているので、他の制御装置に影響を及
ぼさない。

【０００８】

【実施例】以下、本発明の画像と音声の同期再生方式に
おける実施例を図１ないし図７を参照して詳細に説明す
る。第１実施例図１に本発明を適用するデータ処理装置のブロック図を
示す。図１に示すように、データ処理装置は、次に説明
するデータが格納されているホストコンピュータ１と、
データを一時的に格納するバッファ２と、各データの配
分を指示する制御装置３と、この制御装置３からのデー
タを音声として再生する音声出力装置４と、前記制御装
置３からのデータを画像として表示する画像出力装置５
とを備えている。

【０００９】図２に第１実施例におけるコンピュータ１
に格納されているデータのデータ構造を示す。図２に示
すように、本実施例のデータ構造は、一定の大きさの音
声データ（音）と画像データ（絵）とが交互に配置され
ている。次に、このように構成された第１実施例の動作
について説明する。ホストコンピュータ１は、前記デー
タ構造のデータを任意のタイミングで制御装置３に送
る。制御装置３は、図３に示すフローチャートに従って
データを一定の大きさ（Length) 毎に振り分ける。即
ち、制御装置３のカウンタ（ＤＡＴＡ）を０に設定し
（ステップ１）、ホストコンピュータ１からデータを受
信し（ステップ２）、前記カウンタに１を加算する（ス
テップ３）。そして、データが一定の長さ（Length) よ
り小さければ（ステップ４）、ポートにデータを送る
（ステップ５）。このステップ１〜ステップ４を繰り返
すと、やがてデータが一定の大きさより大きくなり（ス
テップ４）、ポートには一定の大きさのデータが蓄えら
れる（ステップ６）。一定の大きさのデータがポートを
切り替える（ステップ７）。このようにして音声データ
および画像データを一定の大きさにして制御装置３から
出力する。

【００１０】従来は、前記振り分け処理をホストコンピ
ュータで行っていたため、ホストコンピュータが割り込
みを受けた場合に前記振り分け作業が遅れ、音声出力装
置の方が画像出力装置に比較し進んでしまい、ズレを引
き起こしていた。しかし、本実施例によれば、割り込み
を受けた場合でも、画像データと音声データとの両方を
ホストコンピュータを介して制御装置に送っているの
で、データのズレが発生しない。また、一例として、図
４に示すように、元のデータに対して画像データ２
（絵）の位置で割り込みがあった場合には、制御装置の
ポートに出力される画像データは、画像データ（２ａ）
と画像データ（２ｂ）と間で一時中断が生じる。しか
し、次の音声データ３と画像データ３とは、連続して処
理されるので、音声データと画像データとの間にはズレ
が生じることがない。

【００１１】また、ホストコンピュータが割り込みを受
けたためにデータの転送ができない場合には、制御装置
３のバッファ２がある程度のデータをバッファリングし
ておき、ある時間内なら再生表示が途切れないようにし
ている。従来は、バッファは、音声データおよび画像デ
ータを格納する場合に、音声データおよび画像データの
単位で格納していた。しかし、音声データおよび画像デ
ータのデータ量が２ＫＢｙｔｅ程度であったため、その
数倍のバッファ容量を必要としていた。これに対して本
実施例では、この格納単位を、音声データと画像データ
とを一定の大きさに区切る際にバイト単位くらいの大き
さにすることにより、数バイト分のバッファ容量で済ま
すことができ、装置のコストを下げることが可能とな
る。このように構成すると、制御装置３をフリップフロ
ップ程度の簡単な回路で構成することができ、更に装置
のコストを下げることが可能となる。更に、格納単位を
小さくすることにより、音声データと画像データとの同
期ズレも小さくなる。即ち、ＣＤ−ＲＯＭＸＡ，ＣＤ─
Ｉにおいては、バイト単位で格納すると、１つのズレ
は、６．３×１０^-6秒以下にすることができる。

【００１２】第２実施例本実施例を適用するデータ処理装置は、前記図１と同一
である。図５は、第２実施例におけるコンピュータ１に
格納されているデータのデータ構造を表したものであ
る。図５に示すように、それぞれの音声データ（音）と
画像データ（絵）とには、ヘッダが付されている。次
に、このように構成された第２実施例の動作について説
明する。ホストコンピュータ１は、前記データ構造のデ
ータを任意のタイミングで制御装置３に送る。制御装置
３は、図６に示すアルゴリズムに従ってデータの振り分
けを行う。

【００１３】即ち、制御装置３はヘッダを読み取り（ス
テップ１１）、読み取ったヘッダに対応したポートを設
定し（ステップ１２）、カウンタ（ＤＡＴＡ）を０に設
定し（ステップ１３）、データを読み取る（ステップ１
４）。そして、設定されたポートへデータを書き込み
（ステップ１５）、前記カウンタに１を加算する（ステ
ップ１６）。そして、データが一定の長さ（Length) よ
り小さければ（ステップ１７）、前記ステップ１４〜１
６を繰り返す。やがて、前記ステップ１７においてデー
タが一定の長さより大きければ、前記ステップ１１に戻
る。このようにして設定されたポートに一定の大きさの
データを書き込み、次の処理装置に送る。このようにす
ると、ヘッダに応じてデータを区分しているので、必ず
しも音声データと画像データとが交互に配置されている
必要がなく、データを構成する場合に容易に構成可能と
なる。

【００１４】第３実施例本実施例を適用するデータ処理装置を図７に示す。図７
に示すように、ホストコンピュータ１は、ｎ個のバッフ
ァ２ａ〜２ｎを介してｎ個の制御装置３ａ〜３ｎにそれ
ぞれ接続され、前記ｎ個の制御装置３ａ〜３ｎは全て音
声出力装置４と画像出力装置５とに接続されている。ま
た、本実施例に適用するデータ構造は、前記図２に示し
たデータ構造と、前記図５に示したデータ構造との両方
である。次に、このように構成された第３実施例の動作
について説明する。従来は、複数の音声データと画像デ
ータの同期表示再生を行う場合には、それぞれの音声デ
ータと画像データとを独立して管理し、タイミングを計
って各再生表示装置（音声出力装置，画像出力装置）に
送る必要があった。そのため、ホストコンピュータが割
り込みによる処理遅れを生じた場合には、１つの同期表
示再生だけでなく複数の同期表示再生に影響を与え、同
期ズレが複合して発生していた。しかし、本実施例で
は、個々の制御装置における同期表示再生における同期
ズレは、前記第１実施例および第２実施例で説明した如
く非常に小さい。そして、各制御装置がデータの振り分
けを行っているので、他の同期表示再生に影響を与える
ことがない。

【００１５】

【発明の効果】以上説明したように本発明によれば、音
声データおよび画像データは、ホストコンピュータを介
して制御装置に送られているので、同期ズレを少なくす
ることができる。また、音声データと画像データとを交
互にしたデータ構造をとっているので、たとえコンピュ
ータの割り込み等が発生しても、影響を受けることが極
めて少ない。また、同期ズレの少ない各制御装置が独立
して構成されているので、他の制御装置に影響を及ぼす
ことがない。

【図面の簡単な説明】

【図１】本発明の第１および第２実施例に適用するデー
タ処理装置のブロック図である。

【図２】第１実施例のデータ構造を示す図である。

【図３】第１実施例における制御装置のデータ処理のフ
ローチャートである。

【図４】第１実施例におけてコンピュータの割り込みが
発生した場合に、音声データと画像データとの間にズレ
が発生しないことを説明する概念図である。

【図５】第２実施例のデータ構造を示す図である。

【図６】第２実施例における制御装置のデータ処理のフ
ローチャートである。

【図７】第３実施例のデータ処理装置のブロック図であ
る。

【図８】従来の同期ズレを説明する概念図である。

【符号の説明】

１ホストコンピュータ２バッファ３制御装置４音声出力装置５画像出力装置

Claims

【特許請求の範囲】

【請求項１】音声データおよび画像データを処理する
ホストコンピュータと、このホストコンピュータから送
られる前記データの送り先を決定する制御装置と、この
制御装置から送られるデータを音声として再生する音声
再生装置と、前記制御装置から送られるデータを画像と
して表示する画像出力装置とを備えたデータ処理装置で
あって、前記音声データおよび画像データからなる一連のデータ
はホストコンピュータを介して制御装置に送られ、か
つ、前記一連のデータは、音声データと画像データとを
交互に配したことを特徴とする画像と音声の同期再生方
式。
【請求項２】音声データおよび画像データを処理する
ホストコンピュータと、このホストコンピュータから送
られる前記データの送り先を決定する制御装置と、この
制御装置から送られるデータを音声として再生する音声
再生装置と、前記制御装置から送られるデータを画像と
して表示する画像出力装置とを備えたデータ処理装置で
あって、前記音声データおよび画像データからなる一連のデータ
はホストコンピュータを介して制御装置に送られ、か
つ、前記一連のデータは、個々のデータのまとまり毎に
ヘッダが付されたことを特徴とする画像と音声の同期再
生方式。
【請求項３】音声データおよび画像データを処理する
ホストコンピュータと、このホストコンピュータから送
られる前記データの送り先を決定する複数の制御装置
と、これら複数の制御装置から個別に送られるデータを
音声として再生する音声再生装置と、前記制御装置から
個別に送られるデータを画像として表示する画像出力装
置とを備えたデータ処理装置であって、前記音声データおよび画像データからなる一連のデータ
はホストコンピュータを介して制御装置に送られ、か
つ、前記一連のデータは、音声データと画像データとを
交互に配したデータ構造、または個々のデータのまとま
り毎にヘッダが付されたデータ構造からなり、これらの
データ構造を有するデータを前記制御装置に転送するこ
とにより、音声および画像を同時かつ独立に再生表示す
るようにしたことを特徴とする画像と音声の同期再生方
式。