JPH08331526A - ストリーム多重化装置、ストリーム多重化方法及び記録媒体 - Google Patents
ストリーム多重化装置、ストリーム多重化方法及び記録媒体Info
- Publication number
- JPH08331526A JPH08331526A JP13417695A JP13417695A JPH08331526A JP H08331526 A JPH08331526 A JP H08331526A JP 13417695 A JP13417695 A JP 13417695A JP 13417695 A JP13417695 A JP 13417695A JP H08331526 A JPH08331526 A JP H08331526A
- Authority
- JP
- Japan
- Prior art keywords
- sub
- stream
- picture
- unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Television Signal Processing For Recording (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Signal Processing Not Specific To The Method Of Recording And Reproducing (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
副映像の表示不可期間を大幅短縮する。 【構成】 入力した副映像ストリームから、この副映像
ストリーム上の副映像データユニットの表示期間内に該
副映像データユニットとほぼ同一内容のデータユニット
を追加配置してなる副映像変形ストリームを作成するス
トリーム変形手段1と、ビデオストリーム、オーディオ
ストリーム及び副映像変形ストリームをそれぞれ所定の
単位でパケット化し且つ多重化してシステムストリーム
を生成するシステム化手段2とを有する。
Description
映像等の各種ストリームを多重化して1つのシステムス
トリームとして生成するストリーム多重化装置及びスト
リーム多重化方法に関する。また、本発明はシステムス
トリームが記録されるディスク等の記録媒体に関する。
する方式としてMPEG2システムレイヤが知られてい
る。これは、ビデオ、オーディオ、副映像等の各ストリ
ームをそれぞれ適当な長さに分割してパケット化し、こ
のパケット単位で各ストリームを多重化して1本のデー
タストリーム(システムストリーム)とする方式であ
る。 このMPEG2システムレイヤのストリーム多重
化方式について図12を用いてさらに説明する。
ストリームであり、そのビットレートは1GOP毎に可
変である。(b)はオーディオストリームであり、ビッ
トレートは固定である。(c)は副映像ストリームであ
る。副映像とは、映画の字幕やカラオケの歌詞といった
ビデオデータに対する補助的なデータである。副映像ス
トリームは1画面分の画素データ及び表示期間情報を含
む副映像データユニットc1を副映像1画面毎に配置し
てなる。図の例において、副映像データユニットc1の
表示期間はAであり、ビデオストリーム(a)における
3つのGOP(GOP1〜3)の再現期間中に表示され
るものとする。
し、多重化して得たシステムストリームは(d)のよう
になる。ここで、前述したように副映像データユニット
c1はビデオストリーム(a)における3つのGOP
(GOP1〜3)の再現期間中に表示されることから、
システムストリーム上において副映像パケットSPは、
前記3つのGOPのうちの先頭のGOP1以前に配置さ
れる。
ムは、図13に示すように、システムデコーダ51にて
パケット毎に、その中のヘッダに示されるデータ種別情
報に基づいてビデオ、オーディオ、副映像毎に分離さ
れ、それぞれ対応する入力バッファ52、53、54に
入力され、各バッファより元の個別のストリームとなっ
て出力される。
先頭から再生されるとは限らず、例えば伝送においては
チャンネルの切り換え時、ディスク等の記録再生装置で
は特殊再生から通常再生への復帰時など、ストリーム途
中からの再生が要求される場合がある。このような場
合、例えば、図12(d)のPaの位置から再生を開始
しようとすると、副映像パケットはPaの位置よりも前
に配置されているため、本来表示されるべき副映像を表
示させることができない。
含む複数のストリームをパケット化し、パケット単位で
多重化して得たストリームにおいて、副映像パケットを
配置した位置よりも後の位置から再生を開始した場合、
副映像ユニットの表示期間にその副映像を表示させるこ
とができないと言う問題があった。
もので、ストリーム途中から再生が開始された場合の副
映像の表示不可期間を大幅短縮することのできるストリ
ーム多重化装置、ストリーム多重化方法及び記録媒体の
提供を目的とする。
化装置は上記した目的を達成するために、表示期間が設
定され副映像画面を構成する画素データを含む第1の副
映像ユニットを時間軸に沿って配置した副映像ストリー
ムから、この副映像ストリーム上の第1の副映像ユニッ
トの表示期間内に、該第1の副映像ユニットとほぼ同一
内容の第2の副映像ユニットを少なくとも1つ追加配置
してなる副映像変形ストリームを作成するストリーム変
形手段と、ストリーム変形手段によって作成された副映
像変形ストリーム及びこれと同期して再現される他のデ
ータストリームを入力し、これら各ストリームをそれぞ
れ所定の単位でパケット化して多重化する多重化手段と
を具備してなる。
像ユニットの表示期間をほぼ均等な複数の表示期間に分
割するように、或いは、単位時間当たりの副映像変形ス
トリームのデータ量と他のデータストリームであるビデ
オストリームのデータ量との和がより平均化されるよう
に、第2の副映像ユニットを副映像ストリーム上に追加
配置するように構成してもよい。
記した目的を達成するために、表示期間が設定され副映
像画面を構成する画素データ及び表示時刻に応じて副映
像画面を表示制御するための制御データを有する第1の
副映像ユニットを時間軸に沿って配置した副映像ストリ
ームを入力して、画素データと制御データとに分離する
分離手段と、分離手段によって分離されたユニット単位
の制御データを分割する制御データ分割手段と、制御デ
ータ分割手段によって分割された各制御データをそれぞ
れ分離手段によって分離された画素データと連結して複
数の第2の副映像ユニットとなし、該複数の第2の副映
像ユニットからなり且つその中の先頭を除く少なくとも
1つの第2の副映像ユニットを第1の副映像ユニットの
表示期間内に配置してなる副映像変形ストリームを作成
するストリーム変形手段と、ストリーム変形手段によっ
て作成された副映像変形ストリーム及びこれと同期して
再現される他のデータストリームを入力し、これら各ス
トリームをそれぞれ所定の単位でパケット化して多重化
する多重化手段とを具備してなる。
ト単位の制御データをほぼ均等なデータ量毎に分割する
ように、或いは、ユニット単位の制御データをほぼ均等
な表示制御期間毎に分割するように構成してもよい。
目的を達成するために、表示期間が設定され副映像画面
を構成する画素データを含む第1の副映像ユニットを時
間軸に沿って配置した副映像ストリームから、この副映
像ストリーム上の第1の副映像ユニットの表示期間内
に、該第1の副映像ユニットとほぼ同一内容の第2の副
映像ユニットを少なくとも1つ追加配置してなる副映像
変形ストリームを作成し、この副映像変形ストリーム及
びこれと同期して再現される他のデータストリームをそ
れぞれ所定の単位でパケット化し、多重化することを特
徴とする。
記した目的を達成するために、表示期間が設定され副映
像画面を構成する画素データ及び表示時刻に応じて副映
像画面を表示制御するための制御データを有する第1の
副映像ユニットを時間軸に沿って配置した副映像ストリ
ームを入力して画素データと制御データとに分離し、分
離したユニット単位の制御データを分割し、分割した各
制御データをそれぞれ画素データと連結して複数の第2
の副映像ユニットとなし、該複数の第2の副映像ユニッ
トからなり且つその中の先頭を除く少なくとも1つの第
2の副映像ユニットを前記第1の副映像ユニットの表示
期間内に配置してなる副映像変形ストリームを作成し、
作成した副映像変形ストリーム及びこれと同期して再現
される他のデータストリームをそれぞれ所定の単位でパ
ケット化して多重化することを特徴とする。
副映像画面を構成する画素データを含む副映像ユニット
を時間軸に沿って配置した副映像ストリームと、これと
同期して再現される他のデータストリームが、それぞれ
所定の単位でパケット化され、該パケット単位で多重化
して多重化ストリームとして記録されてなる記録媒体に
おいて、多重化ストリーム上にパケット化されて配置さ
れた少なくも一部の連続する複数の副映像ユニットのう
ち、先行する第1の副映像ユニットの表示期間内に他の
第2の副映像ユニットのパケットが配置され、各副映像
ユニットは同一の画素データを有し且つ表示期間が実質
的に連続していることを特徴とする。
され副映像画面を構成する画素データ及び表示時刻に応
じて副映像画面を表示制御するための制御データを有す
る副映像ユニットを時間軸に沿って配置した副映像スト
リームと、これと同期して再現される他のデータストリ
ームが、それぞれ所定の単位でパケット化され、該パケ
ット単位で多重化して多重化ストリームとして記録され
てなる記録媒体において、多重化ストリーム上にパケッ
ト化されて配置された少なくも一部の連続する複数の副
映像ユニットのうち、先行する第1の副映像ユニットの
表示期間内に他の第2の副映像ユニットのパケットが配
置され、各副映像ユニットは同一の画素データを有し且
つ表示制御データの有効期間が実質的に連続しているこ
とを特徴とする。
像ユニット(第1の副映像ユニット)の表示期間内に、
該副映像ユニットとほぼ同一内容、例えば互いに同一の
画素データを有し且つ表示期間の実質的に連続した第2
の副映像ユニットを少なくとも1つ追加配置してなる副
映像変形ストリームから生成された副映像パケット群を
多重化ストリーム上に配置することで、ストリーム途中
から再生が開始された場合でも、その再生位置より後に
配置された副映像パケットのデータによって副映像の表
示が可能になる。
て副映像画面を表示制御するための1ユニット分の制御
データを複数の副映像ユニットに分割して、各副映像ユ
ニットから生成された副映像パケット群を多重化ストリ
ーム上に配置することで、ストリーム途中から再生が開
始された場合でも、その再生位置より後に配置された副
映像パケットによって副映像の表示が可能になると共
に、デコーダに要求される入力バッファサイズの縮小化
を実現できる。
する。
化装置の構成を示す図である。
映像ストリームから、この副映像ストリーム上の副映像
データユニットの表示期間内に該副映像データユニット
とほぼ同一内容のデータユニットを追加配置してなる副
映像変形ストリームを作成するストリーム変形手段1
と、ビデオストリーム、オーディオストリーム及び副映
像変形ストリームをそれぞれ所定の単位でパケット化し
且つ多重化してシステムストリームを生成するシステム
化手段2と、システムストリームをディスク等の記録媒
体3に記録する記録装置4とから構成される。
際の各ストリームを示す。
ストリーム、(b)は副映像ストリーム、(c)は副映
像変形ストリーム、(d)はシステムストリームであ
る。ここで副映像ストリーム(b)は、副映像の1画面
を構成する画素データ及び表示期間情報等を含む副映像
データユニットb1を副映像1画面毎に配置してなる。
図の例において、副映像データユニットb1の表示期間
はAであり、ビデオストリームにおける3つのGOP
(GOP1〜3)の再現期間中に表示されるものとす
る。
のストリーム多重化方式を詳しく説明する。
ムを入力すると、これをバッファ5に蓄える共にシステ
ム化手段2に送る。次にストリーム変形手段1は読み出
し制御手段6にて、バッファ5に蓄えられた副映像デー
タユニットb1から表示期間情報を読み込み、その表示
期間Aがある基準値を越えているかどうかを判定する。
表示期間Aが基準値を越える場合、読み出し制御手段6
は、その表示期間Aを分割する複数の表示期間A1、A
2、A3を決定する。例えば、表示期間Aをほぼ均等に
複数の表示期間A1、A2、A3に分割する。
ットb1を2つ目の表示期間A2の副映像データユニッ
トc2として読み出し、その中の表示期間情報に対して
必要な変更(表示期間情報が表示開始時刻と表示終了時
刻からなる場合に表示開始時刻を変更する。)を加えて
システム化手段2に送る。続いて、バッファ5から再
度、副映像データユニットを3つ目の表示期間A3の副
映像データユニットc3として読み出し、表示期間情報
に変更を加えてシステム化手段2に送る。このようにし
て、図2(c)に示すように、副映像データユニットb
1を先頭とする複数の副映像データユニットc1、c
2、c3からなる副映像変形ストリームが得られる。
オストリーム、オーディオストリーム及び副映像変形ス
トリームはそれぞれ対応するバッファ7a、7b、7c
に蓄えられる。この後、各バッファ7a、7b、7cに
蓄えられた各ストリームは、制御手段8の制御の下それ
ぞれ所定の単位で読み出され、パケット化される。各パ
ケットデータは、制御手段8によって決定された各パケ
ットの配置に従ってマルチプレクサ9にて多重化された
後、図2(d)に示すようなシステムストリームとなっ
て出力され、記録装置4によってディスク3に記録され
る。
システムストリームにおいて、副映像パケットであるS
P1〜SP3は、ビデオストリームにおける3つのGO
P(GOP1〜3)の各期間にそれぞれ配置されてい
る。従って、例えば図2(d)に示すシステムストリー
ム上のPa或いはPbの位置から再生が開始された場合
でも、副映像パケットSP2またはSP3のデータによ
って副映像を表示させることができる。
式によれば、副映像ストリーム上の副映像データユニッ
トの表示期間内に該副映像データユニットとほぼ同一の
データユニットを追加配置することによって、システム
ストリームの途中から再生を開始した場合の副映像の表
示不可期間をほぼ一定の短い時間に食い止めることがで
きる。
パケットは必ずしも全てのGOPの期間に配置する必要
はなく、副映像データユニットの表示期間A内のいずれ
かのGOPの期間に配置したり、或いは複数のGOPの
各期間に分散して複数配置してもよい。また、表示期間
Aの長さに応じた数で表示期間を分割するようにしても
よい。
化装置の構成を示す図である。
像ストリームを入力し、入力した個々の副映像ストリー
ムから、この副映像ストリーム上の副映像データユニッ
トの表示期間内に該副映像データユニットとほぼ同一の
データユニットを追加配置してなる副映像変形ストリー
ムをそれぞれ作成するストリーム変形手段11と、ビデ
オストリーム、オーディオストリーム及び複数の副映像
変形ストリームをそれぞれ所定の単位でパケット化し且
つ多重化してシステムストリームを生成するシステム化
手段12と、システムストリームをディスク等の記録媒
体13に記録する記録装置14とから構成される。
際の各ストリームを示す。
ストリームであり、そのビットレートは1GOP毎に可
変である。(b)及び(c)はマルチリンガルのための
第1の副映像ストリーム及び第2の副映像ストリーム、
(d)及び(e)は第1の副映像変形ストリーム及び第
2の副映像変形ストリーム、(f)はシステムストリー
ムである。
ストリームはそれぞれ、副映像の1画面を構成する画素
データ及び表示期間情報等を含む副映像データユニット
b1、b2を副映像1画面毎に配置してなる。またその
データ量は画面毎に可変である。図の例において、各副
映像データユニットb1、b2の表示期間はそれぞれA
で同一であり、ビデオストリームにおける3つのGOP
(GOP1〜3)の再現期間中に表示されるものとす
る。
のストリーム多重化方式を説明する。 ストリーム変形
手段11は、第1、第2の副映像ストリームを入力する
と、これらを各バッファ15、16に蓄える共にシステ
ム化手段12に送る。次にストリーム変形手段11は読
み出し制御手段17にて、各バッファ15、16に蓄え
られた副映像データユニットb1、b2から表示期間情
報を読み込み、その表示期間Aがある基準値を越えてい
るかどうかを判定する。表示期間Aが基準値を越える場
合、読み出し制御手段17は、各副映像ストリームの単
位時間当たりのデータ量及びビデオストリームのビット
レートの各情報を各バッファ15、16、18aより読
み込み、これらの情報を基に、単位時間当たりの各副映
像データユニットb1、b2のデータ量とビデオストリ
ームのデータ量との和がより平均化されるように、各副
映像変形ストリームにおける各副映像データユニットc
1、c2、c3及びc4、c5、c6の表示期間A1、
A2、A3及びA4、A5、A6を決定する。
データユニットを2つ目の表示期間A2、A5の副映像
データユニットc2、c5としてそれぞれ読み出し、そ
の中の表示期間情報に必要な変更(表示期間情報が表示
開始時刻と表示終了時刻からなる場合に表示開始時刻を
変更する。)を加えてシステム化手段12に送る。続い
て各バッファ15、16から再度、副映像データユニッ
トを3つ目の表示期間A3、A6の副映像データユニッ
トc3、c6としてそれぞれ読み出し、表示期間情報に
変更を加えてシステム化手段12に送る。このようにし
て、図4(d)及び(e)に示すような各副映像変形ス
トリームが得られる。
デオストリーム、オーディオストリーム及び各副映像変
形ストリームはそれぞれ対応するバッファ18a、18
b、18c、18dに蓄えられる。この後、各バッファ
18a〜18dに蓄えられた各ストリームは、制御手段
19の制御の下それぞれ所定の単位で読み出され、パケ
ット化される。各パケットデータは、制御手段19によ
って決定された各パケットの配置に従ってマルチプレク
サ20にて多重化された後、図4(f)に示すようなシ
ステムストリームとなって出力され、記録装置14によ
ってディスク13に記録される。
システムストリームにおいて、副映像パケットであるS
P1〜SP6は、ビデオストリームにおける先頭のGO
P1の期間に2つ、ビットレートの比較的低い次のGO
P2の期間には3つ、ビットレートの比較的高い次のG
OP3の期間には1つ配置されたものとなる。従って、
例えば図4(d)のシステムストリーム上のPa或いは
Pbの位置から再生が開始された場合でも、副映像パケ
ットSP2,SP5、SP3、SP6のデータによって
副映像を表示させることができる。
化装置の構成を示す図、図6は本実施例によるストリー
ム多重化の際の各ストリームを示す図である。
である。この副映像ストリームは、副映像の1画面を構
成する画素データと、時間経過とともに副映像の表示色
や表示位置を変化させるための表示制御データ(0〜
2)とを含む副映像データユニットa1を副映像1画面
毎に配置してなる。個々の表示制御データはそれぞれ、
表示制御を行う時刻等、個々の表示期間に関する情報を
有している。
のストリーム多重化方式を説明する。 ストリーム変形
手段21は、図6(a)に示す副映像ストリームを入力
すると、その中の副映像データユニットa1を画素デー
タと表示制御データとに分離して各バッファ25、26
に蓄える。次にストリーム変形手段21は読み出し制御
手段27にて、バッファ26に蓄えられた表示制御デー
タの中から表示期間及び表示制御データ量の各情報を読
み込む。そして図6(b)及び(c)に示すように、上
記各情報を基に、1ユニット分の表示制御データを、そ
の表示期間A内においてほぼ均等なデータ量毎に区切る
ようにバッファ26から表示制御データc1,c2、c
3を分割して読み出すと共に、これに対応して他方のバ
ッファ25から画素データb1、b2、b3を繰り返し
読み出す。
素データ及び表示制御データは結合手段28にて結合さ
れ、この結果、図6(d)に示すように、複数の副映像
データユニットd1、d2、d3からなる副映像変形ス
トリームが得られる。ここで、A1、A2、A3は各副
映像データユニットd1、d2、d3の表示期間であ
る。 一方、システム化手段22は、入力したビデオス
トリーム、オーディオストリーム及び副映像変形ストリ
ームをそれぞれパケット化し、多重化して図6(e)に
示すようなシステムストリームを生成する。このシステ
ムストリームは記録装置24に送られ、ディスク23に
記録される。
同様、システムストリームの途中から再生を開始した場
合の副映像の表示不可期間をほぼ一定の短い時間に食い
止めることができる。
表示制御データを複数のユニットに分割することによっ
て、デコーダに要求される入力バッファサイズの縮小化
を実現できる。
分の表示制御データをそのデータ量がほぼ均一になるよ
うに分割したが、本実施例においては図7に示すよう
に、分割後の副映像データユニットの表示期間がほぼ均
一になるように表示制御データを分割する。
御データが有する表示期間に関する情報を基に、1ユニ
ット分の表示制御データを、分割後の副映像データユニ
ットの表示期間A1、A2、A3がほぼ均一になるよう
に、バッファから表示制御データc1、c2、c3を分
割して読み出すと共に、これに対応して他方のバッファ
から画素データb1、b2、b3を繰り返し読み出す。
そして、これら表示制御データ及び画素データを結合
(ユニット化)することにより、図7(d)に示すよう
な複数の副映像データユニットd1、d2、d3からな
る副映像変形ストリームを得る。この後、ビデオストリ
ーム、オーディオストリーム及び副映像変形ストリーム
をそれぞれパケット化し、多重化して図7(e)に示す
ようなシステムストリームを生成する。
表示例を示している。ここで、副映像は時間経過ととも
に表示色がP1地点からP2地点、さらに行が移ってP
3地点からP4地点へと変化して行くものとする。
の行を制御対象とする表示制御データ毎に1ユニット分
の表示制御データを分割する。
うに、個々の表示制御データが有する表示制御対象位置
に関する情報に基づき、1ユニット分の表示制御データ
を個々の行を制御対象とする表示制御データ毎に区切る
ようにバッファから表示制御データc1、c2を分割し
て読み出すと共に、これに対応して他方のバッファから
画素データb1、b2を繰り返し読み出す。そして、こ
れら表示制御データ及び画素データを結合(ユニット
化)することにより、図9(d)に示すような複数の副
映像データユニットd1、d2からなる副映像変形スト
リームを得る。この後、ビデオストリーム、オーディオ
ストリーム及び副映像変形ストリームをそれぞれパケッ
ト化し、多重化して図9(e)に示すようなシステムス
トリームを生成する。
録する装置に本発明を適用した実施例について説明した
が、本発明は、図10に示すように、磁気テープ101
にシステムストリームを記録する装置、その他の磁気デ
ィスク、光磁気ディスク、半導体メモリ等の様々な記録
装置に適用することができる。また、図11に示すよう
に、システムストリームの伝送装置102にも適用でき
る。
映像ストリーム上の副映像ユニット(第1の副映像ユニ
ット)の表示期間内に、該副映像ユニットとほぼ同一内
容、例えば互いに同一の画素データを有し且つ表示期間
の実質的に連続した第2の副映像ユニットを少なくとも
1つ追加配置してなる副映像変形ストリームから生成さ
れた副映像パケット群を多重化ストリーム上に配置した
ので、ストリーム途中から再生が開始された場合でも、
その再生位置より後に配置された副映像パケットによっ
て副映像の表示が可能になる。
副映像画面を表示制御するための1ユニット分の制御デ
ータを複数の副映像ユニットに分割して、各副映像ユニ
ットから生成された副映像パケット群を多重化ストリー
ム上に配置したので、ストリーム途中から再生が開始さ
れた場合でも、その再生位置より後に配置された副映像
パケットによって副映像の表示が可能になると共に、デ
コーダに要求される入力バッファサイズの縮小化を実現
できる。
装置の構成を示す図
ストリームを示す図
装置の構成を示す図
ストリームを示す図
装置の構成を示す図
ストリームを示す図
の際の各ストリームを示す図
す図
の際の各ストリームを示す図
図
図
るための図
図
Claims (18)
- 【請求項1】 表示期間が設定され副映像画面を構成す
る画素データを含む第1の副映像ユニットを時間軸に沿
って配置した副映像ストリームから、この副映像ストリ
ーム上の前記第1の副映像ユニットの表示期間内に、該
第1の副映像ユニットとほぼ同一内容の第2の副映像ユ
ニットを少なくとも1つ追加配置してなる副映像変形ス
トリームを作成するストリーム変形手段と、 前記ストリーム変形手段によって作成された副映像変形
ストリーム及びこれと同期して再現される他のデータス
トリームを入力し、これら各ストリームをそれぞれ所定
の単位でパケット化して多重化する多重化手段とを具備
することを特徴とするストリーム多重化装置。 - 【請求項2】 請求項1記載のストリーム多重化装置に
おいて、 前記ストリーム変形手段は、前記第1の副映像ユニット
の表示期間をほぼ均等な複数の表示期間に分割するよう
に前記第2の副映像ユニットを前記副映像ストリーム上
に追加配置することを特徴とするストリーム多重化装
置。 - 【請求項3】 請求項1記載のストリーム多重化装置に
おいて、 前記ストリーム変形手段は、単位時間当たりの、前記副
映像変形ストリームのデータ量と前記他のデータストリ
ームであるビデオストリームのデータ量との和がより平
均化されるように、前記第2の副映像ユニットを前記副
映像ストリーム上に追加配置することを特徴とするスト
リーム多重化装置。 - 【請求項4】 請求項1乃至3記載のいずれかのストリ
ーム多重化装置において、 前記ストリーム変形手段は、前記第1の副映像ユニット
の表示期間がある値を越える場合に前記副映像変形スト
リームを作成することを特徴とするストリーム多重化装
置。 - 【請求項5】 表示期間が設定され副映像画面を構成す
る画素データ及び表示時刻に応じて副映像画面を表示制
御するための制御データを有する第1の副映像ユニット
を時間軸に沿って配置した副映像ストリームを入力し
て、前記画素データと前記制御データとに分離する分離
手段と、 前記分離手段によって分離されたユニット単位の制御デ
ータを分割する制御データ分割手段と、 前記制御データ分割手段によって分割された各制御デー
タをそれぞれ前記分離手段によって分離された画素デー
タと連結して複数の第2の副映像ユニットとなし、該複
数の第2の副映像ユニットからなり且つその中の先頭を
除く少なくとも1つの第2の副映像ユニットを前記第1
の副映像ユニットの表示期間内に配置してなる副映像変
形ストリームを作成するストリーム変形手段と、 前記ストリーム変形手段によって作成された副映像変形
ストリーム及びこれと同期して再現される他のデータス
トリームを入力し、これら各ストリームをそれぞれ所定
の単位でパケット化して多重化する多重化手段とを具備
することを特徴とするストリーム多重化装置。 - 【請求項6】 請求項5記載のストリーム多重化装置に
おいて、 前記制御データ分割手段は、ユニット単位の制御データ
をほぼ均等なデータ量毎に分割することを特徴とするス
トリーム多重化装置。 - 【請求項7】 請求項5記載のストリーム多重化装置に
おいて、 前記制御データ分割手段は、ユニット単位の制御データ
をほぼ均等な表示制御期間毎に分割することを特徴とす
るストリーム多重化装置。 - 【請求項8】 表示期間が設定され副映像画面を構成す
る画素データを含む第1の副映像ユニットを時間軸に沿
って配置した副映像ストリームから、この副映像ストリ
ーム上の前記第1の副映像ユニットの表示期間内に、該
第1の副映像ユニットとほぼ同一内容の第2の副映像ユ
ニットを少なくとも1つ追加配置してなる副映像変形ス
トリームを作成し、この副映像変形ストリーム及びこれ
と同期して再現される他のデータストリームをそれぞれ
所定の単位でパケット化し、多重化することを特徴とす
るストリーム多重化方法。 - 【請求項9】 請求項8記載のストリーム多重化方法に
おいて、 前記第1の副映像ユニットの表示期間をほぼ均等な複数
の表示期間に分割するように、前記第2の副映像ユニッ
トを副映像ストリーム上に追加配置することを特徴とす
るストリーム多重化方法。 - 【請求項10】 請求項8記載のストリーム多重化方法
において、 単位時間当たりの前記副映像変形ストリームのデータ量
と前記他のデータストリームであるビデオストリームの
データ量との和がより平均化されるように、前記第2の
副映像ユニットを副映像ストリーム上に追加配置するこ
とを特徴とするストリーム多重化方法。 - 【請求項11】 請求項8乃至10記載のいずれかのス
トリーム多重化方法において、 前記第1の副映像ユニットの表示期間がある値を越える
場合に前記副映像変形ストリームを作成することを特徴
とするストリーム多重化方法。 - 【請求項12】 表示期間が設定され副映像画面を構成
する画素データ及び表示時刻に応じて副映像画面を表示
制御するための制御データを有する第1の副映像ユニッ
トを時間軸に沿って配置した副映像ストリームを入力し
て前記画素データと前記制御データとに分離し、分離し
たユニット単位の制御データを分割し、分割した各制御
データをそれぞれ画素データと連結して複数の第2の副
映像ユニットとなし、該複数の第2の副映像ユニットか
らなり且つその中の先頭を除く少なくとも1つの第2の
副映像ユニットを前記第1の副映像ユニットの表示期間
内に配置してなる副映像変形ストリームを作成し、作成
した副映像変形ストリーム及びこれと同期して再現され
る他のデータストリームをそれぞれ所定の単位でパケッ
ト化して多重化することを特徴とするストリーム多重化
方法。 - 【請求項13】 請求項12記載のストリーム多重化方
法において、 ユニット単位の制御データをほぼ均等なデータ量毎に分
割することを特徴とするストリーム多重化方法。 - 【請求項14】 請求項12記載のストリーム多重化方
法において、 ユニット単位の制御データをほぼ均等な表示制御期間毎
に分割することを特徴とするストリーム多重化方法。 - 【請求項15】 表示期間が設定され副映像画面を構成
する画素データを含む副映像ユニットを時間軸に沿って
配置した副映像ストリームと、これと同期して再現され
る他のデータストリームが、それぞれ所定の単位でパケ
ット化され、該パケット単位で多重化して多重化ストリ
ームとして記録されてなる記録媒体において、 前記多重化ストリーム上にパケット化されて配置された
少なくも一部の連続する複数の副映像ユニットのうち、
先行する第1の副映像ユニットの表示期間内に他の第2
の副映像ユニットのパケットが配置され、各副映像ユニ
ットは同一の画素データを有し且つ表示期間が実質的に
連続していることを特徴とする記録媒体。 - 【請求項16】 表示期間が設定され副映像画面を構成
する画素データ及び表示時刻に応じて副映像画面を表示
制御するための制御データを有する副映像ユニットを時
間軸に沿って配置した副映像ストリームと、これと同期
して再現される他のデータストリームが、それぞれ所定
の単位でパケット化され、該パケット単位で多重化して
多重化ストリームとして記録されてなる記録媒体におい
て、 前記多重化ストリーム上にパケット化されて配置された
少なくも一部の連続する複数の副映像ユニットのうち、
先行する第1の副映像ユニットの表示期間内に他の第2
の副映像ユニットのパケットが配置され、各副映像ユニ
ットは同一の画素データを有し且つ表示制御データの有
効期間が実質的に連続していることを特徴とする記録媒
体。 - 【請求項17】 請求項16記載の記録媒体において、 前記第1の副映像ユニットの表示制御データのデータサ
イズと前記第2の副映像ユニットの表示制御データのデ
ータサイズがほぼ同一であることを特徴とする記録媒
体。 - 【請求項18】 請求項16記載の記録媒体において、 前記第1の副映像ユニットの表示制御データの有効期間
と前記第2の副映像ユニットの表示制御データの有効期
間がほぼ同一であることを特徴とする記録媒体。
Priority Applications (6)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13417695A JP3290851B2 (ja) | 1995-05-31 | 1995-05-31 | ストリーム多重化装置、ストリーム多重化方法及び記録媒体 |
| US08/658,824 US5742732A (en) | 1995-05-31 | 1996-05-31 | Data stream multiplexing apparatus and method and record medium therefor |
| CA 2177946 CA2177946A1 (en) | 1995-05-31 | 1996-05-31 | Data stream multiplexing apparatus and method, and record medium therefor |
| EP19960303956 EP0746162A2 (en) | 1995-05-31 | 1996-05-31 | Data stream multiplexing apparatus and method, and record medium therefor |
| KR1019960019056A KR960042680A (ko) | 1995-05-31 | 1996-05-31 | 스트림 다중화 장치, 스트립 다중화 방법 및 기록 매체 |
| CN96110492A CN1151585A (zh) | 1995-05-31 | 1996-05-31 | 数据流多路化装置、数据流多路化方法及记录媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP13417695A JP3290851B2 (ja) | 1995-05-31 | 1995-05-31 | ストリーム多重化装置、ストリーム多重化方法及び記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH08331526A true JPH08331526A (ja) | 1996-12-13 |
| JP3290851B2 JP3290851B2 (ja) | 2002-06-10 |
Family
ID=15122228
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP13417695A Expired - Lifetime JP3290851B2 (ja) | 1995-05-31 | 1995-05-31 | ストリーム多重化装置、ストリーム多重化方法及び記録媒体 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US5742732A (ja) |
| EP (1) | EP0746162A2 (ja) |
| JP (1) | JP3290851B2 (ja) |
| KR (1) | KR960042680A (ja) |
| CN (1) | CN1151585A (ja) |
| CA (1) | CA2177946A1 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997038527A1 (en) * | 1996-04-05 | 1997-10-16 | Matsushita Electric Industrial Co., Ltd. | Multimedia optical disk on which audio data of a plurality of channels and sub-video data together with time-varying image data, and device and method of reproducing the data |
| KR100327211B1 (ko) * | 1998-05-29 | 2002-05-09 | 윤종용 | 부영상부호화방법및장치 |
| JP2011151851A (ja) * | 2011-04-18 | 2011-08-04 | Sony Corp | 再生装置、再生方法および再生プログラム |
| US8638861B2 (en) | 2006-02-22 | 2014-01-28 | Sony Corporation | Reproducing apparatus, reproducing method and reproducing program |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6091768A (en) * | 1996-02-21 | 2000-07-18 | Bru; Bernard | Device for decoding signals of the MPEG2 type |
| EP0826289B1 (en) * | 1996-03-19 | 2002-10-16 | Sony Corporation | Data multiplexing apparatus |
| CN1110195C (zh) * | 1996-03-29 | 2003-05-28 | 松下电器产业株式会社 | 提高进行交互式再生性能的多媒体光盘再生装置及方法 |
| US6798981B1 (en) | 1996-04-05 | 2004-09-28 | Matsushita Electric Industrial Co., Ltd. | Multimedia optical disc for storing audio data and sub-picture data in a plurality of channels as well as moving picture data and apparatus and method for reproducing the multimedia optical disc |
| WO1997042758A1 (en) * | 1996-05-09 | 1997-11-13 | Matsushita Electric Industrial Co., Ltd. | Multimedia optical disk, reproducing device, and reproducing method capable of superposing sub-video upon main video in well-balanced state irrespective of position of main video on screen |
| FR2749468B1 (fr) * | 1996-05-29 | 1998-08-14 | Sgs Thomson Microelectronics | Systeme de conversion de signaux de television numeriques avec insertion de menus interactifs |
| US5886995A (en) * | 1996-09-05 | 1999-03-23 | Hughes Electronics Corporation | Dynamic mapping of broadcast resources |
| US7292604B2 (en) * | 1996-09-05 | 2007-11-06 | The Directv Group, Inc. | Device and method for efficient delivery of redundant national television signals |
| US6728269B1 (en) | 1996-09-05 | 2004-04-27 | Hughes Electronics Corporation | Device and method for efficient delivery of redundant national television signals |
| JPH10108135A (ja) | 1996-09-25 | 1998-04-24 | Sony Corp | 編集装置及びデータ編集方法 |
| US6008856A (en) * | 1997-03-07 | 1999-12-28 | Advanced Micro Devices Inc. | Method of using an audio transmission signal to transmit video data |
| KR100296967B1 (ko) * | 1999-01-30 | 2001-09-26 | 구자홍 | 멀티미디어 스트림의 다단계 요약 세그먼트 정보 스킴 구성 방법 및 구성된 다단계 요약 세그먼트 정보 스킴으로 부터 요약 스트림 발생 방법과 이러한 방법에 의해 제공되는 다단계 요약 스트림의 브라우징/녹화/편집 장치 |
| GB0007868D0 (en) * | 2000-03-31 | 2000-05-17 | Koninkl Philips Electronics Nv | Methods and apparatus for editing digital video recordings and recordings made by such methods |
| EP1433317B1 (en) * | 2001-07-19 | 2007-05-02 | Thomson Licensing | Fade resistant digital transmission and reception system |
| JP3704107B2 (ja) * | 2002-07-30 | 2005-10-05 | 株式会社東芝 | 映像データ再生装置及び映像データ再生方法 |
| US7580614B2 (en) * | 2002-12-09 | 2009-08-25 | Kabushiki Kaisha Toshiba | Information playback apparatus having expansion information storage unit and information playback method |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| NL8601182A (nl) * | 1986-05-12 | 1987-12-01 | Philips Nv | Werkwijze en inrichting voor het opnemen en/of weergeven van een beeldsignaal en een bijbehorend audiosignaal in respektievelijk van een registratiedrager, en een registratiedrager verkregen volgens de werkwijze. |
| JPH01314080A (ja) * | 1988-06-13 | 1989-12-19 | Hitachi Ltd | 画像データ転送方式 |
| JPH0793612B2 (ja) * | 1991-06-10 | 1995-10-09 | 浜松ホトニクス株式会社 | ビデオ信号多重化方式およびその装置 |
| JP2785220B2 (ja) * | 1992-09-22 | 1998-08-13 | ソニー株式会社 | データ符号化装置および方法、並びにデータ復号化装置および方法 |
| JPH0759082A (ja) * | 1993-08-09 | 1995-03-03 | Toshiba Corp | 符号化装置及び復号化装置 |
| KR100323785B1 (ko) * | 1993-09-21 | 2002-06-20 | 이데이 노부유끼 | 데이타전송방법및장치와데이타복호화장치 |
| US5400077A (en) * | 1993-10-29 | 1995-03-21 | Time Warner Entertainment Co., L.P. | System for generating multiple aspect ratio video signals from motion picture disk recorded in a single aspect ratio |
-
1995
- 1995-05-31 JP JP13417695A patent/JP3290851B2/ja not_active Expired - Lifetime
-
1996
- 1996-05-31 EP EP19960303956 patent/EP0746162A2/en not_active Withdrawn
- 1996-05-31 CN CN96110492A patent/CN1151585A/zh active Pending
- 1996-05-31 US US08/658,824 patent/US5742732A/en not_active Expired - Lifetime
- 1996-05-31 KR KR1019960019056A patent/KR960042680A/ko not_active Abandoned
- 1996-05-31 CA CA 2177946 patent/CA2177946A1/en not_active Abandoned
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997038527A1 (en) * | 1996-04-05 | 1997-10-16 | Matsushita Electric Industrial Co., Ltd. | Multimedia optical disk on which audio data of a plurality of channels and sub-video data together with time-varying image data, and device and method of reproducing the data |
| KR100327211B1 (ko) * | 1998-05-29 | 2002-05-09 | 윤종용 | 부영상부호화방법및장치 |
| US8638861B2 (en) | 2006-02-22 | 2014-01-28 | Sony Corporation | Reproducing apparatus, reproducing method and reproducing program |
| JP2011151851A (ja) * | 2011-04-18 | 2011-08-04 | Sony Corp | 再生装置、再生方法および再生プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3290851B2 (ja) | 2002-06-10 |
| CN1151585A (zh) | 1997-06-11 |
| KR960042680A (ko) | 1996-12-21 |
| CA2177946A1 (en) | 1996-12-01 |
| US5742732A (en) | 1998-04-21 |
| EP0746162A2 (en) | 1996-12-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3290851B2 (ja) | ストリーム多重化装置、ストリーム多重化方法及び記録媒体 | |
| US6327421B1 (en) | Multiple speed fast forward/rewind compressed video delivery system | |
| JP3330797B2 (ja) | 動画像データ格納方式および動画像データ復号方式 | |
| US8886010B2 (en) | Apparatus and method for decoding data for providing browsable slide show, and data storage medium therefor | |
| JP3943516B2 (ja) | 画像再生装置 | |
| JP2001229616A (ja) | データ記録方法及びそれを用いたデータ記録装置 | |
| US7359621B2 (en) | Recording apparatus | |
| JPH09509036A (ja) | エンコーダシステムのレベルバッファ管理 | |
| EP2200298B1 (en) | Video data reproducing device, video data generating device, and recording medium for trick-play reproduction in a picture-in-picture mode | |
| US20060203296A1 (en) | Reproducing apparatus and method, and recording medium | |
| KR20010102178A (ko) | 데이터 전송 장치 및 데이터 전송 방법, 데이터 수신 장치및 데이터 수신 방법 | |
| JP2010161808A (ja) | 記録媒体及びプログラムが記録された記録媒体 | |
| JP4464255B2 (ja) | ビデオ信号多重化装置、ビデオ信号多重化方法及び映像再生装置 | |
| US20030091331A1 (en) | Method for implementing low-speed playback of a digital broadcast program | |
| JP3403870B2 (ja) | メニューストリーム作成装置 | |
| JPH10271466A (ja) | 複合ストリーム作成装置、複合ストリーム作成方法および記録媒体 | |
| JP3425297B2 (ja) | システムストリーム作成装置とシステムストリーム作成方法 | |
| JP2001268513A (ja) | 動画像再生装置および動画像記録再生システム | |
| JP3780142B2 (ja) | 映像記録再生装置 | |
| JP2002344901A (ja) | データ再生装置及びデータ再生方法 | |
| JP3893717B2 (ja) | データ多重化装置、データ多重化方法およびデータ多重化方法を記録したコンピュータ読み取り可能な記録媒体 | |
| JP2000201181A (ja) | メモリデ―タ配置方法及びデ―タ多重化装置 | |
| JPH1066047A (ja) | データ送信装置およびデータ送信方法 | |
| JP2002027412A (ja) | データ記録再生装置及びデータ再生方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20020305 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080322 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090322 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100322 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100322 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110322 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120322 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130322 Year of fee payment: 11 |