JPH0846884A - 信号処理装置 - Google Patents
信号処理装置Info
- Publication number
- JPH0846884A JPH0846884A JP7147985A JP14798595A JPH0846884A JP H0846884 A JPH0846884 A JP H0846884A JP 7147985 A JP7147985 A JP 7147985A JP 14798595 A JP14798595 A JP 14798595A JP H0846884 A JPH0846884 A JP H0846884A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- audio
- video
- error
- pts
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004044 response Effects 0.000 claims abstract description 5
- 230000005236 sound signal Effects 0.000 claims description 34
- 230000006837 decompression Effects 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 2
- 238000005259 measurement Methods 0.000 claims 3
- 230000002194 synthesizing effect Effects 0.000 claims 2
- 239000002131 composite material Substances 0.000 claims 1
- 230000006870 function Effects 0.000 description 7
- 230000001360 synchronised effect Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000002441 reversible effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000000034 method Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 230000007774 longterm Effects 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 2
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000002547 anomalous effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000013641 positive control Substances 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4396—Processing of audio elementary streams by muting the audio signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
- H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
- H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
- H04N7/56—Synchronising systems therefor
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
(57)【要約】
【構成】 圧縮されたオーディオ／ビデオ受像機は、関
連する復元された成分信号の再生と同時にオーディオ／
ビデオ成分のタイミング・リファレンス信号（ＰＴＳ）
を供給する（２０８，２１２，２１４，２２０，２２
２）。同期装置は、発生する成分オーディオとビデオの
ＰＴＳの差の関数を発生する（２１７−２１９）。オー
ディオとビデオの相対的同期を示すこの関数は、所定の
閾値と比較され、閾値を超えるとき、ミューティング制
御信号が発生される（２２５）。該制御信号に応答する
ミューティング回路（２２９）は、再生されたオーディ
オとビデオの成分信号のタイミングが相互の同期から偏
移するときオーディオの再生を不能にする。 【効果】 オーディオとビデオの同期がとれる。
連する復元された成分信号の再生と同時にオーディオ／
ビデオ成分のタイミング・リファレンス信号（ＰＴＳ）
を供給する（２０８，２１２，２１４，２２０，２２
２）。同期装置は、発生する成分オーディオとビデオの
ＰＴＳの差の関数を発生する（２１７−２１９）。オー
ディオとビデオの相対的同期を示すこの関数は、所定の
閾値と比較され、閾値を超えるとき、ミューティング制
御信号が発生される（２２５）。該制御信号に応答する
ミューティング回路（２２９）は、再生されたオーディ
オとビデオの成分信号のタイミングが相互の同期から偏
移するときオーディオの再生を不能にする。 【効果】 オーディオとビデオの同期がとれる。
Description
【０００１】
【産業上の利用分野】本発明は、圧縮されたオーディオ
（ａｕｄｉｏ）／ビデオ（ｖｉｄｅｏ）信号の受信機に
おいてオーディオ成分および／またはビデオ成分のミュ
ーティング（ｍｕｔｉｎｇ）を制御する信号処理装置に
関する。
（ａｕｄｉｏ）／ビデオ（ｖｉｄｅｏ）信号の受信機に
おいてオーディオ成分および／またはビデオ成分のミュ
ーティング（ｍｕｔｉｎｇ）を制御する信号処理装置に
関する。
【０００２】
【発明の背景】ＭＰＥＧは、国際標準化機構の動画専門
家グループ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅ
ｒｔｓ Ｇｒｏｕｐ）により設定された圧縮ビデオ信号
のプロトコルである。このプロトコルは、フレーム内符
号化と動き補償型予測符号化の両方を含んでいる融通性
のある信号形式を定める。フレーム間における符号化形
式の変化に因り、また画像内容の変動に因り、個々のフ
レームがかなり異なった量の圧縮データを有する。圧縮
される個々のフレームが異なるデータ量を有するため、
フレームのデータは非同期に伝送される傾向にある。
家グループ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅ
ｒｔｓ Ｇｒｏｕｐ）により設定された圧縮ビデオ信号
のプロトコルである。このプロトコルは、フレーム内符
号化と動き補償型予測符号化の両方を含んでいる融通性
のある信号形式を定める。フレーム間における符号化形
式の変化に因り、また画像内容の変動に因り、個々のフ
レームがかなり異なった量の圧縮データを有する。圧縮
される個々のフレームが異なるデータ量を有するため、
フレームのデータは非同期に伝送される傾向にある。
【０００３】オーディオ信号もＭＰＥＧのプロトコルに
従って圧縮される。圧縮されたオーディオ信号は、ビデ
オ信号と関連づけられるが、別個に伝送される。伝送す
る場合、圧縮されたオーディオ信号はパケット（ｐａｃ
ｋｅｔ）にセグメント（ｓｅｇｍｅｎｔ）化される。そ
れから、このパケットは、非同期状態で圧縮ビデオ信号
と時分割多重化される。
従って圧縮される。圧縮されたオーディオ信号は、ビデ
オ信号と関連づけられるが、別個に伝送される。伝送す
る場合、圧縮されたオーディオ信号はパケット（ｐａｃ
ｋｅｔ）にセグメント（ｓｅｇｍｅｎｔ）化される。そ
れから、このパケットは、非同期状態で圧縮ビデオ信号
と時分割多重化される。
【０００４】関連する圧縮されたオーディオ成分とビデ
オ成分とは関係なく非同期であるばかりでなく、それら
相互の時間関係すなわち同期は伝送中存在しない。
オ成分とは関係なく非同期であるばかりでなく、それら
相互の時間関係すなわち同期は伝送中存在しない。
【０００５】ＭＰＥＧ規準により圧縮されたオーディオ
とビデオの成分信号は、個々の圧縮信号セグメントとシ
ステムの基準クロック信号との間の基準を設定するため
に、プレゼンテーション・タイム・スタンプ（ｐｒｅｓ
ｅｎｔａｔｉｏｎ ｔｉｍｅｓｔａｍｐ：ＰＴＳ）を含
んでいる。このオーディオとビデオのＰＴＳは、それぞ
れの復元された成分を再同期化すると共にそれらの時間
的相互関係を回復するために受像機装置によって利用さ
れる。
とビデオの成分信号は、個々の圧縮信号セグメントとシ
ステムの基準クロック信号との間の基準を設定するため
に、プレゼンテーション・タイム・スタンプ（ｐｒｅｓ
ｅｎｔａｔｉｏｎ ｔｉｍｅｓｔａｍｐ：ＰＴＳ）を含
んでいる。このオーディオとビデオのＰＴＳは、それぞ
れの復元された成分を再同期化すると共にそれらの時間
的相互関係を回復するために受像機装置によって利用さ
れる。
【０００６】再生されたオーディオ／ビデオ素材の特に
問題となる点は、くちびる、すなわち口の動きと関連す
る話し言葉すなわちオーディオとの間の同期の損失であ
るリップ同期（ｌｉｐ−ｓｙｎｃ）の損失である。本発
明の目的の１つは、リップ同期の損失の問題を除去する
ことである。
問題となる点は、くちびる、すなわち口の動きと関連す
る話し言葉すなわちオーディオとの間の同期の損失であ
るリップ同期（ｌｉｐ−ｓｙｎｃ）の損失である。本発
明の目的の１つは、リップ同期の損失の問題を除去する
ことである。
【０００７】
【発明の概要】本発明によるオーディオ／ビデオ受信機
は、関連する復元された成分信号の再生と同時にオーデ
ィオ／ビデオ成分のタイミング・リファレンス信号（Ｐ
ＴＳ）を供給する。同期装置は、発生する成分オーディ
オとビデオのＰＴＳの差の関数を発生する。オーディオ
とビデオの相対的同期を示す差の関数は、所定の閾値と
比較され、閾値を超えたとき、ミューティング制御信号
が発生される。この制御信号に応答するミューティング
回路は、再生されたオーディオとビデオの成分信号のタ
イミングが相互の同期からはずれたとき、オーディオの
再生が行われないようにする。
は、関連する復元された成分信号の再生と同時にオーデ
ィオ／ビデオ成分のタイミング・リファレンス信号（Ｐ
ＴＳ）を供給する。同期装置は、発生する成分オーディ
オとビデオのＰＴＳの差の関数を発生する。オーディオ
とビデオの相対的同期を示す差の関数は、所定の閾値と
比較され、閾値を超えたとき、ミューティング制御信号
が発生される。この制御信号に応答するミューティング
回路は、再生されたオーディオとビデオの成分信号のタ
イミングが相互の同期からはずれたとき、オーディオの
再生が行われないようにする。
【０００８】
【実施例】図１は本発明が実施される典型的なシステム
を示し、このシステムは圧縮されたディジタルビデオ信
号の伝送回路である。このシステムで、信号源１０から
のビデオ信号はビデオ信号圧縮装置１１に供給される。
装置１１は、離散的余弦変換を利用する、動き補正され
た予測エンコーダを含むこともある。装置１１からの圧
縮されたビデオ信号はフォーマット装置１２に結合され
る。このフォーマット装置１２は、国際標準化機構（Ｉ
ＯＳ）が開発した規格であるＭＰＥＧのような信号プロ
トコルに従って、圧縮されたビデオ信号およびその他の
補助データを配列する。標準化された信号はトランスポ
ート処理装置１３に供給され、処理装置１３はこの信号
をデータのパケットに分割し、或るオーバーヘッド（ｏ
ｖｅｒｈｅａｄ）を追加して、伝送の目的のために、雑
音排除機能を与える。トランスポート・パケットは、通
常は一定しない割合で起こり、レート・バッファ１４に
供給され、バッファ１４は、比較的狭い帯域幅の伝送チ
ャンネルを効率よく使用するのに役立つ比較的一定の割
合で出力データを供給する。バッファされたデータは、
信号の伝送を行うモデム１５に結合される。
を示し、このシステムは圧縮されたディジタルビデオ信
号の伝送回路である。このシステムで、信号源１０から
のビデオ信号はビデオ信号圧縮装置１１に供給される。
装置１１は、離散的余弦変換を利用する、動き補正され
た予測エンコーダを含むこともある。装置１１からの圧
縮されたビデオ信号はフォーマット装置１２に結合され
る。このフォーマット装置１２は、国際標準化機構（Ｉ
ＯＳ）が開発した規格であるＭＰＥＧのような信号プロ
トコルに従って、圧縮されたビデオ信号およびその他の
補助データを配列する。標準化された信号はトランスポ
ート処理装置１３に供給され、処理装置１３はこの信号
をデータのパケットに分割し、或るオーバーヘッド（ｏ
ｖｅｒｈｅａｄ）を追加して、伝送の目的のために、雑
音排除機能を与える。トランスポート・パケットは、通
常は一定しない割合で起こり、レート・バッファ１４に
供給され、バッファ１４は、比較的狭い帯域幅の伝送チ
ャンネルを効率よく使用するのに役立つ比較的一定の割
合で出力データを供給する。バッファされたデータは、
信号の伝送を行うモデム１５に結合される。
【０００９】システム・クロック２２は、少なくともト
ランスポート処理装置１３を含む、多くの装置を動作さ
せるためにクロック信号を発生する。このクロックは、
例えば、２７ＭＨｚのような一定の周波数で動作する。
しかしながら、ここに示すように、このシステム・クロ
ックはタイミング情報を発生するのに使用される。シス
テム・クロックはカウンタ２３のクロック入力に結合さ
れ、カウンタ２３は、例えば、２３０を法として計数す
るように構成される。カウンタ２３から出力される計数
値は２個のラッチ２４および２５に供給される。ラッチ
２４は、それぞれのフレーム期間の出現と同時に計数値
をラッチするようビデオ信号源によって調節される。こ
れらの計数値はプレゼンテーション・タイム・スタンプ
（ＰＴＳ）と称され、フォーマット装置１２によって、
圧縮されたビデオ信号ストリームの中に含められ、関連
するオーディオとビデオ情報のリップ同期（ｌｉｐ−ｓ
ｙｎｃｈｒｏｎｉｚａｔｉｏｎ）を行うために受信機で
使用される。ラッチ２５は、予定のスケジュールに従っ
て計数値をラッチするようトランスポート処理装置１３
（またはシステム制御装置２１）によって調節される。
これらの計数値はシステム・クロック・リファレンス
（ＳＣＲ）と称され、補助データとして、それぞれの補
助トランスポート・パケット内に埋まれる。
ランスポート処理装置１３を含む、多くの装置を動作さ
せるためにクロック信号を発生する。このクロックは、
例えば、２７ＭＨｚのような一定の周波数で動作する。
しかしながら、ここに示すように、このシステム・クロ
ックはタイミング情報を発生するのに使用される。シス
テム・クロックはカウンタ２３のクロック入力に結合さ
れ、カウンタ２３は、例えば、２３０を法として計数す
るように構成される。カウンタ２３から出力される計数
値は２個のラッチ２４および２５に供給される。ラッチ
２４は、それぞれのフレーム期間の出現と同時に計数値
をラッチするようビデオ信号源によって調節される。こ
れらの計数値はプレゼンテーション・タイム・スタンプ
（ＰＴＳ）と称され、フォーマット装置１２によって、
圧縮されたビデオ信号ストリームの中に含められ、関連
するオーディオとビデオ情報のリップ同期（ｌｉｐ−ｓ
ｙｎｃｈｒｏｎｉｚａｔｉｏｎ）を行うために受信機で
使用される。ラッチ２５は、予定のスケジュールに従っ
て計数値をラッチするようトランスポート処理装置１３
（またはシステム制御装置２１）によって調節される。
これらの計数値はシステム・クロック・リファレンス
（ＳＣＲ）と称され、補助データとして、それぞれの補
助トランスポート・パケット内に埋まれる。
【００１０】オーディオ／ビデオ信号源１０からのビデ
オ信号に関連するオーディオ信号はオーディオ信号圧縮
装置１８に供給される。オーディオ信号圧縮装置１８
は、ラッチ１９を制御するためにフレーム・サンプリン
グ・パルス（ビデオフレームに関係なく）を供給する。
サンプリング・パルスに応答して、ラッチ１９はカウン
タ２３から供給される計数値を捕捉する。ラッチされた
これらの値は、オーディオ・プレゼンテーション・タイ
ム・スタンプＰＴＳａｕｄに対応する。ＰＴＳａｕｄは
圧縮装置１８から供給される圧縮されたオーディオ信号
の中に組み込まれる。圧縮されたオーディオ信号はトラ
ンスポート処理装置１７に結合される。処理装置１７
は、これらの信号をデータのパケットに分割し、或るオ
ーバヘッドを付加し、伝送の目的のために雑音排除機能
を与える。処理装置１７から供給されるオーディオトラ
ンスポート・パケットはマルチプレクサ１６に結合され
る。マルチプレクサ１６は、オーディオおよびビデオト
ランスポートパケットを時分割多重する。図１で、オー
ディオ信号とビデオ信号の処理チャンネルに、別個のト
ランスポート処理装置が示されている。データ・レート
が中位の程度であるシステムの場合、２個のトランスポ
ート処理装置およびマルチプレクサ１６の機能は、１個
のトランスポート処理装置の中に含められる。
オ信号に関連するオーディオ信号はオーディオ信号圧縮
装置１８に供給される。オーディオ信号圧縮装置１８
は、ラッチ１９を制御するためにフレーム・サンプリン
グ・パルス（ビデオフレームに関係なく）を供給する。
サンプリング・パルスに応答して、ラッチ１９はカウン
タ２３から供給される計数値を捕捉する。ラッチされた
これらの値は、オーディオ・プレゼンテーション・タイ
ム・スタンプＰＴＳａｕｄに対応する。ＰＴＳａｕｄは
圧縮装置１８から供給される圧縮されたオーディオ信号
の中に組み込まれる。圧縮されたオーディオ信号はトラ
ンスポート処理装置１７に結合される。処理装置１７
は、これらの信号をデータのパケットに分割し、或るオ
ーバヘッドを付加し、伝送の目的のために雑音排除機能
を与える。処理装置１７から供給されるオーディオトラ
ンスポート・パケットはマルチプレクサ１６に結合され
る。マルチプレクサ１６は、オーディオおよびビデオト
ランスポートパケットを時分割多重する。図１で、オー
ディオ信号とビデオ信号の処理チャンネルに、別個のト
ランスポート処理装置が示されている。データ・レート
が中位の程度であるシステムの場合、２個のトランスポ
ート処理装置およびマルチプレクサ１６の機能は、１個
のトランスポート処理装置の中に含められる。
【００１１】システム制御装置２１は、種々の処理要素
を調整するようプログラムされた、可変状態マシンであ
る。制御装置２１、圧縮装置１１と１８、トランスポー
ト処理装置１３と１７およびレート・バッファ１４は、
処理装置間で適正なハンドシェーキング（ｈａｎｄｓｈ
ａｋｉｎｇ）が行われているかぎり、共通のクロック回
路を介して、同期的に動作することもある。しかしなが
ら、２個の圧縮装置はいずれも同じリファレンス・カウ
ンタ２３からＰＴＳ値を得るので、２つの圧縮された信
号の間の正確なタイミング関係は、圧縮された出力信号
において得られる。
を調整するようプログラムされた、可変状態マシンであ
る。制御装置２１、圧縮装置１１と１８、トランスポー
ト処理装置１３と１７およびレート・バッファ１４は、
処理装置間で適正なハンドシェーキング（ｈａｎｄｓｈ
ａｋｉｎｇ）が行われているかぎり、共通のクロック回
路を介して、同期的に動作することもある。しかしなが
ら、２個の圧縮装置はいずれも同じリファレンス・カウ
ンタ２３からＰＴＳ値を得るので、２つの圧縮された信
号の間の正確なタイミング関係は、圧縮された出力信号
において得られる。
【００１２】図２は本発明を具体化する例示的受信装置
を示す。モデム２００はモデム１５の逆の機能を実行
し、レート・バッファ２０６は、事実上、レート・バッ
ファ１４の逆の機能を実行する。逆トランスポート処理
装置２０２は、それぞれのトランスポート・パケットを
サービス（ｓｅｒｖｉｃｅ）により分割し、それぞれの
パケット・ペイロード（ｐａｃｋｅｔ ｐａｙｌｏａ
ｄ）をレート・バッファ２０６中の異なるメモリ・ブロ
ックに割り当てる。その際、それぞれのトランスポート
・パケット信号ペイロードは補助データから分離され、
補助データはシステム制御装置２１０に供給される。こ
れに代わる構成では、別個のトランスポート処理装置が
各処理チャンネル内に含められ、それぞれのチャンネル
に関連するデータのみを識別し、処理するように構成さ
れる。
を示す。モデム２００はモデム１５の逆の機能を実行
し、レート・バッファ２０６は、事実上、レート・バッ
ファ１４の逆の機能を実行する。逆トランスポート処理
装置２０２は、それぞれのトランスポート・パケットを
サービス（ｓｅｒｖｉｃｅ）により分割し、それぞれの
パケット・ペイロード（ｐａｃｋｅｔ ｐａｙｌｏａ
ｄ）をレート・バッファ２０６中の異なるメモリ・ブロ
ックに割り当てる。その際、それぞれのトランスポート
・パケット信号ペイロードは補助データから分離され、
補助データはシステム制御装置２１０に供給される。こ
れに代わる構成では、別個のトランスポート処理装置が
各処理チャンネル内に含められ、それぞれのチャンネル
に関連するデータのみを識別し、処理するように構成さ
れる。
【００１３】レート・バッファ２０６からの圧縮された
ビデオデータはビデオ復元装置２１４に送られる。レー
ト・バッファ２０６は、突発的すなわち変動的な割合で
圧縮ビデオデータを受け取り、要求あり次第、データを
復元装置２１４に供給する。複元装置２１４は、圧縮さ
れたビデオ信号に応答して、圧縮されないビデオ信号を
発生し、適当な表示装置あるいは記憶装置（図示せず）
に、表示されあるいは貯えられるようにする。
ビデオデータはビデオ復元装置２１４に送られる。レー
ト・バッファ２０６は、突発的すなわち変動的な割合で
圧縮ビデオデータを受け取り、要求あり次第、データを
復元装置２１４に供給する。複元装置２１４は、圧縮さ
れたビデオ信号に応答して、圧縮されないビデオ信号を
発生し、適当な表示装置あるいは記憶装置（図示せず）
に、表示されあるいは貯えられるようにする。
【００１４】逆トランスポート処理装置２０２からの圧
縮されたオーディオデータはレート・バッファ２０６に
供給される。バッファ２０６は、圧縮されたオーディオ
信号を、システム・プロトコルに従って、オーディオ復
元装置２１２に供給する。復元装置２１２は、圧縮され
たオーディオ信号に応答して、圧縮されないオーディオ
信号を発生し、適当なスピーカあるいは記憶装置（図示
せず）で、再生しあるいは記憶する。
縮されたオーディオデータはレート・バッファ２０６に
供給される。バッファ２０６は、圧縮されたオーディオ
信号を、システム・プロトコルに従って、オーディオ復
元装置２１２に供給する。復元装置２１２は、圧縮され
たオーディオ信号に応答して、圧縮されないオーディオ
信号を発生し、適当なスピーカあるいは記憶装置（図示
せず）で、再生しあるいは記憶する。
【００１５】また逆トランスポート処理装置２０２は、
補助トランスポート・データからのＳＣＲ、および制御
信号をシステム・クロック発生装置２０８に供給する。
クロック発生装置２０８は、これらの信号に応答し、少
なくともトランスポート処理装置の動作と同期するシス
テム・クロック信号を発生する。このシステム・クロッ
ク信号は受信機システム制御装置２１０に供給されて、
特定の処理要素のタイミングを制御する。
補助トランスポート・データからのＳＣＲ、および制御
信号をシステム・クロック発生装置２０８に供給する。
クロック発生装置２０８は、これらの信号に応答し、少
なくともトランスポート処理装置の動作と同期するシス
テム・クロック信号を発生する。このシステム・クロッ
ク信号は受信機システム制御装置２１０に供給されて、
特定の処理要素のタイミングを制御する。
【００１６】図３は例示的クロック発生装置２０８の詳
細を示す。受信機モデム２００からのデータは、補助パ
ケット検出装置３１を含む、逆トランスポート処理装置
２０２′に結合される。逆トランスポート処理装置２０
２′はそれぞれのトランスポート・パケット・ペイロー
ドからトランスポート・ヘッダを分離する。処理装置２
０２′は、トランスポート・ヘッダ・データに応答し
て、所望の関連するオーディオとビデオのプログラム成
分のペイロードと補助データのペイロードをデマルチプ
レクシングする。オーディオ／ビデオのペイロードと補
助ペイロードは、レート・バッファ２０８の別個のメモ
リ・ブロックに書き込まれる。各メモリ・ブロックは、
それぞれ先入れ先出しメモリすなわちＦＩＦＯ（ｆｉｒ
ｓｔ−ｉｎ−ｆｉｒｓｔ ｏｕｔ）として動作し、モデ
ムから得られるときデータを書き込み、対応する成分信
号をプロセッサ（図示せず）から要求が出されるときデ
ータを読み出す。個々の補助パケットの中に在るＳＣＲ
はルートを通って、メモリ要素３４に貯えられる。
細を示す。受信機モデム２００からのデータは、補助パ
ケット検出装置３１を含む、逆トランスポート処理装置
２０２′に結合される。逆トランスポート処理装置２０
２′はそれぞれのトランスポート・パケット・ペイロー
ドからトランスポート・ヘッダを分離する。処理装置２
０２′は、トランスポート・ヘッダ・データに応答し
て、所望の関連するオーディオとビデオのプログラム成
分のペイロードと補助データのペイロードをデマルチプ
レクシングする。オーディオ／ビデオのペイロードと補
助ペイロードは、レート・バッファ２０８の別個のメモ
リ・ブロックに書き込まれる。各メモリ・ブロックは、
それぞれ先入れ先出しメモリすなわちＦＩＦＯ（ｆｉｒ
ｓｔ−ｉｎ−ｆｉｒｓｔ ｏｕｔ）として動作し、モデ
ムから得られるときデータを書き込み、対応する成分信
号をプロセッサ（図示せず）から要求が出されるときデ
ータを読み出す。個々の補助パケットの中に在るＳＣＲ
はルートを通って、メモリ要素３４に貯えられる。
【００１７】補助パケット検出器３１は、ＳＣＲを含ん
でいる補助トランスポート・パケットを指定する符号ワ
ードを識別するよう構成された整合フィルタであり、Ｓ
ＣＲのようなデータを含んでいるトランスポート・パケ
ットの発生と同時に制御パルスを発生する。この制御パ
ルスは、検出時と正確に関連する時に、局部カウンタ３
６が現在示す計数値を捕捉しラッチ３５の中に貯えるた
めに利用される。局部カウンタ３６は、電圧制御発振器
３７から供給されるパルスを計数する。カウンタ３６は
Ｍを法として計数する。Ｍは、エンコーダ内のそれに対
応するカウンタ（カウンタ２３）と同じ数であるが必ず
しも同じ数ではない。もしＭがＮと異なれば、その差は
誤り均等化で適応される。
でいる補助トランスポート・パケットを指定する符号ワ
ードを識別するよう構成された整合フィルタであり、Ｓ
ＣＲのようなデータを含んでいるトランスポート・パケ
ットの発生と同時に制御パルスを発生する。この制御パ
ルスは、検出時と正確に関連する時に、局部カウンタ３
６が現在示す計数値を捕捉しラッチ３５の中に貯えるた
めに利用される。局部カウンタ３６は、電圧制御発振器
３７から供給されるパルスを計数する。カウンタ３６は
Ｍを法として計数する。Ｍは、エンコーダ内のそれに対
応するカウンタ（カウンタ２３）と同じ数であるが必ず
しも同じ数ではない。もしＭがＮと異なれば、その差は
誤り均等化で適応される。
【００１８】電圧制御発振器（ＶＣＸＯ）３７は、クロ
ック制御装置３９より発生された、低域フィルタ３８を
通る誤差信号によって制御される。誤差信号は以下のよ
うにして発生される。時刻ｎに到着するＳＣＲをＳＣＲ
ｎで表わし、ラッチ３５に現在捕捉されている局部計数
値をＬＣＲｎで表わす。クロック制御装置はＳＣＲおよ
びＬＣＲの連続する値を読み取り、その差に比例する誤
差信号Ｅを形成する。 Ｅ→｜ＳＣＲｎ−ＳＣＲｎ−１｜−｜ＬＣＲｎ−ＬＣＲｎ−１｜ 誤差信号Ｅは、これらの差を等しくする傾向のある周波
数に電圧制御発振器３７を調整するのに利用される。前
に説明したように、モジュロ・カウンタのラップアラウ
ンドによって生じる負の差は無視される。クロック制御
装置３９から発生される誤差信号はパルス幅変調された
信号の形式をとるが、低域フィルタ３８をアナログ構成
要素で実施することにより、アナログ形式の誤差信号に
変えられる。
ック制御装置３９より発生された、低域フィルタ３８を
通る誤差信号によって制御される。誤差信号は以下のよ
うにして発生される。時刻ｎに到着するＳＣＲをＳＣＲ
ｎで表わし、ラッチ３５に現在捕捉されている局部計数
値をＬＣＲｎで表わす。クロック制御装置はＳＣＲおよ
びＬＣＲの連続する値を読み取り、その差に比例する誤
差信号Ｅを形成する。 Ｅ→｜ＳＣＲｎ−ＳＣＲｎ−１｜−｜ＬＣＲｎ−ＬＣＲｎ−１｜ 誤差信号Ｅは、これらの差を等しくする傾向のある周波
数に電圧制御発振器３７を調整するのに利用される。前
に説明したように、モジュロ・カウンタのラップアラウ
ンドによって生じる負の差は無視される。クロック制御
装置３９から発生される誤差信号はパルス幅変調された
信号の形式をとるが、低域フィルタ３８をアナログ構成
要素で実施することにより、アナログ形式の誤差信号に
変えられる。
【００１９】このシステムに関する制約は、システムの
２つの端部におけるカウンタは同じ周波数またはその倍
数を計数するということである。このため、電圧制御発
振器の公称周波数はエンコーダにおけるシステム・クロ
ックの周波数にかなり接近していることが要求される。
２つの端部におけるカウンタは同じ周波数またはその倍
数を計数するということである。このため、電圧制御発
振器の公称周波数はエンコーダにおけるシステム・クロ
ックの周波数にかなり接近していることが要求される。
【００２０】前述の方法ではかなり速い同期が得られる
が、長期の誤差（ｌｏｎｇ ｔｅｒｍ ｅｒｒｏｒ）を
生じる。長期の誤差ＬＴＥは以下のように、差に比例す
る。 ＬＴＥ→｜ＬＣＲｎ−ＬＣＲｏ｜−｜ＳＣＲｎ−ＳＣＲｏ｜ ここでＳＣＲｏおよびＬＣＲｏは、例えば、最初に発生
するＳＣＲ、およびそれに対応する、受信機カウンタの
ラッチされた値である。通常、誤差信号ＥおよびＬＴＥ
は個々のステップで変動する。従って、ひとたびシステ
ムが“同期”すると、誤差信号はゼロ点に関して１単位
ディザする。好ましい同期法は、誤差信号Ｅに１単位の
ディザが起こるまで誤差信号Ｅを使用して、電圧制御発
振器の制御を開始し、それから長期誤差信号ＬＴＥの使
用に切り換えて、電圧制御発振器を制御する。
が、長期の誤差（ｌｏｎｇ ｔｅｒｍ ｅｒｒｏｒ）を
生じる。長期の誤差ＬＴＥは以下のように、差に比例す
る。 ＬＴＥ→｜ＬＣＲｎ−ＬＣＲｏ｜−｜ＳＣＲｎ−ＳＣＲｏ｜ ここでＳＣＲｏおよびＬＣＲｏは、例えば、最初に発生
するＳＣＲ、およびそれに対応する、受信機カウンタの
ラッチされた値である。通常、誤差信号ＥおよびＬＴＥ
は個々のステップで変動する。従って、ひとたびシステ
ムが“同期”すると、誤差信号はゼロ点に関して１単位
ディザする。好ましい同期法は、誤差信号Ｅに１単位の
ディザが起こるまで誤差信号Ｅを使用して、電圧制御発
振器の制御を開始し、それから長期誤差信号ＬＴＥの使
用に切り換えて、電圧制御発振器を制御する。
【００２１】ＶＣＸ０３７から発生されるシステム・ク
ロック信号は、少なくともトランスポート処理装置とレ
ート・バッファを動作させるのに利用される。この信号
はエンコーダのシステム・クロックと少なくとも周波数
が同期しているので、レート・バッファのオーバフロー
またはアンダフローの可能性はほとんど存在しない。
ロック信号は、少なくともトランスポート処理装置とレ
ート・バッファを動作させるのに利用される。この信号
はエンコーダのシステム・クロックと少なくとも周波数
が同期しているので、レート・バッファのオーバフロー
またはアンダフローの可能性はほとんど存在しない。
【００２２】再び図２に関して、オーディオおよびビデ
オの同期を説明する。プレゼンテーション・タイム・ス
タンプＰＴＳｖｉｄは、予め定められたビデオデータに
関連する圧縮されたビデオ信号の中に含まれていること
を思い起こされたい。ＰＴＳｖｉｄは、関連するビデオ
が表示される相対的時間を示す。同様に、圧縮されたオ
ーディオ信号は、それぞれのＰＴＳａｕｄに関連する時
に再生されるオーディオに関連するプレゼンテーション
・タイム・スタンプＰＴＳａｕｄを含んでいる。受信機
においてＰＴＳａｕｄとＰＴＳｖｉｄは、オーディオと
ビデオの同期を得る目的で直接比較されない。何故なら
ば、それぞれのサンプルは異なる瞬間に決定されるから
である。それぞれのＰＴＳ値は、ＶＣＸ０３７から発生
される受信機クロックである、連続的時間軸と比較され
る。これを行うには、局部タイム・スタンプを捕捉する
ために、システム・クロックにより発生される局部計数
値ＬＣＲをサンプリングする。
オの同期を説明する。プレゼンテーション・タイム・ス
タンプＰＴＳｖｉｄは、予め定められたビデオデータに
関連する圧縮されたビデオ信号の中に含まれていること
を思い起こされたい。ＰＴＳｖｉｄは、関連するビデオ
が表示される相対的時間を示す。同様に、圧縮されたオ
ーディオ信号は、それぞれのＰＴＳａｕｄに関連する時
に再生されるオーディオに関連するプレゼンテーション
・タイム・スタンプＰＴＳａｕｄを含んでいる。受信機
においてＰＴＳａｕｄとＰＴＳｖｉｄは、オーディオと
ビデオの同期を得る目的で直接比較されない。何故なら
ば、それぞれのサンプルは異なる瞬間に決定されるから
である。それぞれのＰＴＳ値は、ＶＣＸ０３７から発生
される受信機クロックである、連続的時間軸と比較され
る。これを行うには、局部タイム・スタンプを捕捉する
ために、システム・クロックにより発生される局部計数
値ＬＣＲをサンプリングする。
【００２３】ＰＴＳに関連するデータが示されると、Ｌ
ＣＲがサンプリングされる。例えばそれぞれのオーディ
オフレームが再生のために出力されると、オーディオ復
元装置２１２はＰＴＳａｕｄを発生する。この時に、Ｌ
ＣＲをサンプリングするために制御信号はラッチ２２０
を調整する。ＬＣＲの値はＬＡＳ（ｌｏｃａｌ ａｕｄ
ｉｏ ｓｔａｍｐ：局部オーディオスタンプ）で表わさ
れる。同様に、ビデオ復元装置２１４が表示用にビデオ
フレームを発生する時、ビデオ復元装置２１４はＰＴＳ
ｖｉｄと制御パルスを発生して、ＬＣＲの現在の値を貯
えるようラッチ２２２を調節する。ＬＣＲのこれらの値
はＬＶＳ（ｌｏｃａｌ ｖｉｄｅｏ ｓｔａｍｐ：局部
ビデオスタンプ）と称される。
ＣＲがサンプリングされる。例えばそれぞれのオーディ
オフレームが再生のために出力されると、オーディオ復
元装置２１２はＰＴＳａｕｄを発生する。この時に、Ｌ
ＣＲをサンプリングするために制御信号はラッチ２２０
を調整する。ＬＣＲの値はＬＡＳ（ｌｏｃａｌ ａｕｄ
ｉｏ ｓｔａｍｐ：局部オーディオスタンプ）で表わさ
れる。同様に、ビデオ復元装置２１４が表示用にビデオ
フレームを発生する時、ビデオ復元装置２１４はＰＴＳ
ｖｉｄと制御パルスを発生して、ＬＣＲの現在の値を貯
えるようラッチ２２２を調節する。ＬＣＲのこれらの値
はＬＶＳ（ｌｏｃａｌ ｖｉｄｅｏ ｓｔａｍｐ：局部
ビデオスタンプ）と称される。
【００２４】ＬＡＳおよびそれに対応するＰＴＳａｕｄ
は減算器２１８のそれぞれの入力端子に結合される。減
算器２１８は次の関係式に従って信号ΔＡ−ＰＴＳを発
生する。 ΔＡ−ＰＴＳ＝ＰＴＳａｕｄ−ＬＡＳ ＬＶＳおよびそれに対応するＰＴＳｖｉｄは減算器２１
７のそれぞれの入力端子に結合される。減算器２１７は
次の関係式に従って信号ΔＶ−ＰＴＳを発生する。 ΔＶ−ＰＴＳ＝ＰＴＳｖｉｄ−ＬＶＳ 信号ΔＶ−ＰＴＳとΔＡ−ＰＴＳはさらに次の減算器２
１９のそれぞれの入力端子に結合される。減算器２１９
は次の関係式に従ってオーディオ／ビデオ同期誤差信号
ＥＲＲＰＴＳを発生する。 ＥＲＲＰＴＳ＝ΔＶ−ＰＴＳ−ΔＡ−ＰＴＳ
は減算器２１８のそれぞれの入力端子に結合される。減
算器２１８は次の関係式に従って信号ΔＡ−ＰＴＳを発
生する。 ΔＡ−ＰＴＳ＝ＰＴＳａｕｄ−ＬＡＳ ＬＶＳおよびそれに対応するＰＴＳｖｉｄは減算器２１
７のそれぞれの入力端子に結合される。減算器２１７は
次の関係式に従って信号ΔＶ−ＰＴＳを発生する。 ΔＶ−ＰＴＳ＝ＰＴＳｖｉｄ−ＬＶＳ 信号ΔＶ−ＰＴＳとΔＡ−ＰＴＳはさらに次の減算器２
１９のそれぞれの入力端子に結合される。減算器２１９
は次の関係式に従ってオーディオ／ビデオ同期誤差信号
ＥＲＲＰＴＳを発生する。 ＥＲＲＰＴＳ＝ΔＶ−ＰＴＳ−ΔＡ−ＰＴＳ
【００２５】オーディオとビデオを同期させるには、オ
ーディオ／ビデオ同期誤差をゼロにする必要がある。従
って、対応するオーディオとビデオのＰＴＳの値の差が
その対応するＰＴＳの発生の時間間隔（局部リファレン
スの単位で）に等しい時に、そのオーディオ信号とビデ
オ信号は同期する。
ーディオ／ビデオ同期誤差をゼロにする必要がある。従
って、対応するオーディオとビデオのＰＴＳの値の差が
その対応するＰＴＳの発生の時間間隔（局部リファレン
スの単位で）に等しい時に、そのオーディオ信号とビデ
オ信号は同期する。
【００２６】誤差信号ＥＲＲＰＴＳに基づいてオーディ
オ／ビデオ同期を調整するために２つの手法が用いられ
る。すなわち、データ部分のスキップ（ｓｋｉｐ）を繰
り返しおよび変換クロックの偏移である。一定の期間す
なわち“フレーム”のオーディオ信号をスキップする
と、オーディオデータ・ストリームはビデオ信号に対し
て一定の期間だけ進められる。繰り返す（データを消費
せずに消音する）と、オーディオデータ・ストリームは
ビデオ信号に対して一定の期間だけ遅延される。オーデ
ィオフレームをスキップしたり繰り返したりすること
は、多くの条件下で聞き取れるので、同期の粗い調整に
のみ利用される。それでも、短時間のスキップまたは繰
り返しは、識別できるオーディオ／ビデオ同期誤差に対
して好ましい。もしオーディオフレームが４０ｍｓｅｃ
以内であれば、スキップ／繰り返しによる粗い調整で、
同期誤差は±２０ｍｓｅｃとなり、これはオーディオ／
ビデオ同期に関する基準の範囲内にある。しかしなが
ら、オーディオ変換時間軸がオーディオ信号源の時間軸
と一致しなければ、この同期は劣化する。いったん同期
が粗く調整されると、オーディオ変換クロック周波数を
変えて、オーディオ／ビデオ同期はさらに細かく調整さ
れる。
オ／ビデオ同期を調整するために２つの手法が用いられ
る。すなわち、データ部分のスキップ（ｓｋｉｐ）を繰
り返しおよび変換クロックの偏移である。一定の期間す
なわち“フレーム”のオーディオ信号をスキップする
と、オーディオデータ・ストリームはビデオ信号に対し
て一定の期間だけ進められる。繰り返す（データを消費
せずに消音する）と、オーディオデータ・ストリームは
ビデオ信号に対して一定の期間だけ遅延される。オーデ
ィオフレームをスキップしたり繰り返したりすること
は、多くの条件下で聞き取れるので、同期の粗い調整に
のみ利用される。それでも、短時間のスキップまたは繰
り返しは、識別できるオーディオ／ビデオ同期誤差に対
して好ましい。もしオーディオフレームが４０ｍｓｅｃ
以内であれば、スキップ／繰り返しによる粗い調整で、
同期誤差は±２０ｍｓｅｃとなり、これはオーディオ／
ビデオ同期に関する基準の範囲内にある。しかしなが
ら、オーディオ変換時間軸がオーディオ信号源の時間軸
と一致しなければ、この同期は劣化する。いったん同期
が粗く調整されると、オーディオ変換クロック周波数を
変えて、オーディオ／ビデオ同期はさらに細かく調整さ
れる。
【００２７】誤差信号ＥＲＲＰＴＳはフィルタ／処理装
置２１６に供給される。フィルタの機能は、誤差信号Ｅ
ＲＲＰＴＳを平滑にし、信号雑音により発生されるかも
知れない異常な作用を最小限度にする。次に、装置２１
６の処理機能が、平滑にされた誤差信号を検査し、オー
ディオ信号とビデオ信号の粗い同期を達成するためにオ
ーディオのスキップ／繰り返しを使用すべきか、それと
も細かい同期を達成するためにオーディオ処理周波数の
調整を利用すべきかを決定する。粗い同期調整が必要で
あると決定されれば、処理装置２１６はオーディオ復元
装置２１２に制御信号（Ｓ／Ｒ）を供給して、復元され
た現在のオーディオフレームをスキップするかまたは繰
り返すようにオーディオ復元装置２１２を調節する。あ
るいは、粗い調整に加えて、細かい調整が必要であるこ
とが決定されれば、処理装置２１６はオーディオ時間軸
回路２１５に制御信号を供給して、オーディオ処理クロ
ック信号の周波数を調整する。
置２１６に供給される。フィルタの機能は、誤差信号Ｅ
ＲＲＰＴＳを平滑にし、信号雑音により発生されるかも
知れない異常な作用を最小限度にする。次に、装置２１
６の処理機能が、平滑にされた誤差信号を検査し、オー
ディオ信号とビデオ信号の粗い同期を達成するためにオ
ーディオのスキップ／繰り返しを使用すべきか、それと
も細かい同期を達成するためにオーディオ処理周波数の
調整を利用すべきかを決定する。粗い同期調整が必要で
あると決定されれば、処理装置２１６はオーディオ復元
装置２１２に制御信号（Ｓ／Ｒ）を供給して、復元され
た現在のオーディオフレームをスキップするかまたは繰
り返すようにオーディオ復元装置２１２を調節する。あ
るいは、粗い調整に加えて、細かい調整が必要であるこ
とが決定されれば、処理装置２１６はオーディオ時間軸
回路２１５に制御信号を供給して、オーディオ処理クロ
ック信号の周波数を調整する。
【００２８】処理アルゴリズムを図４のフローチャート
に詳しく示す。開始で示されるシステムの初期設定（４
００）の後、システムはオーディオ復元装置を監視して
ＰＴＳａｕｄの発生を調べる（４０１）。もしＰＴＳ
ａｕｄが検出されればそれが読み取られ、局部クロック
・リファレンスＬＡＳが捕捉され貯えられる（４０
３）。もしＰＴＳａｕｄが発生していなければ、システ
ムはビデオ圧縮装置を監視してＰＴＳｖｉｄを調べる
（４０２）。ＰＴＳｖｉｄが発生していればＰＴＳ
ｖｉｄは読み取られ、局部クロック・リファレンスＬＶ
Ｓは捕捉され貯えられる（４０４）。ＰＴＳａｕｄとＰ
ＴＳｖｉｄの両方が読み取られると次の式に従ってＥＲ
ＲＰＴＳが計算される（４０５）。 ＥＲＲＰＴＳ＝ΔＶ−ＰＴＳ−ΔＡ−ＰＴＳ 誤差信号の大きさを検査してそれがオーディオフレーム
期間の１／２以上であるかどうか判定する（４０６）。
もしそれがオーディオフレーム期間の１／２より大きけ
れば、誤差信号の極性を検査する（４０７）。極性が正
であれば、現在のオーディオフレームが繰り返される
（４０９）。極性が負であれば現在のオーディオフレー
ムはスキップされる（４０８）。１フレームをスキップ
または繰り返した後、システムは開始位置に戻り、次の
ＰＴＳの発生を待つ。
に詳しく示す。開始で示されるシステムの初期設定（４
００）の後、システムはオーディオ復元装置を監視して
ＰＴＳａｕｄの発生を調べる（４０１）。もしＰＴＳ
ａｕｄが検出されればそれが読み取られ、局部クロック
・リファレンスＬＡＳが捕捉され貯えられる（４０
３）。もしＰＴＳａｕｄが発生していなければ、システ
ムはビデオ圧縮装置を監視してＰＴＳｖｉｄを調べる
（４０２）。ＰＴＳｖｉｄが発生していればＰＴＳ
ｖｉｄは読み取られ、局部クロック・リファレンスＬＶ
Ｓは捕捉され貯えられる（４０４）。ＰＴＳａｕｄとＰ
ＴＳｖｉｄの両方が読み取られると次の式に従ってＥＲ
ＲＰＴＳが計算される（４０５）。 ＥＲＲＰＴＳ＝ΔＶ−ＰＴＳ−ΔＡ−ＰＴＳ 誤差信号の大きさを検査してそれがオーディオフレーム
期間の１／２以上であるかどうか判定する（４０６）。
もしそれがオーディオフレーム期間の１／２より大きけ
れば、誤差信号の極性を検査する（４０７）。極性が正
であれば、現在のオーディオフレームが繰り返される
（４０９）。極性が負であれば現在のオーディオフレー
ムはスキップされる（４０８）。１フレームをスキップ
または繰り返した後、システムは開始位置に戻り、次の
ＰＴＳの発生を待つ。
【００２９】ステップ４０６で、もし誤差信号の大きさ
がオーディオフレーム期間の１／２以下であれば、その
誤差を検査してゼロより大きいか確かめる（４１０）。
誤差がゼロより大きければ、その誤差が以前の誤差信号
より小さいか確かめる（４１２）。前の誤差信号より小
さければ、それはこのシステムが同期に向かって近づい
ていることを示しており、同期制御パラメータは変更さ
れない。システムは開始位置に戻って次のＰＴＳを待
つ。逆に、もし誤差が前の誤差信号より増加していれ
ば、オーディオシステム処理クロックはその周波数を少
なくするよう調整される（４１４）。
がオーディオフレーム期間の１／２以下であれば、その
誤差を検査してゼロより大きいか確かめる（４１０）。
誤差がゼロより大きければ、その誤差が以前の誤差信号
より小さいか確かめる（４１２）。前の誤差信号より小
さければ、それはこのシステムが同期に向かって近づい
ていることを示しており、同期制御パラメータは変更さ
れない。システムは開始位置に戻って次のＰＴＳを待
つ。逆に、もし誤差が前の誤差信号より増加していれ
ば、オーディオシステム処理クロックはその周波数を少
なくするよう調整される（４１４）。
【００３０】ステップ４１０で、もし誤差がゼロより小
さい（負である）なら、前の誤差信号より大きいか確か
める（４１１）。前の誤差信号より大きければ、これも
やはりシステムが同期の方へ近づいていることを示して
おり、同期制御パラメータは変更されない。もし現在の
誤差信号が前の誤差信号より小さければ、システムは更
に同期がはずれているので、オーディオ処理クロック周
波数は増加される（４１３）。処理ステップ４１４と４
１３の後、システムは開始位置に戻り次のＰＴＳの発生
を待つ。この例では、オーディオ／ビデオ同期誤差がオ
ーディオフレーム期間の１／２以下に減らされるまで、
オーディオフレームをスキップしたり繰り返したりし
て、システムは粗い調整だけを行うことが注目される。
さい（負である）なら、前の誤差信号より大きいか確か
める（４１１）。前の誤差信号より大きければ、これも
やはりシステムが同期の方へ近づいていることを示して
おり、同期制御パラメータは変更されない。もし現在の
誤差信号が前の誤差信号より小さければ、システムは更
に同期がはずれているので、オーディオ処理クロック周
波数は増加される（４１３）。処理ステップ４１４と４
１３の後、システムは開始位置に戻り次のＰＴＳの発生
を待つ。この例では、オーディオ／ビデオ同期誤差がオ
ーディオフレーム期間の１／２以下に減らされるまで、
オーディオフレームをスキップしたり繰り返したりし
て、システムは粗い調整だけを行うことが注目される。
【００３１】別の実施例では、それぞれのオーディオフ
レームの大きさに関連する予め定められた閾値と濾波済
み誤差信号が比較される。もし誤差信号が閾値より小さ
ければ、オーディオとビデオのタイミング誤差がオーデ
ィオフレームよりも小さいことを示しており、誤差信号
はオーディオ時間軸回路２１５に結合され、ここで、オ
ーディオ信号処理（復元）クロックの周波数を調整する
のに利用される。もし誤差信号が閾値より大きければ、
誤差信号をオーディオフレーム期間で割って、オーディ
オ信号とビデオ信号が整合していないオーディオフレー
ムの数を確かめる。得られた商の整数部分がオーディオ
復元装置に供給され、オーディオフレームをその数だけ
スキップするか繰り返すようにオーディオ復元装置を調
整する。誤差信号の極性により、オーディオフレームを
飛ばすべきかまたは繰り返すべきかが決定される。通
常、圧縮されたデータは復号化される前にバッファメモ
リの中に配置されるので、オーディオフレームを飛ばす
ことまたは繰り返すことは、メモリの読取り／書込みコ
マンドを制御可能にイネーブルするという簡単な事柄で
ある。
レームの大きさに関連する予め定められた閾値と濾波済
み誤差信号が比較される。もし誤差信号が閾値より小さ
ければ、オーディオとビデオのタイミング誤差がオーデ
ィオフレームよりも小さいことを示しており、誤差信号
はオーディオ時間軸回路２１５に結合され、ここで、オ
ーディオ信号処理（復元）クロックの周波数を調整する
のに利用される。もし誤差信号が閾値より大きければ、
誤差信号をオーディオフレーム期間で割って、オーディ
オ信号とビデオ信号が整合していないオーディオフレー
ムの数を確かめる。得られた商の整数部分がオーディオ
復元装置に供給され、オーディオフレームをその数だけ
スキップするか繰り返すようにオーディオ復元装置を調
整する。誤差信号の極性により、オーディオフレームを
飛ばすべきかまたは繰り返すべきかが決定される。通
常、圧縮されたデータは復号化される前にバッファメモ
リの中に配置されるので、オーディオフレームを飛ばす
ことまたは繰り返すことは、メモリの読取り／書込みコ
マンドを制御可能にイネーブルするという簡単な事柄で
ある。
【００３２】商の小数部分はオーディオ時間軸回路２１
５に結合され、ここで、オーディオ／ビデオ同期を微調
整するために、小数部分はオーディオ処理クロックを調
整するのに利用される。
５に結合され、ここで、オーディオ／ビデオ同期を微調
整するために、小数部分はオーディオ処理クロックを調
整するのに利用される。
【００３３】オーディオＰＴＳの発生率はオーディオ復
元装置の処理速度に比例する。オーディオ復元装置の処
理速度は、オーディオ復元装置を動作させるのに使用さ
れるクロック信号の周波数に正比例する。もしオーディ
オ復元装置のクロック周波数がビデオ復元装置を動作さ
せるのに使用されるクロックと無関係であり、かつ細か
く調整できるならば、オーディオとビデオのＰＴＳの相
対的な発生率は調整することができ、そしてオーディオ
とビデオは細かく同期させることができる。
元装置の処理速度に比例する。オーディオ復元装置の処
理速度は、オーディオ復元装置を動作させるのに使用さ
れるクロック信号の周波数に正比例する。もしオーディ
オ復元装置のクロック周波数がビデオ復元装置を動作さ
せるのに使用されるクロックと無関係であり、かつ細か
く調整できるならば、オーディオとビデオのＰＴＳの相
対的な発生率は調整することができ、そしてオーディオ
とビデオは細かく同期させることができる。
【００３４】復元されたオーディオ信号はＤＡ変換器２
２７に結合される。ＤＡ変換器２２７からのアナログ出
力信号は、抵抗２２８を介して別のアナログ処理回路
（図示せず）に結合される。ミューティング・トランジ
スタ２２９の導通路は、抵抗２２８と大地電位の間に結
合される。トランジスタ２２９の制御電極は、閾値検出
器２２５の出力結線に結合される。１Ｖｂｅより大きい
正の制御電圧により、トランジスタ２２９はＤＡ変換器
２２７からのオーディオ出力信号を大地電位にクランプ
し、それによってオーディオ信号をミューティングす
る。
２７に結合される。ＤＡ変換器２２７からのアナログ出
力信号は、抵抗２２８を介して別のアナログ処理回路
（図示せず）に結合される。ミューティング・トランジ
スタ２２９の導通路は、抵抗２２８と大地電位の間に結
合される。トランジスタ２２９の制御電極は、閾値検出
器２２５の出力結線に結合される。１Ｖｂｅより大きい
正の制御電圧により、トランジスタ２２９はＤＡ変換器
２２７からのオーディオ出力信号を大地電位にクランプ
し、それによってオーディオ信号をミューティングす
る。
【００３５】通常、圧縮されたオーディオ信号は、左信
号、右信号などのような複数の成分を含んでいる。簡単
にするために、図２は唯１つのオーディオ出力を示すも
のであるが、各オーディオ・チャンネルは共通のミュー
ティング制御信号により制御されるミューティング回路
を含んでいる。
号、右信号などのような複数の成分を含んでいる。簡単
にするために、図２は唯１つのオーディオ出力を示すも
のであるが、各オーディオ・チャンネルは共通のミュー
ティング制御信号により制御されるミューティング回路
を含んでいる。
【００３６】オーディオ信号をミューティングすること
は種々の理由で実行され、リップ同期が失われたからで
はない。この装置は、リップ同期エラーに基づいてオー
ディオをミューティングするという点で独特である。
は種々の理由で実行され、リップ同期が失われたからで
はない。この装置は、リップ同期エラーに基づいてオー
ディオをミューティングするという点で独特である。
【００３７】人間である視聴者は、−２０ｍｓまたは＋
４０ｍｓのリップ同期エラーに気づく。例示的システム
の場合、リップ同期エラーが約１３ｍｓを超えると、オ
ーディオがミューティングされる。１３ｍｓという閾値
は、２０ｍｓより小さいが、ＭＰＥＧ１、層（ｌａｙｅ
ｒ）ＩＩオーディオ・フレーム（これは２４ｍｓ）の１
／２より大きく選定された。この閾値は、ＭＰＥＧ１、
層ＩＩのオーディオ・フレームの１／２より僅かに大き
く選定された。その理由は、オーディオ／ビデオ同期フ
レームのスキップと繰り返しの場合、半分のフレーム
（１２ｍｓ）における初期同期状態が可能であり、また
約１２ｍｓの閾値で同期しているがミューティングされ
たオーディオが生じるからである。また、１／２フレー
ムに等しい閾値は、クロックおよびＰＴＳストローブ・
サンプリングの不安定性に因る計算されたリップ同期エ
ラーにおける小さな変動による断続的なミューティング
を発生する。
４０ｍｓのリップ同期エラーに気づく。例示的システム
の場合、リップ同期エラーが約１３ｍｓを超えると、オ
ーディオがミューティングされる。１３ｍｓという閾値
は、２０ｍｓより小さいが、ＭＰＥＧ１、層（ｌａｙｅ
ｒ）ＩＩオーディオ・フレーム（これは２４ｍｓ）の１
／２より大きく選定された。この閾値は、ＭＰＥＧ１、
層ＩＩのオーディオ・フレームの１／２より僅かに大き
く選定された。その理由は、オーディオ／ビデオ同期フ
レームのスキップと繰り返しの場合、半分のフレーム
（１２ｍｓ）における初期同期状態が可能であり、また
約１２ｍｓの閾値で同期しているがミューティングされ
たオーディオが生じるからである。また、１／２フレー
ムに等しい閾値は、クロックおよびＰＴＳストローブ・
サンプリングの不安定性に因る計算されたリップ同期エ
ラーにおける小さな変動による断続的なミューティング
を発生する。
【００３８】ミューティング制御信号は閾値検出器２２
５により発生される。この閾値検出器２２５は減算器２
１９から得られるオーディオ／ビデオ同期エラー信号を
監視する。エラー信号が１３ｍｓに対応する値を超える
と、ミューティング制御値が発生される。間違ったミュ
ーティング信号を発生させるノイズあるいは他の一時的
な状態を排除するために、減算器２１９からのエラー信
号は、閾値検出器２２５に供給される前に低域濾波され
ることがある。
５により発生される。この閾値検出器２２５は減算器２
１９から得られるオーディオ／ビデオ同期エラー信号を
監視する。エラー信号が１３ｍｓに対応する値を超える
と、ミューティング制御値が発生される。間違ったミュ
ーティング信号を発生させるノイズあるいは他の一時的
な状態を排除するために、減算器２１９からのエラー信
号は、閾値検出器２２５に供給される前に低域濾波され
ることがある。
【００３９】検出器２２５から出てＤＡ変換器２２７と
オーディオ復元装置２１２に入る点線の矢印は、代りの
ミューティング実行例を示すものである。例えば、ミュ
ーティング制御信号は、ＤＡ変換器２２７の出力あるい
は復元装置２１２の出力を発生させないように設計され
る。いずれの例においても、この不能化機能は、出力信
号のダイナミックレンジの間の中ほどに信号の振幅値を
出力するように、それぞれの処理要素を条件づけるよう
に構成される。また、図２の構成は、ビデオ・ミューテ
ィング（すなわちブランキング）がビデオＤＡ変換器２
２４の制御により実行されること示す。
オーディオ復元装置２１２に入る点線の矢印は、代りの
ミューティング実行例を示すものである。例えば、ミュ
ーティング制御信号は、ＤＡ変換器２２７の出力あるい
は復元装置２１２の出力を発生させないように設計され
る。いずれの例においても、この不能化機能は、出力信
号のダイナミックレンジの間の中ほどに信号の振幅値を
出力するように、それぞれの処理要素を条件づけるよう
に構成される。また、図２の構成は、ビデオ・ミューテ
ィング（すなわちブランキング）がビデオＤＡ変換器２
２４の制御により実行されること示す。
【００４０】図５は、別のミューティング構成例を示
す。この実施例において、フィルタ２１６により発生さ
れるスキップ／リピート（Ｓ／Ｒ）信号は、主のミュー
ティング制御信号として使用される。この信号は、オア
ゲート２３０を介してミューティング回路に結合され
る。個別のシステムにおいて、オーディオの時間軸を調
整するために使われる精密な制御が、少なくとも１／２
のオーディオ・フレームを含む範囲にわたるならば、閾
値検出器２３１は、オーディオの時間軸の細かい制御信
号を監視し、第２のミューティング制御信号を発生する
ために含まれる。この第２の制御信号も、オアゲート２
３０を介してミューティング回路に結合される。
す。この実施例において、フィルタ２１６により発生さ
れるスキップ／リピート（Ｓ／Ｒ）信号は、主のミュー
ティング制御信号として使用される。この信号は、オア
ゲート２３０を介してミューティング回路に結合され
る。個別のシステムにおいて、オーディオの時間軸を調
整するために使われる精密な制御が、少なくとも１／２
のオーディオ・フレームを含む範囲にわたるならば、閾
値検出器２３１は、オーディオの時間軸の細かい制御信
号を監視し、第２のミューティング制御信号を発生する
ために含まれる。この第２の制御信号も、オアゲート２
３０を介してミューティング回路に結合される。
【００４１】図５の装置は、別の取り得るミューティン
グ回路を示し、このミューティング回路はアンドゲート
２２６を含んでおり、復元装置２１２からの圧縮解除さ
れたオーディオ信号をＤＡ変換器２２７に選択的に結合
する。通常、オーディオ信号はバイポーラ（ＡＣ）であ
り、零の値を中心にスイングする。非結合状態にあると
き、アンドゲート２２６は、信号のダイナミックレンジ
の真ん中で零の値を好ましく出力する。
グ回路を示し、このミューティング回路はアンドゲート
２２６を含んでおり、復元装置２１２からの圧縮解除さ
れたオーディオ信号をＤＡ変換器２２７に選択的に結合
する。通常、オーディオ信号はバイポーラ（ＡＣ）であ
り、零の値を中心にスイングする。非結合状態にあると
き、アンドゲート２２６は、信号のダイナミックレンジ
の真ん中で零の値を好ましく出力する。
【００４２】現在、圧縮されたオーディオ／ビデオ直接
放送衛星（ｄｉｒｅｃｔ ｂｒｏａｄｃａｓｔ ｓａｔ
ｅｌｌｉｔｅ）システムが、複数のパケット化された番
組が時分割多重化され、単一のトランスポンダによって
送られる場合に開発されている。個々の番組はオーディ
オ信号だけを含んでおり、リップ同期の問題を排除去す
る。しかしながら、システム・クロックが同期していな
ければ、望ましくないオーディオが再生されることがあ
る。従って、図３に示すクロック制御装置３９により発
生されるエラー信号を監視するように、別の閾値検出器
２３２が設けられる。この閾値検出器２３２は、クロッ
ク制御装置３９により発生されるエラー信号が固定され
た状態からの周波数偏移、例えば０．２を表わすとき、
ミューティング制御信号を発生する。このミューティン
グ制御信号はオアゲート２３０に結合され、システム・
クロックが対応する符号化システム・クロックと実質的
に同期するまでオーディオ・ミューティングを生じさせ
る。同様に、検出装置がオーディオ・時間軸回路２１５
の周波数偏移を測定するように結合され、ゲート２３０
にオア接続される別のミューティング信号を発生する。
放送衛星（ｄｉｒｅｃｔ ｂｒｏａｄｃａｓｔ ｓａｔ
ｅｌｌｉｔｅ）システムが、複数のパケット化された番
組が時分割多重化され、単一のトランスポンダによって
送られる場合に開発されている。個々の番組はオーディ
オ信号だけを含んでおり、リップ同期の問題を排除去す
る。しかしながら、システム・クロックが同期していな
ければ、望ましくないオーディオが再生されることがあ
る。従って、図３に示すクロック制御装置３９により発
生されるエラー信号を監視するように、別の閾値検出器
２３２が設けられる。この閾値検出器２３２は、クロッ
ク制御装置３９により発生されるエラー信号が固定され
た状態からの周波数偏移、例えば０．２を表わすとき、
ミューティング制御信号を発生する。このミューティン
グ制御信号はオアゲート２３０に結合され、システム・
クロックが対応する符号化システム・クロックと実質的
に同期するまでオーディオ・ミューティングを生じさせ
る。同様に、検出装置がオーディオ・時間軸回路２１５
の周波数偏移を測定するように結合され、ゲート２３０
にオア接続される別のミューティング信号を発生する。
【図１】オーディオ／ビデオ圧縮装置のブロック図であ
る。
る。
【図２】本発明を具体化するオーディオ／ビデオ復元装
置のブロック図である。
置のブロック図である。
【図３】圧縮装置のシステム・クロックとほぼ同じレー
トを有する受信機システム・クロック信号を供給する装
置のブロック図である。
トを有する受信機システム・クロック信号を供給する装
置のブロック図である。
【図４】図２の装置の動作のフローチャートである。
【図５】図２において実施される、代わりのミューティ
ング回路のプロック図である。
ング回路のプロック図である。
１０ オーディオ／ビデオ信号源 １１ ビデオ信号圧縮装置 １２ フォーマット装置 １３ トランスポート処理装置 １４ レート・バッファ １７ トランスポート処理装置 １８ オーディオ信号圧縮装置 ２１ システム制御装置 ２２ システム・クロック ３１ 補助パケット検出器 ３３ ＴＰ制御装置 ３４ メモリ ３７ 電圧制御発振器（ＶＣＸＯ） ３８ 低域フィルタ ３９ クロック制御装置 ２０２ 逆トランスポート処理装置 ２０６ レート・バッファ ２０８ システム・クロック ２１０ システム制御装置 ２１２ オーディオ復元装置 ２１４ ビデオ復元装置 ２１５ オーディオ時間軸回路 ２１６ フィルタ／処理装置
Claims (10)
- 【請求項１】 圧縮されたオーディオ／ビデオ信号を処
理する受像機における信号処理装置であって、 前記圧縮されたオーディオ／ビデオ信号を供給する検波
器と、 前記圧縮されたオーディオ／ビデオ信号に応答し、復元
されたオーディオ信号を供給するオーディオ復元装置
と、 前記圧縮されたオーディオ／ビデオ信号に応答し、復元
されたビデオ信号を供給するビデオ復元装置と、 関連する復元されたオーディオ信号と復元されたビデオ
信号の非同期の測定値であるエラー信号を発生する検出
手段と、 前記エラー信号が所定の閾値を超えるとき、前記復元さ
れたオーディオ信号をミューティングするミューティン
グ手段とを含む、前記信号処理装置。 - 【請求項２】 前記ミューティング手段が、 前記エラー信号に応答し、該エラー信号が前記所定の閾
値より大きいとき第１の状態をとり、前記所定の閾値よ
り小さいとき第２の状態をとる制御信号を発生する閾値
検出器と、 前記制御信号に応答し、前記制御信号が前記第２の状態
を示すとき前記復元されたオーディオ信号を送り、前記
制御信号が前記第１の状態を示すとき前記復元されたオ
ーディオ信号の代りに置換値を供給する信号クランプ手
段とから成る、請求項１記載の信号処理装置。 - 【請求項３】 請求項２記載の信号処理装置であって、 前記クランプ手段が前記復元されたオーディオ信号を受
け取るように結合されたＤＡ変換器を含んでいる、前記
信号処理装置。 - 【請求項４】 前記クランプ手段が前記復元されたオー
ディオ信号を受け取るように結合され、前記閾値検出器
に結合されるイネーブル入力を有するアンドゲートを含
んでいる、請求項２記載の信号処理装置。 - 【請求項５】 請求項２記載の信号処理装置であって、 前記圧縮されたオーディオ／ビデオ信号に応答し、前記
圧縮されたオーディオ／ビデオ信号の発生に使われるエ
ンコーダ用のシステム・クロック信号と所定の関係を有
するシステム・クロック信号を発生し、且つ前記システ
ム・クロック信号の非同期の測定値である別のエラー信
号を発生する検出器を含んでいる同期回路と、 前記別のエラー信号に応答し、該別のエラー信号が別の
所定閾値より大きいときまたは小さいとき、それぞれ第
１の状態または第２の状態をとる制御信号を発生する別
の閾値検出器と、 前記閾値検出器からの前記制御信号と前記別の閾値検出
器からの前記制御信号とを合成すオア回路とを含む、前
記信号処理装置。 - 【請求項６】 エラー信号を発生する前記検出手段がリ
ップ同期検出器である、請求項１記載の信号処理装置。 - 【請求項７】 前記オーディオ／ビデオ信号のオーディ
オ成分とビデオ成分が、所定の時間に決められ、エンコ
ーダのシステム・クロックに関連するタイム・スタンプ
ＰＴＳａｕｄとＰＴＳｖｉｄをそれぞれ含んでおり、且
つ前記オーディオ復元装置とビデオ復元装置が、前記タ
イム・スタンプＰＴＳａｕｄとＰＴＳｖｉｄに関連する
復元されたオーディオ信号とビデオ信号を供給する請求
項１記載の信号処理装置であって、 前記エラー信号を発生する前記検出手段が、 ローカル・クロック信号源と、 前記ローカル・クロック信号の各サイクルにおいて、対
応するタイム・スタンプＰＴＳａｕｄとＰＴＳｖｉｄの
発生間の時間Ｔを決定する手段と、 対応するタイム・スタンプＰＴＳａｕｄとＰＴＳｖｉｄ
の値の間の差を計算し、この差と前記時間Ｔとを比較し
てオーディオ／ビデオ同期制御信号を発生する手段と、 前記オーディオ／ビデオ同期制御信号が所定の値を超え
るとき、前記エラー信号を発生する閾値検出器とを含ん
でいる、前記信号処理装置。 - 【請求項８】 前記各復元装置が所定の間隔でオーディ
オ信号を復元する請求項７記載の信号処理装置であっ
て、 前記オーディオ／ビデオ同期制御信号に応答し、復元さ
れたオーディオ信号とビデオ信号を同期化し、且つ前記
オーディオ信号の所定の時間をスキップまたは繰り返す
ように前記オーディオ復元装置を制御するための別の制
御信号を発生する装置を含んでいる手段と、 前記別の制御信号と前記エラー信号との論理和をとり、
前記ミューティング手段を制御する複合のエラー信号を
発生する回路とを含んでいる、前記信号処理装置。 - 【請求項９】 請求項７記載の信号処理装置であって、 前記圧縮されたオーディオ／ビデオ信号に応答し、前記
圧縮されたオーディオ／ビデオ信号の発生に使われるエ
ンコーダ用システム・クロック信号に前記ローカル・ク
ロック信号を同期化させ、前記システム・クロック信号
の非同期の測定値である別の制御信号を発生する検出器
とを含んでいる同期回路と、 前記別の制御信号に応答し、前記別の制御信号が別の所
定の閾値より大きいかもしくは小さいとき、それぞれ第
１の状態もしくは第２の状態をとる別のエラー信号を発
生する別の閾値検出器と、 前記閾値検出器からの前記制御信号と前記別の閾値検出
器からの前記制御信号とを合成するオア回路とを含む、
前記信号処理装置。 - 【請求項１０】 前記オーディオ／ビデオ信号のオーデ
ィオ成分とビデオ成分が、所定の時間で決まり且つエン
コーダ用システム・クロックに関連したそれぞれのタイ
ム・スタンプＰＴＳａｕｄとＰＴＳｖｉｄを含んでお
り、前記オーディオ復元装置とビデオ復元装置が、前記
タイプ・スタンプＰＴＳａｕｄとＰＴＳｖｉｄとに、関
連した復元されたオーディオ信号とビデオ信号とを供給
し、前記検出手段が、関連する復元されたオーディオと
ビデオについて、前記ＰＴＳａｕｄとＰＴＳｖｉｄの値
の間の差の関数として前記エラー信号を発生する、請求
項１記載の信号処理装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US08/245,113 US5467139A (en) | 1993-09-30 | 1994-05-17 | Muting apparatus for a compressed audio/video signal receiver |
| US245113 | 1994-05-17 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0846884A true JPH0846884A (ja) | 1996-02-16 |
| JP3932059B2 JP3932059B2 (ja) | 2007-06-20 |
Family
ID=22925345
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP14798595A Expired - Fee Related JP3932059B2 (ja) | 1994-05-17 | 1995-05-12 | 信号処理装置 |
Country Status (12)
| Country | Link |
|---|---|
| US (1) | US5467139A (ja) |
| EP (1) | EP0683604B1 (ja) |
| JP (1) | JP3932059B2 (ja) |
| KR (1) | KR100366401B1 (ja) |
| CN (1) | CN1088305C (ja) |
| BR (1) | BR9502039A (ja) |
| CA (1) | CA2147013C (ja) |
| DE (1) | DE69527573T2 (ja) |
| MY (1) | MY112618A (ja) |
| PL (1) | PL177313B1 (ja) |
| RU (1) | RU2150792C1 (ja) |
| TW (1) | TW325632B (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001078185A (ja) * | 1999-07-21 | 2001-03-23 | Thomson Licensing Sa | 信号処理装置 |
| JP2006509409A (ja) * | 2002-12-04 | 2006-03-16 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 音声／映像同期の自動検査方法 |
| US7158187B2 (en) | 2001-10-18 | 2007-01-02 | Matsushita Electric Industrial Co., Ltd. | Audio video reproduction apparatus, audio video reproduction method, program, and medium |
| WO2007000836A1 (ja) * | 2005-06-29 | 2007-01-04 | D & M Holdings Inc. | 再生装置 |
| US7711244B2 (en) | 2001-10-29 | 2010-05-04 | Panasonic Corporation | Video/audio synchronizing apparatus |
Families Citing this family (78)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5486864A (en) * | 1993-05-13 | 1996-01-23 | Rca Thomson Licensing Corporation | Differential time code method and apparatus as for a compressed video signal |
| JPH07202820A (ja) * | 1993-12-28 | 1995-08-04 | Matsushita Electric Ind Co Ltd | ビットレート制御システム |
| JP3408617B2 (ja) * | 1994-03-16 | 2003-05-19 | 富士通株式会社 | 画像符号化データの同期ワード多重化方式 |
| US5603016A (en) * | 1994-08-03 | 1997-02-11 | Intel Corporation | Method for synchronizing playback of an audio track to a video track |
| US5594660A (en) * | 1994-09-30 | 1997-01-14 | Cirrus Logic, Inc. | Programmable audio-video synchronization method and apparatus for multimedia systems |
| US5598352A (en) * | 1994-09-30 | 1997-01-28 | Cirrus Logic, Inc. | Method and apparatus for audio and video synchronizing in MPEG playback systems |
| US5920842A (en) * | 1994-10-12 | 1999-07-06 | Pixel Instruments | Signal synchronization |
| JP3575100B2 (ja) * | 1994-11-14 | 2004-10-06 | ソニー株式会社 | データ送信／受信装置及び方法並びにデータ記録／再生装置及び方法 |
| JP3149328B2 (ja) * | 1995-01-09 | 2001-03-26 | 松下電器産業株式会社 | 送信装置と受信装置 |
| US5920572A (en) * | 1995-06-30 | 1999-07-06 | Divicom Inc. | Transport stream decoder/demultiplexer for hierarchically organized audio-video streams |
| US7512698B1 (en) * | 1995-07-14 | 2009-03-31 | Broadband Royalty Corporation | Dynamic quality adjustment based on changing streaming constraints |
| US9832244B2 (en) | 1995-07-14 | 2017-11-28 | Arris Enterprises Llc | Dynamic quality adjustment based on changing streaming constraints |
| US5570372A (en) * | 1995-11-08 | 1996-10-29 | Siemens Rolm Communications Inc. | Multimedia communications with system-dependent adaptive delays |
| US5784572A (en) * | 1995-12-29 | 1998-07-21 | Lsi Logic Corporation | Method and apparatus for compressing video and voice signals according to different standards |
| US5835493A (en) * | 1996-01-02 | 1998-11-10 | Divicom, Inc. | MPEG transport stream remultiplexer |
| JPH09200569A (ja) * | 1996-01-17 | 1997-07-31 | Sony Corp | フレームシンクロナイザー |
| US5918205A (en) * | 1996-01-30 | 1999-06-29 | Lsi Logic Corporation | Audio decoder employing error concealment technique |
| US5920833A (en) * | 1996-01-30 | 1999-07-06 | Lsi Logic Corporation | Audio decoder employing method and apparatus for soft-muting a compressed audio signal |
| JP3052824B2 (ja) * | 1996-02-19 | 2000-06-19 | 日本電気株式会社 | オーディオ再生時刻調整回路 |
| US5828414A (en) * | 1996-02-23 | 1998-10-27 | Divicom, Inc. | Reduction of timing jitter in audio-video transport streams |
| US5917482A (en) * | 1996-03-18 | 1999-06-29 | Philips Electronics N.A. Corporation | Data synchronizing system for multiple memory array processing field organized data |
| WO1997041683A1 (en) * | 1996-04-29 | 1997-11-06 | Princeton Video Image, Inc. | Audio enhanced electronic insertion of indicia into video |
| KR100274434B1 (ko) | 1996-07-05 | 2000-12-15 | 모리시타 요이찌 | 디스플레이 시간 스탬핑과 다중 비디오 오브젝트평면의 동기화방법 |
| US6002441A (en) * | 1996-10-28 | 1999-12-14 | National Semiconductor Corporation | Audio/video subprocessor method and structure |
| US5864820A (en) * | 1996-12-20 | 1999-01-26 | U S West, Inc. | Method, system and product for mixing of encoded audio signals |
| US5845251A (en) * | 1996-12-20 | 1998-12-01 | U S West, Inc. | Method, system and product for modifying the bandwidth of subband encoded audio data |
| US6477496B1 (en) | 1996-12-20 | 2002-11-05 | Eliot M. Case | Signal synthesis by decoding subband scale factors from one audio signal and subband samples from different one |
| US6782365B1 (en) | 1996-12-20 | 2004-08-24 | Qwest Communications International Inc. | Graphic interface system and product for editing encoded audio data |
| US6463405B1 (en) | 1996-12-20 | 2002-10-08 | Eliot M. Case | Audiophile encoding of digital audio data using 2-bit polarity/magnitude indicator and 8-bit scale factor for each subband |
| US5864813A (en) * | 1996-12-20 | 1999-01-26 | U S West, Inc. | Method, system and product for harmonic enhancement of encoded audio signals |
| US6516299B1 (en) | 1996-12-20 | 2003-02-04 | Qwest Communication International, Inc. | Method, system and product for modifying the dynamic range of encoded audio signals |
| JP3000949B2 (ja) * | 1997-02-12 | 2000-01-17 | 日本電気株式会社 | 音声・画像同期圧縮再生装置及びその方法 |
| US6236681B1 (en) | 1997-07-31 | 2001-05-22 | Lsi Logic Corporation | Method for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
| US6289053B1 (en) | 1997-07-31 | 2001-09-11 | Lsi Logic Corporation | Architecture for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
| US6122316A (en) * | 1997-07-31 | 2000-09-19 | Lsi Logic Corporation | MPEG decoding system meeting 2-frame store and letterboxing requirements |
| US6266091B1 (en) | 1997-07-31 | 2001-07-24 | Lsi Logic Corporation | System and method for low delay mode operation video decoding |
| US6310918B1 (en) | 1997-07-31 | 2001-10-30 | Lsi Logic Corporation | System and method for motion vector extraction and computation meeting 2-frame store and letterboxing requirements |
| US6101221A (en) * | 1997-07-31 | 2000-08-08 | Lsi Logic Corporation | Video bitstream symbol extractor for use in decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements |
| US7366670B1 (en) * | 1997-08-05 | 2008-04-29 | At&T Corp. | Method and system for aligning natural and synthetic video to speech synthesis |
| KR19990040286A (ko) * | 1997-11-17 | 1999-06-05 | 윤종용 | 스크린 뮤트기능을 갖는 영상 재생장치 및 그에 따른 스크린 뮤트방법 |
| JP3063841B2 (ja) * | 1997-11-26 | 2000-07-12 | 日本電気株式会社 | オーディオ・ビデオ同期再生装置 |
| US6292490B1 (en) | 1998-01-14 | 2001-09-18 | Skystream Corporation | Receipts and dispatch timing of transport packets in a video program bearing stream remultiplexer |
| US6351471B1 (en) | 1998-01-14 | 2002-02-26 | Skystream Networks Inc. | Brandwidth optimization of video program bearing transport streams |
| US6351474B1 (en) * | 1998-01-14 | 2002-02-26 | Skystream Networks Inc. | Network distributed remultiplexer for video program bearing transport streams |
| US6195368B1 (en) | 1998-01-14 | 2001-02-27 | Skystream Corporation | Re-timing of video program bearing streams transmitted by an asynchronous communication link |
| US6246701B1 (en) | 1998-01-14 | 2001-06-12 | Skystream Corporation | Reference time clock locking in a remultiplexer for video program bearing transport streams |
| EP0973129A3 (en) | 1998-07-17 | 2005-01-12 | Matsushita Electric Industrial Co., Ltd. | Motion image data compression system |
| JP2000050182A (ja) * | 1998-08-03 | 2000-02-18 | Japan Advanced Inst Of Science & Technology Hokuriku | Ａ−ｖ用オーディオ信号処理方法 |
| DE19930824C2 (de) * | 1999-07-03 | 2001-05-31 | Grundig Ag | Bild- und Tonwiedergabegerät und Verfahren für dessen Betrieb |
| US6583821B1 (en) | 1999-07-16 | 2003-06-24 | Thomson Licensing S.A. | Synchronizing apparatus for a compressed audio/video signal receiver |
| DE19956913C2 (de) * | 1999-11-26 | 2001-11-29 | Grundig Ag | Verfahren und Vorrichtung zur Anpassung der Laufzeitdifferenz von Video- und Audiosignal in einem Fernsehgerät |
| JP2001231035A (ja) * | 2000-02-14 | 2001-08-24 | Nec Corp | 復号同期制御装置、復号装置、及び復号同期制御方法 |
| EP1139665A1 (en) * | 2000-03-29 | 2001-10-04 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for changing the output delay of audio or video data encoding |
| JP4481444B2 (ja) * | 2000-06-30 | 2010-06-16 | 株式会社東芝 | 画像符号化装置 |
| FR2815805B1 (fr) * | 2000-10-23 | 2005-09-02 | Telediffusion De France Tdf | Procede de synchronisation de signaux numeriques |
| US7039116B1 (en) * | 2000-11-07 | 2006-05-02 | Cisco Technology, Inc. | Methods and apparatus for embedding and format conversion of compressed video data |
| US7030930B2 (en) * | 2001-03-06 | 2006-04-18 | Ati Technologies, Inc. | System for digitized audio stream synchronization and method thereof |
| US8880709B2 (en) | 2001-09-12 | 2014-11-04 | Ericsson Television Inc. | Method and system for scheduled streaming of best effort data |
| US6956871B2 (en) * | 2002-04-19 | 2005-10-18 | Thomson Licensing | Apparatus and method for synchronization of audio and video streams |
| JP3629253B2 (ja) * | 2002-05-31 | 2005-03-16 | 株式会社東芝 | 音声再生装置および同装置で用いられる音声再生制御方法 |
| US7283566B2 (en) * | 2002-06-14 | 2007-10-16 | Silicon Image, Inc. | Method and circuit for generating time stamp data from an embedded-clock audio data stream and a video clock |
| US20040117840A1 (en) * | 2002-12-12 | 2004-06-17 | Boudreau Paul A. | Data enhanced multi-media system for a set-top terminal |
| EP1615433A4 (en) * | 2003-03-19 | 2010-05-26 | Panasonic Corp | DATA PROCESSING DEVICE |
| EP1635562B1 (en) * | 2003-05-28 | 2019-03-13 | Panasonic Corporation | Digital interface receiver apparatus |
| US7693222B2 (en) * | 2003-08-13 | 2010-04-06 | Ericsson Television Inc. | Method and system for re-multiplexing of content-modified MPEG-2 transport streams using PCR interpolation |
| US7471337B2 (en) * | 2004-06-09 | 2008-12-30 | Lsi Corporation | Method of audio-video synchronization |
| US7400653B2 (en) * | 2004-06-18 | 2008-07-15 | Dolby Laboratories Licensing Corporation | Maintaining synchronization of streaming audio and video using internet protocol |
| EP1766962A4 (en) * | 2004-06-22 | 2009-03-25 | Sarnoff Corp | METHOD AND APPARATUS FOR MEASURING AND / OR CORRECTING AUDIOVISUAL SYNCHRONIZATION |
| US20060209210A1 (en) * | 2005-03-18 | 2006-09-21 | Ati Technologies Inc. | Automatic audio and video synchronization |
| KR100638138B1 (ko) * | 2005-05-24 | 2006-10-24 | 주식회사 픽스트리 | 비디오/오디오 부호화 및 다중화 기능을 가진 하드웨어장치 및 그 작동 방법 |
| US8670537B2 (en) * | 2006-07-31 | 2014-03-11 | Cisco Technology, Inc. | Adjusting audio volume in a conference call environment |
| JPWO2011074383A1 (ja) | 2009-12-14 | 2013-04-25 | 新日鐵住金株式会社 | 誘導加熱装置の制御装置、誘導加熱システム及び誘導加熱装置の制御方法 |
| US8640181B1 (en) * | 2010-09-15 | 2014-01-28 | Mlb Advanced Media, L.P. | Synchronous and multi-sourced audio and video broadcast |
| TWI513320B (zh) * | 2012-06-25 | 2015-12-11 | Hon Hai Prec Ind Co Ltd | 視訊會議裝置及其唇形同步的方法 |
| CN104935827B (zh) * | 2014-03-21 | 2018-07-06 | 北京同步科技有限公司 | 视频帧同步时嵌入音频的处理系统及处理方法 |
| US10178281B2 (en) | 2014-07-28 | 2019-01-08 | Starkey Laboratories, Inc. | System and method for synchronizing audio and video signals for a listening system |
| US11228799B2 (en) * | 2019-04-17 | 2022-01-18 | Comcast Cable Communications, Llc | Methods and systems for content synchronization |
| US12542949B1 (en) * | 2024-07-30 | 2026-02-03 | Avago Technologies International Sales Pte. Limited | Systems and methods for latency optimization for cloud applications |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4313135B1 (en) * | 1980-07-28 | 1996-01-02 | J Carl Cooper | Method and apparatus for preserving or restoring audio to video |
| US4398220A (en) * | 1980-09-05 | 1983-08-09 | Tokyo Shibaura Denki Kabushiki Kaisha | Circuit for detecting the operational state of a television receiver |
| US5202761A (en) * | 1984-11-26 | 1993-04-13 | Cooper J Carl | Audio synchronization apparatus |
| USRE33535E (en) * | 1985-09-16 | 1991-02-12 | Audio to video timing equalizer method and apparatus | |
| US4703355A (en) * | 1985-09-16 | 1987-10-27 | Cooper J Carl | Audio to video timing equalizer method and apparatus |
| JPH06103859B2 (ja) * | 1988-10-24 | 1994-12-14 | 松下電器産業株式会社 | 音声信号復調回路 |
| JP2944131B2 (ja) * | 1990-03-22 | 1999-08-30 | 株式会社東芝 | ビデオ記録再生装置 |
| GB2244184B (en) * | 1990-05-16 | 1993-11-17 | Thames Television | Audio delay detector |
| JP2808884B2 (ja) * | 1990-10-31 | 1998-10-08 | 松下電器産業株式会社 | テレビジョン信号変換装置 |
| RU2012158C1 (ru) * | 1991-01-08 | 1994-04-30 | Поволжский институт информатики, радиотехники и связи | Приемник телевизионного сигнала |
| JPH0817485B2 (ja) * | 1991-01-29 | 1996-02-21 | 三洋電機株式会社 | Ｍｕｓｅ音声デコーダ |
| JPH05191784A (ja) * | 1992-01-13 | 1993-07-30 | Pioneer Electron Corp | Ｍｕｓｅ音声デコーダおよびｍｕｓｅ伝送システム |
| US5287182A (en) * | 1992-07-02 | 1994-02-15 | At&T Bell Laboratories | Timing recovery for variable bit-rate video on asynchronous transfer mode (ATM) networks |
| KR0155730B1 (ko) * | 1993-03-31 | 1998-11-16 | 김광호 | 뮤트회로 및 방법 |
-
1994
- 1994-05-17 US US08/245,113 patent/US5467139A/en not_active Expired - Lifetime
-
1995
- 1995-04-07 TW TW084103313A patent/TW325632B/zh not_active IP Right Cessation
- 1995-04-13 CA CA002147013A patent/CA2147013C/en not_active Expired - Fee Related
- 1995-04-27 MY MYPI95001099A patent/MY112618A/en unknown
- 1995-05-09 EP EP95107007A patent/EP0683604B1/en not_active Expired - Lifetime
- 1995-05-09 DE DE69527573T patent/DE69527573T2/de not_active Expired - Lifetime
- 1995-05-12 JP JP14798595A patent/JP3932059B2/ja not_active Expired - Fee Related
- 1995-05-13 KR KR1019950011793A patent/KR100366401B1/ko not_active Expired - Fee Related
- 1995-05-15 BR BR9502039A patent/BR9502039A/pt not_active IP Right Cessation
- 1995-05-16 CN CN95104856A patent/CN1088305C/zh not_active Expired - Lifetime
- 1995-05-16 PL PL95308615A patent/PL177313B1/pl not_active IP Right Cessation
- 1995-05-16 RU RU95107648/09A patent/RU2150792C1/ru not_active IP Right Cessation
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001078185A (ja) * | 1999-07-21 | 2001-03-23 | Thomson Licensing Sa | 信号処理装置 |
| US7158187B2 (en) | 2001-10-18 | 2007-01-02 | Matsushita Electric Industrial Co., Ltd. | Audio video reproduction apparatus, audio video reproduction method, program, and medium |
| US7711244B2 (en) | 2001-10-29 | 2010-05-04 | Panasonic Corporation | Video/audio synchronizing apparatus |
| JP2006509409A (ja) * | 2002-12-04 | 2006-03-16 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 音声／映像同期の自動検査方法 |
| US7924929B2 (en) | 2002-12-04 | 2011-04-12 | Trident Microsystems (Far East) Ltd. | Method of automatically testing audio-video synchronization |
| WO2007000836A1 (ja) * | 2005-06-29 | 2007-01-04 | D & M Holdings Inc. | 再生装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR100366401B1 (ko) | 2003-02-26 |
| PL308615A1 (en) | 1995-11-27 |
| CA2147013A1 (en) | 1995-11-18 |
| DE69527573D1 (de) | 2002-09-05 |
| RU95107648A (ru) | 1997-02-10 |
| KR950035369A (ko) | 1995-12-30 |
| CA2147013C (en) | 2004-12-07 |
| RU2150792C1 (ru) | 2000-06-10 |
| CN1116390A (zh) | 1996-02-07 |
| JP3932059B2 (ja) | 2007-06-20 |
| EP0683604A2 (en) | 1995-11-22 |
| PL177313B1 (pl) | 1999-10-29 |
| MY112618A (en) | 2001-07-31 |
| EP0683604A3 (en) | 1998-10-28 |
| US5467139A (en) | 1995-11-14 |
| CN1088305C (zh) | 2002-07-24 |
| EP0683604B1 (en) | 2002-07-31 |
| BR9502039A (pt) | 1996-01-16 |
| TW325632B (en) | 1998-01-21 |
| DE69527573T2 (de) | 2003-01-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3932059B2 (ja) | 信号処理装置 | |
| JP3633972B2 (ja) | 音声信号と映像信号を同期させる装置 | |
| US6583821B1 (en) | Synchronizing apparatus for a compressed audio/video signal receiver | |
| JP3645286B2 (ja) | ビデオ信号圧縮装置および圧縮方法 | |
| JP3657200B2 (ja) | 圧縮されたビデオ信号を発生する装置および伝達する方法 | |
| KR20070105947A (ko) | 압축 오디오/비디오 신호 수신기용 동기화 장치 및 방법 | |
| KR100224099B1 (ko) | 오디오/비디오 신호의 동기장치 및 방법 | |
| HK1034348B (en) | Synchronizing apparatus and method for a compressed audio/video signal receiver |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050803 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060104 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20060330 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20060404 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060626 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20060728 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20060810 |
|
| A072 | Dismissal of procedure [no reply to invitation to correct request for examination] |
Free format text: JAPANESE INTERMEDIATE CODE: A073 Effective date: 20061010 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20061120 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070306 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070308 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100323 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110323 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120323 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130323 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130323 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140323 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |