JPH025660A - 映像パケット音声パケット同期転送制御方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、映像パケット音声パケット同期転送制御方式
に関し、特に映像と音声等の情報を同期して転送するた
めに、通信網内でパケット順序を制御し、通信装置で待
合わせ制御を行う通信制御方式に関するものである。

〔従来の技術〕

従来、音声情報と映像情報を同時に伝送するための高速
ディジタル時分割多重化方式は提案されている（特願昭
６２　２６　Ｇ　９１３号明細書および図面参照）。ま
た、映像情報と音声等の情ＰＫを回線交換方式で転送す
る通信システムも存在する。

しかし、映像情報と音声情報とを共にパケット転送する
方式は、未だ存在しておらず、また、提案された資料も
見当らない。

映像情報と音声情報を回線交換方式で転送する方式にお
いては、回線交換であるため転送遅延は一定であり、映
像情報と音声等の情報とに人間が感知し得る遅延のずれ
ば生しない。従って、特に問題はなかった。

〔発明が解決しようとする課題〕

このように、映像情報と音声情報をパケットにより同期
転送する場合、通信網内での映像パケットと音声パケッ
トの各場所への到着時間に差異があり５両者の遅延時間
が異なるため、同期が困難であった。従って、未だ両パ
ケットの同期転送方式は存在していない。

本発明の目的は、このような従来の課題を解決し、映像
情報と音声情報の時間ずれを補正して、両バケツ１〜を
同期転送することにより、画像と音声を調和させること
が可能な映像パケット音声パケット回期転装制御方式を
提供することにある。

〔課題を解決するための手段〕

−１−２目的を達成するため１本発明の映像パケット音
声パケット同期転送制御方式は、映像情報と該映像情報
に付随する音声情報をそれぞれブロン９９１位に映像パ
ケットおよび音声パケットに組立てて転送する通信端末
装置において、パケット送信元の通信端末装置では、上
記映像パケットと音声パケットのパケット制御情報を格
納する部分に。

映像パケットの映像情報と、該映像情報に付随する音声
情報であることを相互に識別するための識別子符号を、
該映像パケットと音声パケットのそれぞれに設定して送
信し、該パケットの宛先の通信端末装置では、上記識別
子符号を用いて映像パケットと、該映像パケットの映像
情報に付随した音声情報の音声パケットどの間の伝送路
内での遅延の差異を最小になるように、いずれか一方の
パケットを待機させ、かつ順不同で到着してくる映像パ
ケット相互間の順序および音声パケット相互間の順序を
制御して、映像情報と音声情報とを同期させて出力する
ことに特徴がある。また、映像情報と該映像情報に付随
する音声情報をそれぞれブロック単位に映像パケットと
音声パケットに組立てて送信元の通信端末装置から交換
装置と中継装置を介して宛先の通信端末装置に転送する
通信網システムにおいて、パケット送信元の通信端末装
置では、Ｌ記映像パケットと音声パケットのバケツ１〜
制御情報を格納する部分に、映像パケットの映像情報と
、該映像情報に付随する音声情報であることを相互に識
別するための識別子符号を、該映像パケットと音声パケ
ットのそれぞれに設定して送信し、上記中継装置と交換
装置では、上記識″別子符号を用いて受信した映像パケ
ットと該映像パケットの映像情報に付随する音声情報の
音声パケットとの間の通信網内での遅延の差異を最小に
するように、いずれか一方のパケットを待機させ、かつ
順不同で到着してくる映像パケット相互間間の順序およ
び音声パケット間の順序を制御して、送信することにも
特徴がある。

〔作　　用〕 本発明においては、映像パケットと音声パケットの通信
網内の遅延の差異を吸収するために、映像パケットと音
声パケットのヘッダに識別子を設定し、映像パケット相
互間の順序、および音声パケット相互間の順序を制御す
るとともに、どちらかのパケットが遅れて到着した場合
には、先に到着したパケットをある時間だけ待機させ、
または遅れて到着したバケツ１〜を優先して転送させる
。

このようにして、通信網内での映像パケッｌ〜、音声パ
ケット間の到着時間の差異を吸収し、さらに宛先の通信
端末装置で上記識別子を判定して、同一識別子を持つ映
像パケットと音声パケットを同期して出力させる。

〔実施例〕

以下、本発明の実施例を１図面により詳細に説明する。

第１図は１本発明の一実施例を示す送信部および受信部
の構成図であって、（ａ）が送信部、（ｂ）が受信部で
ある。

第１図（、ｌ）において、１は画像情報を入力するため
の画像情報入力部、２は音声情報を人力するための音声
情報入力部、３は画像情報をディジタル符号に変換する
ための画像情報ディジタル符号化部、４は音声情報をデ
ィジタル符号に変換するための音声情報ディジタル符号
化部、５は画像情報のディジタル符号をバケツ１〜に組
み立てる画像情報パケット組立部、６は音声情報のディ
ジタル符号をパケットに組み立てる音声情報パケット組
立部、７は画像情報と音声情報のパケット組み立て時に
、画像パケットと音声パケットの両方に共通した識別子
を設定するための識別子制御部、８は通信網にアクセス
するための送信部、９は通信網である。

画像は１画像情報入力部１から入力されると。

直ちにアナログ電気信号に変換され、画像情報ディジタ
ル符号化部３に送られる。画像情報ディジタル符号化部
３は、アナログ電気信号をディジタル電気信号に変換し
１画像情報パケット組立部５に送る。

一方、音声は、音声情報入力部２に人力されると、直ち
にアナログ電気信号に変換され、音声情報ディジタル符
号化部４に送られる。音声情報ディジタル符号化部４は
、アナログ電気信号をディジタル電気信号に変換し、音
声情報パケット組立部６に送る。

識別子制御部７は、画像パケットまたは音声パケットが
組み立てられる周期に応じて、ある一定期間内に一意に
識、別可能な識別子符号、つまり重複がない識別子符号
を１画像情報パケット組立部５と音声情報パケット組立
部６に供給する。

画像情報パケット組立部５と音声情報パケット組立部６
とは、識別子制御部７からの識別子符号を各々画像パケ
ットおよび音声パケットの制御部に格納して、画像パケ
ットおよび音声パケットを組み立てる。組み立てられた
これらのパケットは。

それぞれ送信部８に送られる。送信部８は、通信網９へ
のアクセス制御機能を用いて、これらの画像パケットお
よび音声パケットを通信網９に送出する。

なお、映像パケットと音声パケットの各制御部は、送信
元および宛先のアドレスと、映像情報か音声情報かを識
別するための識別子と、映像情報に付随した音声情報で
あることを相互に識別するための識別子符号（例えば、
ある映像パケットの映像情報に付随する音声情報の音声
パケットであることを示す同一符号）等から構成されて
いる。

音声パケットは例えば６４ＫＨｚの速度で転送されるに
対して、映像パケットは例えば１．５ＭＩ（ｚの速度で
転送されるので１通信網内では伝送時間に差が生じて、
宛先の通信端末装置または通信網内の中継装置には、映
像パケットとそれに付随する音声の音声パケットとの間
で遅延差が生じてしまう。

第１図（ｂ）において、１０は通信網９から画像パケッ
ト、音声パケットの情報を受信する受Ｆ部、１１は画像
パケットから識別子符号を抽出し、パケットの画像情報
部と制御部とを分離する画像パケット分解部、１２は音
声パケットから識別子符号を抽出し、パケットの音声情
報部と制御部とを分離する音声バケツ１〜分解部、１３
は各々パケットの情報部と制御部、識別子符号からパケ
ットの順序、および同時性を保障するための制御を行う
音声画像順序制御部である。この音声画像順序制御部１
３は、具体的には、順序不順に到着してきたパケットを
順序制御し、識別子符号から待ち合わせ等の制御を行い
、音声と画像の同時性を確保する。１４は、待ち合わせ
るための情報を格納するバッファメモリである。１５は
画像のディジタル電気信号をアナログ電気信号に変換す
る画像情報復号化部であり、１６は音声のディジタル電
気信号をアナログ電気信号に変換する音声情報復号化部
である。１７は画像情報を出力する画像情報出力部、１
８は音声情報を出力する音声情報出力部である。

通信網９から送られてきた自局宛てのパケットは、受信
部１０において受信される。受信部１０で受信されたパ
ケットは、画像パケットと音声パケットに分離されて、
それぞれ画像パケット分解部１１と音声パケット分解部
１２に送られる。画像パケット分解部１１は、画像パケ
ットを分解して、制御情報と画像情報とに分能する。前
述した識別子符号は、制御情報に含まれている。また、
音声パケット分解部１２は、同じようにして、音声パケ
ットから音声情報と制御情報とに分解する。

これらの情報は、音声画像順序制御部１３に送られる。

音声画像順序制御部１３は、送られてくる音声情報１画
像情報およびそれら情報の制御情報、識別子符号より、
パケットの遅延、順序、および音声と画像情報の同時性
を制御する。

以下、本発明に関係する音声と画像の同時性について、
詳述する。

送られてくるパケットの音声情報と画像情報には、共通
の識別子符号が付加されており、これらの識別子符号は
音声情報と画像情報の同時性を示しているため１本来は
同時に出力されるべきものである。音声画像順序制御部
１３は、音声情報の識別子符号と一致する識別子符号を
持つ画像情報を検索し、もし一致するものがあれば、同
時に画像・音声復号化部１５．１６にそれぞれ送出する
。

もし、一方の情報のみが存在し、他方が存在しない場合
、受信部で許容される期間だけ他方情報の到着を待つ。

この間、情報はバッファメモリ１４に保持格納される。

受信部で許容される期間が経過しても、他方情報が到着
しない場合には、情報の欠落として処理し、存在する情
報は復号化部１５または１６に送られる。また、音声画
像順序制御部１３は、パケットで送られてくる音声情報
相互間および画像情報相互間の順序を制御し、正しいシ
ーケンスで音声と画像を出力する。

復号化部１５，１．６は、ディジタルの音声および画像
電気信号をアナログ信号に変換し、各々の出力部１７．
１８に送出する。画像出力部１７および音声出力部１８
は、これらの電気信号により画像と音声を出力する。

第２図は、本発明を通信網内の中継システムに適用した
場合の構成図である。

第２図において、１９は中継システム受信部、２０は画
像バケツ１〜処理部、２１は音声パケット処理部、２２
はパケット順序制御部、２３はバッファメモリ、２４は
中継システム送信部である。

中継システムは、受信部と送信部を合わせ持つので、第
１図（ａ）（ｂ）の送信部と受信部の両方を備えたもの
となる。

通信網内の音声と画像のパケットは、中継システム受信
部１９で受信され、かつ識別されて、各々のパケット処
理部２０．２１に送られる。各パケット処理部２０．２
１は、制御部の情報から次に出力すべきルートを決める
等の処理を実施する（ルーティング処理等）。処理され
た後のパケットは、それぞれパケット順序制御部２２に
送られる。

パケット順序制御部２２は、識別子符号より画像情報相
互間の順序関係を判定し、待ち合わせたり、優先して送
出する等の制御を行う。すなわち、画像か音声の一方の
みしか存在しない場合には、存在する方の情報を待ち合
わせて、他方の情報を待ち、また欠落情報として先に送
った場合に、その後他方の情報のパケットが到着したと
きには、優先して送出する。また、音声情報相互間にお
いても、同じような処理が行われる。さらに、音声情報
の識別子符号と画像情報の識別子符）が一致した音声１
画像のパケットが、中継システムに到着していない場合
、中継システムで許容された待ち時間だけ他方のパケッ
トをバッファメモリ２３で待機させることにより、中継
システムにおける音声・画像パケットの時間ずれを補正
する。その後、各パケットは中継システム送信部２４か
ら送信される。

このように、本実施例においては、順序制御部を設ける
ことにより、音声パケットと画像パケットの時間ずれを
補正するので、音声情報と画像情報の同時性を保持しな
がら出力することができる。

〔発明の効果〕

以上説明したように、本発明によれば、音声パケットと
画像パケットの同時性を識別して、音声・画像情報のバ
ッファによる待合せ、および優先出力を制御するように
したので、ｒｆ声と画像の時間ずれを補正することがで
き、音声と画像の調和した通信サービスを供ｔｐできる
。

【図面の簡単な説明】

第１図は本発明の一実施例を示す送信部と受信部の構成
図、第２図は本発明を通信網内の中継システムに適用し
た場合の構成図である。 １：画像情報入力部、２：音声情報入力部、３：画像情
報ディジタル符号部、４：音声情報ディジタル符号部、
５：画像情報バケツ１〜組立部、６：音声情報パケット
組立部、７：識別子制御部、８：送信部、９：通信網、
１０：受信部、１１：画像パケット分解部、１２：音声
パケット分解部、１３：音声画像順序制御部、１４：バ
ッファメモリ、１５：画像情報復号部、１６：音声情報
復号化部、１７：画像情報出力部、１８：音声情報出力
部、２１：音声パケット処理部、２２：パケット順序制
御部、２３：バッファメモリ、２４：中継システム送信
部。 特許出願人　日本電信電話株式会社

Claims (2)

【特許請求の範囲】
1. （１）映像情報と該映像情報に付随する音声情報をそれ
   ぞれブロック単位に映像パケットおよび音声パケットに
   組立てて転送する通信端末装置において、パケット送信
   元の通信端末装置では、上記映像パケットと音声パケッ
   トのパケット制御情報を格納する部分に、映像パケット
   の映像情報と、該映像情報に付随する音声情報であるこ
   とを相互に識別するための識別子符号を、該映像パケッ
   トと音声パケットのそれぞれに設定して送信し、該パケ
   ットの宛先の通信端末装置では、上記識別子符号を用い
   て映像パケットと、該映像パケットの映像情報に付随し
   た音声情報の音声パケットとの間の伝送路内での遅延の
   差異を最小になるように、いずれか一方のパケットを待
   機させ、かつ順不同で到着してくる映像パケット相互間
   の順序および音声パケット相互間の順序を制御して、映
   像情報と音声情報とを同期させて出力することを特徴と
   する映像パケット音声パケット同期転送制御方式。
2. （２）映像情報と該映像情報に付随する音声情報をそれ
   ぞれブロック単位に映像パケットと音声パケットに組立
   てて送信元の通信端末装置から交換装置と中継装置を介
   して宛先の通信端末装置に転送する通信網システムにお
   いて、パケット送信元の通信端末装置では、上記映像パ
   ケットと音声パケットのパケット制御情報を格納する部
   分に、映像パケットの映像情報と、該映像情報に付随す
   る音声情報であることを相互に識別するための識別子符
   号を、該映像パケットと音声パケットのそれぞれに設定
   して送信し、上記中継装置と交換装置では、上記識別子
   符号を用いて受信した映像パケットと該映像パケットの
   映像情報に付随する音声情報の音声パケットとの間の通
   信網内での遅延の差異を最小にするように、いずれか一
   方のパケットを待機させ、かつ順不同で到着してくる映
   像パケット相互間の順序および音声パケット間の順序を
   制御して送信することを特徴とする映像パケット音声パ
   ケット同期転送制御方式。