JP3141396B2 - マルチメディア端末及びその制御方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像及び音声の送受信
を行うマルチメディア端末及びその制御方法に関する。

【０００２】

【従来の技術】近年、通信技術や半導体技術、光技術の
進歩にともない、デジタル回線が整備され、高速で大容
量のデータの伝送が可能になった。

【０００３】特に、デジタル伝送の特徴としては、伝送
による品質低下がなく同レベルの品質が保たれること、
伝送データのメディアの特性に応じた伝送路を必要とせ
ず、メディアの統合が図れることなどがあり、複合メデ
ィア端末間の伝送が可能になった。よって、従来の音声
のみの電話から画像をも同時に伝送する電話端末が出現
している。

【０００４】こうした状況の中、異なる複合端末間にお
いても相互通信が可能になるようＣＣＩＴＴなどによる
国際標準化が進められており、デジタル回線を用いたテ
レビ電話、テレビ会議システムなどのＡＶ（Ａｕｄｉｏ
Ｖｉｓｕａｌ）サービス用のサービス規定、プロトコ
ル規定、マルチメディア多重化フレーム構成規定がＣＣ
ＩＴＴ勧告（または草案）Ｈ．３２０，Ｈ．２４２，
Ｈ．２２１などとして発表されている。

【０００５】Ｈ．２２１では、６４Ｋｂｐｓから１９２
０ＫｂｐｓまでのＡＶサービスにおけるフレーム構成及
び端末能力の交換や通信モードのＦＡＳ（ＦｒａｍｅＡ
ｌｉｇｎｍｅｎｔ Ｓｉｇｎａｌ）、ＢＡＳ（Ｂｉｔ
ＡｌｌｏｃａｔｉｏｎＳｉｇｎａｌ）の符号割当が定義
されている。Ｈ．２４２ではＢＡＳを用いたＡＶ端末間
での能力交換及び通信モード切替えなどのプロトコルが
定義され、Ｈ．３２０ではＡＶサービス全般のシステム
アスペクトが定義されている。

【０００６】上記勧告または勧告草案においては、エン
ドツーエンドの物理コネクションの設定及びインチャネ
ルでのＦＡＳによる同期確立後、インチャネルでＢＡＳ
を用いた端末能力の交換シーケンス、通信モードの指定
によるモード切替えシーケンスなどの手順により端末間
で画像、音声、データなどのマルチメディア通信を行う
ための方法が規定されている。但し、各端末において自
己の端末能力を状況に応じて変化させたり交換された能
力の範囲内でどの通信モードを用いるかは規定の範囲外
である。マルチメディア通信における各メディアの情報
転送速度は、音声情報は音声符号化方式を指定すること
で決定され、データ情報は、その使用の有無、使用する
場合の転送速度を指定することにより決定され、設定し
た通信路全体の情報転送速度から、音声情報の転送速度
とデータ情報の転送速度を引いた残りが画像情報の転送
速度になる。

【０００７】

【発明が解決しようとする課題】しかしながら、上記従
来例のマルチメディア端末によれば、端末間で画像デー
タを通信する場合は、通常相手端末と接続されたとき、
表示部の画面は、マルチメディア端末用の操作画面の表
示から受信した画像に切り換わるが、その後は、通信終
了かまたは、操作者が意図的に画面を切換えない限り、
受信画像を表示し続ける。しかし、相手端末が、通信途
中で画像データの送信を停止したり、他のメディア情報
に切り換えた場合にも画面を切り換えることができない
ため、表示部表示画面は意味の無い画像を写し続ける
か、あるいは、乱れた画像を表示してしまうという問題
があった。

【０００８】また、能力交換自体が上手くいかない場合
には、通信端末の少なくとも一方が通信能力の選択を間
違える場合が考えられる。このような場合では、画像デ
ータの転送ができていないことを認識できないことも考
えられ、ユーザーに意味の無い画像を表示しつづけてし
まうことになる。 本発明は以上のような問題に鑑みてな
されたものであり、能力交換自体が上手くいかない場合
でも適切に通信処理することができ、且つユーザーに意
味の無い画像、乱れた画像の表示を防止すると共に、通
信の異常を通知することができるマルチメディア端末及
びその制御方法を提供することを目的とする。

【０００９】

【課題を解決するための手段】上記目的を達成するため
に、請求項１記載のマルチメディア端末は、 画像デー
タを含む複数のメディアのデータを送受信することがで
きるマルチメディア端末であって、前記複数のメディア
のデータを送受信する送受信手段と、前記送受信手段に
より送受信するデータの転送レートを、通信すべき前記
メディアごとに認識する認識手段と、前記マルチメディ
ア端末のために確保された転送レートから、前記画像デ
ータ以外のデータに対して前記認識手段が認識した転送
レートを除いた値を発生する発生手段と、前記発生手段
が発生した値に応じて前記送受信手段により送受信すべ
きデータの画像データの有無を判別する判別手段とを有
することを特徴とする。請求項２記載のマルチメディア
端末は、請求項１記載のマルチメディア端末において、
更に、前記判別手段により前記画像データが無いと判別
した場合は、前記画像データが無いことを表示部に表示
させるように制御する表示制御手段を有することを特徴
とする。請求項３記載のマルチメディア端末の制御方法
は、画像データを含む複数のメディアのデータを送受信
することができるマルチメディア端末の制御方法であっ
て、前記複数のメディアのデータを送受信する送受信工
程と、前記送受信工程により送受信するデータの転送レ
ートを、通信すべき前記メディアごとに認識する認識工
程と、前記マルチメディア端末のために確保された転送
レートから、前記画像データ以外のデータに対して前記
認識工程で認識された転送レートを除いた値を発生する
発生工程と、前記発生工程で発生した値に応じて前記送
受信工程で送受信すべきデータの画像データの有無を判
別する判別工程とを有することを特徴とする。請求項４
記載のマルチメディア端末の制御方法は、請求項３記載
のマルチメディア端末の制御方法において、更に、前記
判別工程で前記画像データが無いと判別した場合は、前
記画像データが無いことを表示部に表示させるように制
御する表示制御工程を有することを特徴とする。請求項
５記載のマルチメディア端末は、画像データを含む複数
のメディアのデ ータを送受信することができるマルチメ
ディア端末であって、前記複数のメディアのデータを送
受信する送受信手段と、前記送受信手段を介して相手端
末と通信能力の交換を行う能力交換手段と、前記能力交
換手段の結果に応じて前記送受信手段が送受信するデー
タの転送レートを、通信すべき前記メディアごとに割り
当てる割り当て手段と、前記割り当て手段が前記画像デ
ータ以外のデータに対して割り当てる転送レートが、前
記マルチメディア端末のために確保された転送レートよ
りも大きい場合は、通信能力の誤りとして前記相手端末
に通知するように制御する制御手段とを有することを特
徴とする。請求項６記載のマルチメディア端末は、請求
項５記載のマルチメディア端末において、前記制御手段
は、前記割り当て手段が前記画像データ以外のデータに
対して割り当てる転送レートが、前記マルチメディア端
末のために確保された転送レートよりも大きい場合は、
改めて能力交換するように前記能力交換手段を制御する
ことを特徴とする。請求項７記載のマルチメディア端末
の制御方法は、画像データを含む複数のメディアのデー
タを送受信することができるマルチメディア端末の制御
方法であって、前記複数のメディアのデータを送受信す
る送受信工程と、前記送受信工程を介して相手端末と通
信能力の交換を行う能力交換工程と、前記能力交換工程
の結果に応じて前記送受信工程で送受信するデータの転
送レートを、通信すべき前記メディアごとに割り当てる
割り当て工程と、前記割り当て工程で前記画像データ以
外のデータに対して割り当てる転送レートが、前記マル
チメディア端末のために確保された転送レートよりも大
きい場合は、通信能力の誤りとして前記相手端末に通知
するように制御する制御工程とを有することを特徴とす
る。請求項８記載のマルチメディア端末は、請求項７記
載のマルチメディア端末の制御方法において、前記制御
工程は、前記割り当て工程で前記画像データ以外のデー
タに対して割り当てる転送レートが、前記マルチメディ
ア端末のために確保された転送レートよりも大きい場合
は、改めて能力交換するように前記能力交換工程を制御
することを特徴とする。

【００１０】

【作用】本発明によるマルチメディア端末においては、
通信データ中に画像データ有りと認識した場合は画像切
換え部に受信画像信号を選択させて表示部へ表示させ、
通信データ中に画像データ無しと認識した場合は画像切
換え部に制御画像信号を選択させて表示部へ表示させ
る。これにより、意味の無い画像、乱れた画像の表示が
防止される。

【００１１】

【実施例】以下、本発明の一実施例を図面を参照して説
明する。

【００１２】図１は本発明の一実施例に係るマルチメデ
ィア端末のブロック図である。

【００１３】同図において、１は音声入出力手段の一つ
であるハンドセット、２は音声入力手段の一つであるマ
イク、３は音声出力手段の一つであるスピーカ、４は後
述のシステム制御部１４の指示により、音声入出力手段
としてのハンドセット１、マイク２、スピーカ３を切り
換える機能、音量レベル調整のために利得を調整する利
得調整機能、ハンドセット１がオンフック状態かオフフ
ック状態かを検知するオン／オフ検知機能、音声入出力
手段としてマイク２とスピーカ３を使用したときにエコ
ーを消去するエコーキャンセル機能、ダイヤルトーン・
呼出しトーン・ビジートーン・着信トーン等のトーンを
生成するトーン生成機能をもつ音声インタフェース部、
５はシステム制御部１４の指示により６４Ｋｂｐｓ Ｐ
ＣＭ（Ａ−ｌａｗ）、６４Ｋｂｐｓ ＰＣＭ（μ−ｌａ
ｗ）、６４Ｋｂｐｓ／５６Ｋｂｐｓ／４８Ｋｂｐｓ（Ｓ
Ｂ−ＡＤＰＣＭ）、３２Ｋｂｐｓ ＡＤＰＣＭ、１６Ｋ
ｂｐｓ（例えばＡＰＣ−ＡＢ）、８Ｋｂｐｓ等の音声符
号化／復号化アルゴリズムに従って送信音声信号をＡＤ
変換して符号化する機能、受信音声信号を復号化してＤ
／Ａ変換する機能をもつ音声符号化復号化部である。上
記音声符号化復号化部５は音声符号化部５ａおよび音声
復号化部５ｂを有する。

【００１４】６は画像入力手段の１つであり、自画像等
を入力するためのカメラ、７は画像入力手段の１つであ
り絵や図面等を入力するための書画カメラ、８はカメラ
６または書画カメラ７よりの入力画像、相手からの受信
画像やシステム制御部１４からの画像を表示する表示部
（表示手段）、９はシステム制御部１４の指示により生
じる画像入力手段の切換え機能、上述した各画像の表示
切換え及び表示分割機能、および各画像入出力部の画像
信号と電気的／物理的に整合をとるための信号変換機能
をもつビデオインタフェース部、１０は送信画像をＡ／
Ｄ変換して符号化する機能、受信画像を復号化してＤ／
Ａ変換する機能をもつ画像符号化復号化部であり、画像
符号化復号化部１０は、大容量の画像の生データに、動
き補償、コマ落し、フレーム間補償及びフレーム内補
償、ＤＣＴ変換、ベクトル量子化変換などの種々の手法
によって帯域圧縮を行い、小容量化し、デジタル回線で
画像データを伝送可能にしている。上記ビデオインタフ
ェース部９は画像入力部９ａおよび画像出力部９ｂを有
し、画像符号化復号化部１０は画像符号化部１０ａおよ
び画像復号化部１０ｂを有する。現在、ＩＳＤＮ回線の
基本インタフェースが６４Ｋｂｐｓであるが、この伝送
速度でも伝送可能な画像の符号化方式としてはＣＣＩＴ
Ｔ勧告草案Ｈ．２６１がある。

【００１５】１１はデータ通信を行うためのデータ端
末、１２はデータ端末１１及びシステム制御部１４から
の送信データを多重分離化部１５へ通知するとともに、
受信データをデータ端末１１またはシステム制御部１４
へ通知するデータインタフェース部、１３は図８の装置
の制御をするために制御情報入力に使用するキーボー
ド、タッチパネル等の操作部、１４はＣＰＵ、ＲＯＭ、
ＲＡＭ、補助記憶装置、キャラクタジェネレータ、画像
信号生成回路等を備え、各部の状態を監視し、装置全体
の制御、状態に応じた操作／表示画面の作成及びアプリ
ケーションプログラムの実行等を行うシステム制御部、
１５は音声符号化復号化部５からの音声データ、ビデオ
符号化復号化部１０からの画像データ、データインタフ
ェース部１２からのデータ、システム制御部１４からの
ＢＡＳを送信フレーム単位に多重化するとともに、受信
フレームを構成単位の各メディアに分離し各部に通知す
る多重分離化部であり、ＣＣＩＴＴ勧告のＨ．２２１に
従ったものである。１６はＩＳＤＮユーザー網インタフ
ェースに従って回線を制御する回線インタフェース部で
ある。１７は画像復号化部１０ｂからの受信画像信号と
システム制御部１４からの制御画像信号を選択して画像
出力部９ｂへ伝送する画像切換え回路、１８は画像復号
化部１０ｂからの受信画像信号中の同期信号を検知して
システム制御部１４へ知らせる同期検知部である。同期
検知部１８は、受信画像信号の中の水平／垂直同期信号
を監視し、発生していれば同期とみなし、同期信号が発
生していない場合には同期はずれとみなし、システム制
御部１４へその旨を通知するものである。

【００１６】画像復号化部１０ｂで画像復号化時エラー
が発生した場合には上記同期信号が乱れることで同期検
知部１８が作動する。また、画像復号化部１０ｂが画像
復号化時に画像に多大な影響を与えるほどの復号化不可
能なエラーが発生したとき同期はずれとみなし、画像復
号化部１０ｂがこのエラーを同期検知部１８に通知する
ことで上述同様同期はずれとみなし、同期検知部１８が
システム制御部１４へその旨を通信する方法もある。

【００１７】次に、端末能力のネゴシエーションや端末
能力の変更を行なう方法について述べる。まず、ＩＳＤ
Ｎ回線で通信する場合、図２に示すように、アウトバン
ド信号（つまりＤチャネル）を用いて発呼する。図２に
示すように、端末Ａから端末Ｂへの呼設定と、端末Ｂか
ら端末Ａへの応答でＢチャネルでの通信が可能になる。
通信路としては、ほかにＤチャネル、Ｈ０，Ｈ１なども
あるがＢチャネルのみで説明し、以下は省略する。

【００１８】次に、この通信可能となったＢチャネルを
用いて勧告Ｈ．２４２に従い、図３に示すようにＢチャ
ネルのインバンド信号手順（つまり、Ｂチャネル内をデ
ータ部と制御部に割り付け、その制御部によって制御す
る）が行われる。この制御をインチャネル制御手順とい
うので、以後は、この名称を用いる。このインチャネル
制御を実行するに当たり、Ｂチャネル内に制御ビットが
必要になるので、そのフレーム構成がＨ．２２１で規定
されている。

【００１９】このフレーム構成を図４に示す。図４のマ
ルチフレーム構造は、Ｂチャネル（６４Ｋｂｐｓ）時の
ものである。まず、マルチフレーム構造は、１オクテッ
ト／１２５μｓｅｃを基本として、（ａ）のように、１
フレーム＝８０オクテット、（ｂ）のように、１サブマ
ルチフレーム＝２フレーム、（ｃ）のように、１マルチ
フレーム＝８サブマルチフレームの構造を有し、ビット
方向には、８Ｋｂｐｓのサブチャネルが＃１から＃８ま
で定義されている。但し、＃８サブチャネルだけは、転
送レートが、６．４Ｋｂｐｓとなり、制御ビットとし
て、ＦＡＳ（Ｆｒａｍｅ Ａｌｉｇｎｍｅｎｔ Ｓｉｇ
ｎａｌ）とＢＡＳ（ＢｉｔｒａｔｅＡｌｌｏｃａｔｉｏ
ｎ Ｓｉｇｎａｌ）の信号が挿入されている。このＦＡ
ＳとＢＡＳによりＢチャネルのインチャネル制御が可能
となる。ＦＡＳは、フレーム及びマルチフレーム同期に
使用されている。ＢＡＳは、サブチャネルなどの多重方
法を決定するに必要な端末能力の情報の交換あるいは能
力設定に使用される。特に、ＢＡＳは、データ通信中で
あってもサブマルチフレーム（２０ｍｓｅｃ）ごとに切
換えは可能である。オクテットデータの送信はオクテッ
ト番号の若番から順番になされる。

【００２０】次に、図３について、手順を説明する。ま
ず、Ｂチャネルが通信可能状態になると、端末Ａ，Ｂと
もに、ＦＡＳを送信する。この時の端末能力は、初期状
態のモード０（オーディオとＦＡＳ，ＢＡＳのみのモー
ド）である。このＦＡＳは、相手端末で探索され、Ｈ．
２４２で規定されたフレーム同期確立の条件が満たされ
ると、図５（ａ）に示すＦＡＳ内のビット構成の中のＡ
を“０”にして送信する。Ａ＝０を端末が受信すること
で、相手端末のフレーム同期が確立したことが確認され
る。次に、自端末の能力情報を、ＢＡＳで相手端末に送
信し（図３の点線）、お互いに、相手端末の端末能力を
認識する。もし、この時点で、お互いが通信可能であれ
ば、データの通信が開始される。能力変更が必要な場合
は、同様に、ＢＡＳを用いてコマンドとして端末能力を
送信し、相手端末がその能力を設定完了後、データの通
信を開始する。データの通信は送受信で独立しており、
同期の確立も端末能力の設定も別々に行われる。よっ
て、片方向だけ同期はずれが発生したり、送受でデータ
の種別が異なる場合もある。データの通信が完了し呼を
切断するときには、まず切断する側の端末（図３では端
末Ａ）がＢＡＳを用いてモード０にする。これにより、
Ｂチャネルのインチャネル制御は初期状態に戻った。

【００２１】次に、図２に示すように、Ｄチャネルのア
ウトバンド手順で切断と解放が行われてすべての通信が
完了する。

【００２２】図５（ａ）〜（ｃ）は、ＦＡＳ内のビット
構成を示している。Ａビットは、フレーム同期はずれの
表示である。Ｅビットは、ＣＲＣ誤りが発生したか否か
の表示である。Ｃ₁，Ｃ₂，Ｃ₃，Ｃ₄は、ＣＲＣの４ビッ
トである。Ｎ₁〜Ｎ₅は、マルチフレームの番号付け用で
ある。Ｒ₁〜Ｒ₄は、チャネル番号である。ＴＥＡは、端
末装置アラームで、端末内部の故障により入力信号を受
け取ったりこれに反応できない場合に“１”をセットす
る。なお、図５（ａ）のサービスチャネルとは図４
（ａ）に示した８番目のサブチャネルのことである。

【００２３】図６（ａ），（ｂ）は、ＢＡＳ内のビット
構成を示している。（ａ）に示すように、上位３ビット
は、属性を表し、残りの５ビットでその属性の属性値を
表す。（ｂ）には、属性の内容を示す。属性値は、例え
ば、転送レート値、コーデック種別、各メディア特有の
パラメータ値などが定義されている。

【００２４】次に、本発明によるマルチメディア端末の
一実施例の動作フローを図７〜図１０に示す。まず、マ
ルチメディア端末による通信か電話による通信かを選択
し（ステップＳ１）、電話としての通信の場合には、画
像切換え部（ＳＷ）１７をＣ−Ｂ間に接続し（ステップ
Ｓ２，Ｓ３）、表示部８へは、システム制御部１４が作
成した電話用の画面が表示される（ステップＳ４）。例
としては、発呼時は、テンキーや電話帳やキー入力され
た電話番号が表示され、着呼時は、もし相手がわかる場
合には、相手の電話番号などが表示され、通話中には、
通話時間などが表示される。音声部（音声インタフェー
ス部４および音声符号化復号化部５）は、起動状態にな
り呼が切断されるまで維持される（ステップＳ５〜Ｓ
７）。

【００２５】次に、マルチメディア端末による通信の場
合には、画像切換え部１７をＣ−Ｂ間に接続し（ステッ
プＳ８）、表示部８へは、システム制御部１４が作成し
たマルチメディア端末用の画面が表示される（ステップ
Ｓ９）。例として、発呼時は、通信に使用する伝達能力
の設定や電話同様、テンキーや端末番号帳やキー入力さ
れた端末番号が表示され、着呼時は、相手端末の能力表
示や伝送中の能力表示や相手端末番号がわかる場合に
は、その端末番号が表示される。ＢＡＳによる能力のネ
ゴシエーションで（ステップＳ１０）、能力として音声
が有れば音声部を起動して（ステップＳ１１，Ｓ１
２）、確保したＢチャネルの転送レートＸから選択され
た音声コーデックの転送レートＡを差引き（ステップＳ
１３）、この転送レートをＹとして、Ｙ＝０の場合に
は、データと画像は無いと判断される（ステップＳ１
４，Ｓ１５）。よって、この場合には、画像切換え部１
７をＣ−Ｂ間に接続し（図９のステップＳ１６）、シス
テム制御部１４からの画像を表示する。例としては、現
在の伝達能力を表示し、画像が伝達されていない旨を操
作者へ伝える。あるいは動画像以外のメディアの情報
（描画、静止画、テキストデータなど）をデータとして
送受し、システム制御部１４で、このデータを画像に変
換して表示させる。Ｙ＞０の場合には、能力としてデー
タが有ればデータインタフェース部（データ部）１２を
起動して（ステップＳ１７，Ｓ１８）、転送レートＹか
ら選択されたデータの転送レートＢを差引き、この転送
レートをＺとして（ステップＳ１９）、Ｚ＝０の場合に
は、画像は無いと判断される（ステップＳ２０）。よっ
て、この場合には、画像切換え部１７をＣ−Ｂ間に接続
し（ステップＳ１６）、システム制御部１４からの画像
を表示する。Ｚ＞０の場合には、能力として画像が無け
れば、画像切換え部１７をＣ−Ｂ間に接続し、システム
制御部１４からの画像を表示する（ステップＳ２１，Ｓ
１６）。能力として画像が有れば画像部を起動して、転
送レートＺを画像の転送レートとして、同期検知部１８
により画像信号の同期／非同期を検知し（ステップＳ２
２）、画像信号の同期が確立するとシステム制御部１４
はこれを認識し、画像切換え部１７をＣ−Ａ間に接続し
て（ステップＳ２３）、画像復号化部１０ｂからの相手
画像を画像出力部９に伝え表示部８に出力する。ここ
で、Ｙ＜０あるいは、Ｚ＜０の場合には、能力選択の誤
りとして相手端末に伝え、再度能力のネゴシエーション
に入る（ステップＳ２７，Ｓ２８）。例えば、モード０
に戻り能力の交換をやり直すなどが方法として有る。同
期はずれの場合には、画像切換え部１７をＣ−Ｂ間に接
続し、システム制御部１４が作成した画像を表示部へ表
示する（ステップＳ２４）。例としては、「しばらくお
待ち下さい」などのメッセージを表示し、相手画像の受
信待ち状態であることを操作者に伝える。操作部１３か
ら、キー入力などの手段により、表示切換え指示があっ
た場合（ステップＳ２５）、システム制御部１４は、画
像切換え部１７を現在のスイッチ位置の逆側に切り換え
る（ステップＳ２６）。例えば、Ｃ−Ａ間が接続されて
いればＣ−Ｂ間へ切り換え、Ｃ−Ｂ間が接続されていれ
ば、Ｃ−Ａ間へ切り換える。

【００２６】次に、通信中の能力変更の場合について説
明する。自端末が能力を変更する場合は（ステップＳ２
９）、操作部１３からの伝達能力の変更の指示により、
システム制御部１４は、多重分離化部１５を介して、Ｂ
チャネルのインチャネルのＢＡＳにより相手端末へ能力
変更を通知する（ステップＳ３０）。同時に、自端末も
能力の変更に応じて、音声部やデータ部や画像部（画像
入出力部９および画像符号化復号化部１０）及び画像切
換え部１７を変更する（ステップＳ１１〜Ｓ３４）。こ
の場合、音声が無いときは転送レートＡ＝０、データが
無いときは転送レートＢ＝０として、ステップＳ２１へ
進む（ステップＳ３１〜Ｓ３４）。相手端末から能力変
更が有った場合には、ＢＡＳによりコマンドが受信され
るので、それに応じて音声部やデータ部や画像部及び画
像切換え部１７を変更する。

【００２７】次に、通信終了時の場合（ステップＳ３
５）について説明する。自端末から終了する場合（ステ
ップＳ３６）には、操作部１３からの指示により、シス
テム制御部１４は、多重分離化部１５を介して、Ｂチャ
ネルのインチャネルのＢＡＳにより相手端末へモード０
への能力変更を通知する（ステップＳ３７）。同時に、
自端末もモード０にし（ステップＳ３７）、システム制
御部１４は画像切換え部１７をＣ−Ｂ間に接続し、シス
テム制御部１４からの画像を表示部へ表示する（ステッ
プＳ３９）。例としては、操作者へ回線が切断される旨
を伝える。その後、自端末より切断を送信し（ステップ
Ｓ４０）、相手端末より解放を受信し通信を終了する。
この時には、通信時間や料金などが表示され、次の通信
の準備が完了すると初期画面に戻る。相手端末から終了
する場合（ステップＳ３６）には、ＢＡＳによりモード
０への能力変更の通知を受け（ステップＳ３８）、シス
テム制御部１４は、画像切換え部１７をＣ−Ｂ間に接続
し（ステップＳ３９）、システム制御部からの画像を表
示部へ表示する。例としては、操作者へ回線が切断され
る旨を伝える。その後、回線が切断され（ステップＳ４
０）、次の通信の準備が完了したときに、システム制御
部１４は、初期画面を表示部へ表示する。

【００２８】以上説明したように本実施例によれば、マ
ルチメディア端末のために確保された転送レートから、
画像データ以外のデータに対して所定の転送レートを除
いた値を発生し、この結果に応じて画像データの有無を
判別するので、例えば能力交換に応じた通信能力の選択
を間違えても、通信回線の容量によって画像データの有
無を判別することができるし、また、たとえ能力交換が
正しく行われていても自分の端末に割り当てられる通信
回線自体の容量が変動し、該交換した能力で通信を維持
することができない場合が考えられるが、このようなと
きでも通信回線の容量に応じて適切に通信処理すること
ができる。更に、画像データが無いと判断された場合
に、その旨を表示部に表示させるので、意味の無い画像
や乱れた画像を表示することを防止することができる。

【００２９】また、画像データ以外のデータに対して割
り当てる転送レートが、マルチメディア端末のために確
保された転送レートよりも大きい場合は、通信能力の誤
りとして相手端末に通知するので、ネゴシエーション等
によって確保された転送レートが間違っていると認識す
ることができ、また画像データの転送ができていないこ
とを認識することができ、更に、このような通知によっ
て通信能力を再設定することができる。

【００３０】

【発明の効果】以上詳細に説明したように、請求項１記
載の端末及び請求項３記載の方法によれば、マルチメデ
ィア端末のために確保された転送レートから、画像デー
タ以外のデータに対して所定の転送レートを除いた値を
発生し、この結果に応じて画像データの有無を判別する
ので、たとえ能力交換に応じた通信能力の選択を間違え
ても、通信回線の容量によって画像データの有無を判別
することができる。また、たとえ能力交換が正しく行わ
れていても自分の端末に割り当てられる通信回線自体の
容量が変動し、該交換した能力で通信を維持することが
できない場合が考えられるが、このようなときでも通信
回線の容量に応じて適切に通信処理することができる。
更に、画像データが無いと判断された場合に、その旨を
表示部に表示させるので、意味の無い画像や乱れた画像
を表示することを防止することができる。すなわち、通
信する機種の相異、通信プロトコルの相異、又は回線容
量の変動等の理由によって、通信能力の選択を適切に行
うことができない場合でも、通信する容量によって画像
データの有無を判別して、ユーザーに意味の無い画像を
表示しつづけることを防止することができる。 また、請
求項５記載の端末及び請求項７記載の方法によれば、画
像データ以外のデータに対して割り当てる転送レート
が、マルチメディア端末のために確保された転送レート
よりも大きい場合には、通信能力の誤りとして相手端末
に通知するので、ネゴシエーション等によって確保され
た転送レートが間違っていると認識することができ、ま
た画像データの転送ができていないことを認識すること
ができ、更に、このような通知によって通信能力を再設
定することができる。

【図面の簡単な説明】

【図１】本発明の一実施例に係るマルチメディア端末の
ブロック図である。

【図２】Ｄチャネル手順を示すシーケンス図である。

【図３】インチャネル制御手順を示すシーケンス図であ
る。

【図４】フレーム構成図である。

【図５】ＦＡＳ内のビット構成図である。

【図６】ＢＡＳ内のビット構成図である。

【図７】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。

【図８】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。

【図９】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。

【図１０】本発明によるマルチメディア端末の一実施例
の動作を示すフローチャートである。 １ ハンドセット ２ マイク ３ スピーカ ４ 音声インタフェース部 ５ 音声符号化復号化部 ５ａ 音声符号化部 ５ｂ 音声復号化部 ６ カメラ ７ 書画カメラ ８ 表示部 ９ ビデオインタフェース部 ９ａ 画像入力部 ９ｂ 画像出力部 １０ 画像符号化複合化部 １０ａ 画像符号化部 １０ｂ 画像複合化部 １１ データ端末 １２ データインタフェース部 １３ 操作部 １４ システム制御部 １５ 多重分離化部 １６ 回線インタフェース部 １７ 画像切換え部 １８ 同期検知部

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 昭62−144484（ＪＰ，Ａ) 特開 平２−113788（ＪＰ，Ａ) 特開 平２−285785（ＪＰ，Ａ) 特開 昭63−90953（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04M 11/00 - 11/10 H04N 7/14

Claims (8)

(57)【特許請求の範囲】
1. 【請求項１】 画像データを含む複数のメディアのデー
   タを送受信することができるマルチメディア端末であっ
   て、 前記複数のメディアのデータを送受信する送受信手段
   と、 前記送受信手段により送受信するデータの転送レート
   を、通信すべき前記メディアごとに認識する認識手段
   と、 前記マルチメディア端末のために確保された転送レート
   から、前記画像データ以外のデータに対して前記認識手
   段が認識した転送レートを除いた値を発生する発生手段
   と、 前記発生手段が発生した値に応じて前記送受信手段によ
   り送受信すべきデータの画像データの有無を判別する判
   別手段とを有することを特徴とするマルチメディア端
   末。
2. 【請求項２】 更に、前記判別手段により前記画像デー
   タが無いと判別した場合は、前記画像データが無いこと
   を表示部に表示させるように制御する表示制御手段を有
   することを特徴とする請求項１記載のマルチメディア端
   未。
3. 【請求項３】 画像データを含む複数のメディアのデー
   タを送受信することができるマルチメディア端末の制御
   方法であって、 前記複数のメディアのデータを送受信する送受信工程
   と、 前記送受信工程により送受信するデータの転送レート
   を、通信すべき前記メディアごとに認識する認識工程
   と、 前記マルチメディア端末のために確保された転送レート
   から、前記画像データ以外のデータに対して前記認識工
   程で認識された転送レートを除いた値を発生する発生工
   程と、 前記発生工程で発生した値に応じて前記送受信工程で送
   受信すべきデータの画像データの有無を判別する判別工
   程とを有することを特徴とするマルチメディア端末の制
   御方法。
4. 【請求項４】 更に、前記判別工程で前記画像データが
   無いと判別した場合は、前記画像データが無いことを表
   示部に表示させるように制御する表示制御工程を有する
   ことを特徴とする請求項３記載のマルチメディア端末の
   制御方法。
5. 【請求項５】 画像データを含む複数のメディアのデー
   タを送受信することができるマルチメディア端末であっ
   て、 前記複数のメディアのデータを送受信する送受信手段
   と、 前記送受信手段を介して相手端末と通信能力の交換を行
   う能力交換手段と、 前記能力交換手段の結果に応じて前記送受信手段が送受
   信するデータの転送レートを、通信すべき前記メディア
   ごとに割り当てる割り当て手段と、 前記割り当て手段が前記画像データ以外のデータに対し
   て割り当てる転送レートが、前記マルチメディア端末の
   ために確保された転送レートよりも大きい場合は、通信
   能力の誤りとして前記相手端末に通知するように制御す
   る制御手段とを有することを特徴とするマルチメディア
   端末。
6. 【請求項６】 前記制御手段は、前記割り当て手段が前
   記画像データ以外のデータに対して割り当てる転送レー
   トが、前記マルチメディア端末のために確保された転送
   レートよりも大きい場合は、改めて能力交換するように
   前記能力交換手段を制御することを特徴とする請求項５
   記載のマルチメディア端末。
7. 【請求項７】 画像データを含む複数のメディアのデー
   タを送受信することができるマルチメディア端末の制御
   方法であって、 前記複数のメディアのデータを送受信する送受信工程
   と、 前記送受信工程を介して相手端末と通信能力の交換を行
   う能力交換工程と、 前記能力交換工程の結果に応じて前記送受信工程で送受
   信するデータの転送レートを、通信すべき前記メディア
   ごとに割り当てる割り当て工程と、 前記割り当て工程で前記画像データ以外のデータに対し
   て割り当てる転送レートが、前記マルチメディア端末の
   ために確保された転送レートよりも大きい場合は、通信
   能力の誤りとして前記相手端末に通知するように制御す
   る制御工程とを有することを特徴とするマルチメディア
   端末の制御方法。
8. 【請求項８】 前記制御工程は、前記割り当て工程が前
   記画像データ以外のデータに対して割り当てる転送レー
   トが、前記マルチメディア端末のために確保された転送
   レートよりも大きい場合は、改めて能力交換するように
   前記能力交換工程を制御することを特徴とする請求項７
   記載のマルチメディア端末の制御方法 。