JP3141396B2 - Multimedia terminal and control method thereof - Google Patents

Multimedia terminal and control method thereof

Info

Publication number
JP3141396B2
JP3141396B2 JP02414508A JP41450890A JP3141396B2 JP 3141396 B2 JP3141396 B2 JP 3141396B2 JP 02414508 A JP02414508 A JP 02414508A JP 41450890 A JP41450890 A JP 41450890A JP 3141396 B2 JP3141396 B2 JP 3141396B2
Authority
JP
Japan
Prior art keywords
data
terminal
transfer rate
image data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP02414508A
Other languages
Japanese (ja)
Other versions
JPH04223755A (en
Inventor
誠 千田
均 安田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP02414508A priority Critical patent/JP3141396B2/en
Priority to DE199191402454T priority patent/DE477080T1/en
Priority to EP91402454A priority patent/EP0477080B1/en
Priority to DE69129521T priority patent/DE69129521T2/en
Publication of JPH04223755A publication Critical patent/JPH04223755A/en
Priority to US08/386,344 priority patent/US5524194A/en
Application granted granted Critical
Publication of JP3141396B2 publication Critical patent/JP3141396B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は、画像及び音声の送受信
を行うマルチメディア端末及びその制御方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multimedia terminal for transmitting and receiving images and sounds and a control method therefor .

【0002】[0002]

【従来の技術】近年、通信技術や半導体技術、光技術の
進歩にともない、デジタル回線が整備され、高速で大容
量のデータの伝送が可能になった。
2. Description of the Related Art In recent years, with the advancement of communication technology, semiconductor technology, and optical technology, digital lines have been provided, and high-speed, large-capacity data transmission has become possible.

【0003】特に、デジタル伝送の特徴としては、伝送
による品質低下がなく同レベルの品質が保たれること、
伝送データのメディアの特性に応じた伝送路を必要とせ
ず、メディアの統合が図れることなどがあり、複合メデ
ィア端末間の伝送が可能になった。よって、従来の音声
のみの電話から画像をも同時に伝送する電話端末が出現
している。
[0003] In particular, the characteristics of digital transmission are that the same level of quality is maintained without quality deterioration due to transmission,
There is no need for a transmission path according to the characteristics of the media of the transmission data, so that the media can be integrated, and transmission between multi-media terminals has become possible. Therefore, a telephone terminal that simultaneously transmits an image from a conventional voice-only telephone has appeared.

【0004】こうした状況の中、異なる複合端末間にお
いても相互通信が可能になるようCCITTなどによる
国際標準化が進められており、デジタル回線を用いたテ
レビ電話、テレビ会議システムなどのAV(Audio
Visual)サービス用のサービス規定、プロトコ
ル規定、マルチメディア多重化フレーム構成規定がCC
ITT勧告(または草案)H.320,H.242,
H.221などとして発表されている。
Under such circumstances, international standardization by CCITT and the like is being promoted so that mutual communication can be performed between different complex terminals, and AV (Audio) such as a video telephone using a digital line, a video conference system, and the like.
Visual) service rules, protocol rules, and multimedia multiplex frame configuration rules for CC
ITT Recommendation (or Draft) 320, H .; 242,
H. 221 etc.

【0005】H.221では、64Kbpsから192
0KbpsまでのAVサービスにおけるフレーム構成及
び端末能力の交換や通信モードのFAS(FrameA
lignment Signal)、BAS(Bit
AllocationSignal)の符号割当が定義
されている。H.242ではBASを用いたAV端末間
での能力交換及び通信モード切替えなどのプロトコルが
定義され、H.320ではAVサービス全般のシステム
アスペクトが定義されている。
[0005] H. For the H.221, 64 Kbps to 192
Exchange of frame structure and terminal capability in AV services up to 0 Kbps and FAS (Frame A
Lignent Signal), BAS (Bit
Allocation Signal) is defined. H. H.242 defines a protocol such as capability exchange between AV terminals using BAS and switching of communication mode. In 320, system aspects of the entire AV service are defined.

【0006】上記勧告または勧告草案においては、エン
ドツーエンドの物理コネクションの設定及びインチャネ
ルでのFASによる同期確立後、インチャネルでBAS
を用いた端末能力の交換シーケンス、通信モードの指定
によるモード切替えシーケンスなどの手順により端末間
で画像、音声、データなどのマルチメディア通信を行う
ための方法が規定されている。但し、各端末において自
己の端末能力を状況に応じて変化させたり交換された能
力の範囲内でどの通信モードを用いるかは規定の範囲外
である。マルチメディア通信における各メディアの情報
転送速度は、音声情報は音声符号化方式を指定すること
で決定され、データ情報は、その使用の有無、使用する
場合の転送速度を指定することにより決定され、設定し
た通信路全体の情報転送速度から、音声情報の転送速度
とデータ情報の転送速度を引いた残りが画像情報の転送
速度になる。
In the above recommendation or draft recommendation, after setting up an end-to-end physical connection and establishing synchronization by FAS in the in-channel, the BAS
A method for performing multimedia communication of images, voices, data, and the like between terminals is defined by a procedure such as a terminal capability exchange sequence using, and a mode switching sequence by designating a communication mode. However, it is out of the specified range that each terminal changes its own terminal capability according to the situation, and which communication mode is used within the range of the exchanged capability. Information transfer speed of each media in multimedia communication, audio information is determined by specifying the audio encoding method, data information is determined by specifying whether or not to use, the transfer speed when using, The remainder obtained by subtracting the transfer speed of the audio information and the transfer speed of the data information from the set information transfer speed of the entire communication path is the transfer speed of the image information.

【0007】[0007]

【発明が解決しようとする課題】しかしながら、上記従
来例のマルチメディア端末によれば、端末間で画像デー
タを通信する場合は、通常相手端末と接続されたとき、
表示部の画面は、マルチメディア端末用の操作画面の表
示から受信した画像に切り換わるが、その後は、通信終
了かまたは、操作者が意図的に画面を切換えない限り、
受信画像を表示し続ける。しかし、相手端末が、通信途
中で画像データの送信を停止したり、他のメディア情報
に切り換えた場合にも画面を切り換えることができない
ため、表示部表示画面は意味の無い画像を写し続ける
か、あるいは、乱れた画像を表示してしまうという問題
があった。
However, according to the above-described conventional multimedia terminal, when image data is communicated between the terminals, when the terminal is normally connected to a partner terminal,
The screen of the display unit switches from the display of the operation screen for the multimedia terminal to the received image, but thereafter, unless the communication ends or the operator intentionally switches the screen,
Keep displaying the received image. However, since the other terminal cannot stop the transmission of image data during communication or switch the screen even when switching to other media information, the display unit display screen continues to display meaningless images, Alternatively, there is a problem that a distorted image is displayed.

【0008】また、能力交換自体が上手くいかない場合
には、通信端末の少なくとも一方が通信能力の選択を間
違える場合が考えられる。このような場合では、画像デ
ータの転送ができていないことを認識できないことも考
えられ、ユーザーに意味の無い画像を表示しつづけてし
まうことになる。 本発明は以上のような問題に鑑みてな
されたものであり、能力交換自体が上手くいかない場合
でも適切に通信処理することができ、且つユーザーに意
味の無い画像、乱れた画像の表示を防止すると共に、通
信の異常を通知することができるマルチメディア端末及
びその制御方法を提供することを目的とする。
[0008] Also, when the capacity exchange itself does not work well
At least one of the communication terminals waits
It may be wrong. In such a case, the image
May not be able to recognize that data has not been transferred.
And continue to display meaningless images for the user.
Will be able to. The present invention has been made in view of the above problems.
If the ability exchange itself does not go well
However, communication can be performed properly and
Prevents the display of tasteless or distorted images,
A multimedia terminal and
And a control method thereof.

【0009】[0009]

【課題を解決するための手段】上記目的を達成するため
、請求項1記載のマルチメディア端末は、 画像デー
タを含む複数のメディアのデータを送受信することがで
きるマルチメディア端末であって、前記複数のメディア
のデータを送受信する送受信手段と、前記送受信手段に
より送受信するデータの転送レートを、通信すべき前記
メディアごとに認識する認識手段と、前記マルチメディ
ア端末のために確保された転送レートから、前記画像デ
ータ以外のデータに対して前記認識手段が認識した転送
レートを除いた値を発生する発生手段と、前記発生手段
が発生した値に応じて前記送受信手段により送受信すべ
きデータの画像データの有無を判別する判別手段とを有
することを特徴とする。請求項2記載のマルチメディア
端末は、請求項1記載のマルチメディア端末において、
更に、前記判別手段により前記画像データが無いと判別
した場合は、前記画像データが無いことを表示部に表示
させるように制御する表示制御手段を有することを特徴
とする。請求項3記載のマルチメディア端末の制御方法
は、画像データを含む複数のメディアのデータを送受信
することができるマルチメディア端末の制御方法であっ
て、前記複数のメディアのデータを送受信する送受信工
程と、前記送受信工程により送受信するデータの転送レ
ートを、通信すべき前記メディアごとに認識する認識工
程と、前記マルチメディア端末のために確保された転送
レートから、前記画像データ以外のデータに対して前記
認識工程で認識された転送レートを除いた値を発生する
発生工程と、前記発生工程で発生した値に応じて前記送
受信工程で送受信すべきデータの画像データの有無を判
別する判別工程とを有することを特徴とする。請求項4
記載のマルチメディア端末の制御方法は、請求項3記載
のマルチメディア端末の制御方法において、更に、前記
判別工程で前記画像データが無いと判別した場合は、前
記画像データが無いことを表示部に表示させるように制
御する表示制御工程を有することを特徴とする。請求項
5記載のマルチメディア端末は、画像データを含む複数
のメディアのデ ータを送受信することができるマルチメ
ディア端末であって、前記複数のメディアのデータを送
受信する送受信手段と、前記送受信手段を介して相手端
末と通信能力の交換を行う能力交換手段と、前記能力交
換手段の結果に応じて前記送受信手段が送受信するデー
タの転送レートを、通信すべき前記メディアごとに割り
当てる割り当て手段と、前記割り当て手段が前記画像デ
ータ以外のデータに対して割り当てる転送レートが、前
記マルチメディア端末のために確保された転送レートよ
りも大きい場合は、通信能力の誤りとして前記相手端末
に通知するように制御する制御手段とを有することを特
徴とする。請求項6記載のマルチメディア端末は、請求
項5記載のマルチメディア端末において、前記制御手段
は、前記割り当て手段が前記画像データ以外のデータに
対して割り当てる転送レートが、前記マルチメディア端
末のために確保された転送レートよりも大きい場合は、
改めて能力交換するように前記能力交換手段を制御する
ことを特徴とする。請求項7記載のマルチメディア端末
の制御方法は、画像データを含む複数のメディアのデー
タを送受信することができるマルチメディア端末の制御
方法であって、前記複数のメディアのデータを送受信す
る送受信工程と、前記送受信工程を介して相手端末と通
信能力の交換を行う能力交換工程と、前記能力交換工程
の結果に応じて前記送受信工程で送受信するデータの転
送レートを、通信すべき前記メディアごとに割り当てる
割り当て工程と、前記割り当て工程で前記画像データ以
外のデータに対して割り当てる転送レートが、前記マル
チメディア端末のために確保された転送レートよりも大
きい場合は、通信能力の誤りとして前記相手端末に通知
するように制御する制御工程とを有することを特徴とす
る。請求項8記載のマルチメディア端末は、請求項7記
載のマルチメディア端末の制御方法において、前記制御
工程は、前記割り当て工程で前記画像データ以外のデー
タに対して割り当てる転送レートが、前記マルチメディ
ア端末のために確保された転送レートよりも大きい場合
は、改めて能力交換するように前記能力交換工程を制御
することを特徴とする
In order to achieve the above object, a multimedia terminal according to the first aspect of the present invention comprises:
Data on multiple media, including
A multimedia terminal comprising:
Transmitting and receiving means for transmitting and receiving data of the
The transfer rate of the data to be transmitted and received
Recognizing means for recognizing each medium;
A) From the transfer rate reserved for the terminal,
Transfer recognized by the recognition means for data other than data
Generating means for generating a value excluding a rate; and the generating means
Transmission / reception by the transmission / reception means according to the value at which
Determining means for determining the presence or absence of image data of the
It is characterized by doing. The multimedia according to claim 2,
The terminal according to claim 1, wherein the terminal is a multimedia terminal.
Further, the discrimination means determines that the image data does not exist.
Display the absence of the image data on the display
Characterized by having display control means for controlling the
And The method for controlling a multimedia terminal according to claim 3.
Sends and receives data on multiple media, including image data
Multimedia terminal control method
Transmitting and receiving data of the plurality of media.
And the transfer rate of the data transmitted / received in the transmitting / receiving step.
Recognizer for recognizing each of the media to be communicated
And the transfer reserved for the multimedia terminal
From the rate, the data for the data other than the image data
Generates a value excluding the transfer rate recognized in the recognition process
Generating step and the sending in accordance with the value generated in the generating step.
Determines the presence or absence of image data of data to be transmitted / received in the receiving process.
And a differentiating step. Claim 4
A method for controlling a multimedia terminal according to claim 3, wherein
The method for controlling a multimedia terminal of the above, further comprising:
If it is determined in the determining step that the image data does not exist, the previous
The display section indicates that there is no image data.
And a display control step of controlling the display. Claim
5. The multimedia terminal according to item 5, wherein a plurality of
Multimeter capable of transmitting and receiving media of the data
Media terminal for transmitting data of the plurality of media.
Transmitting / receiving means for receiving, and a partner end through the transmitting / receiving means
A capability exchange means for exchanging communication capabilities with the terminal;
Data transmitted / received by the transmitting / receiving means according to the result of the converting means.
Data transfer rate for each of the media to be communicated.
Assigning means for assigning the image data,
Transfer rate assigned to data other than
The transfer rate reserved for multimedia terminals
Is larger than the communication terminal,
Control means for controlling so as to notify
Sign. The multimedia terminal according to claim 6, wherein
Item 6. The multimedia terminal according to item 5, wherein the control means
The assigning means assigns data other than the image data to
Transfer rate assigned to the multimedia terminal
If it is higher than the transfer rate reserved for the end,
Control the ability exchange means so that the ability is exchanged again
It is characterized by the following. The multimedia terminal according to claim 7.
Controls the data of multiple media including image data.
Of multimedia terminals that can send and receive data
Transmitting and receiving data of the plurality of media.
Transmitting and receiving step, and communicating with the partner terminal through the transmitting and receiving step.
A capacity exchange step of exchanging communication capacity, and the capacity exchange step
Of data transmitted and received in the transmitting and receiving step according to the result of
Allocate a transmission rate for each of the media to be communicated
An allocating step; and
The transfer rate assigned to outside data is
Greater than the transfer rate reserved for multimedia terminals
If it is, notify the other terminal as an error in the communication capability
Control step of controlling
You. A multimedia terminal according to claim 8 is a multimedia terminal according to claim 7.
In the method for controlling a multimedia terminal according to the above,
The step includes the step of assigning data other than the image data in the assigning step.
The transfer rate assigned to the
A If the transfer rate is higher than the transfer rate reserved for the terminal
Controls the capacity exchange process so that the capacity is exchanged again
It is characterized by doing .

【0010】[0010]

【作用】本発明によるマルチメディア端末においては、
通信データ中に画像データ有りと認識した場合は画像切
換え部に受信画像信号を選択させて表示部へ表示させ、
通信データ中に画像データ無しと認識した場合は画像切
換え部に制御画像信号を選択させて表示部へ表示させ
る。これにより、意味の無い画像、乱れた画像の表示が
防止される。
In the multimedia terminal according to the present invention,
If it is recognized that there is image data in the communication data, the image switching unit is made to select the received image signal and displayed on the display unit,
If it is recognized that there is no image data in the communication data, the image switching unit is made to select a control image signal and displayed on the display unit. This prevents display of meaningless images and disturbed images.

【0011】[0011]

【実施例】以下、本発明の一実施例を図面を参照して説
明する。
An embodiment of the present invention will be described below with reference to the drawings.

【0012】図1は本発明の一実施例に係るマルチメデ
ィア端末のブロック図である。
FIG. 1 is a block diagram of a multimedia terminal according to one embodiment of the present invention.

【0013】同図において、1は音声入出力手段の一つ
であるハンドセット、2は音声入力手段の一つであるマ
イク、3は音声出力手段の一つであるスピーカ、4は後
述のシステム制御部14の指示により、音声入出力手段
としてのハンドセット1、マイク2、スピーカ3を切り
換える機能、音量レベル調整のために利得を調整する利
得調整機能、ハンドセット1がオンフック状態かオフフ
ック状態かを検知するオン/オフ検知機能、音声入出力
手段としてマイク2とスピーカ3を使用したときにエコ
ーを消去するエコーキャンセル機能、ダイヤルトーン・
呼出しトーン・ビジートーン・着信トーン等のトーンを
生成するトーン生成機能をもつ音声インタフェース部、
5はシステム制御部14の指示により64Kbps P
CM(A−law)、64Kbps PCM(μ−la
w)、64Kbps/56Kbps/48Kbps(S
B−ADPCM)、32Kbps ADPCM、16K
bps(例えばAPC−AB)、8Kbps等の音声符
号化/復号化アルゴリズムに従って送信音声信号をAD
変換して符号化する機能、受信音声信号を復号化してD
/A変換する機能をもつ音声符号化復号化部である。上
記音声符号化復号化部5は音声符号化部5aおよび音声
復号化部5bを有する。
In FIG. 1, reference numeral 1 denotes a handset which is one of voice input / output means, 2 denotes a microphone which is one of voice input means, 3 denotes a speaker which is one of voice output means, and 4 denotes a system control described later. In accordance with an instruction from the unit 14, a function of switching the handset 1, the microphone 2, and the speaker 3 as voice input / output means, a gain adjustment function of adjusting a gain for volume level adjustment, and detection of whether the handset 1 is in an on-hook state or an off-hook state. On / off detection function, echo cancellation function for canceling echo when microphone 2 and speaker 3 are used as voice input / output means, dial tone
A voice interface unit having a tone generation function for generating tones such as a call tone, a busy tone, and a ring tone;
5 is 64Kbps P according to the instruction of the system control unit 14.
CM (A-law), 64 Kbps PCM (μ-la
w), 64Kbps / 56Kbps / 48Kbps (S
B-ADPCM), 32Kbps ADPCM, 16K
The transmission audio signal is subjected to AD in accordance with an audio encoding / decoding algorithm such as 8 bps (for example, APC-AB) and 8 Kbps.
Convert and encode function, decode received voice signal and
This is a voice encoding / decoding unit having a function of performing / A conversion. The voice coding / decoding section 5 has a voice coding section 5a and a voice decoding section 5b.

【0014】6は画像入力手段の1つであり、自画像等
を入力するためのカメラ、7は画像入力手段の1つであ
り絵や図面等を入力するための書画カメラ、8はカメラ
6または書画カメラ7よりの入力画像、相手からの受信
画像やシステム制御部14からの画像を表示する表示部
(表示手段)、9はシステム制御部14の指示により生
じる画像入力手段の切換え機能、上述した各画像の表示
切換え及び表示分割機能、および各画像入出力部の画像
信号と電気的/物理的に整合をとるための信号変換機能
をもつビデオインタフェース部、10は送信画像をA/
D変換して符号化する機能、受信画像を復号化してD/
A変換する機能をもつ画像符号化復号化部であり、画像
符号化復号化部10は、大容量の画像の生データに、動
き補償、コマ落し、フレーム間補償及びフレーム内補
償、DCT変換、ベクトル量子化変換などの種々の手法
によって帯域圧縮を行い、小容量化し、デジタル回線で
画像データを伝送可能にしている。上記ビデオインタフ
ェース部9は画像入力部9aおよび画像出力部9bを有
し、画像符号化復号化部10は画像符号化部10aおよ
び画像復号化部10bを有する。現在、ISDN回線の
基本インタフェースが64Kbpsであるが、この伝送
速度でも伝送可能な画像の符号化方式としてはCCIT
T勧告草案H.261がある。
Reference numeral 6 denotes one of image input means, a camera for inputting a self-portrait or the like, 7 denotes one of image input means, a document camera for inputting pictures, drawings, etc., and 8 denotes a camera 6 or A display unit (display means) for displaying an input image from the document camera 7, an image received from the other party, and an image from the system control unit 14, a switching function of image input means 9 generated by an instruction from the system control unit 14, A video interface unit having a display switching function and display division function of each image, and a signal conversion function for electrically / physical matching with an image signal of each image input / output unit.
D-conversion and coding function, received image decoding and D /
An image encoding / decoding unit having a function of performing A-conversion. The image encoding / decoding unit 10 performs motion compensation, frame dropping, inter-frame compensation and intra-frame compensation, DCT transform, Band compression is performed by various techniques such as vector quantization conversion to reduce the capacity, and image data can be transmitted over a digital line. The video interface unit 9 has an image input unit 9a and an image output unit 9b, and the image encoding / decoding unit 10 has an image encoding unit 10a and an image decoding unit 10b. At present, the basic interface of the ISDN line is 64 Kbps.
Draft T Recommendation H. 261.

【0015】11はデータ通信を行うためのデータ端
末、12はデータ端末11及びシステム制御部14から
の送信データを多重分離化部15へ通知するとともに、
受信データをデータ端末11またはシステム制御部14
へ通知するデータインタフェース部、13は図8の装置
の制御をするために制御情報入力に使用するキーボー
ド、タッチパネル等の操作部、14はCPU、ROM、
RAM、補助記憶装置、キャラクタジェネレータ、画像
信号生成回路等を備え、各部の状態を監視し、装置全体
の制御、状態に応じた操作/表示画面の作成及びアプリ
ケーションプログラムの実行等を行うシステム制御部、
15は音声符号化復号化部5からの音声データ、ビデオ
符号化復号化部10からの画像データ、データインタフ
ェース部12からのデータ、システム制御部14からの
BASを送信フレーム単位に多重化するとともに、受信
フレームを構成単位の各メディアに分離し各部に通知す
る多重分離化部であり、CCITT勧告のH.221に
従ったものである。16はISDNユーザー網インタフ
ェースに従って回線を制御する回線インタフェース部で
ある。17は画像復号化部10bからの受信画像信号と
システム制御部14からの制御画像信号を選択して画像
出力部9bへ伝送する画像切換え回路、18は画像復号
化部10bからの受信画像信号中の同期信号を検知して
システム制御部14へ知らせる同期検知部である。同期
検知部18は、受信画像信号の中の水平/垂直同期信号
を監視し、発生していれば同期とみなし、同期信号が発
生していない場合には同期はずれとみなし、システム制
御部14へその旨を通知するものである。
Reference numeral 11 denotes a data terminal for performing data communication. Reference numeral 12 denotes transmission data from the data terminal 11 and the system control unit 14 to the demultiplexing unit 15,
The received data is transferred to the data terminal 11 or the system control unit 14
8 is a data interface unit for notifying the user, 13 is an operation unit such as a keyboard and a touch panel used for inputting control information for controlling the apparatus shown in FIG. 8, and 14 is a CPU, ROM,
A system control unit that includes a RAM, an auxiliary storage device, a character generator, an image signal generation circuit, etc., monitors the status of each unit, controls the entire device, creates an operation / display screen according to the status, and executes an application program. ,
Numeral 15 multiplexes audio data from the audio encoding / decoding unit 5, image data from the video encoding / decoding unit 10, data from the data interface unit 12, and BAS from the system control unit 14 in units of transmission frames. , Is a demultiplexing unit that separates a received frame into each medium of a configuration unit and notifies each unit of the demultiplexed frame. 221. A line interface unit 16 controls a line according to the ISDN user network interface. An image switching circuit 17 selects an image signal received from the image decoding unit 10b and a control image signal from the system control unit 14 and transmits them to the image output unit 9b. Is a synchronization detection unit that detects the synchronization signal of the above and notifies the system control unit 14. The synchronization detection unit 18 monitors the horizontal / vertical synchronization signal in the received image signal. If a synchronization signal has been generated, it is regarded as synchronous. If no synchronization signal has been generated, it is regarded as out of synchronization. This is to be notified.

【0016】画像復号化部10bで画像復号化時エラー
が発生した場合には上記同期信号が乱れることで同期検
知部18が作動する。また、画像復号化部10bが画像
復号化時に画像に多大な影響を与えるほどの復号化不可
能なエラーが発生したとき同期はずれとみなし、画像復
号化部10bがこのエラーを同期検知部18に通知する
ことで上述同様同期はずれとみなし、同期検知部18が
システム制御部14へその旨を通信する方法もある。
When an error occurs during image decoding in the image decoding unit 10b, the synchronization signal is disturbed and the synchronization detection unit 18 operates. When the image decoding unit 10b generates an undecodable error that has a great effect on the image at the time of image decoding, it is regarded as out of synchronization, and the image decoding unit 10b notifies the synchronization detection unit 18 of this error. As described above, there is a method in which the synchronization detection unit 18 notifies the system control unit 14 of the fact that the synchronization is lost by notifying the notification.

【0017】次に、端末能力のネゴシエーションや端末
能力の変更を行なう方法について述べる。まず、ISD
N回線で通信する場合、図2に示すように、アウトバン
ド信号(つまりDチャネル)を用いて発呼する。図2に
示すように、端末Aから端末Bへの呼設定と、端末Bか
ら端末Aへの応答でBチャネルでの通信が可能になる。
通信路としては、ほかにDチャネル、H0,H1なども
あるがBチャネルのみで説明し、以下は省略する。
Next, a method for negotiating terminal capabilities and changing terminal capabilities will be described. First, ISD
In the case of communication over N lines, as shown in FIG. 2, a call is made using an out-band signal (that is, a D channel). As shown in FIG. 2, communication on the B channel is enabled by a call setting from the terminal A to the terminal B and a response from the terminal B to the terminal A.
Other communication channels include D channel, H0, H1, etc., but only the B channel will be described, and the following description will be omitted.

【0018】次に、この通信可能となったBチャネルを
用いて勧告H.242に従い、図3に示すようにBチャ
ネルのインバンド信号手順(つまり、Bチャネル内をデ
ータ部と制御部に割り付け、その制御部によって制御す
る)が行われる。この制御をインチャネル制御手順とい
うので、以後は、この名称を用いる。このインチャネル
制御を実行するに当たり、Bチャネル内に制御ビットが
必要になるので、そのフレーム構成がH.221で規定
されている。
Next, using the B channel that has become communicable, the H.264 standard is used. In accordance with H.242, the in-band signal procedure of the B channel is performed as shown in FIG. 3 (that is, the inside of the B channel is allocated to the data section and the control section and controlled by the control section). Since this control is called an in-channel control procedure, this name will be used hereinafter. When performing this in-channel control, a control bit is required in the B channel. 221.

【0019】このフレーム構成を図4に示す。図4のマ
ルチフレーム構造は、Bチャネル(64Kbps)時の
ものである。まず、マルチフレーム構造は、1オクテッ
ト/125μsecを基本として、(a)のように、1
フレーム=80オクテット、(b)のように、1サブマ
ルチフレーム=2フレーム、(c)のように、1マルチ
フレーム=8サブマルチフレームの構造を有し、ビット
方向には、8Kbpsのサブチャネルが#1から#8ま
で定義されている。但し、#8サブチャネルだけは、転
送レートが、6.4Kbpsとなり、制御ビットとし
て、FAS(Frame Alignment Sig
nal)とBAS(BitrateAllocatio
n Signal)の信号が挿入されている。このFA
SとBASによりBチャネルのインチャネル制御が可能
となる。FASは、フレーム及びマルチフレーム同期に
使用されている。BASは、サブチャネルなどの多重方
法を決定するに必要な端末能力の情報の交換あるいは能
力設定に使用される。特に、BASは、データ通信中で
あってもサブマルチフレーム(20msec)ごとに切
換えは可能である。オクテットデータの送信はオクテッ
ト番号の若番から順番になされる。
FIG. 4 shows this frame configuration. The multi-frame structure in FIG. 4 is for the B channel (64 Kbps). First, the multi-frame structure is based on 1 octet / 125 μsec, and as shown in FIG.
Frame = 80 octets, 1 sub-multiframe = 2 frames as in (b), 1 multiframe = 8 sub-multiframes as in (c), and 8 Kbps sub-channel in the bit direction Are defined from # 1 to # 8. However, the transfer rate of only the # 8 sub-channel is 6.4 Kbps, and FAS (Frame Alignment Signal) is used as a control bit.
nal) and BAS (BitrateAllocatio)
n Signal) is inserted. This FA
S and BAS enable in-channel control of the B channel. FAS is used for frame and multi-frame synchronization. The BAS is used for exchanging information on terminal capability or setting capability required for determining a multiplexing method such as a subchannel. In particular, BAS can be switched every sub-multiframe (20 msec) even during data communication. The octet data is transmitted in order from the lowest octet number.

【0020】次に、図3について、手順を説明する。ま
ず、Bチャネルが通信可能状態になると、端末A,Bと
もに、FASを送信する。この時の端末能力は、初期状
態のモード0(オーディオとFAS,BASのみのモー
ド)である。このFASは、相手端末で探索され、H.
242で規定されたフレーム同期確立の条件が満たされ
ると、図5(a)に示すFAS内のビット構成の中のA
を“0”にして送信する。A=0を端末が受信すること
で、相手端末のフレーム同期が確立したことが確認され
る。次に、自端末の能力情報を、BASで相手端末に送
信し(図3の点線)、お互いに、相手端末の端末能力を
認識する。もし、この時点で、お互いが通信可能であれ
ば、データの通信が開始される。能力変更が必要な場合
は、同様に、BASを用いてコマンドとして端末能力を
送信し、相手端末がその能力を設定完了後、データの通
信を開始する。データの通信は送受信で独立しており、
同期の確立も端末能力の設定も別々に行われる。よっ
て、片方向だけ同期はずれが発生したり、送受でデータ
の種別が異なる場合もある。データの通信が完了し呼を
切断するときには、まず切断する側の端末(図3では端
末A)がBASを用いてモード0にする。これにより、
Bチャネルのインチャネル制御は初期状態に戻った。
Next, the procedure will be described with reference to FIG. First, when the B channel becomes communicable, both terminals A and B transmit FAS. The terminal capability at this time is mode 0 in the initial state (mode of only audio, FAS, and BAS). This FAS is searched at the partner terminal, and
When the conditions for establishing frame synchronization specified in H.242 are satisfied, A in the bit configuration in the FAS shown in FIG.
Is set to “0” and transmitted. When the terminal receives A = 0, it is confirmed that frame synchronization of the partner terminal has been established. Next, the capability information of the own terminal is transmitted to the partner terminal by BAS (dotted line in FIG. 3), and the terminals recognize each other's terminal capability. At this point, if they can communicate with each other, data communication starts. When the capability change is necessary, similarly, the terminal capability is transmitted as a command using the BAS, and after the partner terminal completes setting the capability, data communication is started. Data communication is independent for transmission and reception,
The establishment of the synchronization and the setting of the terminal capability are performed separately. Therefore, out of synchronization may occur only in one direction, or the type of data may be different between transmission and reception. When the data communication is completed and the call is to be disconnected, the terminal to be disconnected (terminal A in FIG. 3) first sets the mode to 0 using the BAS. This allows
The in-channel control of the B channel has returned to the initial state.

【0021】次に、図2に示すように、Dチャネルのア
ウトバンド手順で切断と解放が行われてすべての通信が
完了する。
Next, as shown in FIG. 2, disconnection and release are performed in the out-band procedure of the D channel, and all communication is completed.

【0022】図5(a)〜(c)は、FAS内のビット
構成を示している。Aビットは、フレーム同期はずれの
表示である。Eビットは、CRC誤りが発生したか否か
の表示である。C1,C2,C3,C4は、CRCの4ビッ
トである。N1〜N5は、マルチフレームの番号付け用で
ある。R1〜R4は、チャネル番号である。TEAは、端
末装置アラームで、端末内部の故障により入力信号を受
け取ったりこれに反応できない場合に“1”をセットす
る。なお、図5(a)のサービスチャネルとは図4
(a)に示した8番目のサブチャネルのことである。
FIGS. 5A to 5C show the bit configuration in the FAS. The A bit is an indication of loss of frame synchronization. The E bit is an indication of whether a CRC error has occurred. C 1 , C 2 , C 3 and C 4 are 4 bits of CRC. N 1 to N 5 are for numbering of multiframes. R 1 to R 4 are channel numbers. The TEA sets “1” when a terminal device alarm cannot receive or respond to an input signal due to a failure inside the terminal. It should be noted that the service channel in FIG.
The eighth sub-channel shown in FIG.

【0023】図6(a),(b)は、BAS内のビット
構成を示している。(a)に示すように、上位3ビット
は、属性を表し、残りの5ビットでその属性の属性値を
表す。(b)には、属性の内容を示す。属性値は、例え
ば、転送レート値、コーデック種別、各メディア特有の
パラメータ値などが定義されている。
FIGS. 6A and 6B show the bit configuration in the BAS. As shown in (a), the upper three bits represent an attribute, and the remaining five bits represent the attribute value of the attribute. (B) shows the contents of the attribute. As the attribute value, for example, a transfer rate value, a codec type, a parameter value specific to each medium, and the like are defined.

【0024】次に、本発明によるマルチメディア端末の
一実施例の動作フローを図7〜図10に示す。まず、マ
ルチメディア端末による通信か電話による通信かを選択
し(ステップS1)、電話としての通信の場合には、画
像切換え部(SW)17をC−B間に接続し(ステップ
S2,S3)、表示部8へは、システム制御部14が作
成した電話用の画面が表示される(ステップS4)。例
としては、発呼時は、テンキーや電話帳やキー入力され
た電話番号が表示され、着呼時は、もし相手がわかる場
合には、相手の電話番号などが表示され、通話中には、
通話時間などが表示される。音声部(音声インタフェー
ス部4および音声符号化復号化部5)は、起動状態にな
り呼が切断されるまで維持される(ステップS5〜S
7)。
Next, an operation flow of an embodiment of the multimedia terminal according to the present invention is shown in FIGS. First, communication between the multimedia terminal and the telephone is selected (step S1). In the case of communication as a telephone, the image switching unit (SW) 17 is connected between the terminals C and B (steps S2 and S3). On the display unit 8, a telephone screen created by the system control unit 14 is displayed (step S4). For example, at the time of outgoing call, numeric keypad, phonebook, or keyed-in telephone number is displayed, at the time of incoming call, if the other party is known, the telephone number of the other party is displayed. ,
The call time is displayed. The voice unit (the voice interface unit 4 and the voice encoding / decoding unit 5) is activated and maintained until the call is disconnected (steps S5 to S5).
7).

【0025】次に、マルチメディア端末による通信の場
合には、画像切換え部17をC−B間に接続し(ステッ
プS8)、表示部8へは、システム制御部14が作成し
たマルチメディア端末用の画面が表示される(ステップ
S9)。例として、発呼時は、通信に使用する伝達能力
の設定や電話同様、テンキーや端末番号帳やキー入力さ
れた端末番号が表示され、着呼時は、相手端末の能力表
示や伝送中の能力表示や相手端末番号がわかる場合に
は、その端末番号が表示される。BASによる能力のネ
ゴシエーションで(ステップS10)、能力として音声
が有れば音声部を起動して(ステップS11,S1
2)、確保したBチャネルの転送レートXから選択され
た音声コーデックの転送レートAを差引き(ステップS
13)、この転送レートをYとして、Y=0の場合に
は、データと画像は無いと判断される(ステップS1
4,S15)。よって、この場合には、画像切換え部1
7をC−B間に接続し(図9のステップS16)、シス
テム制御部14からの画像を表示する。例としては、現
在の伝達能力を表示し、画像が伝達されていない旨を操
作者へ伝える。あるいは動画像以外のメディアの情報
(描画、静止画、テキストデータなど)をデータとして
送受し、システム制御部14で、このデータを画像に変
換して表示させる。Y>0の場合には、能力としてデー
タが有ればデータインタフェース部(データ部)12を
起動して(ステップS17,S18)、転送レートYか
ら選択されたデータの転送レートBを差引き、この転送
レートをZとして(ステップS19)、Z=0の場合に
は、画像は無いと判断される(ステップS20)。よっ
て、この場合には、画像切換え部17をC−B間に接続
し(ステップS16)、システム制御部14からの画像
を表示する。Z>0の場合には、能力として画像が無け
れば、画像切換え部17をC−B間に接続し、システム
制御部14からの画像を表示する(ステップS21,S
16)。能力として画像が有れば画像部を起動して、転
送レートZを画像の転送レートとして、同期検知部18
により画像信号の同期/非同期を検知し(ステップS2
2)、画像信号の同期が確立するとシステム制御部14
はこれを認識し、画像切換え部17をC−A間に接続し
て(ステップS23)、画像復号化部10bからの相手
画像を画像出力部9に伝え表示部8に出力する。ここ
で、Y<0あるいは、Z<0の場合には、能力選択の誤
りとして相手端末に伝え、再度能力のネゴシエーション
に入る(ステップS27,S28)。例えば、モード0
に戻り能力の交換をやり直すなどが方法として有る。同
期はずれの場合には、画像切換え部17をC−B間に接
続し、システム制御部14が作成した画像を表示部へ表
示する(ステップS24)。例としては、「しばらくお
待ち下さい」などのメッセージを表示し、相手画像の受
信待ち状態であることを操作者に伝える。操作部13か
ら、キー入力などの手段により、表示切換え指示があっ
た場合(ステップS25)、システム制御部14は、画
像切換え部17を現在のスイッチ位置の逆側に切り換え
る(ステップS26)。例えば、C−A間が接続されて
いればC−B間へ切り換え、C−B間が接続されていれ
ば、C−A間へ切り換える。
Next, in the case of communication by the multimedia terminal, the image switching unit 17 is connected between C and B (step S8), and the display unit 8 displays the multimedia terminal created by the system control unit 14 for the multimedia terminal. Is displayed (step S9). For example, at the time of outgoing call, setting of transmission capability used for communication and telephone, as well as numeric keypad, terminal number book and key input terminal number are displayed, at the time of incoming call, the capability display of the partner terminal and the display during transmission If the capability display and the partner terminal number are known, the terminal number is displayed. In the capability negotiation by the BAS (step S10), if there is a voice as the capability, the voice unit is activated (steps S11 and S1).
2) The transfer rate A of the selected voice codec is subtracted from the secured transfer rate X of the B channel (step S).
13) If the transfer rate is Y and Y = 0, it is determined that there is no data and no image (step S1).
4, S15). Therefore, in this case, the image switching unit 1
7 is connected between C and B (step S16 in FIG. 9), and an image from the system control unit 14 is displayed. As an example, the current transmission capability is displayed, and the operator is notified that no image is transmitted. Alternatively, media information (drawing, still image, text data, etc.) other than a moving image is transmitted and received as data, and the system control unit 14 converts this data into an image and displays it. If Y> 0, if there is data as the capability, the data interface unit (data unit) 12 is activated (steps S17 and S18), and the transfer rate B of the selected data is subtracted from the transfer rate Y, This transfer rate is set to Z (step S19), and if Z = 0, it is determined that there is no image (step S20). Therefore, in this case, the image switching unit 17 is connected between C and B (step S16), and the image from the system control unit 14 is displayed. In the case of Z> 0, if there is no image as the capability, the image switching unit 17 is connected between C and B, and the image from the system control unit 14 is displayed (steps S21 and S21).
16). If there is an image as the capability, the image unit is started, and the transfer rate Z is set as the image transfer rate, and the synchronization detection unit 18
Detects the synchronization / asynchronization of the image signal (step S2).
2) When the synchronization of the image signal is established, the system control unit 14
Recognizes this, connects the image switching unit 17 between C and A (step S23), transmits the partner image from the image decoding unit 10b to the image output unit 9, and outputs it to the display unit 8. Here, if Y <0 or Z <0, it is reported to the partner terminal as a capability selection error, and capability negotiation is started again (steps S27 and S28). For example, mode 0
There is a method such as returning to the beginning and exchanging the ability again. If the synchronization is lost, the image switching unit 17 is connected between C and B, and the image created by the system control unit 14 is displayed on the display unit (step S24). As an example, a message such as “Please wait” is displayed to inform the operator that the other party's image is waiting to be received. When a display switching instruction is given from the operation unit 13 by a key input or the like (step S25), the system control unit 14 switches the image switching unit 17 to a side opposite to the current switch position (step S26). For example, if the connection between C and A is connected, the connection is switched to C and B. If the connection between C and B is connected, the connection is switched to C and A.

【0026】次に、通信中の能力変更の場合について説
明する。自端末が能力を変更する場合は(ステップS2
9)、操作部13からの伝達能力の変更の指示により、
システム制御部14は、多重分離化部15を介して、B
チャネルのインチャネルのBASにより相手端末へ能力
変更を通知する(ステップS30)。同時に、自端末も
能力の変更に応じて、音声部やデータ部や画像部(画像
入出力部9および画像符号化復号化部10)及び画像切
換え部17を変更する(ステップS11〜S34)。こ
の場合、音声が無いときは転送レートA=0、データが
無いときは転送レートB=0として、ステップS21へ
進む(ステップS31〜S34)。相手端末から能力変
更が有った場合には、BASによりコマンドが受信され
るので、それに応じて音声部やデータ部や画像部及び画
像切換え部17を変更する。
Next, a case of a capability change during communication will be described. When the own terminal changes the capability (step S2
9) In response to an instruction to change the transmission capability from the operation unit 13,
The system control unit 14 transmits the B
The capability change is notified to the partner terminal by the in-channel BAS of the channel (step S30). At the same time, the own terminal also changes the audio part, the data part, the image part (the image input / output unit 9 and the image encoding / decoding unit 10) and the image switching unit 17 according to the change of the capability (steps S11 to S34). In this case, when there is no voice, the transfer rate is set to A = 0, and when there is no data, the transfer rate is set to B = 0, and the process proceeds to step S21 (steps S31 to S34). When the capability is changed from the partner terminal, the command is received by the BAS, so that the voice part, the data part, the image part, and the image switching part 17 are changed accordingly.

【0027】次に、通信終了時の場合(ステップS3
5)について説明する。自端末から終了する場合(ステ
ップS36)には、操作部13からの指示により、シス
テム制御部14は、多重分離化部15を介して、Bチャ
ネルのインチャネルのBASにより相手端末へモード0
への能力変更を通知する(ステップS37)。同時に、
自端末もモード0にし(ステップS37)、システム制
御部14は画像切換え部17をC−B間に接続し、シス
テム制御部14からの画像を表示部へ表示する(ステッ
プS39)。例としては、操作者へ回線が切断される旨
を伝える。その後、自端末より切断を送信し(ステップ
S40)、相手端末より解放を受信し通信を終了する。
この時には、通信時間や料金などが表示され、次の通信
の準備が完了すると初期画面に戻る。相手端末から終了
する場合(ステップS36)には、BASによりモード
0への能力変更の通知を受け(ステップS38)、シス
テム制御部14は、画像切換え部17をC−B間に接続
し(ステップS39)、システム制御部からの画像を表
示部へ表示する。例としては、操作者へ回線が切断され
る旨を伝える。その後、回線が切断され(ステップS4
0)、次の通信の準備が完了したときに、システム制御
部14は、初期画面を表示部へ表示する。
Next, when the communication is completed (step S3)
5) will be described. If the operation is to be terminated from the own terminal (step S36), the system control unit 14 sends the mode 0 to the partner terminal by the B-channel in-channel BAS via the demultiplexing unit 15 according to an instruction from the operation unit 13.
(Step S37). at the same time,
The own terminal is also set to mode 0 (step S37), the system control unit 14 connects the image switching unit 17 between C and B, and displays the image from the system control unit 14 on the display unit (step S39). As an example, the operator is notified that the line is disconnected. Thereafter, a disconnection is transmitted from the own terminal (step S40), and a release is received from the partner terminal, and the communication is terminated.
At this time, the communication time, the charge, and the like are displayed, and when the preparation for the next communication is completed, the screen returns to the initial screen. In the case of ending from the partner terminal (step S36), the system control unit 14 receives the notification of the capability change to the mode 0 from the BAS (step S38), and connects the image switching unit 17 between C and B (step S38). S39), the image from the system control unit is displayed on the display unit. As an example, the operator is notified that the line is disconnected. Thereafter, the line is disconnected (step S4).
0) When the preparation for the next communication is completed, the system control unit 14 displays an initial screen on the display unit.

【0028】以上説明したように本実施例によれば、
ルチメディア端末のために確保された転送レートから、
画像データ以外のデータに対して所定の転送レートを除
いた値を発生し、この結果に応じて画像データの有無を
判別するので、例えば能力交換に応じた通信能力の選択
を間違えても、通信回線の容量によって画像データの有
無を判別することができるし、また、たとえ能力交換が
正しく行われていても自分の端末に割り当てられる通信
回線自体の容量が変動し、該交換した能力で通信を維持
することができない場合が考えられるが、このようなと
きでも通信回線の容量に応じて適切に通信処理すること
ができる。更に、画像データが無いと判断された場合
に、その旨を表示部に表示させるので、意味の無い画像
や乱れた画像を表示することを防止することができる
As described above, according to this embodiment, the mask
From the transfer rate reserved for multimedia terminals,
Excluding the specified transfer rate for data other than image data
Value, and the presence or absence of image data is determined according to the result.
For example, selection of communication capability according to capability exchange
If you make a mistake, the image data may
You can judge nothing, and even if the ability exchange
Communication assigned to your device even if done correctly
The capacity of the line itself fluctuates, and communication is maintained with the exchanged capacity
You may not be able to
Communication processing according to the capacity of the communication line
Can be. Furthermore, when it is determined that there is no image data
In addition, the fact is displayed on the display unit, so there is no meaningful image
It is possible to prevent a distorted image from being displayed .

【0029】また、画像データ以外のデータに対して割
り当てる転送レートが、マルチメディア端末のために確
保された転送レートよりも大きい場合は、通信能力の誤
りとして相手端末に通知するので、ネゴシエーション等
によって確保された転送レートが間違っていると認識す
ることができ、また画像データの転送ができていないこ
とを認識することができ、更に、このような通知によっ
て通信能力を再設定することができる
Further, data other than image data is assigned.
Transfer rate to be assigned for multimedia terminals
If the transfer rate is higher than the
Negotiation, etc.
Recognizes that the transfer rate secured by
That image data cannot be transferred.
Can be recognized.
Communication capability can be reset .

【0030】[0030]

【発明の効果】以上詳細に説明したように、請求項1記
載の端末及び請求項3記載の方法によれば、マルチメデ
ィア端末のために確保された転送レートから、画像デー
タ以外のデータに対して所定の転送レートを除いた値を
発生し、この結果に応じて画像データの有無を判別する
ので、たとえ能力交換に応じた通信能力の選択を間違え
ても、通信回線の容量によって画像データの有無を判別
することができる。また、たとえ能力交換が正しく行わ
れていても自分の端末に割り当てられる通信回線自体の
容量が変動し、該交換した能力で通信を維持することが
できない場合が考えられるが、このようなときでも通信
回線の容量に応じて適切に通信処理することができる。
更に、画像データが無いと判断された場合に、その旨を
表示部に表示させるので、意味の無い画像や乱れた画像
を表示することを防止することができる。すなわち、通
信する機種の相異、通信プロトコルの相異、又は回線容
量の変動等の理由によって、通信能力の選択を適切に行
うことができない場合でも、通信する容量によって画像
データの有無を判別して、ユーザーに意味の無い画像を
表示しつづけることを防止することができる。 また、請
求項5記載の端末及び請求項7記載の方法によれば、画
像データ以外のデータに対して割り当てる転送レート
が、マルチメディア端末のために確保された転送レート
よりも大きい場合には、通信能力の誤りとして相手端末
に通知するので、ネゴシエーション等によって確保され
た転送レートが間違っていると認識することができ、ま
た画像データの転送ができていないことを認識すること
ができ、更に、このような通知によって通信能力を再設
定することができる。
As described in detail above, claim 1
According to the terminal and the method described in claim 3, the multimedia
Image data from the transfer rate reserved for
Data except for the specified transfer rate.
Occurs, and the presence or absence of image data is determined according to the result.
So even if you make a mistake in selecting the communication capability according to the capability exchange
The presence or absence of image data based on the capacity of the communication line
can do. Also, even if the ability exchange is performed correctly
Of the communication line itself assigned to your terminal
The capacity fluctuates, and communication can be maintained with the exchanged capacity.
You may not be able to communicate.
Communication processing can be appropriately performed according to the capacity of the line.
If it is determined that there is no image data,
Useless images or distorted images are displayed on the display unit
Can be prevented from being displayed. That is,
Communication model, communication protocol, or line capacity
Communication capacity is selected appropriately for reasons such as fluctuations in
Even if you cannot transfer images,
Determine the presence or absence of data and create images that are meaningless to the user
It is possible to prevent the display from being continued. In addition,
According to the terminal described in claim 5 and the method described in claim 7,
Transfer rate assigned to data other than image data
Is the transfer rate reserved for multimedia terminals
If the value is larger than
So that it is secured by negotiations etc.
Transfer rate is incorrect.
That the transferred image data has not been transferred
In addition, communication capability can be re-established by such notification.
Can be specified.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施例に係るマルチメディア端末の
ブロック図である。
FIG. 1 is a block diagram of a multimedia terminal according to one embodiment of the present invention.

【図2】Dチャネル手順を示すシーケンス図である。FIG. 2 is a sequence diagram showing a D-channel procedure.

【図3】インチャネル制御手順を示すシーケンス図であ
る。
FIG. 3 is a sequence diagram showing an in-channel control procedure.

【図4】フレーム構成図である。FIG. 4 is a frame configuration diagram.

【図5】FAS内のビット構成図である。FIG. 5 is a diagram illustrating a bit configuration in an FAS.

【図6】BAS内のビット構成図である。FIG. 6 is a diagram illustrating a bit configuration in a BAS.

【図7】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。
FIG. 7 is a flowchart showing an operation of one embodiment of a multimedia terminal according to the present invention.

【図8】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。
FIG. 8 is a flowchart showing the operation of one embodiment of the multimedia terminal according to the present invention.

【図9】本発明によるマルチメディア端末の一実施例の
動作を示すフローチャートである。
FIG. 9 is a flowchart showing an operation of one embodiment of a multimedia terminal according to the present invention.

【図10】本発明によるマルチメディア端末の一実施例
の動作を示すフローチャートである。 1 ハンドセット 2 マイク 3 スピーカ 4 音声インタフェース部 5 音声符号化復号化部 5a 音声符号化部 5b 音声復号化部 6 カメラ 7 書画カメラ 8 表示部 9 ビデオインタフェース部 9a 画像入力部 9b 画像出力部 10 画像符号化複合化部 10a 画像符号化部 10b 画像複合化部 11 データ端末 12 データインタフェース部 13 操作部 14 システム制御部 15 多重分離化部 16 回線インタフェース部 17 画像切換え部 18 同期検知部
FIG. 10 is a flowchart showing an operation of one embodiment of a multimedia terminal according to the present invention. Reference Signs List 1 handset 2 microphone 3 speaker 4 audio interface unit 5 audio encoding / decoding unit 5a audio encoding unit 5b audio decoding unit 6 camera 7 document camera 8 display unit 9 video interface unit 9a image input unit 9b image output unit 10 image encoding Combination unit 10a Image encoding unit 10b Image combination unit 11 Data terminal 12 Data interface unit 13 Operation unit 14 System control unit 15 Demultiplexing unit 16 Line interface unit 17 Image switching unit 18 Synchronization detection unit

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 昭62−144484(JP,A) 特開 平2−113788(JP,A) 特開 平2−285785(JP,A) 特開 昭63−90953(JP,A) (58)調査した分野(Int.Cl.7,DB名) H04M 11/00 - 11/10 H04N 7/14 ──────────────────────────────────────────────────続 き Continuation of the front page (56) References JP-A-62-144484 (JP, A) JP-A-2-113788 (JP, A) JP-A-2-285785 (JP, A) JP-A 63-144 90953 (JP, A) (58) Fields investigated (Int. Cl. 7 , DB name) H04M 11/00-11/10 H04N 7/14

Claims (8)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 画像データを含む複数のメディアのデー
タを送受信することができるマルチメディア端末であっ
て、 前記複数のメディアのデータを送受信する送受信手段
と、 前記送受信手段により送受信するデータの転送レート
を、通信すべき前記メディアごとに認識する認識手段
と、 前記マルチメディア端末のために確保された転送レート
から、前記画像データ以外のデータに対して前記認識手
段が認識した転送レートを除いた値を発生する発生手段
と、 前記発生手段が発生した値に応じて前記送受信手段によ
り送受信すべきデータの画像データの有無を判別する判
別手段とを有することを特徴とするマルチメディア端
末。
1. A method for storing data on a plurality of media including image data.
Multimedia terminal that can send and receive data
Te, transmitting and receiving means for transmitting and receiving data of the plurality of media
And the transfer rate of data transmitted and received by the transmitting and receiving means
Recognition means for recognizing each of the media to be communicated
And a transfer rate reserved for the multimedia terminal
From the recognition means for data other than the image data.
Means for generating a value excluding the transfer rate recognized by the stage
And the transmitting and receiving means according to the value generated by the generating means.
To determine the presence or absence of image data
Multimedia end having separate means
End.
【請求項2】 更に、前記判別手段により前記画像デー2. The image processing apparatus according to claim 1, further comprising:
タが無いと判別した場合は、前記画像データが無いことIf it is determined that there is no data, there is no image data
を表示部に表示させるように制御する表示制御手段を有Display control means for controlling the display on the display unit.
することを特徴とする請求項1記載のマルチメディア端2. The multimedia terminal according to claim 1, wherein
未。Not yet.
【請求項3】 画像データを含む複数のメディアのデー3. The data of a plurality of media including image data.
タを送受信することができるマルチメディア端末の制御Of multimedia terminals that can send and receive data
方法であって、The method 前記複数のメディアのデータを送受信する送受信工程A transmission / reception step of transmitting / receiving data of the plurality of media
と、When, 前記送受信工程により送受信するデータの転送レートTransfer rate of data transmitted / received in the transmitting / receiving step
を、通信すべき前記メディアごとに認識する認識工程For recognizing each of the media to be communicated
と、When, 前記マルチメディア端末のために確保された転送レートTransfer rate reserved for the multimedia terminal
から、前記画像データ以外のデータに対して前記認識工From the recognition process for data other than the image data.
程で認識された転送レートを除いた値を発生する発生工Generator that generates a value excluding the transfer rate recognized in the process
程と、About 前記発生工程で発生した値に応じて前記送受信工程で送Sending in the transmitting / receiving step according to the value generated in the generating step
受信すべきデータの画像データの有無を判別する判別工A discriminator that determines the presence or absence of image data of data to be received
程とを有することを特徴とするマルチメディア端末の制Control of multimedia terminals characterized by having
御方法。Your way.
【請求項4】 更に、前記判別工程で前記画像データが4. The method according to claim 1, wherein in the determining step, the image data is
無いと判別した場合は、前記画像データが無いことを表If it is determined that there is no image data, it indicates that there is no image data.
示部に表示させるように制御する表示制御工程を有するHaving a display control step of controlling display on the display unit
ことを特徴とする請求項3記載のマルチメディア端末の4. The multimedia terminal according to claim 3, wherein
制御方法。Control method.
【請求項5】 画像データを含む複数のメディアのデー5. The data of a plurality of media including image data.
タを送受信することができるマルチメディア端末であっMultimedia terminal that can send and receive data
て、hand, 前記複数のメディアのデータを送受信する送受信手段Transmitting / receiving means for transmitting / receiving data of the plurality of media
と、When, 前記送受信手段を介して相手端末と通信能力の交換を行Exchange of communication capability with the partner terminal via the transmitting / receiving means
う能力交換手段と、Ability exchange means, 前記能力交換手段の結果に応じて前記送受信手段が送受The transmitting / receiving means transmits and receives data according to the result of the capability exchange means.
信するデータの転送レートを、通信すべき前記メディアThe transfer rate of the data to be transmitted
ごとに割り当てる割り当て手段と、Means for assigning for each 前記割り当て手段が前記画像データ以外のデータに対しThe allocating means is for data other than the image data.
て割り当てる転送レートが、前記マルチメディア端末のTransfer rate assigned to the multimedia terminal
ために確保された転送レートよりも大きい場合は、通信If the transfer rate is higher than the reserved
能力の誤りとして前記相手端末に通知するように制御すControl to notify the partner terminal as an error in capability
る制御手段とを有することを特徴とするマルチメディアMultimedia having control means
端末。Terminal.
【請求項6】 前記制御手段は、前記割り当て手段が前6. The control means, wherein the assigning means is a
記画像データ以外のデータに対して割り当てる転送レーThe transfer rate assigned to data other than image data
トが、前記マルチメディア端末のために確保された転送Transfer is reserved for the multimedia terminal
レートよりも大きい場合は、改めて能力交換するようにIf it is larger than the rate, exchange capacity again
前記能力交換手段を制御することを特徴とする請求項56. The device according to claim 5, wherein the control unit controls the capability exchange unit.
記載のマルチメディア端末。The multimedia terminal as described.
【請求項7】 画像データを含む複数のメディアのデー7. Data of a plurality of media including image data.
タを送受信することができるマルチメディア端末の制御Of multimedia terminals that can send and receive data
方法であって、The method 前記複数のメディアのデータを送受信する送受信工程A transmission / reception step of transmitting / receiving data of the plurality of media
と、When, 前記送受信工程を介して相手端末と通信能力の交換を行The communication capability is exchanged with the partner terminal through the transmission / reception process.
う能力交換工程と、Capacity exchange process, 前記能力交換工程の結果に応じて前記送受信工程で送受Transmission / reception in the transmission / reception step according to the result of the capacity exchange step
信するデータの転送レートを、通信すべき前記メディアThe transfer rate of the data to be transmitted
ごとに割り当てる割り当て工程と、An assignment process to be assigned to each 前記割り当て工程で前記画像データ以外のデータに対しIn the assigning step, for data other than the image data
て割り当てる転送レートが、前記マルチメディア端末のTransfer rate assigned to the multimedia terminal
ために確保された転送レートよりも大きい場合は、通信If the transfer rate is higher than the reserved
能力の誤りとして前記相手端末に通知するように制御すControl to notify the partner terminal as an error in capability
る制御工程とを有することを特徴とするマルチメディアAnd a control step
端末の制御方法。Terminal control method.
【請求項8】 前記制御工程は、前記割り当て工程が前
記画像データ以外のデータに対して割り当てる転送レー
トが、前記マルチメディア端末のために確保された転送
レートよりも大きい場合は、改めて能力交換するように
前記能力交換工程を制御することを特徴とする請求項7
記載のマルチメディア端末の制御方法
8. The method according to claim 1, wherein the assigning step is performed before the assigning step.
The transfer rate assigned to data other than image data
Transfer is reserved for the multimedia terminal
If it is larger than the rate, exchange capacity again
8. The method according to claim 7, wherein the capacity exchange step is controlled.
The control method of the multimedia terminal as described in the above .
JP02414508A 1990-09-17 1990-12-26 Multimedia terminal and control method thereof Expired - Fee Related JP3141396B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP02414508A JP3141396B2 (en) 1990-12-26 1990-12-26 Multimedia terminal and control method thereof
DE199191402454T DE477080T1 (en) 1990-09-17 1991-09-16 DATA TRANSFER DEVICE.
EP91402454A EP0477080B1 (en) 1990-09-17 1991-09-16 Data communication apparatus
DE69129521T DE69129521T2 (en) 1990-09-17 1991-09-16 Data transmission device
US08/386,344 US5524194A (en) 1990-09-17 1995-02-10 Data communication apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP02414508A JP3141396B2 (en) 1990-12-26 1990-12-26 Multimedia terminal and control method thereof

Publications (2)

Publication Number Publication Date
JPH04223755A JPH04223755A (en) 1992-08-13
JP3141396B2 true JP3141396B2 (en) 2001-03-05

Family

ID=18522980

Family Applications (1)

Application Number Title Priority Date Filing Date
JP02414508A Expired - Fee Related JP3141396B2 (en) 1990-09-17 1990-12-26 Multimedia terminal and control method thereof

Country Status (1)

Country Link
JP (1) JP3141396B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197458A (en) * 2000-11-27 2001-07-19 Canon Inc Image transmission system and image transmission device
JP2003110659A (en) 2001-09-28 2003-04-11 Toshiba Corp Mobile communication terminal
JP2017175283A (en) * 2016-03-22 2017-09-28 コニカミノルタ株式会社 CONFERENCE SYSTEM, VIDEO CONFERENCE DEVICE, AND PROGRAM

Also Published As

Publication number Publication date
JPH04223755A (en) 1992-08-13

Similar Documents

Publication Publication Date Title
US5640195A (en) Multimedia communication system, multimedia information transmitting apparatus and multimedia information receiving apparatus
US5450472A (en) Method for handling of a call coming to terminal equipment in a digital transmission system, and a mobile telephone
EP0535890B1 (en) Multimedia communication apparatus
JPH07162830A (en) Control method of video conference communication device
US5953505A (en) Communication apparatus and method for reading out stored function information in response to identifying information
US5903734A (en) Multimedia information communication apparatus which stores received information in an encoded state
JP3141396B2 (en) Multimedia terminal and control method thereof
JP3065647B2 (en) Multimedia terminal and its received video display method
JP3258474B2 (en) Control method of teleconference communication terminal
JPH03289255A (en) Communication terminal equipment
JP3266369B2 (en) Video conference system
KR0153607B1 (en) Call connection method of video telephone
JPH07203071A (en) Multimedia communication equipment
JPH04129465A (en) Multi-medium communication terminal equipment
JPH066483A (en) Multimedia terminal
KR100393633B1 (en) Method for external call forwarding between internet call and telephone network call in webphone system
JPH0715538A (en) Terminal device
JPH07123172A (en) Terminal device
JP3143482B2 (en) Communication device and method
JP3466639B2 (en) Image communication apparatus and method
JP3176946B2 (en) Multimedia communication device and multimedia information communication method
JP3061444B2 (en) Multimedia communication equipment
JPH0420050A (en) Integrated services digital network communication terminal equipment
JP3466683B2 (en) Multimedia communication device and multimedia communication method
JPH05167710A (en) Multimedia communication system

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081222

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081222

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091222

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091222

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101222

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees