JP2002199362A

JP2002199362A - 画像通信装置

Info

Publication number: JP2002199362A
Application number: JP2000394307A
Authority: JP
Inventors: Kenichi Kagami; 賢一鏡; Akira Kanda; 晃勘田
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2000-12-26
Filing date: 2000-12-26
Publication date: 2002-07-12

Abstract

(57)【要約】【課題】テレビ電話機において、送信者が撮像カメラ
によって撮像された自分の顔画像を送信する時、自分の
心理的状況を素早く相手に把握してもらえるように、自
分の伝えたい感情や表情を増幅するような戯画的イメー
ジを表現するイメージパターンによって顔画像を修飾す
ることができるような画像通信装置を提供することを目
的とする。【解決手段】テレビ電話機における画像通信装置にお
いて、画像信号入力部１１０に入力した被写体画像に対
して変形図形情報記憶部１１８に記憶した変形図形によ
って修飾を施すことにより被写体画像を変形させて通信
相手へ送信する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、テレビ電話におい
てカメラによって撮像した画像を送信者の心理的状況を
表現するイメージパターン、あるいは送信者の音声状態
によって変形させて相手に送信し、受信者がその変形さ
れた画像により送信者の心理的状況を素早く把握できる
ような画像通信装置に関するもので、特に撮像カメラ付
きの携帯電話機における画像通信装置に関する。

【０００２】

【従来の技術】従来、テレビ電話では送信者はその撮像
カメラによって自分の顔を撮像しながら相手と通話する
と、相手の受信者のテレビ電話の表示装置には送信者の
顔が動画として写し出される。従って、音声だけの通常
の電話より通話相手の顔を見ながら話をするので相手の
感情の動きが把握し易いと考えられていた。しかしなが
ら、現状の動画では画像密度が粗くてコマ落としのよう
な動画となるために、顔の細かい表情は伝送され難いと
いう問題があった。従来、撮像カメラで撮影された人物
の顔画像を後からその顔画像の各部位を変更することに
より顔の表情を変更する画像処理技術として、例えば、
特開２０００−１５１９８５がある。

【０００３】この提案では、顔画像の各部位を抽出して
化粧を施すように顔画像の形状、大きさ、および色を変
更しようとするものである。

【０００４】

【発明が解決しようとする課題】しかしながら、従来の
画像処理技術は、撮像した顔画像の各部位に化粧を施す
ことにより、本来の顔画像を変更することに重点が置か
れ、撮像された顔画像の心理的状態をイメージ的に捉え
易いようにする変更ではなかった。

【０００５】これに対して、本発明はかかる点に鑑みて
なされたものであり、送信者が撮像カメラによって撮像
された自分の顔画像を送信する時、自分の心理的状況を
素早く相手に把握してもらえるように、自分の伝えたい
感情や表情を増幅するような戯画的イメージを表現する
イメージパターンによって顔画像を修飾することができ
るような画像通信装置を提供することを目的とする。

【０００６】

【課題を解決するための手段】この課題を解決するため
に、本発明の画像通信装置は、被写体の画像を撮像する
映像入力部と、前記映像入力部に入力した前記被写体画
像に対して修飾を施す変形図形を保持する変形図形情報
記憶部と、前記変形図形情報記憶部から特定の変形図形
を選定指示する変形操作部と、前記変形操作部の指示に
より前記特定の変形図形によって前記被写体画像を修飾
することを実行する画像効果処理部と、前記画像効果処
理部によって修飾された前記被写体画像を送信すると同
時に、通信相手から受信する変形図形によって修飾され
た被写体画像を受信する通信制御部とを備えることを特
徴とする。

【０００７】この構成により、テレビ電話において通話
中の相手に送信する自分の顔画像を特定の変形画像によ
り自分の心理的状況を素早く把握してもらえるようなイ
メージパターンによって修飾することができる。

【０００８】また、本発明の画像通信装置は、前記変形
図形情報記憶部に保持する変形図形が静止画であること
を特徴とする。

【０００９】この構成により、前記変形図形情報記憶部
に変形画像として種々様々な静止画を記憶しておくこと
により、状況に応じて適切な画像を選択し変形画像とし
て用いることができる。

【００１０】また、本発明の画像通信装置は、前記変形
図形情報記憶部に保持する変形図形が動画であることを
特徴とする。

【００１１】この構成により、前記変形図形情報記憶部
の変形画像に動きを与えることができるので、より通信
相手に強い印象を与えることができる。

【００１２】また、本発明の画像通信装置は、被写体の
画像を撮像する映像入力部と、前記映像入力部に入力し
た前記被写体画像に対して修飾を施す変形図形を保持す
る変形図形情報記憶部と、前記変形図形情報記憶部に保
持する変形図形に対して音声信号によって変形操作を行
う音声変形操作部と、前記変形図形情報記憶部の変形図
形によって前記被写体画像を修飾することを実行する画
像効果処理部と、前記画像効果処理部によって修飾され
た前記被写体画像を送信すると同時に、通信相手から受
信する変形図形によって修飾された被写体画像を受信す
る通信制御部とを備えることを特徴とする。

【００１３】この構成により、マイクからの通話音量に
よって、変形図形の変形度を変えることができるので、
語調が強くなると同時にカメラによって撮像された顔の
画像が強く変形し、感情の高まりを視覚的に通信相手に
伝えることができる。

【００１４】また、本発明の画像通信装置は、前述の前
記変形図形情報記憶部に保持する変形図形が静止画であ
ることを特徴とする。

【００１５】この構成により、マイクからの通話音量に
よって、変形図形が静止画である時にその変形度を変え
ることができる。

【００１６】また、本発明の画像通信装置は、前述の前
記変形図形情報記憶部に保持する変形図形が動画である
ことを特徴とする。

【００１７】この構成により、マイクからの通話音量に
よって、変形図形が動画である時にその変形度を変える
ことができる。

【００１８】また、本発明の画像通信装置は、前述の手
書入力手段を有する作図入力部において作成される図形
を前記変形図形情報記憶部に記憶することを特徴とす
る。

【００１９】この構成により、任意の図形をキー操作で
入力することによって、自由な変形パターンを変形図形
として変形図形情報記憶部に登録することができる。

【００２０】また、本発明の画像通信装置は、前述の記
映像入力部により撮像した被写体の画像をパターン図形
化するパターン化処理部により処理されたパターン図形
を前記変形図形情報記憶部に記憶することを特徴とす
る。

【００２１】この構成により、任意の図形をカメラによ
って撮像し、パターン図形化することができるので、色
々な図形パターンを豊富に変形図形情報記憶部に登録す
ることができる。

【００２２】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して詳細に説明する。なお、ここで、本発
明の実施の形態における画像通信装置をテレビ電話にお
いて実現した場合を例として説明する。

【００２３】（第１の実施の形態）図１は、本発明の第
１の実施の形態における画像通信装置の構成ブロック図
である。画像通信装置１００において、中央処理部１０
１は、ＣＰＵ、ＲＯＭ、ＲＡＭなどを備えたマイクロコ
ンピュータであり、信号／制御バス１０２を介して以下
述べる各部の制御を行う。入力操作部１０３は数字ダイ
ヤルキー、電話機能のための各種機能キー、表示画面の
スクロールキー、および画像処理のための機能キーなど
から構成される。ボリューム入力部１０４は後述する画
像の変形処理において、画像の変形度を無段階で連続的
に変化するためのものである。音声信号入／出力部１０
５は音声通話においてマイク１０６からの音声入力とス
ピーカ１０７への音声出力を制御する。

【００２４】液晶表示部１０８は電話操作における番号
表示、各種機能の操作メニュー表示を行うと共に、通信
相手からの画像信号を入力してその映像を表示する。同
時にカメラ１０９によって撮像された画像も表示する。

【００２５】画像コーディック回路１１１はカメラ１０
９からの画像信号を符号化し、また画像圧縮／伸長回路
１１２からの符号化されたディジタル画像信号を復号化
する。

【００２６】画像圧縮／伸長回路１１２は画像コーディ
ック回路１１１からの符号化されたディジタル画像信号
を圧縮する一方、音声・画像多重／分解部１１３からの
圧縮ディジタル画像信号を伸長する。通信制御部１１６
は中央処理部１０１の制御によって電話の呼接続制御、
および音声信号と画像信号の送受信制御を管理する。

【００２７】本発明の第１の実施の形態における画像通
信装置１００には、前記通常のテレビ電話機能を動作さ
せる前記各回路部に加えて、画像効果処理部１１７、変
形図形情報記憶部１１８、および動き情報記憶部１１９
が配備されている。

【００２８】変形図形情報記憶部１１８には、種々の幾
何学的形状を有する静止画図形がビット配列情報として
記憶されている。一方、動き情報記憶部１１９には、動
画図形が記憶されている。画像効果処理部１１７は、中
央処理部１０１からの変形画像処理開始の指令がある
と、カメラ１０９が撮像した画像を画像信号入力部１１
０を介して入力し、その撮像画像に対して変形図形情報
記憶部１１８、あるいは動き情報記憶部１１９からそれ
ぞれ入力した静止画図形、あるいは動画図形による修飾
を加えて画像コーディック回路１１１へ送出したり、直
ちに液晶表示部１０８の部分画面１０８ｂに表示させた
りする。

【００２９】次に、本発明の第１の実施の形態における
画像通信装置の動作について説明する。いま、通信相手
の画像通信装置（特に図示しない）とすでに呼接続が確
立して交信状態にあるとする。

【００３０】最初に通常のテレビ電話機における画像通
信装置としての動作を述べる。

【００３１】カメラ１０９によって自分の顔を撮像させ
ながらマイク１０６により通話する。

【００３２】カメラ１０９からの画像信号は、画像信号
入力部１１０によりアナログ画像信号からディジタル画
像信号に変換され、中央処理部１０１の制御により、信
号／制御バス１０２を経由して画像コーディック回路１
１１に入力し、符号化される。

【００３３】次に、画像圧縮／伸長回路１１２において
圧縮されて音声・画像多重／分解部１１３に入力する。

【００３４】一方、マイク１０６からの音声信号は、音
声信号入／出力部１０５においてディジタル音声信号に
変換されて音声コーディック回路１１４に入力し、符号
化される。次に、音声圧縮／伸長回路１１５において圧
縮されて音声・画像多重／分解部１１３に入力する。こ
こで、前記ディジタル音声信号と前記ディジタル画像信
号は多重化されて音声・画像多重化信号として通信制御
部１１６の制御によりネットワーク２００を経由して通
信相手の画像通信装置へ送信される。

【００３５】一方、通信相手の画像通信装置からネット
ワーク２００を経由して通信制御部１１６によって受信
した音声・画像多重化信号は、音声・画像多重／分解部
１１３でディジタル音声信号とディジタル画像信号に分
解される。

【００３６】ディジタル音声信号は、音声圧縮／伸長回
路１１５において伸長された後、音声コーディック回路
１１４で復号化され、音声信号入／出力部１０５によっ
てアナログ音声信号に変換されてスピーカから音声とし
て出力される。

【００３７】他方、ディジタル画像信号は、画像圧縮／
伸長回路１１２において伸長された後、画像コーディッ
ク回路１１１において復号化され、信号／制御バス１０
２を経由して液晶表示部１０８に入力し通信相手の画像
が主画面１０８ａに表示される。この時、カメラ１０９
によって撮像された自分の顔の画像信号も同時に信号／
制御バス１０２を経由して液晶表示部１０８の部分画面
１０８ｂに画像表示される。

【００３８】図２はテレビ電話機が通話状態にある状況
を示す図である。図２（ａ）は自分のテレビ電話機Ａの
画面表示状態を示す図であり、図２（ｂ）は通信相手の
電話機Ｂの画面表示状態を示す図である。

【００３９】図２（ａ）に示されるように、液晶表示部
１０８の主画面１０８ａには通信相手のテレビ電話機Ｂ
のカメラ１０９によって撮像された相手の顔の画像が表
示され、部分画面１０８ｂには自分のテレビ電話機Ａの
カメラ１０９によって撮像された自分の画像が縮小され
て表示される。

【００４０】図２（ｂ）に示されるように、液晶表示部
１０８の主画面１０８ａには通信相手のテレビ電話機Ａ
のカメラ１０９によって撮像された相手の顔の画像が表
示され、部分画面１０８ｂには自分のテレビ電話機Ｂの
カメラ１０９によって撮像された自分の画像が縮小され
て表示される。

【００４１】次に、画像効果処理を行った場合の動作に
ついて説明する。

【００４２】図３は、カメラ１０９によって撮像された
顔の画像が静止画の変形図形により修飾される処理の説
明図である。図３（ａ）は顔画像の輪郭パターンの表示
画像を示す図であり、図３（ｂ）は四角形を顔画像の輪
郭パターンに外接させた状態の表示画像を示す図であ
り、図３（ｃ）は四角形によって変形させた顔画像の変
形輪郭パターンの表示画像を示す図であり、図３（ｄ）
は四角形によって変形させた顔画像の表示画像を示す図
である。

【００４３】図４はカメラによって撮像された顔の画像
が静止画の変形図形によって修飾される場合の状況を示
す図である。図４（ａ）は自分のテレビ電話機Ａの画面
表示状態を示す図であり、図４（ｂ）は通信相手のテレ
ビ電話機Ｂの画面表示状態を示す図である。

【００４４】入力操作部１０３において、動画の画像処
理に係わる開始ボタン（特に図示しない）をセットする
と、中央処理部１０１はそれを検知し、画像効果処理部
１１７へ画像処理開始を指令する。画像効果処理部１１
７は、画像処理開始の指令を受けると、今まで撮像中の
画像の液晶表示部１０８への表示を停止し、代わりにカ
メラ１０９によって撮像された顔の画像の輪郭をビット
配列情報として取り込み、液晶表示部１０４に顔画像の
輪郭パターンとして表示する（図３（ａ））。

【００４５】同時に、前記顔画像の輪郭パターンの表示
位置と別の位置に変形図形情報記憶部１１８から入力し
た静止画の図形パターンを表示させる。変形図形情報記
憶部１１８には種々の幾何学的形状を有する静止画図形
が記憶されているが、入力操作部１０３の図形選択キー
（特に図示しない）を操作することにより、次々に液晶
表示部１０４に表示させて見ながら選択することができ
る。

【００４６】例えば、図３（ａ）においては、四角形を
選択した場合が示されている。選択した四角形にはその
中心位置に十文字＋のマークが同時に表示される。入力
操作部１０３に設けた矢印キー（←→↑↓）によってこ
の十文字を移動すると選択した図形を所定の位置に移動
させることができる。図３（ｂ）に示すように、この十
文字＋を前記顔画像の輪郭パターンの内部に持って来
る。この時、前記四角形が前記顔画像の輪郭パターンの
大きさより小さい場合は、ボリューム入力部１０４を回
転操作すると四角形の大きさを変えることができるの
で、適宜回転操作して図３（ｃ）に示すように、前記四
角形が前記顔画像の輪郭パターンに外接するようにする
と、前記顔画像の輪郭パターンと前記四角形の接点が４
点（Ｓ１，Ｓ２，Ｓ３，Ｓ４）決まる。この時、勿論十
文字＋を移動させながら行ってもよい。

【００４７】いま、前記四角形の十文字＋を原点Ｏとす
る直交するＸ軸、Ｙ軸を設定すると、この直交座標系に
おける前記四角形のビット配列情報と前記顔画像の輪郭
パターンのビット配列情報が決定する。

【００４８】ここで、原点Ｏを始点とするベクトルＲを
設ける。このベクトルＲを反時計方向に回転した時の各
方向におけるベクトルＲの先端点の軌跡は、前記顔画像
の輪郭パターンを前記四角形によって変形した時の変形
輪郭パターンを形成するものである。その変形処理は以
下のように行われる。

【００４９】ベクトルＲの方向が、前記顔画像の輪郭パ
ターンと前記四角形の接点（Ｓ１，Ｓ２，Ｓ３，Ｓ４）
の方向にある時は、ベクトルＲの先端点は前記接点（Ｓ
１，Ｓ２，Ｓ３，Ｓ４）に一致させる。それ以外の方向
では、ベクトルＲが前記顔画像の輪郭パターンと交差す
る点より外側に延長する。特に、前記四角形を形成する
４つの角の方向（０→ｔ１，０→ｔ２，０→ｔ３，０→
ｔ４）にある時は、最も延長させる。しかし、４つの角
の点（ｔ１，ｔ２，ｔ３，ｔ４）までは、延長しない。
これは、前記顔画像を前記四角形によって、変形させる
といっても、完全に前記四角形に変形させるのではな
く、前記顔画像を四角張ったように印象付ける変形であ
るからである。このようにすると、前記ベクトルＲを原
点Ｏの周りに１回転させると、ベクトルＲの大きさは、
前記顔画像の輪郭パターンと前記四角形の一つの接点か
ら次の接点に移動する間に存在する前記四角形の角の方
向において最大になり、そこから遠ざかり前記四角形の
接点に近付くに従って小さくなり、前記接点方向では、
ベクトルＲの先端点はその接点を通る前記顔画像の輪郭
パターンの位置ベクトルの大きさに一致する。

【００５０】ベクトルＲが前記Ｘ軸から反時計方向に回
転した時に各方向における前記顔画像の輪郭パターンを
延長した図形が形成されるので、この図形を前記顔画像
の輪郭パターンの前記四角形による変形輪郭パターンＨ
として、その変形輪郭パターンのビット配列情報を順次
記憶する。このようにして前記ベクトルＲが原点Ｏの周
りに１回転することにより、前記顔画像の輪郭パターン
の前記四角形による顔画像の変形輪郭パターンＨのビッ
ト配列情報が形成される。この変形輪郭ビット配列情報
が液晶表示部１０８に送られて、図３（ｃ）に示される
ように、前記顔画像の輪郭パターンの前記四角形による
顔画像の変形輪郭パターンＨが表示される。ここで、ボ
リューム入力部１０４をクリックすると、中央処理部１
０１はそれを検知し、画像効果処理部１１７へ次の画像
処理開始を指令する。画像効果処理部１１７は、次に、
前記顔画像の輪郭パターン内部の顔画像部分を前記変形
輪郭パターンＨに合うように、ベクトルＲの方向ごとに
そのベクトルＲの大きさを延長する比率ｋ（θ）を適用
して拡大する。従って、変形後の顔画像のビット配列情
報は変形前の顔画像のビット配列情報よりも増加するの
で、ベクトルＲの方向ごとにそのベクトルＲの大きさを
延長する比率に合わせて、ビット配列情報を補間する。

【００５１】また、前記ベクトルＲの方向に位置する元
の前記顔画像の各ビット配列情報における色ピクセル情
報も補間させる。この処理の結果、図３（ｄ）に示され
るように、カメラ１０９によって撮像された顔の画像の
輪郭が全体的に四角張った顔に変化する。

【００５２】なお、以上述べた説明では、変形図形とし
て四角形を例にとり、四角形のすべての辺が顔画像の輪
郭パターンに外接するようにしたが、必ずしもその必要
はない。

【００５３】多角形の辺数が多くなると、すべて辺が顔
画像の輪郭パターンに外接させることは困難になる。従
って、顔画像の輪郭パターンに外接しなくても良くする
には、以下のような方法を採ってもよい。

【００５４】多角形の二辺の交点と原点Ｏとを結ぶ方向
へ延長する比率ｋ（θ）を最大にするようにし（すなわ
ち、ｋ−ｍａｘ）、他の方向における比率ｋ（θ）を以
下のようにして定める。

【００５５】Ｘ軸の正方向の比率ｋ（０）、と負方向の
比率ｋ（π）とは等しく（ｋ１とする）、Ｙ軸の正方向
の比率ｋ（π／２）、と負方向の比率ｋ（３π／２）と
は等しく（ｋ２とする）なるようにする。

【００５６】次に、多角形の二辺の交点と原点Ｏとを結
ぶ方向とＸ軸の正方向、あるいは負方向との間では比率
をｋ−ｍａｘからｋ１に変化するように設定し、Ｙ軸の
正方向、あるいは負方向と多角形の二辺の交点と原点Ｏ
とを結ぶ方向との間では比率をｋ−ｍａｘからｋ２に変
化するように設定する。また、多角形の二辺の交点と原
点Ｏとを結ぶ方向の線が、隣り合っている場合、その中
間の方向の比率をｋ−ｍａｘより小さくするようにし、
多角形の二辺の交点と原点Ｏとを結ぶ方向に近付くに従
ってｋ−ｍａｘに近づけるように設定する。このように
すると、変形図形である多角形を顔画像の輪郭パターン
に外接しなくても良くなる。

【００５７】次に、変形図形情報記憶部１１８から選択
した図形が円の場合は、カメラ１０９によって撮像され
た顔画像の輪郭を完全な円にするのではなく、顔画像の
輪郭に外接する円を設定し、円内に設けた原点Ｏを起点
とするベクトルＲが前記顔画像の輪郭と外接円と接触す
る点の方向では、原画のビット配列情報を保持して前記
顔画像の輪郭を伸長しないでおき、それ以外の方向では
所定の伸長を加えるようにして、ベクトルＲの大きさを
変化させる。ベクトルＲが原点Ｏの周りを一周すると、
結果としてベクトルＲの先端点の軌跡は、顔画像の輪郭
が円によって変形された顔画像の変形輪郭パターンを形
成する。変形輪郭パターンのビット配列情報を液晶表示
部１０４へ送ると、全体で丸みを帯びた顔の画像の輪郭
が表示される。以下、顔画像の輪郭内の部分のビット配
列情報の処理方法は、四角形による変形の場合と同様に
行われる。

【００５８】なお、この変形図形による顔画像の輪郭パ
ターンを変化させる時の各方向における伸長の程度を表
わす比率ｋ（θ）は、変形図形情報記憶部に記憶された
図形ごとに予め液晶表示部１０４の画面表示の設計時に
決めておき、テーブルとして、画像効果処理部１１７内
に保持しておく。また、変形図形を顔画像の輪郭パター
ンに外接させない場合は、その大きさを自由に設定でき
るので、変形図形の大きさによって比率ｋ（θ）の角度
依存度を変化させるようにすることもできる。

【００５９】以上のように、変形図形情報記憶部１１８
の変形図形によって変形され、カメラ１０９により撮像
された顔の画像は、画像コーディック回路１１１で符号
化され、画像圧縮／伸長回路１１２において圧縮され
て、画像圧縮／伸長回路１１２では音声信号と多重化さ
れて通信制御部１１６からネットワーク２００へ送出さ
れ、相手通信相手のテレビ電話機Ｂの液晶表示部１０８
の主画面１０８ａには、変形図形によって修飾された画
像が表示される。

【００６０】従って、図４（ａ）に示されるように、テ
レビ電話機Ａの液晶表示部１０８の主画面１０８ａに
は、通信相手のテレビ電話機Ｂのカメラ１０９によって
撮像された相手の顔の画像が表示され、部分画面１０８
ｂには自分のテレビ電話機Ａのカメラ１０９によって撮
像され、変形図形によって修飾された自分の画像が縮小
されて表示される。

【００６１】一方、図４（ｂ）に示されるように、テレ
ビ電話機Ｂの液晶表示部１０８の主画面１０８ａには通
信相手のテレビ電話機Ａのカメラ１０９によって撮像さ
れて変形図形によって修飾された相手の顔の画像が表示
され、部分画面１０８ｂには自分のテレビ電話機Ｂのカ
メラ１０９によって撮像された自分の画像が縮小されて
表示される。

【００６２】次に、第２の実施例として動画によりカメ
ラ１０９によって撮像された顔の画像が修飾される場合
について説明する。

【００６３】図５は、カメラによって撮像された顔の画
像が動画の変形図形により修飾される処理の説明図であ
る。図５（ａ）は四角形の動画状態を示す図であり、図
５（ｂ）は四角形が動画状態前において、顔画像を外接
した状態を示す図であり、図５（ｃ）は四角形が動画状
態前において、顔画像を四角形によって変形させた状態
を示す図であり、図５（ｄ）は四角形が動画状態にある
時の状況を示す図である。

【００６４】入力操作部１０３において、動画の画像処
理に係わる開始ボタン（特に図示しない）をセットする
と、中央処理部１０１はそれを検知し、画像効果処理部
１１７へ画像処理開始を指令する。画像効果処理部１１
７は、画像処理開始の指令を受けると、それまでの液晶
表示部１０８への画像表示を停止し、代わりにカメラ１
０９によって撮像された顔の画像の輪郭をビット配列情
報として取り込み、液晶表示部１０８に顔画像の輪郭パ
ターンとして表示する。同時に前記顔画像の輪郭パター
ンの表示位置と別の位置に動き情報記憶部１１９から入
力した動画図形パターンを表示させる。

【００６５】動き情報記憶部１１９には種々の動画図形
パターンが記憶されているが、入力操作部１０３の動画
選択キー（特に図示しない）を操作することにより次々
に液晶表示部１０４に表示させて見ながら選択すること
ができる。

【００６６】前記動画図形パターンは、多角形、あるい
は円、楕円などの図形の外形線が一定方向に平行に一定
振幅で連続的に正弦関数的な変動を行っているものであ
る。

【００６７】例えば、図５（ａ）に四角形の場合を示
す。前記四角形の中に十文字＋で示される原点Ｏにおい
て直交するＸ軸、Ｙ軸を設定すると、図５（ａ）の四角
形はＸ軸方向に平行に一定振幅で連続的に正弦関数的な
変動を行っている。その結果、前記四角形の左右の縦の
辺は正弦関数的な変動をしている。入力操作部１０３に
設けた矢印キー（←→↑↓）によってこの十文字を移動
すると、選択した動画（この場合、左右の縦の辺がＸ軸
に平行に変動する四角形）を所定の位置に移動させるこ
とができる。図５（ｂ）に示すように、この十文字＋を
前記前記顔画像の輪郭パターンの内部に持って来る。こ
の時、四角形が前記顔画像の輪郭パターンの大きさより
小さい場合は、ボリューム入力部１０４を回転操作する
と四角形の大きさを変えることができるので、適宜回転
操作して図５（ｂ）に示すように、前記四角形が前記顔
画像の輪郭パターンに外接するようにする。ここで、ボ
リューム入力部１０４をクリックすると、中央処理部１
０１はそれを検知し、画像効果処理部１１７へ次の画像
処理開始を指令する。その結果、前記四角形によって外
接された前記顔画像が前記四角形によって変形処理を受
けて図５（ｃ）に示すように変形し、さらにその変形処
理を受けた前記顔画像はＸ軸方向に平行に一定振幅で連
続的に正弦関数的な変動を行うことになる。前記四角形
によって変形を受けた前記顔画像のビット配列情報は液
晶表示部１０８へ送られると、その表示画面には、カメ
ラ１０９によって撮像された顔の画像の輪郭が全体的に
四角張った顔に変化し、しかも全体的に左右に揺らいで
いるように表示される。

【００６８】（第２の実施の形態）図６は、本発明の第
２の実施の形態における画像通信装置の構成ブロック図
である。図６において、第１の実施の形態におけるボリ
ューム入力部１０４が無くなり、新たに音声信号変換部
１２０が設けられている。マイク１０６からの音声信号
は音声信号入／出力部１０５においてディジタル音声信
号に変換されて音声コーディック回路１１４へ出力され
ると同時に、音声信号変換部１２０に入力される。音声
信号変換部１２０は入力したディジタル音声信号の信号
レベルを検出し、音量のレベルを数段階に分ける音量レ
ベル識別コード信号を発生させる。この音量レベル識別
コード信号は中央処理部１０１に入力する。入力操作部
１０３の所定キーを操作することにより変形図形情報記
憶部１１８から静止画図形を選択し、次にその静止画に
よってカメラ１０９によって撮像された顔の画像を修飾
した画像を生成して、液晶表示部１０８に表示させる。
中央処理部１０１は音声信号変換部１２０からの音量レ
ベル識別コード信号が所定のレベルより大きい場合は撮
像された顔の画像を静止画によって修飾した画像を液晶
表示部１０８の部分画面への表示を開始させる。通話者
が声を大きくしたり、小さくしたりすると、音声信号変
換部１２０からの音量レベル識別コード信号が変わり、
それに従って、液晶表示部１０８の部分画面１０８ｂへ
表示される通話者の顔の大きさが変化する。前記の音量
レベル識別コード信号のレベルによって変化する静止画
によって修飾された通話者の顔の画像は、通信相手の携
帯テレビ電話機Ｂの液晶表示部１０８の主画面１０８ａ
に表示される。入力操作部１０３の動画選択キー（特に
図示しない）を操作した場合は、動画によって修飾され
た画像の大きさが声の大きさに従って変化する。

【００６９】（第３の実施の形態）図７は、本発明の第
３の実施の形態における画像通信装置の構成ブロック図
である。図７に示されるように、画像信号入力部に作図
入力部１２１が接続する。

【００７０】作図入力部１２１はペン入力、マウス、ト
ラックボールなどであって、これらを操作して任意の図
形を描くと、その軌跡が液晶表示部１０８の表示画面に
表示される。そこで、確定動作を行うと、前記図形のビ
ット配列情報が変形図形として変形図形情報記憶部１１
８に記憶される。

【００７１】また、入力操作部１０３において、動画の
画像処理に係わる開始ボタン（特に図示しない）をセッ
トすると、中央処理部１０１はそれを検知し、画像効果
処理部１１７へ画像処理開始を指令する。その結果、作
図入力部１２１から入力された任意の図形によって、カ
メラ１０９が撮像した顔の画像が修飾されて液晶表示部
１０８の表示画面に表示されると同時に、画像符号化、
画像圧縮化されてマイク１０６からの音声信号と多重化
されて音声・画像多重化信号として通信制御部１１６の
制御によりネットワーク２００を経由して通信相手の画
像通信装置へ送信される。

【００７２】（第４の実施の形態）図８は、本発明の第
４の実施の形態における画像通信装置の構成ブロック図
である。図８に示されるように、新たにパターン化処理
部１２２が画像信号入力部１１０と変形図形情報処理部
１１８に接続される。カメラ１０９によって撮像された
映像の画像信号は画像信号入力部１１０に入力してディ
ジタル画像信号に変換され、パターン化処理部１２２に
入力する。同時に、液晶表示部１０８に表示されるの
で、作図入力部１２１のペン入力、マウス、トラックボ
ールによって、液晶表示部１０８の画像の一部分をマー
クすると、パターン化処理部１２２は入力した画像信号
の中から前記マークされた部分を外形線の形として取り
出し、それを画像変形用図形パターンとして変形図形情
報処理部１１８に記憶する。この外形線は、第１の実施
の形態において述べたように、カメラ１０９によって撮
像された顔画像の変形処理において変形図形として画像
効果処理部１１７において使用される。このように、定
型的図形以外に新たに変形図形を作成して顔画像の変形
処理に利用することができるようになる。

【００７３】

【発明の効果】以上説明したように、本発明による画像
通信装置は、テレビ電話において通話中の相手に送信す
る自分の顔画像を変形図形記憶部に記憶した色々の変形
画像により自分の心理的状況を素早く把握してもらえる
ようなイメージパターンによって修飾することができる
ことができる。

【００７４】また、前記変形図形記憶部に変形画像とし
て種々様々な静止画、あるいは動画を記憶しておくこと
により、状況に応じて適切な画像を選択し変形画像とし
て用いることができる。

【００７５】また、前記変形図形記憶部に変形画像を登
録するには、作図入力部により手書きの図形を入力した
り、カメラによって撮像した図形をパターン化処理して
入力することによって、変形図形を簡便に作成すること
ができる。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態における画像通信装
置の構成ブロック図

【図２】本発明の一実施の形態におけるテレビ電話機の
画像通信装置が通話状態にある状況を示す図

【図３】本発明の第１の実施の形態におけるカメラによ
って撮像された顔の画像が静止画の変形図形により修飾
される処理の説明図

【図４】本発明の第１の実施の形態におけるカメラによ
って撮像された顔の画像が静止画の変形図形によって修
飾される場合の状況を示す図

【図５】カメラによって撮像された顔の画像が動画の変
形図形により修飾される処理の説明図

【図６】本発明の第２の実施の形態における画像通信装
置の構成ブロック図

【図７】本発明の第３の実施の形態における画像通信装
置の構成ブロック図

【図８】本発明の第４の実施の形態における画像通信装
置の構成ブロック図

【符号の説明】

１００画像通信装置１０１中央処理部１０２信号／制御バス１０３入力操作部１０４ボリューム入力部１０５音声入／出力部１０６マイク１０７スピーカ１０８液晶表示部１０９カメラ１１０画像信号入力部１１１画像コーディック回路１１２画像圧縮／伸長回路１１３音声・画像多重／分解部１１４音声コーディック回路１１５音声圧縮／伸長回路１１６通信制御部１１７画像効果処理部１１８変形図形情報記憶部１１９動き情報記憶部１２０音声信号変換部１２１作図入力部１２２パターン化処理部２００ネットワーク

フロントページの続きＦターム(参考） 5B057 AA20 BA11 BA24 CA16 CB16 CC03 CD06 DA07 DA08 DA16 DC17 5C023 AA01 AA11 AA27 AA37 AA38 CA01 5C064 AA01 AB03 AB04 AC04 AC05 AC06 AC13 AC16 AD02 AD08 AD13 5K101 KK03 KK04 LL12 NN06 NN07 NN18 NN21 5L096 BA02 CA04 CA24 DA04 EA23 EA33 FA06 FA69 HA02 MA03

Claims

【特許請求の範囲】

【請求項１】被写体の画像を撮像する映像入力部と、
前記映像入力部に入力した前記被写体画像に対して修飾
を施す変形図形を保持する変形図形情報記憶部と、前記
変形図形情報記憶部から特定の変形図形を選定指示する
変形操作部と、前記変形操作部の指示により前記特定の
変形図形によって前記被写体画像を修飾することを実行
する画像効果処理部と、前記画像効果処理部によって修
飾された前記被写体画像を送信すると同時に、通信相手
から受信する変形図形によって修飾された被写体画像を
受信する通信制御部とを備えることを特徴とする画像通
信装置。
【請求項２】前記変形図形情報記憶部に保持する変形
図形が静止画であることを特徴とする請求項１に記載の
画像通信装置。
【請求項３】前記変形図形情報記憶部に保持する変形
図形が動画であることを特徴とする請求項１に記載の画
像通信装置。
【請求項４】被写体の画像を撮像する映像入力部と、
前記映像入力部に入力した前記被写体画像に対して修飾
を施す変形図形を保持する変形図形情報記憶部と、前記
変形図形情報記憶部に保持する変形図形に対して音声信
号によって変形操作を行う音声変形操作部と、前記変形
図形情報記憶部の変形図形によって前記被写体画像を修
飾することを実行する画像効果処理部と、前記画像効果
処理部によって修飾された前記被写体画像を送信すると
同時に、通信相手から受信する変形図形によって修飾さ
れた被写体画像を受信する通信制御部とを備えることを
特徴とする画像通信装置。
【請求項５】前記変形図形情報記憶部に保持する変形
図形が静止画であることを特徴とする請求項４に記載の
画像通信装置。
【請求項６】前記変形図形情報記憶部に保持する変形
図形が動画であることを特徴とする請求項４に記載の画
像通信装置。
【請求項７】手書入力手段を有する作図入力部におい
て作成される図形を前記変形図形情報記憶部に記憶する
ことを特徴とする請求項１から請求項４のいずれかに記
載の画像通信装置。
【請求項８】前記映像入力部により撮像した被写体の
画像をパターン図形化するパターン化処理部により処理
されたパターン図形を前記変形図形情報記憶部に記憶す
ることを特徴とする請求項１から請求項４のいずれかに
記載の画像通信装置。