JPH1127646A - 画像処理装置と画像処理方法 - Google Patents

Abstract

(57)【要約】 【課題】 遠隔地で協調作業を行っている人物がどのよ
うな動作を行っているかを直観的に把握することができ
るようにした。 【解決手段】 スクリーン１の所定領域Ａをカメラ５で
撮像し、第１及び第２の偏光フィルタ６、７を介して人
物映像のみを切り出し、相手端末である遠隔地の画像処
理装置に送信する。一方、スクリーン１に描画された描
画情報は協調作業用コンピュータ２で処理し、相手端末
の画像処理装置及び画像合成装置３に送信する。そし
て、画像合成装置３では相手端末から送られてきた人物
映像と前記コンピュータ２の出力映像とを合成し、プロ
ジェクタ４を介してスクリーン１に投影する。これによ
り、遠隔地で作業をしている人物映像が協調作業情報と
共にスクリーン１上に表示される。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像処理装置と画像
処理方法に関し、特に、所定回線に接続されて端末間で
の協調作業を支援する画像処理装置と、その画像処理方
法に関する。

【０００２】

【発明が解決しようとする課題】端末間での協調作業を
支援する画像処理システムとしては、従来より、図１０
に示すように、人物Ａ、Ｂ、Ｃが参加している第１の地
点５１に第１のカメラ５２、第１のプロジェクタ５３及
び第１のスクリーン５４を配し、人物Ｄ、Ｅ、Ｆが参加
している第２の地点５５に第２のカメラ５６、第２のプ
ロジェクタ５７及び第２のスクリーン５８を配し、さら
に第１のカメラ５２と第２のプロジェクタ５７とを第１
の回線５９を介して接続し、第２のカメラ５６と第１の
プロジェクタ５３とを第２の回線６０を介して接続した
ものが知られている。

【０００３】斯かる画像処理システムにおいては、例え
ば、第１のカメラ５２で撮像された人物Ａ、Ｂ、Ｃの画
像が第１の回線５９を介して第２のプロジェクタ５７に
送られ、該第２のプロジェクタ５７により第２のスクリ
ーン５８上に人物Ａ、Ｂ、Ｃの画像が投影される。

【０００４】しかしながら、該画像処理システムにおい
ては、人物映像が第１及び第２のスクリーン５４、５８
に写し出されるのみであり、端末間においては単に映像
情報及び音声情報の交換しか行うことができない。つま
り、第１の地点５１及び第２の地点５５間で会話をする
程度の協調作業しか行うことができず、講演等で話題と
なっている事項をスクリーン上に視覚的に表示すること
ができない。このため、第１の地点５１及び第２の地点
５５の双方で前記話題を直観的に把握するのが困難な場
合があるという問題点があった。

【０００５】また、この種の画像処理システムの他の従
来例としては、図１１に示すように、協調作業用のアプ
リケーション・ソフトが内蔵された第１及び第２のコン
ピュータ６１、６２を双方向通信可能な通信網（ネット
ワーク）６３を介して互いに接続し、さらにこれら第１
及び第２のコンピュータ６１、６２をペン入力機能を具
備した第１及び第２のスクリーン６４、６５に夫々接続
することにより、第１の地点５１及び第２の地点５５を
ネットワーク接続したものが知られている。

【０００６】斯かる画像処理システムにおいては、第１
及び第２のコンピュータ６１、６２上で協調作業用のア
プナケーション・ソフトを駆動させることにより、第１
のスクリーン６４と第２のスクリーン６５に同一の描画
情報を同時に表示することができ、第１の地点５１及び
第２の地点５５でのコンピュータの特徴を生かした協調
作業を行うことが可能となる。

【０００７】しかしながら、該画像処理システムにおい
ては、図１２に示すように、第２の地点５５における人
物Ｇが講演を行っている場合、第２のスクリーン６５に
写し出された描画情報が第１のスクリーン６４にも同時
に写し出され、その結果前記描画情報については第１の
地点５１及び第２の地点５５で共有することができるも
のの、第２の地点５５で講演等している人物Ｇの様子は
第１のスクリーン６４には写し出されない。このように
該他の従来例においては、第２の地点５５で講演等して
いる人物Ｇの様子が分からないため、講演等の様子を直
観的に把握することができず、極端な場合、第１の地点
５１においては第２の地点５５で講演等を行っている人
物Ｇを特定することができないという不具合があった。

【０００８】本発明はこのような事情に鑑みなされたも
のであって、遠隔地で協調作業を行っている人物がどの
ような動作を行っているかを直観的に把握することがで
きる画像処理装置と画像処理方法を提供することを目的
とする。

【０００９】

【課題を解決するための手段】上記目的を達成するため
に請求項１記載の発明は、ネットワーク接続され、夫々
表示手段を有する端末間での協調作業を支援する画像処
理装置であって、前記表示手段内の所定領域に撮像され
た動画像を出力する動画像出力手段と、前記端末間にお
ける協調作業情報を処理する情報処理手段と、該情報処
理手段により処理された協調作業情報と前記動画像出力
手段により出力された動画像とを合成する画像合成手段
と、該画像合成手段により合成された画像を前記表示手
段に出力させる制御手段とを有していることを特徴とし
ている。

【００１０】また、請求項７記載の発明は、ネットワー
クを介して互いに接続され、夫々表示手段を有する複数
の画像処理装置を設け、これら画像処理装置により端末
間での協調作業を支援する画像処理方法であって、所定
領域を撮像する撮像ステップと、前記撮像された動画像
を出力する動画像出力ステップと、前記端末間における
協調作業情報を処理する情報処理ステップと、該情報処
理ステップにより処理された協調作業情報と前記動画像
出力ステップに出力された動画像映像とを合成する画像
合成ステップと、該画像合成ステップにより合成された
画像を表示手段に出力させる制御ステップとを含むこと
を特徴としている。

【００１１】

【発明の実施の形態】以下、本発明の実施の形態を図面
に基づいて詳説する。

【００１２】図１は本発明に係る画像処理装置の概略を
示すブロック構成図であって、該画像処理装置は、表示
画面上でのペン入力を受け付けるデジタイザ機能付きの
スクリーン１と、該スクリーン１に表示される描画情報
を協調作業用情報として処理し所定回線網（ネットワー
ク）を介して交信先の画像処理装置に配信する協調作業
用コンピュータ２と、協調作業用コンピュータ２のビデ
オ出力と前記交信先の画像処理装置から送信されてきた
ビデオ出力とが入力されて画像合成を行なう画像合成装
置３と、画像合成装置３からのビデオ出力を前記スクリ
ーン１に投影するプロジェクタ４と、該スクリーン１の
所定領域を撮像すると共に人物映像のみを交信先の画像
処理装置に出力するカメラ５とを有している。

【００１３】以下、上記画像処理装置と交信先の画像処
理装置は同様の構成であるとし、上記画像処理装置が第
１の地点に配され、交信先の画像処理装置が前記第１の
地点に対して遠隔地となる第２の地点に配されたものと
して詳述する。

【００１４】図２は上記画像処理装置の詳細を模式的に
示した全体構成図であって、スクリーン１の前面及びカ
メラ５のレンズの前面に偏光方向が互いに垂直となるよ
うに第１及び第２の偏光フィルタ６、７が夫々配設され
ている。そして、カメラ５は、スクリーン１上の点線で
囲まれた所定領域（図中、Ａで示す）を撮像範囲として
撮像する。そして、図３に示すように、偏光方向が互い
に垂直である第１及び第２の偏光フィルタ６、７を透過
させることにより、カメラ５からは黒色の背景の上に前
記スクリーン１の前面で作業をしている人物映像が重な
った映像が出力される。このように本実施の形態におい
て、第１及び第２の偏光フィルタ６、７を使用して人物
映像を切り出すようにしたのは、例えば、コンピュータ
を使用して画像処理を行うことにより前記人物映像を切
り出すようにした場合は、複雑な演算処理が必要とな
り、かかる場合におけるソフトウェアの負荷が大きくな
るのを回避しようとしたためである。

【００１５】また、協調作業用コンピュータ２には、図
４に示すように、スクリーン１からの描画情報が入力さ
れ、該描画情報に基づいて所定の情報処理がなされ、そ
の処理結果が協調作業情報として該協調作業用コンピュ
ータ２から出力される。

【００１６】さらに、図５に示すように、協調作業用コ
ンピュータ２からのビデオ出力及び第２の地点の画像処
理装置から送信されてきたビデオ出力としての人物映像
が、画像合成装置３に入力され、画像合成を行なう。す
なわち、第２の地点の画像処理装置から送信されてくる
画像は黒色の背景色の上に第２の地点のスクリーン前面
で作業をしている人物の画像が重なったものであり、ク
ロマキー合成により画像合成を行なう。そして、画像合
成装置３からのビデオ出力はプロジェクタ４に入力さ
れ、スクリーン１に投影される。

【００１７】このようにして協調作業を支援することに
より、図６（ａ）に示すように、第１の地点９ではスク
リーン１上に協調作業用情報と共に第２の地点１０で作
業をしている人物の動作内容が写し出され、また、図６
（ｂ）に示すように、第２の地点１０ではスクリーン１
上に協調作業用情報と共に第２の地点９で作業をしてい
る人物の動作内容が写し出されることとなり、第１及び
第２の地点９、１０の双方の地点において講演等の参加
者はその講演内容を容易に直観的に把握することができ
る。

【００１８】図７は画像処理装置の他の実施の態様を示
す全体構成図であって、先の実施の態様におけるスクリ
ーン１と同様の大きさの第１のスクリーン１１の他、該
第１のスクリーン１１よりも表面積の大きい第２のスク
リーン１２が前記第１のスクリーンと重畳して設けら
れ，カメラ５は、第２のスクリーン１２の表示領域が撮
像可能範囲とされている。したがって、第１及び第２の
偏光フィルタ６、７を介して前記表示領域を撮像したカ
メラ５からは、第２のスクリーン１２の枠内で作業をし
ている人物映像のみが切り出されて、該人物映像が第２
の地点の画像処理装置に送信されることとなる。

【００１９】そして、画像合成装置３においては、協調
作業用コンピュータ２からの出力の大きさと第２の地点
から送信されてくる映像の大きさの比が第１のスクリー
ン１１の表面積と第２のスクリーン１２の表面積の大き
さの比に等しくなるように画像合成される。

【００２０】これにより、先の実施の形態では第１の地
点９においてスクリーン１の枠外で人物が作業をしてい
る場合は、図８（ａ）に示すように、第１の地点９では
作業内容を直観的に把握できるものの、第２の地点１０
では人物映像が送信されないため作業内容の直観的な把
握ができない場合があり得るが、本他の実施の形態で
は、図９（ａ）に示すように、第１のスクリーン１１の
表示領域外で作業をしていても、その作業が第２のスク
リーン１２の表示領域内で行なわれている限り、第１の
地点９の人物映像が第２の地点１０にも送信され、第２
の地点１０においても第１の地点９と同様、作業をして
いる人物の動作内容を直観的に把握することができる。

【００２１】又、本実施例では人物部分を割り出して合
成したが本発明はこれに限らず人物部分を含む画像を送
信するものであればよい。

【００２２】

【発明の効果】以上詳述したように本発明に係る画像処
理装置及び画像処理方法によれば、交信先から送信され
てくる人物を含む動画像と情報処理装置の映像出力とを
画像合成して投影することにより、遠隔地の人物が現在
どのような動作を行なっているかを動画として視覚的・
直観的に把握することができる。すなわち、遠隔にいる
人物の映像が表示手段に投影されるため、誰が何をして
いるかを一目瞭然に把握することができ、遠隔地との間
での意思疎通を円滑に行なうことができ、作業上の誤解
等を回避することができ、協調作業の生産性向上を図る
ことができる。

【図面の簡単な説明】

【図１】本発明に係る画像処理装置の一実施の形態を示
すブロック構成図である。

【図２】上記画像処理装置の詳細を模式的に示した全体
構成図である。

【図３】映像切出手段により人物映像を切り出す様子を
示した図である。

【図４】協調作業情報処理を説明するための図である。

【図５】画像合成を説明するための図である。

【図６】本実施の形態の実施結果を示す図である。

【図７】画像処理装置の他の実施の形態を示す全体構成
図である。

【図８】カメラの撮像が可能とされたスクリーンの枠外
に人物が在る場合の第１の地点及び第２の地点の様子を
示した図である。

【図９】他の実施の形態の実施結果を示す図である。

【図１０】第１の従来例の概念図である。

【図１１】第２の従来例の概念図である。

【図１２】第２の従来例の問題点を説明するための図で
ある。

【符号の説明】

１ スクリーン（表示手段） ２ 協調作業用コンピュータ（情報処理装置） ３ 画像合成装置（画像合成手段） ４ プロジェクタ（投影手段） ５ カメラ（撮像手段、人物映像出力手段） ６ 第１の偏光フィルタ（人物映像出力手段） ７ 第２の偏光フィルタ（人物映像出力手段） １１ 第１のスクリーン（表示手段） １２ 第２のスクリーン（表示手段）

Claims (11)

【特許請求の範囲】
1. 【請求項１】 ネットワーク接続され、夫々表示手段を
   有する端末間での協調作業を支援する画像処理装置であ
   って、 前記表示手段内の所定領域に撮像された動画像を出力す
   る動画像出力手段と、前記端末間における協調作業情報
   を処理する情報処理手段と、該情報処理手段により処理
   された協調作業情報と前記動画像出力手段により出力さ
   れた動画像とを合成する画像合成手段と、該画像合成手
   段により合成された画像を前記表示手段に出力させる制
   御手段とを有していることを特徴とする画像処理装置。
2. 【請求項２】 前記表示手段が、ペン入力を受け付ける
   ペン入力手段を具備していることを特徴とする請求項１
   記載の画像処理装置。
3. 【請求項３】 前記動画像出力手段は、前記所定領域を
   撮像する撮像手段と、前記表示手段と前記撮像手段との
   間に介装された偏光フィルタとから構成され、 前記偏光フィルタが、前記表示手段の前面及び前記撮像
   手段のレンズ前面に偏光方向が互いに垂直となるように
   夫々配設されていることを特徴とする請求項１又は請求
   項２記載の画像処理装置。
4. 【請求項４】 前記所定領域は、前記表示手段上に固定
   された表示領域であることを特徴とする請求項１乃至請
   求項３のいずれかに記載の画像処理装置。
5. 【請求項５】 前記表示手段が、第１のスクリーンと、
   該第１のスクリーンに対して重畳的に配設された該第１
   のスクリーンより表面積の大きい第２のスクリーンとを
   有すると共に、前記所定領域は前記第２のスクリーンの
   表示領域とされ、 前記画像合成手段が、前記情報処理手段からの出力画像
   の大きさと前記動画像出力手段により出力された相手端
   末からの動画像の出力画像の大きさとの比と、前記第１
   のスクリーンの表面積と前記第２のスクリーンの表面積
   との比とが等しくなるように画像合成し、 前記制御手段が、前記情報処理手段からの出力画像を前
   記第１のスクリーンに投影し、前記動画像を前記第２の
   スクリーンに投影することを特徴とする請求項１乃至請
   求項３のいずれかに記載の画像処理装置。
6. 【請求項６】 前記動画像出力手段は、撮像された動画
   像から人物画像のみを切り出して出力する人物画像出力
   手段であることを特徴とする請求項１乃至請求項５のい
   ずれかに記載の画像処理装置。
7. 【請求項７】 ネットワークを介して互いに接続され、
   夫々表示手段を有する複数の画像処理装置を設け、これ
   ら画像処理装置により端末間での協調作業を支援する画
   像処理方法であって、 所定領域を撮像する撮像ステップと、前記撮像された動
   画像を出力する動画像出力ステップと、前記端末間にお
   ける協調作業情報を処理する情報処理ステップと、該情
   報処理ステップにより処理された協調作業情報と前記動
   画像出力ステップに出力された動画像映像とを合成する
   画像合成ステップと、該画像合成ステップにより合成さ
   れた画像を表示手段に出力させる制御ステップとを含む
   ことを特徴とする画像処理方法。
8. 【請求項８】 前記表示手段は、ペン入力を受け付ける
   ことを特徴とする請求項７記載の画像処理方法。
9. 【請求項９】 前記表示手段の前面及び前記所定領域を
   撮像する前記撮像装置のレンズ前面に偏光方向が互いに
   垂直となるように偏光フィルタを配設し、前記撮像装置
   により撮像される人物映像を前記偏光フィルタにより切
   り出すことを特徴とする請求項７又は請求項８記載の画
   像処理方法。
10. 【請求項１０】 前記所定領域は、前記表示手段上に固
    定された表示領域であることを特徴とする請求項７乃至
    請求項９のいずれかに記載の画像処理方法。
11. 【請求項１１】 前記表示手段が、第１のスクリーン
    と、該第１のスクリーンに対して重畳的に配設された該
    第１のスクリーンより表面積の大きい第２のスクリーン
    とを有すると共に、前記第２のスクリーンの表示領域を
    前記所定領域とし、 前記画像合成ステップは、前記情報処理手段からの出力
    画像の大きさと前記動画像出力手段により出力された相
    手端末からの動画像の出力画像の大きさとの比と、前記
    第１のスクリーンの表面積と前記第２のスクリーンの表
    面積との比とが等しくなるように画像合成し、 前記制御ステップは、前記情報処理ステップからの出力
    画像を前記第１のスクリーンに投影し、前記動画像を前
    記第２のスクリーンに投影することを特徴とする請求項
    ７乃至請求項９のいずれかに記載の画像処理方法。