JP3193263B2 - 3次元映像表示システム - Google Patents

3次元映像表示システム

Info

Publication number
JP3193263B2
JP3193263B2 JP13832395A JP13832395A JP3193263B2 JP 3193263 B2 JP3193263 B2 JP 3193263B2 JP 13832395 A JP13832395 A JP 13832395A JP 13832395 A JP13832395 A JP 13832395A JP 3193263 B2 JP3193263 B2 JP 3193263B2
Authority
JP
Japan
Prior art keywords
user
face image
virtual space
display system
users
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP13832395A
Other languages
English (en)
Other versions
JPH08329282A (ja
Inventor
美雄 永嶋
浩之 有田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Inc
NTT Inc USA
Original Assignee
Nippon Telegraph and Telephone Corp
NTT Inc USA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp, NTT Inc USA filed Critical Nippon Telegraph and Telephone Corp
Priority to JP13832395A priority Critical patent/JP3193263B2/ja
Publication of JPH08329282A publication Critical patent/JPH08329282A/ja
Application granted granted Critical
Publication of JP3193263B2 publication Critical patent/JP3193263B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Closed-Circuit Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computer And Data Communications (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)
  • Digital Computer Display Output (AREA)

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、複数の利用者が共有
し、各利用者が自分の意志で自由に移動可能な3次元仮
想空間において、各利用者の向きに応じた顔画像を、そ
の利用者の分身オブジェクトにマッピングして表示する
仮想空間形の3次元映像表示システムに関する。
【0002】
【従来の技術】図1は、複数の利用者が共有し、各利用
者が自分の意志で自由に移動可能な3次元映像表示シス
テムの概要を示す図である。図中、複数の利用者端末1
は通信回線3を通して制御サーバ2に接続されている。
各利用者端末1の利用者は、あらかじめ制御サーバ2か
ら送信された仮想空間を共有し、操作器を操作して該仮
想空間内を自由に移動する。各利用者端末1は、該操作
器により入力される仮想空間内の利用者の位置情報と向
き情報を制御サーバ2に送信する。制御サーバ2は、各
利用者端末1から収集した全ての利用者の位置情報と向
き情報を他の利用者端末1に送信する。各利用者端末1
は、自利用者と相手利用者の位置情報および向き情報に
基づいて、各利用者の分身オブジェクトを仮想空間内に
表示する。
【0003】このような仮想空間形の3次元映像表示シ
ステムにおいて、従来手法では、予め各利用者の正面顔
画像のみを登録しておき、この正面顔画像を各利用者の
分身オブジェクトにマッピングして仮想空間内に表示し
ていた(例えば、電子情報通信学会技術報告IE92−
120の「サイバーコミュニティの検討」1993年2
月発行)。
【0004】図3は、複数の利用者が共有できる3次元
仮想空間において、3人の利用者A,B,Cの位置を上
空から見た図である。図4は、利用者Cの仮想空間での
視界、すなわち、利用者Cが利用している表示装置での
従来手法における画面例であり、平面で構成される利用
者の分身オブジェクトA´、B´に、正面顔画像がマッ
ピングして表示される。
【0005】
【発明が解決しようとする課題】従来技術においては、
利用者が斜めを向いた場合(図4の利用者Aの例)に
は、正面顔画像の分身オブジェクトがそのまま斜めに表
示されるため、その利用者の顔画像が見にくく、かつ該
利用者がどこを見ているかが分かりにくいという問題が
あった。
【0006】本発明の目的は、上記従来技術の問題点を
解決し、各利用者の向きに応じた顔画像を分身オブジェ
クトにマッピングして表示する仮想空間形の3次元映像
表示システムを提供することにある。
【0007】
【課題を解決するための手段】上記目的を達成するため
に本発明では、複数の利用者が共有し、各利用者が自由
に移動可能な3次元仮想空間にて、操作器により入力さ
れる各利用者の位置情報と向き情報に基づいて、各利用
者の分身オブジェクトを前記3次元仮想空間に表示する
3次元仮想空間表示システムにおいて、各利用者の様々
な角度から撮像した顔画像を蓄積する顔画像データベー
スと、仮想空間に存在する利用者間の相対角度を計測す
る手段と、該計測された相対角度に基づいて、各利用者
の該当角度の顔画像を前記顔画像データベースより出力
する手段と、該出力された顔画像を各利用者の分身オブ
ジェクトにマッピングする手段とを有することを主たる
特徴とするものである。
【0008】
【作用】本発明では、各利用者の向きに応じた顔画像を
分身オブジェクトにマッピングし表示できることから、
利用者の顔画像が見やすく、かつ該利用者がどこを見て
いるかが分かり易い。
【0009】
【実施例】以下、本発明の一実施例について図面により
詳述する。
【0010】図2は、本発明の3次元映像表示システム
における利用者端末の一実施例のブロック図である。位
置情報入力部11は、利用者が自分を仮想空間内のどの
位置にどの向きに置くかを制御するための情報を入力す
るものであり、ジョイステイック等の操作器で構成され
る。位置情報入力部11により入力される自利用者の位
置情報と向き情報は仮想空間生成部12に与えられると
同時に、通信回線31により制御サーバへ送信される。
制御サーバは、各利用者端末から収集した位置情報と向
き情報を他の各利用者端末に送信する。制御サーバから
通信回線32を通して送信されてくる他利用者の位置情
報と向き情報は、仮想空間生成部12に入力される。仮
想空間生成部12では、自位置情報入力部11からの指
示により仮想空間の表示画面を更新し、また、通信相手
の他の利用者端末からの位置情報により、仮想空間内の
他の利用者の分身オブシェクトを生成する。さらに、仮
想空間生成部12は、自利用者の向き情報と他利用者の
向き情報により相対角度を計算し、該相対角度に基づい
て、顔画像データベース13から選択する各利用者の顔
画像を指示する。顔画像データベース13には、あらか
じめ全利用者の様々な方向から撮像した顔画像が蓄積さ
れている。画像マッピング部14では、仮想空間生成部
12で生成された他の利用者の分身オブジェクトに、そ
れぞれ顔画像データベース13から出力された該当利用
者の対応する向きの顔画像をマッピングする。該マッピ
ングされた顔画像を含む仮想空間内の人物の様子が表示
装置15にパースペクティブに表示される。なお、画像
マッピング部14では、自利用者と他利用者の相対位置
に応じ、遠くに位置する他利用者の顔画像は縮小し、近
くに位置する他利用者の顔画像は拡大して、マッピング
するようにしてもよい。
【0011】図5は、仮想空間内での利用者A,B,C
のx−y平面上での人物位置を示す。また、図6は、本
発明における利用者Cの視界、すなわち利用者Cが利用
している表示装置での画面例を示したものである。
【0012】仮想空間生成部12では、仮想空間内の各
分身オブジェクトのワールド座標値(Xi,Yi,θi)に
より、各オブジェクト間の相対位置および向きを計測す
る。ここで、Xi,Yiは、それぞれx,y平面上での位
置座標、θiは、y軸に対する回転角度とする。例え
ば、図5において、利用者AとCの相対角度θacは、θ
ac=θa−θcで表される。この場合、利用者Aの顔画像
としては、角度θac′=(180°−θac)をもった顔
画像を顔画像データベース43から出力し、図6に示す
如く利用者Aの分身オブジェクトA′にマッピングして
表示すればよい。ここで、θac′が0°の時は、利用者
Cに対して利用者Aが正対している顔画像がマッピング
される。なお、利用者Aの分身オブジェクトA´は利用
者Cの視線方向に対して常に直交する位置、すなわち、
図5のA′の破線位置とする。利用者Bについても同様
である。各分身オブジェクトにマッピングされる顔画像
は、視点が変化し、相対角度が変化する毎に逐次更新さ
れる。また、自利用者から遠くに位置する相手の顔画像
は縮小して、近くに位置する相手の顔画像は拡大してマ
ッピングされる。
【0013】以上、実施例の説明では、各利用者端末
が、全利用者の様々な方向から撮像した顔画像を蓄積す
る顔画像データベースを有するとしたが、該顔画像デー
タベースを制御サーバに持たせ、制御サーバが各利用者
間の相対位置および相対角度を計算して、各利用者の対
応する顔画像をデータベースから読み出して各利用者端
末に送信することも可能である。この場合、各利用者端
末で顔画像データベースを持つ必要がないため、システ
ム全体のコスト低減がはかれる。
【0014】
【発明の効果】以上説明したように、本発明によれば、
3次元仮想空間内の利用者の向きに応じて、平面で構成
される利用者の分身オブジェクトにマッピングする顔画
像を選択するため、利用者が3次元空間内で向きを変え
ても利用者の顔画像が見やすく、かつ、該利用者がどこ
を見てているが分かり易い表示法が可能であるという利
点がある。また、利用者間の相対位置に応じて、分身オ
ブジェクトにマッピングする顔画像を拡大・縮小するこ
とにより、実空間の臨場感を実現できるという利点があ
る。
【図面の簡単な説明】
【図1】本発明で対象とする3次元映像表示システムの
概要図である。
【図2】本発明における利用者端末の一実施例を示す図
である。
【図3】従来手法の顔画像マッピングを説明する図であ
る。
【図4】従来手法における表示装置での画面例である。
【図5】本発明の顔画像マッピングを説明する図であ
る。
【図6】本発明における表示装置での画面例である。
【符号の説明】
1 利用者端末 2 制御サーバ 3 通信回線 11 位置情報入力部 12 仮想空間生成部 13 顔画像データベース 14 画像マッピング部 15 表示装置
フロントページの続き (58)調査した分野(Int.Cl.7,DB名) G06T 15/00 - 17/50 G06F 13/00 H04N 7/14 - 7/22

Claims (2)

    (57)【特許請求の範囲】
  1. 【請求項1】 複数の利用者が共有し、各利用者が自由
    に移動可能な3次元仮想空間にて、操作器により入力さ
    れる各利用者の位置情報と向き情報に基づいて、各利用
    者の分身オブジェクトを前記3次元仮想空間に表示する
    3次元映像表示システムにおいて、各利用者の様々な角
    度から撮像した顔画像を蓄積する顔画像データベース
    と、仮想空間に存在する利用者間の相対角度を計測する
    手段と、該計測された相対角度に基づいて、各利用者の
    該当角度の顔画像を前記顔画像データベースより出力す
    る手段と、該出力された顔画像を各利用者の分身オブジ
    ェクトにマッピングする手段とを有することを特徴とす
    る3次元映像表示システム。
  2. 【請求項2】 請求項1記載の3次元映像表示システム
    において、仮想空間に存在する利用者間の相対角度に加
    えて該利用者間の相対位置も計測し、該計測された相対
    位置に基づいて、顔画像データベースから出力された顔
    画像を拡大・縮小して利用者の分身オブジェクトにマッ
    ピングすることを特徴とする3次元映像表示システム。
JP13832395A 1995-06-05 1995-06-05 3次元映像表示システム Expired - Lifetime JP3193263B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP13832395A JP3193263B2 (ja) 1995-06-05 1995-06-05 3次元映像表示システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13832395A JP3193263B2 (ja) 1995-06-05 1995-06-05 3次元映像表示システム

Publications (2)

Publication Number Publication Date
JPH08329282A JPH08329282A (ja) 1996-12-13
JP3193263B2 true JP3193263B2 (ja) 2001-07-30

Family

ID=15219225

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13832395A Expired - Lifetime JP3193263B2 (ja) 1995-06-05 1995-06-05 3次元映像表示システム

Country Status (1)

Country Link
JP (1) JP3193263B2 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6697869B1 (en) * 1998-08-24 2004-02-24 Koninklijke Philips Electronics N.V. Emulation of streaming over the internet in a broadcast application
JP3605317B2 (ja) * 1999-06-07 2004-12-22 株式会社ソニー・コンピュータエンタテインメント 画像描画方法、画像描画装置及び記録媒体
KR20010093938A (ko) * 2000-04-03 2001-10-31 김성천 인터넷을 사용한 아바타 형상화 방법 및 장치
KR20020014176A (ko) * 2000-08-16 2002-02-25 김세진 자기 모습을 담은 캐릭터의 즉시 촬영 제작 방법 및 장치
JP3466143B2 (ja) * 2000-09-07 2003-11-10 東平 新田 外国語修得のための分散仮想環境コンピュータシステム
JP2008219390A (ja) * 2007-03-02 2008-09-18 Victor Co Of Japan Ltd 画像閲覧装置
JP2017027477A (ja) * 2015-07-24 2017-02-02 株式会社オプティム 3次元出力サーバ、3次元出力方法及び3次元出力サーバ用プログラム。
JP7173249B2 (ja) * 2017-05-09 2022-11-16 ソニーグループ株式会社 クライアント装置、表示システム、クライアント装置の処理方法およびプログラム
JP7280223B2 (ja) * 2020-06-17 2023-05-23 Kddi株式会社 情報端末装置、遠隔コミュニケーション支援方法及びプログラム
JP7479473B2 (ja) * 2021-12-22 2024-05-08 株式会社ハシラス メタバース空間提供プログラム

Also Published As

Publication number Publication date
JPH08329282A (ja) 1996-12-13

Similar Documents

Publication Publication Date Title
US8379057B2 (en) Dynamic perspective video window
US5694533A (en) 3-Dimensional model composed against textured midground image and perspective enhancing hemispherically mapped backdrop image for visual realism
US9749619B2 (en) Systems and methods for generating stereoscopic images
EP0969418A2 (en) Image processing apparatus for displaying three-dimensional image
CN109754471A (zh) 增强现实中的图像处理方法及装置、存储介质、电子设备
US20110285703A1 (en) 3d avatar service providing system and method using background image
CN112929651B (zh) 一种显示方法、装置、电子设备及存储介质
JP3193263B2 (ja) 3次元映像表示システム
CN104536579A (zh) 交互式三维实景与数字图像高速融合处理系统及处理方法
CN116030228B (zh) 一种基于web的mr虚拟画面展示方法及装置
CN118135081A (zh) 模型生成方法、装置、计算机设备和计算机可读存储介质
Tachi et al. A method of mutual tele-existence in a virtual environment
CN115767068A (zh) 一种信息处理方法、装置和电子设备
CN112667137B (zh) 户型图和房屋三维模型的切换显示方法及装置
Yu et al. Projective bisector mirror (PBM): concept and rationale
Avery et al. Visualizing occluded physical objects in unfamiliar outdoor augmented reality environments
JP2023028330A (ja) 情報処理装置、情報処理方法及びプログラム
CN118233619A (zh) 图像调节方法、装置、存储介质及混合现实设备
CN114706497B (zh) 一种多屏幕联动显示的触控方法、相关装置和系统
CN110060349B (zh) 一种扩展增强现实头戴式显示设备视场角的方法
JP3112790B2 (ja) 仮想現実装置
CN213934814U (zh) 3d立体交互显示系统
JP3203614B2 (ja) 画像通信システムにおける仮想共有表示方法
CN108269232A (zh) 一种裸眼3d图片的转化方法及裸眼3d全景图片的转换方法
KR20190085681A (ko) 실감형 vr 영상의 제공 방법 및 이를 위한 서버 장치

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090525

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090525

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100525

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100525

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110525

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120525

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130525

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140525

Year of fee payment: 13

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term