JPH0647170A - 仮想現実感生成装置 - Google Patents
仮想現実感生成装置Info
- Publication number
- JPH0647170A JPH0647170A JP4193994A JP19399492A JPH0647170A JP H0647170 A JPH0647170 A JP H0647170A JP 4193994 A JP4193994 A JP 4193994A JP 19399492 A JP19399492 A JP 19399492A JP H0647170 A JPH0647170 A JP H0647170A
- Authority
- JP
- Japan
- Prior art keywords
- image
- viewer
- sound image
- sound
- virtual space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
- A63F2300/1012—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
Landscapes
- Stereophonic System (AREA)
Abstract
(57)【要約】
【目的】遊戯者が動いた場合でも遊戯者に対して仮想的
な現実感を与えることができる仮想現実感生成装置を提
供することを目的とする。 【構成】視聴者検出手段１６、２２、３０により視聴者
の動きを検出し、仮想空間における画像の位置を変化さ
せないように、画像補正手段３６により視聴者の動きに
基づいて画像を補正すると共に、仮想空間における音像
の位置を変化させないように、音像補正手段４２、４４
により視聴者の動きに基づいて音像を補正する。視聴者
が動いても、仮想空間における画像及び音像の位置が変
化しないように定位させることができる。
な現実感を与えることができる仮想現実感生成装置を提
供することを目的とする。 【構成】視聴者検出手段１６、２２、３０により視聴者
の動きを検出し、仮想空間における画像の位置を変化さ
せないように、画像補正手段３６により視聴者の動きに
基づいて画像を補正すると共に、仮想空間における音像
の位置を変化させないように、音像補正手段４２、４４
により視聴者の動きに基づいて音像を補正する。視聴者
が動いても、仮想空間における画像及び音像の位置が変
化しないように定位させることができる。
Description
【０００１】
【産業上の利用分野】本発明は、生成した画像と音像を
与えることにより視聴者に対して仮想空間における現実
感を与える仮想現実感生成装置に関する。
与えることにより視聴者に対して仮想空間における現実
感を与える仮想現実感生成装置に関する。
【０００２】
【従来の技術】近年、ゲーム装置の分野において遊戯者
に対して仮想的な現実感を与える試みが盛んに行われて
いる。ゲームの画像表示についてはコンピュータグラフ
ィックス技術の発達によりあらゆる方向からの画像表示
が可能になってきているが、ゲームの効果音については
単に効果音をモノラル音声で発するものが多く、現実感
を高めようとしても、せいぜいステレオ音声を用いるも
のしかなかった。ステレオ音声を用いた場合でも両スピ
ーカの中央で聞くことを前提としており、任意の位置に
音像を定位させることができなかった。
に対して仮想的な現実感を与える試みが盛んに行われて
いる。ゲームの画像表示についてはコンピュータグラフ
ィックス技術の発達によりあらゆる方向からの画像表示
が可能になってきているが、ゲームの効果音については
単に効果音をモノラル音声で発するものが多く、現実感
を高めようとしても、せいぜいステレオ音声を用いるも
のしかなかった。ステレオ音声を用いた場合でも両スピ
ーカの中央で聞くことを前提としており、任意の位置に
音像を定位させることができなかった。
【０００３】
【発明が解決しようとする課題】このため、従来は、現
実感ある効果音を発することができず、遊戯者に対して
仮想的な現実感を十分に与えることができなかった。特
に遊戯者が動いた場合にはその動きに応じて画像や音像
の位置がずれてしまい、仮想的な現実感を得ることがで
きなかった。
実感ある効果音を発することができず、遊戯者に対して
仮想的な現実感を十分に与えることができなかった。特
に遊戯者が動いた場合にはその動きに応じて画像や音像
の位置がずれてしまい、仮想的な現実感を得ることがで
きなかった。
【０００４】本発明の目的は、遊戯者が動いた場合でも
遊戯者に対して仮想的な現実感を与えることができる仮
想現実感生成装置を提供することにある。
遊戯者に対して仮想的な現実感を与えることができる仮
想現実感生成装置を提供することにある。
【０００５】
【課題を解決するための手段】上記目的は、視聴者の視
覚に対して仮想空間における画像を生成する画像生成手
段と、前記視聴者の聴覚に対して前記仮想空間における
音像を生成する音像生成手段とを有し、前記画像生成手
段からの画像と前記音像生成手段からの音像により前記
視聴者に対して前記仮想空間における現実感を与える仮
想現実感生成装置において、前記視聴者の動きを検出す
る視聴者検出手段と、前記仮想空間における画像の位置
を変化させないように、前記視聴者検出手段により検出
された前記視聴者の動きに基づいて前記画像生成手段に
より生成された画像を補正する画像補正手段と、前記仮
想空間における音像の位置を変化させないように、前記
視聴者検出手段により検出された前記視聴者の動きに基
づいて前記音像生成手段により生成された音像を補正す
る音像補正手段とを有し、前記視聴者が動いても、前記
仮想空間における画像及び音像の位置が変化しないよう
に定位させることを特徴とする仮想現実感生成装置によ
って達成される。
覚に対して仮想空間における画像を生成する画像生成手
段と、前記視聴者の聴覚に対して前記仮想空間における
音像を生成する音像生成手段とを有し、前記画像生成手
段からの画像と前記音像生成手段からの音像により前記
視聴者に対して前記仮想空間における現実感を与える仮
想現実感生成装置において、前記視聴者の動きを検出す
る視聴者検出手段と、前記仮想空間における画像の位置
を変化させないように、前記視聴者検出手段により検出
された前記視聴者の動きに基づいて前記画像生成手段に
より生成された画像を補正する画像補正手段と、前記仮
想空間における音像の位置を変化させないように、前記
視聴者検出手段により検出された前記視聴者の動きに基
づいて前記音像生成手段により生成された音像を補正す
る音像補正手段とを有し、前記視聴者が動いても、前記
仮想空間における画像及び音像の位置が変化しないよう
に定位させることを特徴とする仮想現実感生成装置によ
って達成される。
【０００６】
【作用】本発明によれば、視聴者検出手段により視聴者
の動きを検出し、仮想空間における画像の位置を変化さ
せないように、画像補正手段により視聴者の動きに基づ
いて画像を補正すると共に、仮想空間における音像の位
置を変化させないように、音像補正手段により視聴者の
動きに基づいて音像を補正することにより、視聴者が動
いても、仮想空間における画像及び音像の位置が変化し
ないように定位させる。
の動きを検出し、仮想空間における画像の位置を変化さ
せないように、画像補正手段により視聴者の動きに基づ
いて画像を補正すると共に、仮想空間における音像の位
置を変化させないように、音像補正手段により視聴者の
動きに基づいて音像を補正することにより、視聴者が動
いても、仮想空間における画像及び音像の位置が変化し
ないように定位させる。
【０００７】
【実施例】本発明の第１の実施例による仮想現実感生成
装置を図１乃至図３を用いて説明する。本実施例の仮想
現実感生成装置では遊戯者がヘッドマウントディスプレ
イを装着する。遊戯者がヘッドマウントディスプレイを
装着した状態の側面図を図１に示し、上面図を図２に示
す。
装置を図１乃至図３を用いて説明する。本実施例の仮想
現実感生成装置では遊戯者がヘッドマウントディスプレ
イを装着する。遊戯者がヘッドマウントディスプレイを
装着した状態の側面図を図１に示し、上面図を図２に示
す。
【０００８】図１に示すように、ゲーム装置の遊戯者で
ある視聴者はヘッドマウントディスプレイ１０を装着す
る。ヘッドマウントディスプレイ１０の前面には、遊戯
者の視覚に対して画像情報を与えるための画像表示用メ
ガネ１２が設けられている。また、ヘッドマウントディ
スプレイ１０の左右両側面には、遊戯者の聴覚に対して
音像情報を与えるためのヘッドフォン１４が設けられて
いる。
ある視聴者はヘッドマウントディスプレイ１０を装着す
る。ヘッドマウントディスプレイ１０の前面には、遊戯
者の視覚に対して画像情報を与えるための画像表示用メ
ガネ１２が設けられている。また、ヘッドマウントディ
スプレイ１０の左右両側面には、遊戯者の聴覚に対して
音像情報を与えるためのヘッドフォン１４が設けられて
いる。
【０００９】ヘッドマウントディスプレイ１０の天面に
は、遊戯者の向いている方向を検出するために磁気方位
センサ１６（例えば、ＴＭＣ−２０００（株式会社トー
キン））が設けられている。この磁気方位センサ１６
は、地磁気を検出することにより方位角を求めるもので
ある。また、ヘッドマウントディスプレイ１０の上面に
は、遊戯者の位置を検出するために赤外ＬＥＤ１８が設
けられている。赤外ＬＥＤ１８からの赤外光はレンズ２
０を介して位置センサ２２（例えば、ＰＳＤ（浜松ホト
ニクス株式会社製））により検出される。位置センサ２
２はレンズ２０を介して入力された赤外ＬＥＤ１８のス
ポット光の位置から、ヘッドマウントディスプレイ１０
を装着した遊戯者の位置を検出する。
は、遊戯者の向いている方向を検出するために磁気方位
センサ１６（例えば、ＴＭＣ−２０００（株式会社トー
キン））が設けられている。この磁気方位センサ１６
は、地磁気を検出することにより方位角を求めるもので
ある。また、ヘッドマウントディスプレイ１０の上面に
は、遊戯者の位置を検出するために赤外ＬＥＤ１８が設
けられている。赤外ＬＥＤ１８からの赤外光はレンズ２
０を介して位置センサ２２（例えば、ＰＳＤ（浜松ホト
ニクス株式会社製））により検出される。位置センサ２
２はレンズ２０を介して入力された赤外ＬＥＤ１８のス
ポット光の位置から、ヘッドマウントディスプレイ１０
を装着した遊戯者の位置を検出する。
【００１０】本実施例の仮想現実感生成装置のブロック
図を図３に示す。磁気方位センサ１６と位置センサ２２
は位置ずれ算出部３０に接続されている。位置ずれ算出
部３０は磁気方位センサ１６からの方位角信号と位置セ
ンサ２２からの位置信号により、遊戯者の基準位置から
の位置ずれと基準方位からのずれ角を算出する。
図を図３に示す。磁気方位センサ１６と位置センサ２２
は位置ずれ算出部３０に接続されている。位置ずれ算出
部３０は磁気方位センサ１６からの方位角信号と位置セ
ンサ２２からの位置信号により、遊戯者の基準位置から
の位置ずれと基準方位からのずれ角を算出する。
【００１１】画像生成部３２は、画像データメモリ３４
に格納された画像データから選択された画像データに基
づいて、図２に示すように、遊戯者が基準位置に位置
し、基準方向を向いている状態で遊戯者に対して与える
べき基準画像を生成する。画像生成部３０により生成さ
れた基準画像は、画像補正部３６に出力される。画像補
正部３６は、画像生成部３０により生成された基準画像
を、位置ずれ算出部３０により算出された位置ずれ信号
とずれ角信号に基づいて、仮想空間における画像の位置
を変化させないように補正する。
に格納された画像データから選択された画像データに基
づいて、図２に示すように、遊戯者が基準位置に位置
し、基準方向を向いている状態で遊戯者に対して与える
べき基準画像を生成する。画像生成部３０により生成さ
れた基準画像は、画像補正部３６に出力される。画像補
正部３６は、画像生成部３０により生成された基準画像
を、位置ずれ算出部３０により算出された位置ずれ信号
とずれ角信号に基づいて、仮想空間における画像の位置
を変化させないように補正する。
【００１２】画像補正部３６により補正された画像は、
ヘッドマウントディスプレイ１０に設けられた画像表示
用メガネ１２により遊戯者の視覚に対して与えられる。
音像生成部３８は、音像データメモリ４０に格納された
音像データから選択された音像データに基づいて、図２
に示すように、遊戯者が基準位置に位置し、基準方向を
向いている状態で遊戯者に対して与えるべき基準音像を
生成する。音像生成部３８により生成された基準音像
は、ＨL 補正部４２とＨR 補正部４４に出力される。
ヘッドマウントディスプレイ１０に設けられた画像表示
用メガネ１２により遊戯者の視覚に対して与えられる。
音像生成部３８は、音像データメモリ４０に格納された
音像データから選択された音像データに基づいて、図２
に示すように、遊戯者が基準位置に位置し、基準方向を
向いている状態で遊戯者に対して与えるべき基準音像を
生成する。音像生成部３８により生成された基準音像
は、ＨL 補正部４２とＨR 補正部４４に出力される。
【００１３】図２に示すように、伝達関数ＨL は音源Ｏ
から遊戯者の左耳外耳道入口近傍までの伝達関数であ
り、伝達関数ＨR は音源Ｏから遊戯者の右耳外耳道入口
近傍までの伝達関数である。なお、伝達関数ＨL 、ＨR
は実験的に測定することにより求めたものである。遊戯
者の左耳外耳道入口近傍での音声信号をＥL 、右耳外耳
道入口近傍での音声信号をＥR とすると、音声信号
ＥL 、ＥR は次式 ＥL ＝Ｏ・ＨL ＥR ＝Ｏ・ＨR のようになる。
から遊戯者の左耳外耳道入口近傍までの伝達関数であ
り、伝達関数ＨR は音源Ｏから遊戯者の右耳外耳道入口
近傍までの伝達関数である。なお、伝達関数ＨL 、ＨR
は実験的に測定することにより求めたものである。遊戯
者の左耳外耳道入口近傍での音声信号をＥL 、右耳外耳
道入口近傍での音声信号をＥR とすると、音声信号
ＥL 、ＥR は次式 ＥL ＝Ｏ・ＨL ＥR ＝Ｏ・ＨR のようになる。
【００１４】ＨL 補正部４２は、音像生成部３８により
生成された基準音像を、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨL
を補正する。同様に、ＨR 補正部４４は、音像生成部３
８により生成された基準音像を、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨR を補正する。
生成された基準音像を、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨL
を補正する。同様に、ＨR 補正部４４は、音像生成部３
８により生成された基準音像を、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨR を補正する。
【００１５】なお、どの程度の位置ずれに対して伝達関
数ＨL 、ＨR をどの程度補正するかは実験的に測定する
ことにより求めた。ＨL 補正部４２及びＨR 補正部４４
により補正された音像は、ヘッドマウントディスプレイ
１０に設けられたヘッドフォン１４により遊戯者の聴覚
に対して与えられる。
数ＨL 、ＨR をどの程度補正するかは実験的に測定する
ことにより求めた。ＨL 補正部４２及びＨR 補正部４４
により補正された音像は、ヘッドマウントディスプレイ
１０に設けられたヘッドフォン１４により遊戯者の聴覚
に対して与えられる。
【００１６】このように本実施例によれば、遊戯者が位
置や方位を変えても、その変化に応じて画像信号や音像
信号を変化させ、仮想空間における画像及び音像の位置
が変化しないように定位させることができる。本発明の
第２の実施例による仮想現実感生成装置を図４乃至図６
を用いて説明する。図１乃至図３に示す仮想現実感生成
装置と同一の構成要素には同一の符号を付して説明を省
略又は簡略にする。
置や方位を変えても、その変化に応じて画像信号や音像
信号を変化させ、仮想空間における画像及び音像の位置
が変化しないように定位させることができる。本発明の
第２の実施例による仮想現実感生成装置を図４乃至図６
を用いて説明する。図１乃至図３に示す仮想現実感生成
装置と同一の構成要素には同一の符号を付して説明を省
略又は簡略にする。
【００１７】本実施例の仮想現実感生成装置において遊
戯者が装着するヘッドマウントディスプレイ１０は、図
４に示すように、前面に画像表示用メガネ１２が設けら
れているが、左右両側面には第１の実施例のようなヘッ
ドフォン１４が設けられていない。音像情報は、図５に
示すように、遊戯者の前方に設けられた２つのスピーカ
５０、５２により与えられる。
戯者が装着するヘッドマウントディスプレイ１０は、図
４に示すように、前面に画像表示用メガネ１２が設けら
れているが、左右両側面には第１の実施例のようなヘッ
ドフォン１４が設けられていない。音像情報は、図５に
示すように、遊戯者の前方に設けられた２つのスピーカ
５０、５２により与えられる。
【００１８】本実施例の仮想現実感生成装置のブロック
図を図４に示す。第１の実施例と同様に、磁気方位セン
サ１６からの方位角信号と位置センサ２２からの位置信
号により位置ずれ算出部３０は遊戯者の基準位置からの
位置ずれと基準方位からのずれ角を算出する。第１の実
施例と同様に、画像生成部３２は、画像データメモリ３
４に格納された画像データから基準画像を生成し、画像
補正部３６は、画像生成部３０により生成された基準画
像を、位置ずれ算出部３０により算出された位置ずれ信
号とずれ角信号に基づいて、仮想空間における画像の位
置を変化させないように補正する。画像補正部３６によ
り補正された画像は、ヘッドマウントディスプレイ１０
に設けられた画像表示用メガネ１２により遊戯者の視覚
に対して与えられる。
図を図４に示す。第１の実施例と同様に、磁気方位セン
サ１６からの方位角信号と位置センサ２２からの位置信
号により位置ずれ算出部３０は遊戯者の基準位置からの
位置ずれと基準方位からのずれ角を算出する。第１の実
施例と同様に、画像生成部３２は、画像データメモリ３
４に格納された画像データから基準画像を生成し、画像
補正部３６は、画像生成部３０により生成された基準画
像を、位置ずれ算出部３０により算出された位置ずれ信
号とずれ角信号に基づいて、仮想空間における画像の位
置を変化させないように補正する。画像補正部３６によ
り補正された画像は、ヘッドマウントディスプレイ１０
に設けられた画像表示用メガネ１２により遊戯者の視覚
に対して与えられる。
【００１９】音像生成部３８は、音像データメモリ４０
に格納された音像データから選択された音像データに基
づいて、図２に示すように、遊戯者が基準位置に位置
し、基準方向を向いている状態で遊戯者に対して与える
べき基準音像を生成する。音像生成部３８により生成さ
れた基準音像は、ＨL 補正部４２とＨR 補正部４４に出
力される。
に格納された音像データから選択された音像データに基
づいて、図２に示すように、遊戯者が基準位置に位置
し、基準方向を向いている状態で遊戯者に対して与える
べき基準音像を生成する。音像生成部３８により生成さ
れた基準音像は、ＨL 補正部４２とＨR 補正部４４に出
力される。
【００２０】本実施例ではスピーカ５０、５２からの音
声信号により、遊戯者の左右外耳道入口近傍において適
切な音声信号が生ずるようにする。したがって、スピー
カ５０、５２からの遊戯者の左右外耳道入口近傍までの
伝達関数を考慮する必要がある。遊戯者の左耳外耳道入
口近傍での音声信号をＥL 、右耳外耳道入口近傍での音
声信号をＥR とすると、音声信号ＥL 、ＥR は次式 ＥL ＝Ｏ・ＨL ＥR ＝Ｏ・ＨR のようになる。
声信号により、遊戯者の左右外耳道入口近傍において適
切な音声信号が生ずるようにする。したがって、スピー
カ５０、５２からの遊戯者の左右外耳道入口近傍までの
伝達関数を考慮する必要がある。遊戯者の左耳外耳道入
口近傍での音声信号をＥL 、右耳外耳道入口近傍での音
声信号をＥR とすると、音声信号ＥL 、ＥR は次式 ＥL ＝Ｏ・ＨL ＥR ＝Ｏ・ＨR のようになる。
【００２１】左右のスピーカ５０、５２の音声信号をＳ
L 、ＳR とし、左側のスピーカ５０から遊戯者の左耳外
耳道入口近傍までの伝達関数をＨLL、右側のスピーカ５
２から遊戯者の左耳外耳道入口近傍までの伝達関数をＨ
RL、左側のスピーカ５０から遊戯者の右耳外耳道入口近
傍までの伝達関数をＨLR、右側のスピーカ５２から遊戯
者の右耳外耳道入口近傍までの伝達関数をＨRRとする
と、左右外耳道入口近傍での音声信号ＥL 、ＥR は次式 ＥL ＝ＳL ・ＨLL＋ＳR ・ＨRL ＥR ＝ＳL ・ＨLR＋ＳR ・ＨRR のようになる。
L 、ＳR とし、左側のスピーカ５０から遊戯者の左耳外
耳道入口近傍までの伝達関数をＨLL、右側のスピーカ５
２から遊戯者の左耳外耳道入口近傍までの伝達関数をＨ
RL、左側のスピーカ５０から遊戯者の右耳外耳道入口近
傍までの伝達関数をＨLR、右側のスピーカ５２から遊戯
者の右耳外耳道入口近傍までの伝達関数をＨRRとする
と、左右外耳道入口近傍での音声信号ＥL 、ＥR は次式 ＥL ＝ＳL ・ＨLL＋ＳR ・ＨRL ＥR ＝ＳL ・ＨLR＋ＳR ・ＨRR のようになる。
【００２２】これらの式から、左右のスピーカ５０、５
２の音声信号ＳL 、ＳR を求めると、 ＳL ＝（ＯＨL ＨRR−ＯＨR ＨRL）／（ＨLLＨRR−ＨLRＨRL） ＳR ＝（ＯＨR ＨLL−ＯＨL ＨLR）／（ＨLLＨRR−ＨLRＨRL） となる。これらの式に基づいて、スピーカ音声信号演算
部５４は音声信号ＳL 、ＳR を演算し、左右のスピーカ
５０、５２から音声を発生させる。なお、伝達関数
ＨLL、ＨRL、ＨLR、ＨRRは実験的に測定することにより
求めたものである。
２の音声信号ＳL 、ＳR を求めると、 ＳL ＝（ＯＨL ＨRR−ＯＨR ＨRL）／（ＨLLＨRR−ＨLRＨRL） ＳR ＝（ＯＨR ＨLL−ＯＨL ＨLR）／（ＨLLＨRR−ＨLRＨRL） となる。これらの式に基づいて、スピーカ音声信号演算
部５４は音声信号ＳL 、ＳR を演算し、左右のスピーカ
５０、５２から音声を発生させる。なお、伝達関数
ＨLL、ＨRL、ＨLR、ＨRRは実験的に測定することにより
求めたものである。
【００２３】ＨL 補正部４２は、音像生成部３８により
生成された基準音像を、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨL
を補正する。同様に、ＨR 補正部４４は、音像生成部３
８により生成された基準音像を、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨR を補正する。
生成された基準音像を、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨL
を補正する。同様に、ＨR 補正部４４は、音像生成部３
８により生成された基準音像を、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨR を補正する。
【００２４】本実施例では更に伝達関数をＨLL、ＨRL、
ＨLR、ＨRRを、位置ずれ算出部３０により算出された位
置ずれ信号とずれ角信号に基づいて補正する。すなわ
ち、ＨLL補正部５６は、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨLL
を補正する。
ＨLR、ＨRRを、位置ずれ算出部３０により算出された位
置ずれ信号とずれ角信号に基づいて補正する。すなわ
ち、ＨLL補正部５６は、位置ずれ算出部３０により算出
された位置ずれ信号とずれ角信号に基づいて、仮想空間
における音像の位置を変化させないように伝達関数ＨLL
を補正する。
【００２５】ＨLR補正部５８は、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨLRを補正する。ＨRL補正部６０は、位置ずれ算出
部３０により算出された位置ずれ信号とずれ角信号に基
づいて、仮想空間における音像の位置を変化させないよ
うに伝達関数ＨRLを補正する。
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨLRを補正する。ＨRL補正部６０は、位置ずれ算出
部３０により算出された位置ずれ信号とずれ角信号に基
づいて、仮想空間における音像の位置を変化させないよ
うに伝達関数ＨRLを補正する。
【００２６】ＨRR補正部６０は、位置ずれ算出部３０に
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨRRを補正する。なお、どの程度の位置ずれに対し
て伝達関数ＨL 、ＨR をどの程度補正するかは実験的に
測定することにより求めた。
より算出された位置ずれ信号とずれ角信号に基づいて、
仮想空間における音像の位置を変化させないように伝達
関数ＨRRを補正する。なお、どの程度の位置ずれに対し
て伝達関数ＨL 、ＨR をどの程度補正するかは実験的に
測定することにより求めた。
【００２７】スピーカ音声信号演算部５４は、補正され
た伝達関数ＨL 、ＨR 、ＨLL、ＨRL 、ＨLR、ＨRRに基づ
いて、音声信号ＳL 、ＳR を演算し、左右のスピーカ５
０、５２から音声を発生させる。このように本実施例に
よれば、遊戯者が位置や方位を変えても、その変化に応
じて画像信号や音像信号を変化させ、仮想空間における
画像及び音像の位置が変化しないように定位させること
ができる。
た伝達関数ＨL 、ＨR 、ＨLL、ＨRL 、ＨLR、ＨRRに基づ
いて、音声信号ＳL 、ＳR を演算し、左右のスピーカ５
０、５２から音声を発生させる。このように本実施例に
よれば、遊戯者が位置や方位を変えても、その変化に応
じて画像信号や音像信号を変化させ、仮想空間における
画像及び音像の位置が変化しないように定位させること
ができる。
【００２８】本発明は上記実施例に限らず種々の変形が
可能である。例えば、上記実施例では磁気方位センサと
位置センサにより遊戯者の向いている方向と位置を検出
するようにしたが、他の方法により遊戯者の動きを検出
するようにしてもよい。
可能である。例えば、上記実施例では磁気方位センサと
位置センサにより遊戯者の向いている方向と位置を検出
するようにしたが、他の方法により遊戯者の動きを検出
するようにしてもよい。
【００２９】
【発明の効果】以上の通り、本発明によれば、視聴者検
出手段により視聴者の動きを検出し、仮想空間における
画像の位置を変化させないように、画像補正手段により
視聴者の動きに基づいて画像を補正すると共に、仮想空
間における音像の位置を変化させないように、音像補正
手段により視聴者の動きに基づいて音像を補正すること
により、視聴者が動いても、仮想空間における画像及び
音像の位置が変化しないように定位させることができ
る。
出手段により視聴者の動きを検出し、仮想空間における
画像の位置を変化させないように、画像補正手段により
視聴者の動きに基づいて画像を補正すると共に、仮想空
間における音像の位置を変化させないように、音像補正
手段により視聴者の動きに基づいて音像を補正すること
により、視聴者が動いても、仮想空間における画像及び
音像の位置が変化しないように定位させることができ
る。
【図１】本発明の第１の実施例の仮想現実感生成装置に
おけるヘッドマウントディスプレイの装着状態の側面図
である。
おけるヘッドマウントディスプレイの装着状態の側面図
である。
【図２】本発明の第１の実施例の仮想現実感生成装置に
おけるヘッドマウントディスプレイの装着状態の上面図
である。
おけるヘッドマウントディスプレイの装着状態の上面図
である。
【図３】本発明の第１の実施例の仮想現実感生成装置の
ブロック図である。
ブロック図である。
【図４】本発明の第２の実施例の仮想現実感生成装置に
おけるヘッドマウントディスプレイの装着状態の側面図
である。
おけるヘッドマウントディスプレイの装着状態の側面図
である。
【図５】本発明の第２の実施例の仮想現実感生成装置に
おけるヘッドマウントディスプレイの装着状態の上面図
である。
おけるヘッドマウントディスプレイの装着状態の上面図
である。
【図６】本発明の第２の実施例の仮想現実感生成装置の
ブロック図である。
ブロック図である。
１０…ヘッドマウントディスプレイ １２…画像表示用メガネ １４…ヘッドフォン １６…磁気方位センサ １８…赤外ＬＥＤ ２０…レンズ ２２…位置センサ ３０…位置ずれ算出部 ３２…画像生成部 ３４…画像データメモリ ３６…画像補正部 ３８…音像生成部 ４０…音像データメモリ ４２…ＨL 補正部 ４４…ＨR 補正部 ５０、５２…スピーカ ５４…スピーカ音声信号演算部 ５６…ＨLL補正部 ５８…ＨLR補正部 ６０…ＨRL補正部 ６２…ＨRR補正部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.5 識別記号 庁内整理番号 ＦＩ 技術表示箇所 Ｈ０４Ｓ 7/00 Ｆ 8421−5Ｈ
Claims (1)
- 【請求項１】 視聴者の視覚に対して仮想空間における
画像を生成する画像生成手段と、前記視聴者の聴覚に対
して前記仮想空間における音像を生成する音像生成手段
とを有し、前記画像生成手段からの画像と前記音像生成
手段からの音像により前記視聴者に対して前記仮想空間
における現実感を与える仮想現実感生成装置において、 前記視聴者の動きを検出する視聴者検出手段と、 前記仮想空間における画像の位置を変化させないよう
に、前記視聴者検出手段により検出された前記視聴者の
動きに基づいて前記画像生成手段により生成された画像
を補正する画像補正手段と、 前記仮想空間における音像の位置を変化させないよう
に、前記視聴者検出手段により検出された前記視聴者の
動きに基づいて前記音像生成手段により生成された音像
を補正する音像補正手段とを有し、 前記視聴者が動いても、前記仮想空間における画像及び
音像の位置が変化しないように定位させることを特徴と
する仮想現実感生成装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4193994A JP2550832B2 (ja) | 1992-07-21 | 1992-07-21 | 仮想現実感生成装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4193994A JP2550832B2 (ja) | 1992-07-21 | 1992-07-21 | 仮想現実感生成装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0647170A true JPH0647170A (ja) | 1994-02-22 |
| JP2550832B2 JP2550832B2 (ja) | 1996-11-06 |
Family
ID=16317206
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4193994A Expired - Fee Related JP2550832B2 (ja) | 1992-07-21 | 1992-07-21 | 仮想現実感生成装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2550832B2 (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0819662A (ja) * | 1994-07-08 | 1996-01-23 | Sega Enterp Ltd | 画像表示装置を用いた遊戯装置 |
| FR2778248A1 (fr) * | 1998-04-30 | 1999-11-05 | Pierre Emmanuel Bathie | Procede et systeme de diffusion d'images de synthese d'un univers virtuel en relation avec le lieu ou evolue la personne recevant les images de synthese |
| EP0899690A3 (en) * | 1997-09-01 | 2000-04-05 | Mixed Reality Systems Laboratory Inc. | Apparatus and method for presenting mixed virtual reality shared among operators |
| JP2001197598A (ja) * | 2000-01-05 | 2001-07-19 | Mitsubishi Electric Corp | 映像音声再生装置 |
| JP2002085831A (ja) * | 2000-09-20 | 2002-03-26 | Namco Ltd | ゲーム装置及び情報記憶媒体 |
| JP2005057545A (ja) * | 2003-08-05 | 2005-03-03 | Matsushita Electric Ind Co Ltd | 音場制御装置及び音響システム |
| EP1060772A3 (en) * | 1999-06-11 | 2005-06-01 | Canon Kabushiki Kaisha | Apparatus and method to represent mixed reality space shared by plural operators, game apparatus using mixed reality apparatus and interface method thereof |
| JP2010056589A (ja) * | 2008-08-26 | 2010-03-11 | Sony Corp | 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法 |
| JP2017146607A (ja) * | 2013-06-07 | 2017-08-24 | 株式会社ソニー・インタラクティブエンタテインメント | ヘッドマウントディスプレイでユーザーの動きに応答する画像レンダリング |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61142085A (ja) * | 1984-12-11 | 1986-06-28 | 三菱重工業株式会社 | 遠隔制御装置 |
| US4930888A (en) * | 1987-11-07 | 1990-06-05 | Messerschmitt-Boelkow-Blohm Gesellschaft Mit Beschraenkter Haftung | Situation display system for attachment to a headgear |
| EP0479605A2 (en) * | 1990-10-05 | 1992-04-08 | Texas Instruments Incorporated | Method and apparatus for providing a portable visual display |
| JPH04192066A (ja) * | 1990-11-27 | 1992-07-10 | Matsushita Electric Works Ltd | 商品疑似体験ショウルームシステム |
| JPH0622246A (ja) * | 1992-06-30 | 1994-01-28 | Sony Corp | 映像音声再生装置 |
-
1992
- 1992-07-21 JP JP4193994A patent/JP2550832B2/ja not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61142085A (ja) * | 1984-12-11 | 1986-06-28 | 三菱重工業株式会社 | 遠隔制御装置 |
| US4930888A (en) * | 1987-11-07 | 1990-06-05 | Messerschmitt-Boelkow-Blohm Gesellschaft Mit Beschraenkter Haftung | Situation display system for attachment to a headgear |
| EP0479605A2 (en) * | 1990-10-05 | 1992-04-08 | Texas Instruments Incorporated | Method and apparatus for providing a portable visual display |
| JPH04192066A (ja) * | 1990-11-27 | 1992-07-10 | Matsushita Electric Works Ltd | 商品疑似体験ショウルームシステム |
| JPH0622246A (ja) * | 1992-06-30 | 1994-01-28 | Sony Corp | 映像音声再生装置 |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0819662A (ja) * | 1994-07-08 | 1996-01-23 | Sega Enterp Ltd | 画像表示装置を用いた遊戯装置 |
| EP0899690A3 (en) * | 1997-09-01 | 2000-04-05 | Mixed Reality Systems Laboratory Inc. | Apparatus and method for presenting mixed virtual reality shared among operators |
| US6522312B2 (en) | 1997-09-01 | 2003-02-18 | Canon Kabushiki Kaisha | Apparatus for presenting mixed reality shared among operators |
| FR2778248A1 (fr) * | 1998-04-30 | 1999-11-05 | Pierre Emmanuel Bathie | Procede et systeme de diffusion d'images de synthese d'un univers virtuel en relation avec le lieu ou evolue la personne recevant les images de synthese |
| EP1060772A3 (en) * | 1999-06-11 | 2005-06-01 | Canon Kabushiki Kaisha | Apparatus and method to represent mixed reality space shared by plural operators, game apparatus using mixed reality apparatus and interface method thereof |
| JP2001197598A (ja) * | 2000-01-05 | 2001-07-19 | Mitsubishi Electric Corp | 映像音声再生装置 |
| JP2002085831A (ja) * | 2000-09-20 | 2002-03-26 | Namco Ltd | ゲーム装置及び情報記憶媒体 |
| JP2005057545A (ja) * | 2003-08-05 | 2005-03-03 | Matsushita Electric Ind Co Ltd | 音場制御装置及び音響システム |
| JP2010056589A (ja) * | 2008-08-26 | 2010-03-11 | Sony Corp | 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法 |
| JP2017146607A (ja) * | 2013-06-07 | 2017-08-24 | 株式会社ソニー・インタラクティブエンタテインメント | ヘッドマウントディスプレイでユーザーの動きに応答する画像レンダリング |
| US10545338B2 (en) | 2013-06-07 | 2020-01-28 | Sony Interactive Entertainment Inc. | Image rendering responsive to user actions in head mounted display |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2550832B2 (ja) | 1996-11-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10959037B1 (en) | Gaze-directed audio enhancement | |
| CN109691141B (zh) | 空间化音频系统以及渲染空间化音频的方法 | |
| JP3528284B2 (ja) | ３次元サウンドシステム | |
| EP3008691B1 (en) | Head-mountable apparatus and systems | |
| JP3796776B2 (ja) | 映像音声再生装置 | |
| JP3687099B2 (ja) | 映像信号及び音響信号の再生装置 | |
| JP2021508426A (ja) | 双方向性拡張または仮想現実装置 | |
| EP3861767B1 (en) | Near-field audio rendering | |
| US11026024B2 (en) | System and method for producing audio data to head mount display device | |
| US10542368B2 (en) | Audio content modification for playback audio | |
| WO2017077918A1 (ja) | 情報処理装置、情報処理システム、および情報処理方法 | |
| US20230071778A1 (en) | Foveated beamforming for augmented reality devices and wearables | |
| JP2010056589A (ja) | 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法 | |
| CN114175670B (zh) | 用于透听式音频系统的耳塞组件 | |
| CN115150716B (zh) | 基于设备位置确定音频滤波器的音频系统和方法 | |
| JP2550832B2 (ja) | 仮想現実感生成装置 | |
| JP2025128231A (ja) | 音響再生方法、プログラム、及び、音響再生システム | |
| WO2023058162A1 (ja) | 音声拡張現実オブジェクト再生装置及び音声拡張現実オブジェクト再生方法 | |
| JP3573797B2 (ja) | ステレオ音声再生装置 | |
| JP6957426B2 (ja) | 再生装置、再生方法、及びプログラム | |
| JP2550832C (ja) | ||
| Pörschmann | 3-D audio in mobile communication devices: Methods for mobile head-tracking | |
| JP2024056580A (ja) | 情報処理装置及びその制御方法及びプログラム | |
| JP2023099490A (ja) | 周辺デバイストラッキングシステムおよび方法 | |
| JPH10207340A (ja) | 仮想空間生成装置及び仮想空間生成方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 19960625 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070822 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080822 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080822 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090822 Year of fee payment: 13 |
|
| LAPS | Cancellation because of no payment of annual fees |