JPH0923275A - 仮想空間共有方法およびこの方法を実施する装置 - Google Patents
仮想空間共有方法およびこの方法を実施する装置Info
- Publication number
- JPH0923275A JPH0923275A JP16991995A JP16991995A JPH0923275A JP H0923275 A JPH0923275 A JP H0923275A JP 16991995 A JP16991995 A JP 16991995A JP 16991995 A JP16991995 A JP 16991995A JP H0923275 A JPH0923275 A JP H0923275A
- Authority
- JP
- Japan
- Prior art keywords
- virtual space
- user
- voice
- audio
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Telephonic Communication Services (AREA)
Abstract
(57)【要約】
【課題】 利用者は仮想空間内を移動しながら会話した
い相手に近寄るだけで自動的に音声がつながり現実に近
い環境を仮想空間内に実現する仮想空間共有方法および
この方法を実施する装置を提供する。 【解決手段】 距離判定部１５の計算結果を入力して第
１の利用者の分身と第２の利用者の分身の間の仮想空間
における距離が或る閾値より小さい場合第１の利用者の
音声と第２の利用者の音声を同一の音声ミキサに接続す
る指示を音声ミキサ部１８に与えると共に視野一致度判
定部１６の計算結果を入力して第１の利用者と第２の利
用者の少なくとも一方が他方の視野に存在する場合第１
の利用者の音声と第２の利用者の音声を同一の音声ミキ
サに接続する指示を音声ミキサ部１８に与えるミキシン
グ対象決定部１７を具備する仮想空間共有方法および装
置。
い相手に近寄るだけで自動的に音声がつながり現実に近
い環境を仮想空間内に実現する仮想空間共有方法および
この方法を実施する装置を提供する。 【解決手段】 距離判定部１５の計算結果を入力して第
１の利用者の分身と第２の利用者の分身の間の仮想空間
における距離が或る閾値より小さい場合第１の利用者の
音声と第２の利用者の音声を同一の音声ミキサに接続す
る指示を音声ミキサ部１８に与えると共に視野一致度判
定部１６の計算結果を入力して第１の利用者と第２の利
用者の少なくとも一方が他方の視野に存在する場合第１
の利用者の音声と第２の利用者の音声を同一の音声ミキ
サに接続する指示を音声ミキサ部１８に与えるミキシン
グ対象決定部１７を具備する仮想空間共有方法および装
置。
Description
【０００１】
【発明の属する技術分野】この発明は、仮想空間共有方
法およびこの方法を実施する装置に関し、特に、利用者
が自分の意志で自由に移動することができる３次元仮想
空間を表現すると共に、当該仮想空間内に他の利用者の
分身をも表現することができる端末を複数台通信網を介
して接続し、利用者の音声と利用者の仮想空間内の位置
情報と視線の向き情報とを他の端末に分配することによ
り、複数の利用者が同一の仮想空間を遠隔地において共
有し、仮想空間内に利用者が集合して会話することがで
きる小グループを複数構成する仮想空間共有方法および
この方法を実施する装置に関する。
法およびこの方法を実施する装置に関し、特に、利用者
が自分の意志で自由に移動することができる３次元仮想
空間を表現すると共に、当該仮想空間内に他の利用者の
分身をも表現することができる端末を複数台通信網を介
して接続し、利用者の音声と利用者の仮想空間内の位置
情報と視線の向き情報とを他の端末に分配することによ
り、複数の利用者が同一の仮想空間を遠隔地において共
有し、仮想空間内に利用者が集合して会話することがで
きる小グループを複数構成する仮想空間共有方法および
この方法を実施する装置に関する。
【０００２】
【従来の技術】従来例を図６を参照して説明する。図６
は仮想空間共有装置を構成する情報処理伝送装置端末音
声ａないしｃと音声ミキサ部Ｍの間を通信網Ｎを介して
接続する接続関係を示す図である。全端末ａないしｃは
コンピュータグラフィック機能を有する情報処理伝送装
置端末として構成され、共通の仮想空間Ｓをそれぞれ表
示する。各端末利用者は自身の意志に基づいて対応する
分身ａないしｃを自由に仮想空間Ｓ内において移動させ
ることができる。各端末の仮想空間Ｓ内には他の利用者
の分身も表示する。仮想空間Ｓに座標軸を設定し、分身
の位置情報と視線の向き情報を各端末のマウス、キーボ
ードその他の入力装置を介して入力して他の端末に伝送
し、分身をその顔の向きを考慮して仮想空間内の該当位
置に移動させる。そして、視線の向き情報についても、
位置情報と同様に、仮想空間に設定した座標上の向きを
マウス、キーボードその他の入力装置を介して入力伝送
することができる。図６において、複数の端末ａないし
ｃ間において音声を相互に伝送する場合、音声ミキサ装
置Ｍを使用するが、この様な技術は音声会議サービス或
はＮＴＴのダイヤルＱ2 サービスの如き種々の電話サー
ビスに広く採用されている。音声ミキサ部Ｍを中心にし
て各端末ａないしｃを通信網Ｎを介してスター接続し、
各端末ａないしｃは自身の音声を音声ミキサ部Ｍに送信
し、音声ミキサ部Ｍは各端末ａないしｃから受信した音
声をミキシングして各端末ａないしｃに分配する。一般
に、音声ミキサ部Ｍは複数の音声ミキサより成り、複数
の音声会話を個々の音声ミキサにより同時並列的に実施
することができる。
は仮想空間共有装置を構成する情報処理伝送装置端末音
声ａないしｃと音声ミキサ部Ｍの間を通信網Ｎを介して
接続する接続関係を示す図である。全端末ａないしｃは
コンピュータグラフィック機能を有する情報処理伝送装
置端末として構成され、共通の仮想空間Ｓをそれぞれ表
示する。各端末利用者は自身の意志に基づいて対応する
分身ａないしｃを自由に仮想空間Ｓ内において移動させ
ることができる。各端末の仮想空間Ｓ内には他の利用者
の分身も表示する。仮想空間Ｓに座標軸を設定し、分身
の位置情報と視線の向き情報を各端末のマウス、キーボ
ードその他の入力装置を介して入力して他の端末に伝送
し、分身をその顔の向きを考慮して仮想空間内の該当位
置に移動させる。そして、視線の向き情報についても、
位置情報と同様に、仮想空間に設定した座標上の向きを
マウス、キーボードその他の入力装置を介して入力伝送
することができる。図６において、複数の端末ａないし
ｃ間において音声を相互に伝送する場合、音声ミキサ装
置Ｍを使用するが、この様な技術は音声会議サービス或
はＮＴＴのダイヤルＱ2 サービスの如き種々の電話サー
ビスに広く採用されている。音声ミキサ部Ｍを中心にし
て各端末ａないしｃを通信網Ｎを介してスター接続し、
各端末ａないしｃは自身の音声を音声ミキサ部Ｍに送信
し、音声ミキサ部Ｍは各端末ａないしｃから受信した音
声をミキシングして各端末ａないしｃに分配する。一般
に、音声ミキサ部Ｍは複数の音声ミキサより成り、複数
の音声会話を個々の音声ミキサにより同時並列的に実施
することができる。
【０００３】ここで、この発明の先行例を図７および図
８を参照して説明するに、仮想空間Ｓには、端末ａ、
ｂ、ｃ、ｄ、ｅ、ｆおよびｇの利用者それぞれに対応す
る７人の分身が存在する。７人の分身ａないしｇは、仮
想空間Ｓが提供する各種のサービスを受けている場合、
これら７人の分身の発生する音は、音声ミキサ部Ｍ内に
おいて図７に示される如く通話路接続切り換え部１６に
より双方向接続されている。この接続により、各分身ａ
ないしｇは他の分身の発生する咳その他の音および空間
内にバックグラウンドミュージックが流れていればこの
音を聞くことができる。この様にして、各分身ａないし
ｇは他の分身の存在を現実の世界と同様に感じ取ること
ができる。７人の利用者それぞれの端末ａ、ｂ、ｃ、
ｄ、ｅ、ｆおよびｇは同一の仮想空間内におり、端末ａ
および端末ｂに対応する２人の利用者は相互に接近して
共通する音声ミキサＡに接続し、端末ｃと端末ｄと端末
ｅに対応する３人の利用者は相互に接近して共通する音
声ミキサＢに接続し、それぞれ独立に会話している。通
話路接続切り換え部１６は、端末ａ、ｂ、ｃ、ｄ、ｅ、
ｆおよびｇの全てについて、これらから伝送される音声
を音声ミキサＣに対して片方向通話路接続する構成を有
している。片方向通話路接続されて伝送された全ての端
末ａないしｇの発生する音および音声をミキシングした
音は、誰とも会話していない利用者に対応する端末ｆお
よび端末ｇに伝送される。
８を参照して説明するに、仮想空間Ｓには、端末ａ、
ｂ、ｃ、ｄ、ｅ、ｆおよびｇの利用者それぞれに対応す
る７人の分身が存在する。７人の分身ａないしｇは、仮
想空間Ｓが提供する各種のサービスを受けている場合、
これら７人の分身の発生する音は、音声ミキサ部Ｍ内に
おいて図７に示される如く通話路接続切り換え部１６に
より双方向接続されている。この接続により、各分身ａ
ないしｇは他の分身の発生する咳その他の音および空間
内にバックグラウンドミュージックが流れていればこの
音を聞くことができる。この様にして、各分身ａないし
ｇは他の分身の存在を現実の世界と同様に感じ取ること
ができる。７人の利用者それぞれの端末ａ、ｂ、ｃ、
ｄ、ｅ、ｆおよびｇは同一の仮想空間内におり、端末ａ
および端末ｂに対応する２人の利用者は相互に接近して
共通する音声ミキサＡに接続し、端末ｃと端末ｄと端末
ｅに対応する３人の利用者は相互に接近して共通する音
声ミキサＢに接続し、それぞれ独立に会話している。通
話路接続切り換え部１６は、端末ａ、ｂ、ｃ、ｄ、ｅ、
ｆおよびｇの全てについて、これらから伝送される音声
を音声ミキサＣに対して片方向通話路接続する構成を有
している。片方向通話路接続されて伝送された全ての端
末ａないしｇの発生する音および音声をミキシングした
音は、誰とも会話していない利用者に対応する端末ｆお
よび端末ｇに伝送される。
【０００４】この様にして、端末ｆおよび端末ｇに対応
する利用者は、同一仮想空間にいる利用者全員の音およ
び音声を環境音として聞くことができる。一方、通話路
接続切り換え部１６は、端末ａおよび端末ｂから伝送さ
れる音声を音声ミキサＡに双方向通話路接続すると共
に、更に音声ミキサＣから伝送されるミキシング音は損
失挿入部１９Ａを介し音圧レベルを低下して音声ミキサ
Ａに片方向通話路接続する。結局、端末ａおよび端末ｂ
に対応する利用者は電話の様に双方向の会話をしなが
ら、上述のミキシング音の音圧レベルを低下せしめた音
を環境音として聴取することができる。端末ｃと端末ｄ
と端末ｅについても、同様に接続することにより、双方
向の会話をしながら上述のミキシング音の音圧レベルを
低下せしめた音を環境音として聴取することができる
（以上の先行例の詳細は当該特許出願人の出願に係わる
特願平６−３２５８５８号明細書参照）。
する利用者は、同一仮想空間にいる利用者全員の音およ
び音声を環境音として聞くことができる。一方、通話路
接続切り換え部１６は、端末ａおよび端末ｂから伝送さ
れる音声を音声ミキサＡに双方向通話路接続すると共
に、更に音声ミキサＣから伝送されるミキシング音は損
失挿入部１９Ａを介し音圧レベルを低下して音声ミキサ
Ａに片方向通話路接続する。結局、端末ａおよび端末ｂ
に対応する利用者は電話の様に双方向の会話をしなが
ら、上述のミキシング音の音圧レベルを低下せしめた音
を環境音として聴取することができる。端末ｃと端末ｄ
と端末ｅについても、同様に接続することにより、双方
向の会話をしながら上述のミキシング音の音圧レベルを
低下せしめた音を環境音として聴取することができる
（以上の先行例の詳細は当該特許出願人の出願に係わる
特願平６−３２５８５８号明細書参照）。
【０００５】
【発明が解決しようとする課題】以上の通りの仮想空間
共有装置において、例えば端末ｆの利用者は、端末のマ
ウス、キーボードその他の入力装置を操作して分身ｆの
位置情報と視線の向き情報を仮想空間共有装置および他
の端末に伝送して、分身ｆを端末ａの分身ａおよび端末
ｂの分身ｂに接近せしめ、端末ａおよび端末ｂに共通す
る音声ミキサＡに端末ｆを接続することにより、端末
ａ、ｂに端末ｆを会話の仲間入りさせることができる。
仮想空間共有装置は、この様に、利用者間の距離の遠近
および／或は視線の一致度に応じて利用者の音声を音声
ミキサに接続し、或は他の音声ミキサに接続変えしたり
して利用者を仮想空間内において移動させるのである
が、これに際して、利用者同志が接近して会話が成立し
ているか否かを判定し、或は何れの利用者同志が接近し
て共通する音声ミキサに接続しているのかを判定するこ
とが行なわれる。この判定の仕方および判定の結果は、
音声に寸断を生ずることなしに自動的に音声がつなが
り、現実に近い環境を仮想空間内に実現する上において
重要な意味を持つ。
共有装置において、例えば端末ｆの利用者は、端末のマ
ウス、キーボードその他の入力装置を操作して分身ｆの
位置情報と視線の向き情報を仮想空間共有装置および他
の端末に伝送して、分身ｆを端末ａの分身ａおよび端末
ｂの分身ｂに接近せしめ、端末ａおよび端末ｂに共通す
る音声ミキサＡに端末ｆを接続することにより、端末
ａ、ｂに端末ｆを会話の仲間入りさせることができる。
仮想空間共有装置は、この様に、利用者間の距離の遠近
および／或は視線の一致度に応じて利用者の音声を音声
ミキサに接続し、或は他の音声ミキサに接続変えしたり
して利用者を仮想空間内において移動させるのである
が、これに際して、利用者同志が接近して会話が成立し
ているか否かを判定し、或は何れの利用者同志が接近し
て共通する音声ミキサに接続しているのかを判定するこ
とが行なわれる。この判定の仕方および判定の結果は、
音声に寸断を生ずることなしに自動的に音声がつなが
り、現実に近い環境を仮想空間内に実現する上において
重要な意味を持つ。
【０００６】この発明は、この判定を利用者間の距離お
よび／或は視線の一致度に着目して実施するものであ
り、利用者間の距離の遠近および／或は視線の一致度に
応じて利用者の音声を音声ミキサに接続し、或は他の音
声ミキサに接続変えしたりすることにより利用者は仮想
空間内を移動しながら、会話したい相手に近寄るだけで
音声に寸断を生ずることなしに自動的に音声がつなが
り、現実に近い環境を仮想空間内に実現することができ
る仮想空間共有方法およびこの方法を実施する装置を提
供するものである。
よび／或は視線の一致度に着目して実施するものであ
り、利用者間の距離の遠近および／或は視線の一致度に
応じて利用者の音声を音声ミキサに接続し、或は他の音
声ミキサに接続変えしたりすることにより利用者は仮想
空間内を移動しながら、会話したい相手に近寄るだけで
音声に寸断を生ずることなしに自動的に音声がつなが
り、現実に近い環境を仮想空間内に実現することができ
る仮想空間共有方法およびこの方法を実施する装置を提
供するものである。
【０００７】
【課題を解決するための手段】利用者が自分の意志で自
由に移動することができる３次元仮想空間Ｓを表現する
と共に仮想空間内に他の利用者の分身をも表現すること
ができる端末を複数台通信網Ｎを介して接続し、利用者
の音声と利用者の仮想空間内の分身の位置情報と視線の
向き情報とを他の端末に分配し、複数の音声ミキサおよ
び複数の音声ミキサを音声回線に接続する音声スイッチ
ＳＷより成る音声ミキサ部１８を使用して複数の利用者
が同一の仮想空間を遠隔地において共有する仮想空間共
有方法において、利用者の分身の仮想空間における分身
間の距離が或る閾値より小さい場合に両者の音声を同一
の音声ミキサに接続する仮想空間共有方法を構成した。
由に移動することができる３次元仮想空間Ｓを表現する
と共に仮想空間内に他の利用者の分身をも表現すること
ができる端末を複数台通信網Ｎを介して接続し、利用者
の音声と利用者の仮想空間内の分身の位置情報と視線の
向き情報とを他の端末に分配し、複数の音声ミキサおよ
び複数の音声ミキサを音声回線に接続する音声スイッチ
ＳＷより成る音声ミキサ部１８を使用して複数の利用者
が同一の仮想空間を遠隔地において共有する仮想空間共
有方法において、利用者の分身の仮想空間における分身
間の距離が或る閾値より小さい場合に両者の音声を同一
の音声ミキサに接続する仮想空間共有方法を構成した。
【０００８】そして、利用者が自分の意志で自由に移動
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有方法に
おいて、利用者の分身の仮想空間における分身間の視野
の重なりを検出して両者の音声を同一の音声ミキサに接
続する仮想空間共有方法を構成した。
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有方法に
おいて、利用者の分身の仮想空間における分身間の視野
の重なりを検出して両者の音声を同一の音声ミキサに接
続する仮想空間共有方法を構成した。
【０００９】また、利用者が自分の意志で自由に移動す
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有方法にお
いて、利用者の分身の仮想空間における分身間の距離が
或る閾値より小さく、利用者の分身の仮想空間における
分身間の視野の重なりを検出した場合に両者の音声を同
一の音声ミキサに接続する仮想空間共有方法を構成し
た。
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有方法にお
いて、利用者の分身の仮想空間における分身間の距離が
或る閾値より小さく、利用者の分身の仮想空間における
分身間の視野の重なりを検出した場合に両者の音声を同
一の音声ミキサに接続する仮想空間共有方法を構成し
た。
【００１０】ここで、利用者が自分の意志で自由に移動
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置１
０において、利用者の分身の仮想空間における位置座標
に基づいて分身間の距離を計算する距離判定部１５を具
備し、距離判定部１５の計算結果を入力して第１の利用
者の分身と第２の利用者の分身との間の仮想空間におけ
る距離が或る閾値より小さい場合に第１の利用者の音声
と第２の利用者の音声を同一の音声ミキサに接続する指
示を音声ミキサ部１８に与えるミキシング対象決定部１
７を具備する仮想空間共有装置を構成した。
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置１
０において、利用者の分身の仮想空間における位置座標
に基づいて分身間の距離を計算する距離判定部１５を具
備し、距離判定部１５の計算結果を入力して第１の利用
者の分身と第２の利用者の分身との間の仮想空間におけ
る距離が或る閾値より小さい場合に第１の利用者の音声
と第２の利用者の音声を同一の音声ミキサに接続する指
示を音声ミキサ部１８に与えるミキシング対象決定部１
７を具備する仮想空間共有装置を構成した。
【００１１】そして、利用者が自分の意志で自由に移動
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置に
おいて、利用者の分身の仮想空間における視線の向き情
報に基づいて利用者間の視野の重なりｗの有無を計算す
る視野一致度判定部１６を具備し、視野一致度判定部１
６の計算結果を入力して第１の利用者と第２の利用者の
視野の重なりを検出して第１の利用者の音声と第２の利
用者の音声を同一の音声ミキサに接続する指示を音声ミ
キサ部１８に与えるミキシング対象決定部１７を具備す
る仮想空間共有装置を構成した。
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置に
おいて、利用者の分身の仮想空間における視線の向き情
報に基づいて利用者間の視野の重なりｗの有無を計算す
る視野一致度判定部１６を具備し、視野一致度判定部１
６の計算結果を入力して第１の利用者と第２の利用者の
視野の重なりを検出して第１の利用者の音声と第２の利
用者の音声を同一の音声ミキサに接続する指示を音声ミ
キサ部１８に与えるミキシング対象決定部１７を具備す
る仮想空間共有装置を構成した。
【００１２】また、利用者が自分の意志で自由に移動す
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有装置にお
いて、利用者の分身の仮想空間における位置座標に基づ
いて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部１６を具備し、距離判定部１５の計算結果を入力して
第１の利用者の分身と第２の利用者の分身との間の仮想
空間における距離が或る閾値より小さいか、或は視野一
致度判定部１６の計算結果を入力して第１の利用者と第
２の利用者の何れかが他方の視野に存在する場合に、第
１の利用者の音声と第２の利用者の音声を同一の音声ミ
キサに接続する指示を音声ミキサ部１８に与えるミキシ
ング対象決定部１７を具備する仮想空間共有装置を構成
した。
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有装置にお
いて、利用者の分身の仮想空間における位置座標に基づ
いて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部１６を具備し、距離判定部１５の計算結果を入力して
第１の利用者の分身と第２の利用者の分身との間の仮想
空間における距離が或る閾値より小さいか、或は視野一
致度判定部１６の計算結果を入力して第１の利用者と第
２の利用者の何れかが他方の視野に存在する場合に、第
１の利用者の音声と第２の利用者の音声を同一の音声ミ
キサに接続する指示を音声ミキサ部１８に与えるミキシ
ング対象決定部１７を具備する仮想空間共有装置を構成
した。
【００１３】更に、利用者が自分の意志で自由に移動す
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有装置にお
いて、利用者の分身の仮想空間における位置座標に基づ
いて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部１６を具備し、距離判定部１５から供給される距離ｄ
BAと重なりｗの値の積を演算処理する回路を有して、分
身ａと分身ｂとが閾値Ｌ内にあることを意味する値１と
なる条件を満足すると共に、分身ａおよび分身ｂの少な
くとも一方が相手の視野に存在することを意味するθ1
＝１或はθ2 ＝１となる条件を満足する利用者を同じ音
声ミキサに接続する様に音声ミキサ部１８に指示する演
算処理するミキシング対象決定部１７を具備する仮想空
間共有装置を構成した。
ることができる３次元仮想空間Ｓを表現すると共に仮想
空間内に他の利用者の分身をも表現することができる端
末を複数台通信網Ｎを介して接続し、利用者の音声と利
用者の仮想空間内の分身の位置情報と視線の向き情報と
を他の端末に分配し、複数の音声ミキサおよび複数の音
声ミキサを音声回線に接続する音声スイッチＳＷより成
る音声ミキサ部１８を使用して複数の利用者が同一の仮
想空間を遠隔地において共有する仮想空間共有装置にお
いて、利用者の分身の仮想空間における位置座標に基づ
いて分身間の距離を計算する距離判定部１５を具備し、
利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部１６を具備し、距離判定部１５から供給される距離ｄ
BAと重なりｗの値の積を演算処理する回路を有して、分
身ａと分身ｂとが閾値Ｌ内にあることを意味する値１と
なる条件を満足すると共に、分身ａおよび分身ｂの少な
くとも一方が相手の視野に存在することを意味するθ1
＝１或はθ2 ＝１となる条件を満足する利用者を同じ音
声ミキサに接続する様に音声ミキサ部１８に指示する演
算処理するミキシング対象決定部１７を具備する仮想空
間共有装置を構成した。
【００１４】そして、利用者が自分の意志で自由に移動
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置に
おいて、利用者の分身の仮想空間における位置座標に基
づいて分身間の距離を計算する距離判定部１５を具備
し、利用者の分身の仮想空間における視線の向き情報に
基づいて利用者間の視野の重なりを計算する視野一致度
判定部１６を具備し、距離判定部１５から供給される距
離ｄBAと視野一致度判定部１６から供給される重なりｗ
の値の積を演算処理する回路を有して、分身ａと分身ｂ
とが閾値Ｌ内にあることを意味する値１となる条件を満
足すると共に、分身ａおよび分身ｂが両者共に相手の視
野に存在することを意味するθ1 ＝１およびθ2 ＝１と
なる条件を満足する利用者を同じ音声ミキサに接続する
様に音声ミキサ部１８に指示するミキシング対象決定部
１７を具備する仮想空間共有装置を構成した。
することができる３次元仮想空間Ｓを表現すると共に仮
想空間内に他の利用者の分身をも表現することができる
端末を複数台通信網Ｎを介して接続し、利用者の音声と
利用者の仮想空間内の分身の位置情報と視線の向き情報
とを他の端末に分配し、複数の音声ミキサおよび複数の
音声ミキサを音声回線に接続する音声スイッチＳＷより
成る音声ミキサ部１８を使用して複数の利用者が同一の
仮想空間を遠隔地において共有する仮想空間共有装置に
おいて、利用者の分身の仮想空間における位置座標に基
づいて分身間の距離を計算する距離判定部１５を具備
し、利用者の分身の仮想空間における視線の向き情報に
基づいて利用者間の視野の重なりを計算する視野一致度
判定部１６を具備し、距離判定部１５から供給される距
離ｄBAと視野一致度判定部１６から供給される重なりｗ
の値の積を演算処理する回路を有して、分身ａと分身ｂ
とが閾値Ｌ内にあることを意味する値１となる条件を満
足すると共に、分身ａおよび分身ｂが両者共に相手の視
野に存在することを意味するθ1 ＝１およびθ2 ＝１と
なる条件を満足する利用者を同じ音声ミキサに接続する
様に音声ミキサ部１８に指示するミキシング対象決定部
１７を具備する仮想空間共有装置を構成した。
【００１５】
【発明の実施の形態】この発明の実施の形態を図１を参
照して説明する。図１の実施例は集中接続方法を採用し
ているが、分散接続方法を採用しても原理は同一であ
る。簡単のために、仮想空間共有装置は３台の端末を収
容するものとして説明する。仮想空間共有装置１０と利
用者端末との間は、高度情報通信システムＩＮＳ６４、
回線３４、回線３５、回線３６を介して音声、位置情報
および視線の向き情報の送受信を行なっている。先ず、
回線３４、回線３５、回線３６を介して受信したデータ
はそれぞれ回線インタフェース部１１、回線インタフェ
ース部１２、回線インタフェース部１３に入力される。
これら回線インタフェース部は、受信したデータを解析
し、これが音声であれば、内部バス１９、内部バス２
３、内部バス２７を介して音声ミキサ部１８へ転送す
る。これら回線インタフェース部は受信したデータが位
置情報と視線の向き情報であれば、内部バス２１、内部
バス２５、内部バス２９を介して位置情報と視線の向き
情報を位置情報分配部１４、距離判定部１５、視野一致
度判定部１６へ転送する。
照して説明する。図１の実施例は集中接続方法を採用し
ているが、分散接続方法を採用しても原理は同一であ
る。簡単のために、仮想空間共有装置は３台の端末を収
容するものとして説明する。仮想空間共有装置１０と利
用者端末との間は、高度情報通信システムＩＮＳ６４、
回線３４、回線３５、回線３６を介して音声、位置情報
および視線の向き情報の送受信を行なっている。先ず、
回線３４、回線３５、回線３６を介して受信したデータ
はそれぞれ回線インタフェース部１１、回線インタフェ
ース部１２、回線インタフェース部１３に入力される。
これら回線インタフェース部は、受信したデータを解析
し、これが音声であれば、内部バス１９、内部バス２
３、内部バス２７を介して音声ミキサ部１８へ転送す
る。これら回線インタフェース部は受信したデータが位
置情報と視線の向き情報であれば、内部バス２１、内部
バス２５、内部バス２９を介して位置情報と視線の向き
情報を位置情報分配部１４、距離判定部１５、視野一致
度判定部１６へ転送する。
【００１６】位置情報分配部１４は内部バス２１から入
力した位置情報と視線の向き情報をコピーして内部バス
２６、内部バス３０を介して回線インタフェース部１
２、回線インタフェース部１３へ転送する。そして、位
置情報分配部１４は内部バス２５から入力した位置情報
と視線の向き情報をコピーして内部バス２２、内部バス
３０を介して回線インタフェース部１１、回線インタフ
ェース部１３へ転送する。また、位置情報分配部１４は
内部バス２９から受けた位置情報と視線の向き情報をコ
ピーして内部バス２２、内部バス２６を介して回線イン
タフェース部１１、回線インタフェース部１２へ転送す
る。
力した位置情報と視線の向き情報をコピーして内部バス
２６、内部バス３０を介して回線インタフェース部１
２、回線インタフェース部１３へ転送する。そして、位
置情報分配部１４は内部バス２５から入力した位置情報
と視線の向き情報をコピーして内部バス２２、内部バス
３０を介して回線インタフェース部１１、回線インタフ
ェース部１３へ転送する。また、位置情報分配部１４は
内部バス２９から受けた位置情報と視線の向き情報をコ
ピーして内部バス２２、内部バス２６を介して回線イン
タフェース部１１、回線インタフェース部１２へ転送す
る。
【００１７】ここで、距離判定部１５および視野一致度
判定部１６を図２および図３を参照して簡単に説明す
る。上述した通り、仮想空間Ｓに座標軸を設定し、分身
の位置座標情報と視線の向き情報を各端末のマウス、キ
ーボードその他の入力装置を介して入力して仮想空間共
有装置に伝送し、他の端末にも伝送する。この様にして
分身をその顔の向きを考慮して仮想空間内の該当位置に
移動させる。視線の向き情報についても、位置座標情報
と同様に、仮想空間に設定した座標上の向きをマウス、
キーボードその他の入力装置を介して入力伝送する。端
末ａの分身の位置座標を（Ａx、Ａy）とし、端末ｂの分
身の位置座標を（Ｂx、Ｂy）とする。端末ａの分身の視
線の向き情報を（ａx、ａy）、端末ｂの分身の視線の向
き情報を（ｂx、ｂy）とする。なお、視線の向き情報は
単位ベクトルとする。
判定部１６を図２および図３を参照して簡単に説明す
る。上述した通り、仮想空間Ｓに座標軸を設定し、分身
の位置座標情報と視線の向き情報を各端末のマウス、キ
ーボードその他の入力装置を介して入力して仮想空間共
有装置に伝送し、他の端末にも伝送する。この様にして
分身をその顔の向きを考慮して仮想空間内の該当位置に
移動させる。視線の向き情報についても、位置座標情報
と同様に、仮想空間に設定した座標上の向きをマウス、
キーボードその他の入力装置を介して入力伝送する。端
末ａの分身の位置座標を（Ａx、Ａy）とし、端末ｂの分
身の位置座標を（Ｂx、Ｂy）とする。端末ａの分身の視
線の向き情報を（ａx、ａy）、端末ｂの分身の視線の向
き情報を（ｂx、ｂy）とする。なお、視線の向き情報は
単位ベクトルとする。
【００１８】分身ａと分身ｂとの間の距離の計算は、内
部バス２１、内部バス２５、内部バス２９を介して距離
計算部１５1 に入力した位置座標（Ａx、Ａy）および
（Ｂx、Ｂy）に基づいて、 ｄBA＝√｛（Ｂx−Ａx）2＋（Ｂy−Ａy）2｝ （１） により求めることができる。この距離ｄBAは比較部１５
2 において予め決められた閾値Ｌと比較され、０＜ｄBA
≦ＬであるならｄBAに値１を与え、ｄBA＜ＬならｄBAに
値０を与え、値０或は値１を内部バス３１を介してミキ
シング対象決定部１７へ転送する。ミキシング対象決定
部１７は距離ｄBAが値１である場合、これを演算処理し
て視線の向きに無関係に両利用者の音声をミキシングす
る指示を内部バス３１を介して音声ミキサ部１８に与え
る。
部バス２１、内部バス２５、内部バス２９を介して距離
計算部１５1 に入力した位置座標（Ａx、Ａy）および
（Ｂx、Ｂy）に基づいて、 ｄBA＝√｛（Ｂx−Ａx）2＋（Ｂy−Ａy）2｝ （１） により求めることができる。この距離ｄBAは比較部１５
2 において予め決められた閾値Ｌと比較され、０＜ｄBA
≦ＬであるならｄBAに値１を与え、ｄBA＜ＬならｄBAに
値０を与え、値０或は値１を内部バス３１を介してミキ
シング対象決定部１７へ転送する。ミキシング対象決定
部１７は距離ｄBAが値１である場合、これを演算処理し
て視線の向きに無関係に両利用者の音声をミキシングす
る指示を内部バス３１を介して音声ミキサ部１８に与え
る。
【００１９】この様に、ミキシング対象決定部１７は、
距離ｄBAが値１である場合これを演算処理して視線の向
きに無関係に両利用者の音声をミキシングする指示を内
部バス３１を介して音声ミキサ部１８に与える演算処理
回路であるものをこの発明の実施例とすることができ
る。次に、視野一致度判定部１６は、内部バス２１、内
部バス２５、内部バス２９を介して分身の存在方向計算
部１６1 および分身の存在方向計算部１６2 に入力した
位置座標（Ａx、Ａy）および（Ｂx、Ｂy）、視線の向き
情報（ａx、ａy）および（ｂx、ｂy）、距離計算部１５
1 の計算結果である距離ｄBAに基づいて、利用者間の視
野の重なりｗの有無を計算する。
距離ｄBAが値１である場合これを演算処理して視線の向
きに無関係に両利用者の音声をミキシングする指示を内
部バス３１を介して音声ミキサ部１８に与える演算処理
回路であるものをこの発明の実施例とすることができ
る。次に、視野一致度判定部１６は、内部バス２１、内
部バス２５、内部バス２９を介して分身の存在方向計算
部１６1 および分身の存在方向計算部１６2 に入力した
位置座標（Ａx、Ａy）および（Ｂx、Ｂy）、視線の向き
情報（ａx、ａy）および（ｂx、ｂy）、距離計算部１５
1 の計算結果である距離ｄBAに基づいて、利用者間の視
野の重なりｗの有無を計算する。
【００２０】COSθ1 は、ベクトルａとベクトルＡＢと
の間の内積を計算することにより求めることができる。 ベクトルａ・ベクトルＡＢ＝｜ベクトルａ｜・｜ベクトルＡＢ｜COSθ1 ＝ａx（Ｂx−Ａx）＋ａy（Ｂy−Ａy） ここで、｜ベクトルａ｜は単位ベクトル＝１であり、｜
ベクトルＡＢ｜はＡＢの距離√｛（Ｂx−Ａx）2＋（Ｂy
−Ａy）2｝である。従って、分身ａから視た分身ｂの存
在方向θ1 は、 COSθ1 ＝｛ａx（Ｂx−Ａx）＋ａy（Ｂy−Ａy）｝／√｛（Ｂx−Ａx）2 ＋（Ｂy−Ａy）2｝ （２） である。
の間の内積を計算することにより求めることができる。 ベクトルａ・ベクトルＡＢ＝｜ベクトルａ｜・｜ベクトルＡＢ｜COSθ1 ＝ａx（Ｂx−Ａx）＋ａy（Ｂy−Ａy） ここで、｜ベクトルａ｜は単位ベクトル＝１であり、｜
ベクトルＡＢ｜はＡＢの距離√｛（Ｂx−Ａx）2＋（Ｂy
−Ａy）2｝である。従って、分身ａから視た分身ｂの存
在方向θ1 は、 COSθ1 ＝｛ａx（Ｂx−Ａx）＋ａy（Ｂy−Ａy）｝／√｛（Ｂx−Ａx）2 ＋（Ｂy−Ａy）2｝ （２） である。
【００２１】分身の存在方向計算部１６1 により計算さ
れた存在方向θ1 は比較部１６2 において予め決められ
た閾値αと比較され、０＜θ1 ≦αであるならθ1 に値
１を与え、α＜θ1 ならθ1 に値０を与え、値０或は値
１を論理演算部１６5 に入力する。同様にして、分身ｂ
から視た分身ａの存在方向θ2 は、 COSθ2 ＝｛ｂx（Ａx−Ｂx）＋ｂy（Ａy−Ｂy）｝／√｛（Ｂx−Ａx）2 ＋（Ｂy−Ａy）2｝ （３） により求めることができる。分身の存在方向計算部１６
3 により計算された存在方向θ2 は比較部１６4 におい
て予め決められた視野の閾値αと比較され、０＜θ2 ≦
αであるならθ2 に値１を与え、α＜θ2 ならθ2 に値
０を与え、値０或は値１を論理演算部１６5 に入力す
る。
れた存在方向θ1 は比較部１６2 において予め決められ
た閾値αと比較され、０＜θ1 ≦αであるならθ1 に値
１を与え、α＜θ1 ならθ1 に値０を与え、値０或は値
１を論理演算部１６5 に入力する。同様にして、分身ｂ
から視た分身ａの存在方向θ2 は、 COSθ2 ＝｛ｂx（Ａx−Ｂx）＋ｂy（Ａy−Ｂy）｝／√｛（Ｂx−Ａx）2 ＋（Ｂy−Ａy）2｝ （３） により求めることができる。分身の存在方向計算部１６
3 により計算された存在方向θ2 は比較部１６4 におい
て予め決められた視野の閾値αと比較され、０＜θ2 ≦
αであるならθ2 に値１を与え、α＜θ2 ならθ2 に値
０を与え、値０或は値１を論理演算部１６5 に入力す
る。
【００２２】（１） 分身ａおよび分身ｂの何れも相手
の視野αの外に存在して認識されないことを示すθ1 ＝
０およびθ2 ＝０の場合、論理演算部１６5 は利用者間
の視野の重なりｗとして値０を出力する。 （２） 分身ａおよび分身ｂの内の何れか一方が相手の
視野に存在することを示すθ1 およびθ2 の何れか一方
が１の場合、論理演算部１６5 は視野の重なりｗとして
値１を出力する。
の視野αの外に存在して認識されないことを示すθ1 ＝
０およびθ2 ＝０の場合、論理演算部１６5 は利用者間
の視野の重なりｗとして値０を出力する。 （２） 分身ａおよび分身ｂの内の何れか一方が相手の
視野に存在することを示すθ1 およびθ2 の何れか一方
が１の場合、論理演算部１６5 は視野の重なりｗとして
値１を出力する。
【００２３】（３） 分身ａおよび分身ｂは何れも相手
の視野に存在することを示すθ1 およびθ2 が共に１の
場合、論理演算部１６5 は視野の重なりｗとして値１を
出力する。利用者の視野の重なりｗの出力は、内部バス
３２を介してミキシング対象決定部１７へ転送される。
の視野に存在することを示すθ1 およびθ2 が共に１の
場合、論理演算部１６5 は視野の重なりｗとして値１を
出力する。利用者の視野の重なりｗの出力は、内部バス
３２を介してミキシング対象決定部１７へ転送される。
【００２４】ミキシング対象決定部１７は、分身ａおよ
び分身ｂの少なくとも一方が相手の視野に存在すること
を意味する上述の（２）および（３）の場合、重なりｗ
の値１を演算処理して利用者を同じ音声ミキサに接続す
る様に音声ミキサ部１８に指示する演算処理回路である
ものをこの発明の他の実施例とすることができる。ミキ
シング対象決定部１７は、距離ｄBAが値１である場合こ
れを演算処理して視線の向きに無関係に分身ａおよび分
身ｂの両利用者の音声をミキシングする指示を音声ミキ
サ部１８に与え、或は重なりｗの値１を演算処理して分
身ａおよび分身ｂの両利用者を同じ音声ミキサに接続す
る様に音声ミキサ部１８に指示する演算処理回路である
ものを更に他の実施例とすることができる。
び分身ｂの少なくとも一方が相手の視野に存在すること
を意味する上述の（２）および（３）の場合、重なりｗ
の値１を演算処理して利用者を同じ音声ミキサに接続す
る様に音声ミキサ部１８に指示する演算処理回路である
ものをこの発明の他の実施例とすることができる。ミキ
シング対象決定部１７は、距離ｄBAが値１である場合こ
れを演算処理して視線の向きに無関係に分身ａおよび分
身ｂの両利用者の音声をミキシングする指示を音声ミキ
サ部１８に与え、或は重なりｗの値１を演算処理して分
身ａおよび分身ｂの両利用者を同じ音声ミキサに接続す
る様に音声ミキサ部１８に指示する演算処理回路である
ものを更に他の実施例とすることができる。
【００２５】ミキシング対象決定部１７は、距離判定部
１５から供給される距離ｄBAと重なりｗの値の積を演算
処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内に
あることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂの少なくとも一方が相手の視野に存
在することを意味するθ1 ＝１或はθ2 ＝１となる条件
を満足する利用者を同じ音声ミキサに接続する様に音声
ミキサ部１８に指示する演算処理回路であるものをこの
発明の実施例とすることができる。
１５から供給される距離ｄBAと重なりｗの値の積を演算
処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内に
あることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂの少なくとも一方が相手の視野に存
在することを意味するθ1 ＝１或はθ2 ＝１となる条件
を満足する利用者を同じ音声ミキサに接続する様に音声
ミキサ部１８に指示する演算処理回路であるものをこの
発明の実施例とすることができる。
【００２６】ミキシング対象決定部１７は、距離判定部
１５から供給される距離ｄBAと重なりｗの値の積を演算
処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内に
あることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂが両者共に相手の視野に存在するこ
とを意味するθ1 ＝１およびθ2 ＝１となる条件を満足
する利用者を同じ音声ミキサに接続する様に音声ミキサ
部１８に指示する演算処理回路であるものをこの発明の
他の実施例とすることができる。この場合、θ 1 ＝１お
よびθ2 ＝１となる条件を満足するか否かを判定する
に、論理演算部１６5 には、比較部１６1 の比較結果と
比較部１６2 の比較結果を積算する積算回路を具備す
る。
１５から供給される距離ｄBAと重なりｗの値の積を演算
処理する回路を有して、分身ａと分身ｂとが閾値Ｌ内に
あることを意味する値１となる条件を満足すると共に、
分身ａおよび分身ｂが両者共に相手の視野に存在するこ
とを意味するθ1 ＝１およびθ2 ＝１となる条件を満足
する利用者を同じ音声ミキサに接続する様に音声ミキサ
部１８に指示する演算処理回路であるものをこの発明の
他の実施例とすることができる。この場合、θ 1 ＝１お
よびθ2 ＝１となる条件を満足するか否かを判定する
に、論理演算部１６5 には、比較部１６1 の比較結果と
比較部１６2 の比較結果を積算する積算回路を具備す
る。
【００２７】以上の通りのミキシング対象決定部１７の
指示に従って音声ミキサ部１８は、内部バス２３および
内部バス２７から入力した音声の内の、回線インタフェ
ース部１１が収容する利用者の音声と同一音声ミキサに
接続する音声を選択してミキシングし、内部バス２０を
介して回線インタフェース部１１へ転送する。そして内
部バス１９および内部バス２７から入力した音声の内
の、回線インタフェース部１２が収容する利用者の音声
と同一音声ミキサに接続する音声を選択してミキシング
し、内部バス２４を介して回線インタフェース部１２へ
転送する。また、内部バス１９および内部バス２３から
入力した音声の内の、回線インタフェース部１３が収容
する利用者の音声と同一音声ミキサに接続する音声を選
択してミキシングし、内部バス２８を介して回線インタ
フェース部１３へ転送する。
指示に従って音声ミキサ部１８は、内部バス２３および
内部バス２７から入力した音声の内の、回線インタフェ
ース部１１が収容する利用者の音声と同一音声ミキサに
接続する音声を選択してミキシングし、内部バス２０を
介して回線インタフェース部１１へ転送する。そして内
部バス１９および内部バス２７から入力した音声の内
の、回線インタフェース部１２が収容する利用者の音声
と同一音声ミキサに接続する音声を選択してミキシング
し、内部バス２４を介して回線インタフェース部１２へ
転送する。また、内部バス１９および内部バス２３から
入力した音声の内の、回線インタフェース部１３が収容
する利用者の音声と同一音声ミキサに接続する音声を選
択してミキシングし、内部バス２８を介して回線インタ
フェース部１３へ転送する。
【００２８】回線インタフェース部１１、回線インタフ
ェース部１２、回線インタフェース部１３は、それぞ
れ、内部バス２２、内部バス２６、内部バス３０から入
力した位置情報と視線の向き情報と、内部バス２０、内
部バス２４、内部バス２８から入力した音声を回線３
４、回線３５、回線３６へ送出する。図４および図５は
仮想空間Ｓ内における分身ａないし分身ｃ間の位置関
係、分身相互の視野の重なりを説明する図である。
ェース部１２、回線インタフェース部１３は、それぞ
れ、内部バス２２、内部バス２６、内部バス３０から入
力した位置情報と視線の向き情報と、内部バス２０、内
部バス２４、内部バス２８から入力した音声を回線３
４、回線３５、回線３６へ送出する。図４および図５は
仮想空間Ｓ内における分身ａないし分身ｃ間の位置関
係、分身相互の視野の重なりを説明する図である。
【００２９】図４（ａ）は、分身ａと分身ｂとが仮想空
間Ｓ内において予め決められている距離の閾値より離れ
ているところを示す図である。この場合、分身ａと分身
ｂの音声はミキシングしない。図４（ｂ）は、分身ａと
分身ｂとが距離の閾値以内に接近しているところを示す
図である。この様に、分身ａと分身ｂとの間の距離が閾
値以内である場合、視線の向きに無関係に分身ａと分身
ｂの音声をミキシングする。
間Ｓ内において予め決められている距離の閾値より離れ
ているところを示す図である。この場合、分身ａと分身
ｂの音声はミキシングしない。図４（ｂ）は、分身ａと
分身ｂとが距離の閾値以内に接近しているところを示す
図である。この様に、分身ａと分身ｂとの間の距離が閾
値以内である場合、視線の向きに無関係に分身ａと分身
ｂの音声をミキシングする。
【００３０】図４（ｃ）は、分身ａと分身ｂとの間の距
離が閾値より小さく、分身ａおよび分身ｂの両者が相手
の視野内にあるところを示す図である。この様に、距離
および分身の視線の向きを考慮し、両者間の距離が閾値
より小さく、両者が相手の視野内にある場合、分身ａと
分身ｂの音声をミキシングする。そして、視野のみが一
致している場合も、分身ａと分身ｂの音声をミキシング
する。
離が閾値より小さく、分身ａおよび分身ｂの両者が相手
の視野内にあるところを示す図である。この様に、距離
および分身の視線の向きを考慮し、両者間の距離が閾値
より小さく、両者が相手の視野内にある場合、分身ａと
分身ｂの音声をミキシングする。そして、視野のみが一
致している場合も、分身ａと分身ｂの音声をミキシング
する。
【００３１】ここで、図４（ｄ）は、分身ｂは分身ａの
視野にあるが、分身ａは分身ｂの視野にはない場合を示
し、両者の視野が一致していないので分身ａと分身ｂの
音声はミキシングしない。以下の例は、分身ａと分身ｂ
が同一の音声ミキサに既に接続されている場合に、分身
ｃが接近する例を示す図である。
視野にあるが、分身ａは分身ｂの視野にはない場合を示
し、両者の視野が一致していないので分身ａと分身ｂの
音声はミキシングしない。以下の例は、分身ａと分身ｂ
が同一の音声ミキサに既に接続されている場合に、分身
ｃが接近する例を示す図である。
【００３２】図４（ｅ）は、分身ｃと分身ａとの間の距
離が閾値より小さい場合は、分身ｃの視線の向きに無関
係に分身ｃの音声を分身ａの音声ミキサおよび分身ｂの
音声ミキサに追加する例を示す。図５（ｆ）は、分身ｂ
の視野は分身ｃの視野と一致していて分身ｃを認識する
ことができるので、分身ｃを分身ａおよび分身ｂの音声
ミキサに追加する。
離が閾値より小さい場合は、分身ｃの視線の向きに無関
係に分身ｃの音声を分身ａの音声ミキサおよび分身ｂの
音声ミキサに追加する例を示す。図５（ｆ）は、分身ｂ
の視野は分身ｃの視野と一致していて分身ｃを認識する
ことができるので、分身ｃを分身ａおよび分身ｂの音声
ミキサに追加する。
【００３３】図５（ｇ）は、分身ｃは、分身ａの視野お
よび分身ｂの視野の何れとも一致しておらず、分身ａお
よび分身ｂの何れによっても認識されないが、分身ｃと
分身ａとの間の距離が閾値より小さい場合は、分身ｃの
音声を分身ａおよび分身ｂの音声ミキサに追加する。図
５（ｈ）は、分身ｃは分身ａの視野内にあるが、分身ｂ
の視野内にはない場合を示し、図４（ｅ）の場合に等し
いので、分身ｃの視線の向きに無関係に分身ｃの音声を
分身ａの音声ミキサと分身ｂの音声ミキサに追加する。
よび分身ｂの視野の何れとも一致しておらず、分身ａお
よび分身ｂの何れによっても認識されないが、分身ｃと
分身ａとの間の距離が閾値より小さい場合は、分身ｃの
音声を分身ａおよび分身ｂの音声ミキサに追加する。図
５（ｈ）は、分身ｃは分身ａの視野内にあるが、分身ｂ
の視野内にはない場合を示し、図４（ｅ）の場合に等し
いので、分身ｃの視線の向きに無関係に分身ｃの音声を
分身ａの音声ミキサと分身ｂの音声ミキサに追加する。
【００３４】以上の通り、この発明は、複数の利用者が
共有する３次元仮想空間を対象にしており、仮想空間共
有装置が音声ミキサ機能を有する。各利用者は自分の意
志で自由に仮想空間内を移動するので、利用者自身と他
の利用者との間の位置関係、顔の向きは常時変化する。
この位置情報および視線の向き情報を利用して利用者間
の距離の遠近、視線の一致度に応じて利用者の音声を音
声ミキサに接続したり他の音声ミキサに接続変えしたり
することにより、利用者は仮想空間内を移動しながら会
話したい相手に近寄るだけで音声の中断を生ずることな
しに自動的に音声がつながり、現実に近い環境を仮想空
間内に実現することができる。
共有する３次元仮想空間を対象にしており、仮想空間共
有装置が音声ミキサ機能を有する。各利用者は自分の意
志で自由に仮想空間内を移動するので、利用者自身と他
の利用者との間の位置関係、顔の向きは常時変化する。
この位置情報および視線の向き情報を利用して利用者間
の距離の遠近、視線の一致度に応じて利用者の音声を音
声ミキサに接続したり他の音声ミキサに接続変えしたり
することにより、利用者は仮想空間内を移動しながら会
話したい相手に近寄るだけで音声の中断を生ずることな
しに自動的に音声がつながり、現実に近い環境を仮想空
間内に実現することができる。
【００３５】
【発明の効果】以上の通りであって、この発明によれ
ば、仮想空間共有方法およびこの方法を実施する装置に
おいて、他の装置から受信する利用者の音声をミキシン
グするに際して、音声と共に受信する各利用者の分身の
位置情報と視線の向き情報を利用して使用者間の距離の
遠近、視野の一致度に応じて利用者の音声を音声ミキサ
に接続し、或は別の音声ミキサに接続変えすることによ
り、利用者は仮想空間内を移動しながら会話したい相手
に近寄るだけで自動的に音声がつながり、現実に近い環
境を仮想空間内に実現することができる。
ば、仮想空間共有方法およびこの方法を実施する装置に
おいて、他の装置から受信する利用者の音声をミキシン
グするに際して、音声と共に受信する各利用者の分身の
位置情報と視線の向き情報を利用して使用者間の距離の
遠近、視野の一致度に応じて利用者の音声を音声ミキサ
に接続し、或は別の音声ミキサに接続変えすることによ
り、利用者は仮想空間内を移動しながら会話したい相手
に近寄るだけで自動的に音声がつながり、現実に近い環
境を仮想空間内に実現することができる。
【図１】実施の形態を説明する図。
【図２】視野一致を説明する図。
【図３】距離判定部および視野一致度判定部を説明する
図。
図。
【図４】仮想空間内における分身間の位置関係を説明す
る図。
る図。
【図５】仮想空間内における分身間の位置関係を説明す
る図。
る図。
【図６】従来例を説明する図。
【図７】先行例の音声ミキサ部を説明する図。
【図８】先行例における分身間の位置関係を説明する
図。
図。
１０ 仮想空間共有装置 １１、１２、１３ 回線インタフェース部 １４ 位置情報分配部 １５ 距離判定部 １６ 視野一致度判定部 １７ ミキシング対象決定部 １８ 音声ミキサ部 １９、２３、２７ 音声受信用内部バス ２０、２４、２８ 音声送信用内部バス ２１、２５、２９ 位置情報受信用内部バス ２２、２６、３０ 位置情報送信用内部バス ３１ 距離計算結果転送用内部バス ３２ 視野一致度計算結果転送用内部バス ３３ 音声ミキサ指示用内部バス ３４、３５、３６ 通信回線
Claims (8)
- 【請求項１】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有方法において、 利用者の分身の仮想空間における分身間の距離が或る閾
値より小さい場合に両者の音声を同一の音声ミキサに接
続することを特徴とする仮想空間共有方法。 - 【請求項２】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有方法において、 利用者の分身の仮想空間における分身間の視野の重なり
を検出して両者の音声を同一の音声ミキサに接続するこ
とを特徴とする仮想空間共有方法。 - 【請求項３】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有方法において、 利用者の分身の仮想空間における分身間の距離が或る閾
値より小さく、利用者の分身の仮想空間における分身間
の視野の重なりを検出した場合に両者の音声を同一の音
声ミキサに接続することを特徴とする仮想空間共有方
法。 - 【請求項４】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有装置において、 利用者の分身の仮想空間における位置座標に基づいて分
身間の距離を計算する距離判定部を具備し、 距離判定部の計算結果を入力して第１の利用者の分身と
第２の利用者の分身との間の仮想空間における距離が或
る閾値より小さい場合に第１の利用者の音声と第２の利
用者の音声を同一の音声ミキサに接続する指示を音声ミ
キサ部１８に与えるミキシング対象決定部を具備する、 ことを特徴とする仮想空間共有装置。 - 【請求項５】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有装置において、 利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりｗの有無を計算する視野一
致度判定部を具備し、 視野一致度判定部の計算結果を入力して第１の利用者と
第２の利用者の視野の重なりを検出して第１の利用者の
音声と第２の利用者の音声を同一の音声ミキサに接続す
る指示を音声ミキサ部に与えるミキシング対象決定部１
７を具備する、 ことを特徴とする仮想空間共有装置。 - 【請求項６】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有装置において、 利用者の分身の仮想空間における位置座標に基づいて分
身間の距離を計算する距離判定部を具備し、 利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部を具備し、 距離判定部の計算結果を入力して第１の利用者の分身と
第２の利用者の分身との間の仮想空間における距離が或
る閾値より小さいか、或は視野一致度判定部の計算結果
を入力して第１の利用者と第２の利用者の何れかが他方
の視野に存在する場合に、第１の利用者の音声と第２の
利用者の音声を同一の音声ミキサに接続する指示を音声
ミキサ部に与えるミキシング対象決定部を具備する、 ことを特徴とする仮想空間共有装置。 - 【請求項７】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有装置において、 利用者の分身の仮想空間における位置座標に基づいて分
身間の距離を計算する距離判定部を具備し、 利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部を具備し、 距離判定部から供給される距離と重なりの値の積を演算
処理する回路を有して分身相互が閾値内にある条件を満
足すると共に、分身の少なくとも一方が相手の視野に存
在する条件を満足する利用者を同じ音声ミキサに接続す
る様に音声ミキサ部に指示する演算処理するミキシング
対象決定部を具備する、 ことを特徴とする仮想空間共有装置。 - 【請求項８】 利用者が自分の意志で自由に移動するこ
とができる３次元仮想空間を表現すると共に仮想空間内
に他の利用者の分身をも表現することができる端末を複
数台通信網を介して接続し、利用者の音声と利用者の仮
想空間内の分身の位置情報と視線の向き情報とを他の端
末に分配し、複数の音声ミキサおよび複数の音声ミキサ
を音声回線に接続する音声スイッチより成る音声ミキサ
部を使用して複数の利用者が同一の仮想空間を遠隔地に
おいて共有する仮想空間共有装置において、 利用者の分身の仮想空間における位置座標に基づいて分
身間の距離を計算する距離判定部を具備し、 利用者の分身の仮想空間における視線の向き情報に基づ
いて利用者間の視野の重なりを計算する視野一致度判定
部を具備し、 距離判定部から供給される距離と視野一致度判定部から
供給される重なりの値の積を演算処理する回路を有し
て、分身相互が閾値Ｌ内にある条件を満足すると共に、
分身の両者が両者共に相手の視野に存在する条件を満足
する利用者を同じ音声ミキサに接続する様に音声ミキサ
部に指示するミキシング対象決定部を具備する、 ことを特徴とする仮想空間共有装置。
Priority Applications (9)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7169919A JP3070719B2 (ja) | 1995-07-05 | 1995-07-05 | 仮想空間共有方法およびこの方法を実施する装置 |
| US08/509,091 US5736982A (en) | 1994-08-03 | 1995-08-01 | Virtual space apparatus with avatars and speech |
| EP99112201A EP0942396B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
| DE69531009T DE69531009T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren für einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| DE69521369T DE69521369T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren für einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| EP99112202A EP0942397B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
| EP95112163A EP0696018B1 (en) | 1994-08-03 | 1995-08-02 | Shared virtual space display method and apparatus using said method |
| DE69525551T DE69525551T2 (de) | 1994-08-03 | 1995-08-02 | Anzeigeverfahren fur einen gemeinsamen virtuellen Raum und Vorrichtung unter Verwendung dieses Verfahrens |
| CA002155254A CA2155254C (en) | 1994-08-03 | 1995-08-02 | Virtual space display method and virtual space sharing apparatus using the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP7169919A JP3070719B2 (ja) | 1995-07-05 | 1995-07-05 | 仮想空間共有方法およびこの方法を実施する装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0923275A true JPH0923275A (ja) | 1997-01-21 |
| JP3070719B2 JP3070719B2 (ja) | 2000-07-31 |
Family
ID=15895391
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP7169919A Expired - Lifetime JP3070719B2 (ja) | 1994-08-03 | 1995-07-05 | 仮想空間共有方法およびこの方法を実施する装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3070719B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005311974A (ja) * | 2004-04-26 | 2005-11-04 | Yamaha Corp | 音像定位端末 |
| JP2009043274A (ja) * | 2002-01-09 | 2009-02-26 | Dolby Lab Licensing Corp | 対話型立体的オーディオビジュアル・システム |
| US7945856B2 (en) | 1995-11-13 | 2011-05-17 | Worlds.Com, Inc. | System and method for enabling users to interact in a virtual space |
| JPWO2018135304A1 (ja) * | 2017-01-18 | 2019-11-21 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにプログラム |
-
1995
- 1995-07-05 JP JP7169919A patent/JP3070719B2/ja not_active Expired - Lifetime
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7945856B2 (en) | 1995-11-13 | 2011-05-17 | Worlds.Com, Inc. | System and method for enabling users to interact in a virtual space |
| US8082501B2 (en) | 1995-11-13 | 2011-12-20 | Worlds.Com, Inc. | System and method for enabling users to interact in a virtual space |
| US8145998B2 (en) | 1995-11-13 | 2012-03-27 | Worlds Inc. | System and method for enabling users to interact in a virtual space |
| JP2009043274A (ja) * | 2002-01-09 | 2009-02-26 | Dolby Lab Licensing Corp | 対話型立体的オーディオビジュアル・システム |
| US7533346B2 (en) | 2002-01-09 | 2009-05-12 | Dolby Laboratories Licensing Corporation | Interactive spatalized audiovisual system |
| JP2005311974A (ja) * | 2004-04-26 | 2005-11-04 | Yamaha Corp | 音像定位端末 |
| JPWO2018135304A1 (ja) * | 2017-01-18 | 2019-11-21 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにプログラム |
| US11311803B2 (en) | 2017-01-18 | 2022-04-26 | Sony Corporation | Information processing device, information processing method, and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3070719B2 (ja) | 2000-07-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP0942396B1 (en) | Shared virtual space display method and apparatus using said method | |
| US6616578B2 (en) | Computerized connection system between exercise stations for exchanging communications of related users | |
| US20020006804A1 (en) | Communication terminal and communication system | |
| US8451313B2 (en) | Communication terminal and control method thereof | |
| US9736312B2 (en) | Method and system for controlling audio signals in multiple concurrent conference calls | |
| EP1545111A1 (en) | Telephone interpretation aid device and telephone interpretation system using the same | |
| US20110069643A1 (en) | Method and system for controlling audio in a collaboration environment | |
| JPH03155257A (ja) | 分散制御通信会議装置 | |
| JP2003506906A (ja) | 会議通話のための話者識別 | |
| US7081915B1 (en) | Control of video conferencing using activity detection | |
| JP3070719B2 (ja) | 仮想空間共有方法およびこの方法を実施する装置 | |
| JP3027793B2 (ja) | 仮想空間共有装置 | |
| JP3019291B2 (ja) | 仮想空間共有装置 | |
| US6212177B1 (en) | Remotely accessible key telephone system | |
| JPH10243110A (ja) | 電話会議システム | |
| CN110958355A (zh) | 一种基于公网对讲与报警电话语音系统的多方通信系统及方法 | |
| EP2887700A1 (en) | An audio communication system with merging and demerging communications zones | |
| KR20000058746A (ko) | 통화 매칭 시스템 및 그 방법 | |
| JP3296471B2 (ja) | 音場制御方法および装置 | |
| JPH08336166A (ja) | 映像視聴装置 | |
| JP2000244487A (ja) | 多人数参加型仮想空間コミュニケーションシステム | |
| KR100255376B1 (ko) | 사설교환기에서 다양한 회의 기능 수행방법 | |
| JP2002027143A (ja) | 通信端末 | |
| JPH04127760A (ja) | 電話会議システム | |
| CN117950500A (zh) | 一种辨识手势的信息交互方法、系统、模块及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090526 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090526 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100526 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100526 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110526 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120526 Year of fee payment: 12 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130526 Year of fee payment: 13 |
|
| FPAY | Renewal fee payment (prs date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140526 Year of fee payment: 14 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |