JP2000299851A - 指示情報伝達装置 - Google Patents
指示情報伝達装置Info
- Publication number
- JP2000299851A JP2000299851A JP11274968A JP27496899A JP2000299851A JP 2000299851 A JP2000299851 A JP 2000299851A JP 11274968 A JP11274968 A JP 11274968A JP 27496899 A JP27496899 A JP 27496899A JP 2000299851 A JP2000299851 A JP 2000299851A
- Authority
- JP
- Japan
- Prior art keywords
- information
- work
- instruction
- display
- manual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
- Telephonic Communication Services (AREA)
Abstract
(57)【要約】
【課題】 遠隔地の作業者に瞬時に適切な作業指示を与
えることができる装置を提供することを目的とする。 【解決手段】 遠隔地に在する作業者側のカメラ１１に
より作業対象物を撮像し、撮像された映像情報を作業指
示者側に送信し表示部２１に表示する。又、マニュアル
情報管理部より読み出したマニュアル情報も表示部２１
に表示する。作業指示者は表示部２１に表示された映像
情報及びマニュアル情報に基づき、作業者に指示を行
う。作業指示者は必要に応じて音声指示情報及びマニュ
アル情報を作業者側に送信する。作業者側では、受信し
たマニュアル情報に基づきマニュアル情報の映像を生成
し、カメラ１１にて撮像した映像情報と合成しディスプ
レイ１３に表示し、同時に音声指示情報もディスプレイ
１３を介して作業者に出力する。
えることができる装置を提供することを目的とする。 【解決手段】 遠隔地に在する作業者側のカメラ１１に
より作業対象物を撮像し、撮像された映像情報を作業指
示者側に送信し表示部２１に表示する。又、マニュアル
情報管理部より読み出したマニュアル情報も表示部２１
に表示する。作業指示者は表示部２１に表示された映像
情報及びマニュアル情報に基づき、作業者に指示を行
う。作業指示者は必要に応じて音声指示情報及びマニュ
アル情報を作業者側に送信する。作業者側では、受信し
たマニュアル情報に基づきマニュアル情報の映像を生成
し、カメラ１１にて撮像した映像情報と合成しディスプ
レイ１３に表示し、同時に音声指示情報もディスプレイ
１３を介して作業者に出力する。
Description
【０００１】
【発明の属する技術分野】本発明は、遠隔地に在する作
業者に対して作業指示を行う作業指示伝達装置に関する
ものである。
業者に対して作業指示を行う作業指示伝達装置に関する
ものである。
【０００２】
【従来の技術】従来より、遠隔地に在する作業者に対し
て作業指示を行う場合、電話を用いた音声による作業指
示や、テレビ電話を用いた音声と画像情報による作業指
示を行ってきた。
て作業指示を行う場合、電話を用いた音声による作業指
示や、テレビ電話を用いた音声と画像情報による作業指
示を行ってきた。
【０００３】
【発明が解決しようとする課題】しかし、音声のみの作
業指示では、作業指示者の指示内容が遠隔地に在する作
業者に十分に伝わらないという問題点を有していた。
又、テレビ電話等で画像情報を付加する場合にも、遠隔
地にある作業対象に対する指示ができず、作業指示者の
指示内容が作業者に十分に伝わらないという問題点は解
消されていない。
業指示では、作業指示者の指示内容が遠隔地に在する作
業者に十分に伝わらないという問題点を有していた。
又、テレビ電話等で画像情報を付加する場合にも、遠隔
地にある作業対象に対する指示ができず、作業指示者の
指示内容が作業者に十分に伝わらないという問題点は解
消されていない。
【０００４】本発明は、前記問題点に鑑みてなされたも
のであり、遠隔地の作業者に瞬時に適切な作業指示を与
えることができる装置を提供することを目的とする。
のであり、遠隔地の作業者に瞬時に適切な作業指示を与
えることができる装置を提供することを目的とする。
【０００５】
【課題を解決するための手段】本発明を用いると、請求
項１は、作業対象を撮像する第１の撮像手段と、該第１
の撮像手段により撮像された映像情報を作業指示者側に
表示する第１の表示手段と、該第１の表示手段に表示さ
れた映像情報に基づき作業指示を行う、作業指示者の作
業指示動作を撮像する第２の撮像手段と、複数のマニュ
アル情報を記憶しているマニュアル情報管理手段と、該
第２の撮像手段により撮像された作業指示動作に基づき
前記マニュアル情報管理手段よりマニュアル情報を読み
出し、前記第１の表示手段に表示すると同時に作業者側
に出力する指示情報判断手段と、該指示情報判断手段に
より得られたマニュアル情報に基づきマニュアル情報の
映像を生成し、前記第１の撮像手段により撮像された映
像情報に合成する合成部と、該合成部により合成された
映像情報を表示する第２の表示手段と、を備えたことを
特徴とする。
項１は、作業対象を撮像する第１の撮像手段と、該第１
の撮像手段により撮像された映像情報を作業指示者側に
表示する第１の表示手段と、該第１の表示手段に表示さ
れた映像情報に基づき作業指示を行う、作業指示者の作
業指示動作を撮像する第２の撮像手段と、複数のマニュ
アル情報を記憶しているマニュアル情報管理手段と、該
第２の撮像手段により撮像された作業指示動作に基づき
前記マニュアル情報管理手段よりマニュアル情報を読み
出し、前記第１の表示手段に表示すると同時に作業者側
に出力する指示情報判断手段と、該指示情報判断手段に
より得られたマニュアル情報に基づきマニュアル情報の
映像を生成し、前記第１の撮像手段により撮像された映
像情報に合成する合成部と、該合成部により合成された
映像情報を表示する第２の表示手段と、を備えたことを
特徴とする。
【０００６】請求項２は、作業対象を撮像する第１の撮
像手段と、該第１の撮像手段により撮像された映像情報
を作業指示者側に表示する第１の表示手段と、該第１の
表示手段に表示された映像情報に基づき作業指示を行
う、作業指示者作業指示動作を撮像する第２の撮像手段
と、前記第１の表示手段に表示された情報に基づき作業
指示を行う、作業指示者の作業指示音声を入力する音声
入力手段と、複数のマニュアル情報を記憶しているマニ
ュアル情報管理手段と、前記第２の撮像手段により撮像
された作業指示動作に基づき、前記マニュアル情報管理
手段よりマニュアル情報を読み出し前記第１の表示手段
に表示すると同時に作業者側に前記マニュアル情報及び
前記音声情報を出力する指示情報判断手段と、該指示情
報判断手段により得られたマニュアル情報に基づきマニ
ュアル情報の映像を生成し、前記第１の撮像手段により
撮像された映像情報に合成する合成部と、該合成部によ
り合成された映像情報を表示する第２の表示手段と、前
記音声入力手段により得られた作業指示音声を出力する
音声出力手段と、を備えたことを特徴とする。
像手段と、該第１の撮像手段により撮像された映像情報
を作業指示者側に表示する第１の表示手段と、該第１の
表示手段に表示された映像情報に基づき作業指示を行
う、作業指示者作業指示動作を撮像する第２の撮像手段
と、前記第１の表示手段に表示された情報に基づき作業
指示を行う、作業指示者の作業指示音声を入力する音声
入力手段と、複数のマニュアル情報を記憶しているマニ
ュアル情報管理手段と、前記第２の撮像手段により撮像
された作業指示動作に基づき、前記マニュアル情報管理
手段よりマニュアル情報を読み出し前記第１の表示手段
に表示すると同時に作業者側に前記マニュアル情報及び
前記音声情報を出力する指示情報判断手段と、該指示情
報判断手段により得られたマニュアル情報に基づきマニ
ュアル情報の映像を生成し、前記第１の撮像手段により
撮像された映像情報に合成する合成部と、該合成部によ
り合成された映像情報を表示する第２の表示手段と、前
記音声入力手段により得られた作業指示音声を出力する
音声出力手段と、を備えたことを特徴とする。
【０００７】請求項３は、請求項１又は請求項２に於い
て、前記合成部にてマニュアル情報と前記第１の撮像手
段により撮像された映像情報とを合成する際に、前記マ
ニュアル情報を前記第２の表示手段の任意の表示位置に
表示する指示を与える表示位置操作手段を設け、該表示
位置操作手段に基づき、前記第２の表示手段の任意の表
示位置に前記マニュアル情報を表示することを特徴とす
る。
て、前記合成部にてマニュアル情報と前記第１の撮像手
段により撮像された映像情報とを合成する際に、前記マ
ニュアル情報を前記第２の表示手段の任意の表示位置に
表示する指示を与える表示位置操作手段を設け、該表示
位置操作手段に基づき、前記第２の表示手段の任意の表
示位置に前記マニュアル情報を表示することを特徴とす
る。
【０００８】請求項４は、請求項１乃至請求項３のいず
れかに於いて、前記合成部にてマニュアル情報と前記第
１の撮像手段により撮像された映像情報とを合成する際
に、前記マニュアル情報を任意の大きさで表示する指示
を与える表示倍率操作手段を設け、該表示倍率操作手段
に基づき、前記マニュアル情報を任意の大きさで前記第
２の表示手段に表示することを特徴とする。
れかに於いて、前記合成部にてマニュアル情報と前記第
１の撮像手段により撮像された映像情報とを合成する際
に、前記マニュアル情報を任意の大きさで表示する指示
を与える表示倍率操作手段を設け、該表示倍率操作手段
に基づき、前記マニュアル情報を任意の大きさで前記第
２の表示手段に表示することを特徴とする。
【０００９】請求項５は、請求項１乃至請求項４に於い
て、前記合成部にてマニュアル情報と前記第１の撮像手
段により撮像された映像情報とを合成することを禁止す
る指示を与える合成禁止操作手段を設け、該合成禁止操
作手段に基づき、前記第２の表示手段に前記マニュアル
情報を表示することを禁止する特徴とする。
て、前記合成部にてマニュアル情報と前記第１の撮像手
段により撮像された映像情報とを合成することを禁止す
る指示を与える合成禁止操作手段を設け、該合成禁止操
作手段に基づき、前記第２の表示手段に前記マニュアル
情報を表示することを禁止する特徴とする。
【００１０】
【発明の実施の形態】本発明の指示情報伝達装置の一実
施の形態を図１乃至図４を参照しながら説明する。
施の形態を図１乃至図４を参照しながら説明する。
【００１１】図１は指示情報伝達装置のシステム概念図
である。図２は指示情報伝達装置の一実施の形態の機能
ブロック図である。図３及び図４は作業者側に表示され
る映像情報の一例を示した模式図である。
である。図２は指示情報伝達装置の一実施の形態の機能
ブロック図である。図３及び図４は作業者側に表示され
る映像情報の一例を示した模式図である。
【００１２】まず、第１の実施の形態について説明す
る。
る。
【００１３】図１は、遠隔地に在して作業を行う作業者
甲に対して、その作業に関する熟練した知識を有する作
業指示者乙が作業指示を行う場合についての指示情報伝
達装置のシステムの概念図であり、これを機能ブロック
化したものが図２となる。
甲に対して、その作業に関する熟練した知識を有する作
業指示者乙が作業指示を行う場合についての指示情報伝
達装置のシステムの概念図であり、これを機能ブロック
化したものが図２となる。
【００１４】図２に於いて、遠隔地に在する作業者甲側
には、人間の視野より広い広角撮像可能な小型ＣＣＤ等
により構成され作業対象及びその周りをリアルタイムに
撮像するカメラ１１、周囲の音声を集音するマイク１
２、ＬＣＤやスピーカ等により構成され後述する信号合
成部１４からの信号を映像表示及び音声出力するヘッド
マウント型のディスプレイ１３、カメラ１１により撮像
された映像と後述する送受信部１５を介して作業指示者
からの指示情報を合成してディスプレイ１３に供給する
信号合成部１４、有線回線又は無線回線により作業者甲
側及び作業指示者乙側間の信号の送受信を行う送受信部
１５、ディスプレイ１３上へ作業指示者乙からの指示情
報を合成表示する際に、作業者甲が合成表示に関する指
示を行うための操作部１７が設けられている。
には、人間の視野より広い広角撮像可能な小型ＣＣＤ等
により構成され作業対象及びその周りをリアルタイムに
撮像するカメラ１１、周囲の音声を集音するマイク１
２、ＬＣＤやスピーカ等により構成され後述する信号合
成部１４からの信号を映像表示及び音声出力するヘッド
マウント型のディスプレイ１３、カメラ１１により撮像
された映像と後述する送受信部１５を介して作業指示者
からの指示情報を合成してディスプレイ１３に供給する
信号合成部１４、有線回線又は無線回線により作業者甲
側及び作業指示者乙側間の信号の送受信を行う送受信部
１５、ディスプレイ１３上へ作業指示者乙からの指示情
報を合成表示する際に、作業者甲が合成表示に関する指
示を行うための操作部１７が設けられている。
【００１５】又、作業指示者乙側には、ディスプレイや
プロジェクタにより構成され遠隔地に在する作業者甲の
カメラ１１により撮像された映像及びマイク１２により
集音された音声を後述する送受信部２４を介して受信し
映像表示及び音声出力する表示部２１、作業指示者乙の
指示情報を入力するためのものであり作業指示者乙の作
業指示動作を撮像するカメラ２２、作業指示者乙の指示
音声を集音するマイク２３、作業指示入力用のカメラ及
びマイクにより入力された情報に基づき作業指示者乙の
指示を判断しその指示情報を後述する送受信部２５を介
して作業者甲側に送信する指示情報判断部２４、有線回
線又は無線回線により作業者甲側及び作業指示者乙側間
の信号の送受信を行う送受信部２５、複数の作業マニュ
アル情報を記憶しているマニュアル情報管理部２６が設
けられている。尚、作業者側の送受信部１５及び作業指
示者側の送受信部２５との間は有線回線又は無線回線に
より接続されているが、この回線は電話等の公衆回線や
専用回線であってもよいし特殊回線であってもよい。
又、本実施の形態ではカメラ１１及びマイク１２及びデ
ィスプレイ１３は作業者甲の頭部に装着しているものと
する。又、操作部１７は、ヘッドマウント型ディスプレ
イ１３の側面に設けられているものとし、作業者甲が操
作部１７を見なくても、作業者甲の指触で操作が行える
操作し易い機構となっているものとする。
プロジェクタにより構成され遠隔地に在する作業者甲の
カメラ１１により撮像された映像及びマイク１２により
集音された音声を後述する送受信部２４を介して受信し
映像表示及び音声出力する表示部２１、作業指示者乙の
指示情報を入力するためのものであり作業指示者乙の作
業指示動作を撮像するカメラ２２、作業指示者乙の指示
音声を集音するマイク２３、作業指示入力用のカメラ及
びマイクにより入力された情報に基づき作業指示者乙の
指示を判断しその指示情報を後述する送受信部２５を介
して作業者甲側に送信する指示情報判断部２４、有線回
線又は無線回線により作業者甲側及び作業指示者乙側間
の信号の送受信を行う送受信部２５、複数の作業マニュ
アル情報を記憶しているマニュアル情報管理部２６が設
けられている。尚、作業者側の送受信部１５及び作業指
示者側の送受信部２５との間は有線回線又は無線回線に
より接続されているが、この回線は電話等の公衆回線や
専用回線であってもよいし特殊回線であってもよい。
又、本実施の形態ではカメラ１１及びマイク１２及びデ
ィスプレイ１３は作業者甲の頭部に装着しているものと
する。又、操作部１７は、ヘッドマウント型ディスプレ
イ１３の側面に設けられているものとし、作業者甲が操
作部１７を見なくても、作業者甲の指触で操作が行える
操作し易い機構となっているものとする。
【００１６】以上の様な構成に基づいて説明する。
【００１７】まず、遠隔地に在する作業者甲は、作業対
象物方向を見ているものとすると、カメラ１１には作業
対象物が撮像される。又、この時の周囲の音声がマイク
１２により集音される。カメラ１１により撮像された映
像情報及び音声情報は送受信部１５を介して作業指示者
乙側に送信される。
象物方向を見ているものとすると、カメラ１１には作業
対象物が撮像される。又、この時の周囲の音声がマイク
１２により集音される。カメラ１１により撮像された映
像情報及び音声情報は送受信部１５を介して作業指示者
乙側に送信される。
【００１８】作業指示者乙側では、送受信部２５を介し
て受信した作業対象物の映像情報及び音声情報を表示部
２１に表示出力する。この時、作業者甲側からの映像情
報は視野より広い広角の映像情報が送らており、表示部
２１では、その全てを表示できる様な表示領域を有して
いる。又、作業者甲が装着しているヘッドマウント型の
ディスプレイ１３には作業者甲の視野と同程度の領域の
映像情報が表示されており、表示部２１ａには、作業者
甲が装着しているヘッドマウント型のディスプレイ１３
に表示されるものと同じ領域の映像が表示されており、
表示部２１ｂ及び表示部２１ｃには作業者甲の視野外の
映像情報が表示されている。又、作業指示者乙は、作業
の全ての情報を把握しているとは限らない場合もあるの
で、表示部２１ｂ若しくは表示部２１ｃの一部には、マ
ニュアル情報管理部２６に記憶されている作業用のマニ
ュアル情報を表示しておくものとする。尚、本実施の形
態では、作業用のマニュアル情報を予め表示しておくも
のとしているが、マニュアル情報を表示するジェスチャ
を行うことにより、作業用のマニュアル情報を表示させ
る様にしても良い。
て受信した作業対象物の映像情報及び音声情報を表示部
２１に表示出力する。この時、作業者甲側からの映像情
報は視野より広い広角の映像情報が送らており、表示部
２１では、その全てを表示できる様な表示領域を有して
いる。又、作業者甲が装着しているヘッドマウント型の
ディスプレイ１３には作業者甲の視野と同程度の領域の
映像情報が表示されており、表示部２１ａには、作業者
甲が装着しているヘッドマウント型のディスプレイ１３
に表示されるものと同じ領域の映像が表示されており、
表示部２１ｂ及び表示部２１ｃには作業者甲の視野外の
映像情報が表示されている。又、作業指示者乙は、作業
の全ての情報を把握しているとは限らない場合もあるの
で、表示部２１ｂ若しくは表示部２１ｃの一部には、マ
ニュアル情報管理部２６に記憶されている作業用のマニ
ュアル情報を表示しておくものとする。尚、本実施の形
態では、作業用のマニュアル情報を予め表示しておくも
のとしているが、マニュアル情報を表示するジェスチャ
を行うことにより、作業用のマニュアル情報を表示させ
る様にしても良い。
【００１９】作業指示者乙は、表示部２１に表示された
映像を見ながらジェスチャにて表示部２１に出力されて
いる作業用マニュアル情報をポインティング指示しなが
ら音声により作業指示を行う。例えば、作業指示者乙は
指で作業用マニュアル情報Ｐを指示し、音声により作業
手順を説明する。
映像を見ながらジェスチャにて表示部２１に出力されて
いる作業用マニュアル情報をポインティング指示しなが
ら音声により作業指示を行う。例えば、作業指示者乙は
指で作業用マニュアル情報Ｐを指示し、音声により作業
手順を説明する。
【００２０】作業指示者乙の作業指示動作は、カメラ２
２により撮像され、指示情報判断部２４にてジェスチャ
認識処理や方向検出処理により、作業指示者が作業用マ
ニュアル情報Ｐが表示されている場所を指さしたかを検
出し、更に作業指示者の指示手順を説明する音声情報を
検出し、作業用マニュアル情報Ｐを指さしている場合に
は、作業マニュアル情報及び音声情報を送受信部２５を
介して遠隔地に在する作業者甲側に逐次送信する。尚、
ジェスチャ認識処理や指の方向検出処理は、周知の技術
を用いており詳細な説明は省略する。
２により撮像され、指示情報判断部２４にてジェスチャ
認識処理や方向検出処理により、作業指示者が作業用マ
ニュアル情報Ｐが表示されている場所を指さしたかを検
出し、更に作業指示者の指示手順を説明する音声情報を
検出し、作業用マニュアル情報Ｐを指さしている場合に
は、作業マニュアル情報及び音声情報を送受信部２５を
介して遠隔地に在する作業者甲側に逐次送信する。尚、
ジェスチャ認識処理や指の方向検出処理は、周知の技術
を用いており詳細な説明は省略する。
【００２１】作業者甲側では、送受信部１５を介して受
信した、作業指示者乙が指した作業用マニュアル情報及
び音声情報を信号合成部１４に供給する。信号合成部１
４では、作業指示者乙が指した作業マニュアル情報Ｐの
画像を生成し、カメラ１１により撮像され映像と作業指
示者乙が指した作業マニュアル情報の画像とを合成し
て、ヘッドマウント型のディスプレイ１３に表示させ
る。又、表示と同時に、作業指示者からの音声情報もヘ
ッドマウント型のディスプレイ１３に供給され音声出力
も行われる。図３に於いて、ヘッドマウント型のディス
プレイ１３に表示される映像の一例を示す。
信した、作業指示者乙が指した作業用マニュアル情報及
び音声情報を信号合成部１４に供給する。信号合成部１
４では、作業指示者乙が指した作業マニュアル情報Ｐの
画像を生成し、カメラ１１により撮像され映像と作業指
示者乙が指した作業マニュアル情報の画像とを合成し
て、ヘッドマウント型のディスプレイ１３に表示させ
る。又、表示と同時に、作業指示者からの音声情報もヘ
ッドマウント型のディスプレイ１３に供給され音声出力
も行われる。図３に於いて、ヘッドマウント型のディス
プレイ１３に表示される映像の一例を示す。
【００２２】この時、作業用マニュアル情報Ｐが作業対
象物の画像上に重畳されるので、作業用マニュアル情報
Ｐと作業対象物が重なり合う場合があり、作業対象物を
視認し難くなる場ありがある。
象物の画像上に重畳されるので、作業用マニュアル情報
Ｐと作業対象物が重なり合う場合があり、作業対象物を
視認し難くなる場ありがある。
【００２３】そこで、作業者甲は、ヘッドマウント型デ
ィスプレイ１３の側面に設けられた操作部１７を用い、
作業用マニュアル情報Ｐを作業対象物の画像と重なり合
わない位置（例えば図４の様に、左上角部に作業用マニ
ュアル情報Ｐを表示する）に表示する様、表示位置指定
の操作を行う。又、表示位置指定だけでなく、作業用マ
ニュアル情報Ｐの表示倍率も変更（例えば、左上角部に
表示しても作業用マニュアル情報Ｐが大き過ぎて作業対
象物と重なり合う時、重なり合わない程度の縮小率（例
えば５０％）で縮小したり、作業用マニュアル情報Ｐが
小さ過ぎて見難い時、見易い程度の拡大率（例えば１５
０％）に拡大する等）の指定の操作もできる。又、作業
用マニュアル情報Ｐが不要な場合に、作業用マニュアル
情報Ｐの合成を禁止し、作業用マニュアル情報Ｐをヘッ
ドマウント型ディスプレイ１３に表示させない様にする
操作もできる。
ィスプレイ１３の側面に設けられた操作部１７を用い、
作業用マニュアル情報Ｐを作業対象物の画像と重なり合
わない位置（例えば図４の様に、左上角部に作業用マニ
ュアル情報Ｐを表示する）に表示する様、表示位置指定
の操作を行う。又、表示位置指定だけでなく、作業用マ
ニュアル情報Ｐの表示倍率も変更（例えば、左上角部に
表示しても作業用マニュアル情報Ｐが大き過ぎて作業対
象物と重なり合う時、重なり合わない程度の縮小率（例
えば５０％）で縮小したり、作業用マニュアル情報Ｐが
小さ過ぎて見難い時、見易い程度の拡大率（例えば１５
０％）に拡大する等）の指定の操作もできる。又、作業
用マニュアル情報Ｐが不要な場合に、作業用マニュアル
情報Ｐの合成を禁止し、作業用マニュアル情報Ｐをヘッ
ドマウント型ディスプレイ１３に表示させない様にする
操作もできる。
【００２４】信号合成部１４では、操作部１７からの操
作指示に基づき、操作部１７からの操作が表示位置の指
定の場合、その指定された表示位置にマニュアル情報を
作業対象物の画像と合成する様にし、又、操作部１７か
らの操作が表示倍率の指定の場合、マニュアル情報をそ
の指定された倍率にして作業対象物の画像と合成する様
にし、又、操作部１７からの操作が合成禁止の指示の場
合、マニュアル情報を合成せず作業対象物の映像のみを
ヘッドマウント型ディスプレイ１３に出力する。
作指示に基づき、操作部１７からの操作が表示位置の指
定の場合、その指定された表示位置にマニュアル情報を
作業対象物の画像と合成する様にし、又、操作部１７か
らの操作が表示倍率の指定の場合、マニュアル情報をそ
の指定された倍率にして作業対象物の画像と合成する様
にし、又、操作部１７からの操作が合成禁止の指示の場
合、マニュアル情報を合成せず作業対象物の映像のみを
ヘッドマウント型ディスプレイ１３に出力する。
【００２５】以上の様な処理により、遠隔地に在する作
業者甲は、作業指示者が指示する作業手順の音声指示情
報及び作業用マニュアル情報を容易に認識でき、作業者
がその指示内容を瞬時に正確に理解できる。又、作業指
示者乙は、作業対象物以外の周りの状況も知ることがで
きるため、作業対象物の映像のみを見て作業指示する場
合に比べ、更に適切な作業指示が瞬時に行える。更に、
作業者甲側で作業用マニュアル情報Ｐ及び作業対象物の
画像が重なり合わない様に操作できるため、作業者甲の
視野を確保でき、作業対象物を認識し易く且つ指示内容
を正確に理解できる。
業者甲は、作業指示者が指示する作業手順の音声指示情
報及び作業用マニュアル情報を容易に認識でき、作業者
がその指示内容を瞬時に正確に理解できる。又、作業指
示者乙は、作業対象物以外の周りの状況も知ることがで
きるため、作業対象物の映像のみを見て作業指示する場
合に比べ、更に適切な作業指示が瞬時に行える。更に、
作業者甲側で作業用マニュアル情報Ｐ及び作業対象物の
画像が重なり合わない様に操作できるため、作業者甲の
視野を確保でき、作業対象物を認識し易く且つ指示内容
を正確に理解できる。
【００２６】尚、本実施の形態では、作業指示者乙が指
示した作業用マニュアル情報を全て遠隔地に在する作業
者に送信しているが、作業用マニュアル情報の任意の一
部だけを遠隔地に在する作業者に送信して表示させる用
にしても良い。
示した作業用マニュアル情報を全て遠隔地に在する作業
者に送信しているが、作業用マニュアル情報の任意の一
部だけを遠隔地に在する作業者に送信して表示させる用
にしても良い。
【００２７】
【発明の効果】本発明を用いると、遠隔地に在する作業
者甲は、作業指示者が指示する作業手順のを示す作業マ
ニュアル情報を容易に認識でき、作業者がその指示内容
を瞬時に正確に理解できる。
者甲は、作業指示者が指示する作業手順のを示す作業マ
ニュアル情報を容易に認識でき、作業者がその指示内容
を瞬時に正確に理解できる。
【００２８】又、遠隔地に在する作業者甲は、作業指示
者が指示する作業手順の音声指示情報及び作業マニュア
ル情報を容易に認識でき、作業者がその指示内容を瞬時
に正確に理解できる。
者が指示する作業手順の音声指示情報及び作業マニュア
ル情報を容易に認識でき、作業者がその指示内容を瞬時
に正確に理解できる。
【００２９】又、作業指示者は、作業対象物の映像及び
作業用マニュアル情報を見ながら作業指示できるため適
切な作業指示が瞬時に行える。
作業用マニュアル情報を見ながら作業指示できるため適
切な作業指示が瞬時に行える。
【００３０】又、作業者甲側で作業マニュアル及び作業
対象物の映像が重なり合わない様に作業マニュアルの表
示位置を操作できるため、作業対象物を認識し易く且つ
指示内容を正確に理解できる。
対象物の映像が重なり合わない様に作業マニュアルの表
示位置を操作できるため、作業対象物を認識し易く且つ
指示内容を正確に理解できる。
【００３１】又、作業者甲側で作業マニュアル及び作業
対象物の映像が重なり合わない様に作業マニュアルの表
示倍率を操作できるため、作業対象物を認識し易く且つ
指示内容を正確に理解できる。
対象物の映像が重なり合わない様に作業マニュアルの表
示倍率を操作できるため、作業対象物を認識し易く且つ
指示内容を正確に理解できる。
【００３２】又、作業者甲側で作業マニュアルの合成表
示を禁止できるため、作業者の視野が確保でき、作業対
象物を認識し易くなる。
示を禁止できるため、作業者の視野が確保でき、作業対
象物を認識し易くなる。
【図面の簡単な説明】
【図１】本発明の指示情報伝達装置の一実施の形態を示
したシステム概念図である。
したシステム概念図である。
【図２】指示情報伝達装置の第１の実施の形態の機能ブ
ロック図である。
ロック図である。
【図３】作業者側に表示される映像情報の一実施の形態
を示した模式図である。
を示した模式図である。
【図４】作業者側に表示される映像情報の一実施の形態
を示した模式図である。
を示した模式図である。
１１、２２ カメラ １２、２３ マイク １３ ディスプレイ １４ 信号合成部 １５、２５ 送受信部 １６ 頭部方向検出部 １７ ポインティング位置補正部 ２１ 表示部 ２４ 指示情報判断部 ２６ マニュアル情報管理部
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C054 AA02 DA01 FE12 HA01 5C082 AA13 AA27 AA31 AA34 AA36 BA02 BA27 BA42 BB01 CA55 CB01 CB06 MM02 MM05 MM09 MM10 5K101 NN06 NN18
Claims (5)
- 【請求項１】 作業対象を撮像する第１の撮像手段と、 該第１の撮像手段により撮像された映像情報を作業指示
者側に表示する第１の表示手段と、 該第１の表示手段に表示された映像情報に基づき作業指
示を行う、作業指示者の作業指示動作を撮像する第２の
撮像手段と、 複数のマニュアル情報を記憶しているマニュアル情報管
理手段と、 該第２の撮像手段により撮像された作業指示動作に基づ
き前記マニュアル情報管理手段よりマニュアル情報を読
み出し、前記第１の表示手段に表示すると同時に作業者
側に出力する指示情報判断手段と、 該指示情報判断手段により得られたマニュアル情報に基
づきマニュアル情報の映像を生成し、前記第１の撮像手
段により撮像された映像情報に合成する合成部と、 該合成部により合成された映像情報を表示する第２の表
示手段と、 を備えたことを特徴とする指示情報伝達装置。 - 【請求項２】 作業対象を撮像する第１の撮像手段と、 該第１の撮像手段により撮像された映像情報を作業指示
者側に表示する第１の表示手段と、 該第１の表示手段に表示された映像情報に基づき作業指
示を行う、作業指示者の作業指示動作を撮像する第２の
撮像手段と、 前記第１の表示手段に表示された映像情報に基づき作業
指示を行う、作業指示者の作業指示音声を入力する音声
入力手段と、 複数のマニュアル情報を記憶しているマニュアル情報管
理手段と、 前記第２の撮像手段により撮像された作業指示動作に基
づき、前記マニュアル情報管理手段よりマニュアル情報
を読み出し前記第１の表示手段に表示すると同時に作業
者側に前記マニュアル情報及び前記音声情報を出力する
指示情報判断手段と、 該指示情報判断手段により得られたマニュアル情報に基
づきマニュアル情報の映像を生成し、前記第１の撮像手
段により撮像された映像情報に合成する合成部と、 該合成部により合成された映像情報を表示する第２の表
示手段と、 前記音声入力手段により得られた作業指示音声を出力す
る音声出力手段と、 を備えたことを特徴とする指示情報伝達装置。 - 【請求項３】 請求項１又は請求項２に於いて、 前記合成部にてマニュアル情報と前記第１の撮像手段に
より撮像された映像情報とを合成する際に、前記マニュ
アル情報を前記第２の表示手段の任意の表示位置に表示
する指示を与える表示位置操作手段を設け、 該表示位置操作手段に基づき、前記第２の表示手段の任
意の表示位置に前記マニュアル情報を表示することを特
徴とする指示情報伝達装置。 - 【請求項４】 請求項１乃至請求項３のいずれかに於い
て、 前記合成部にてマニュアル情報と前記第１の撮像手段に
より撮像された映像情報とを合成する際に、前記マニュ
アル情報を任意の大きさで表示する指示を与える表示倍
率操作手段を設け、 該表示倍率操作手段に基づき、前記マニュアル情報を任
意の大きさで前記第２の表示手段に表示することを特徴
とする指示情報伝達装置。 - 【請求項５】 請求項１乃至請求項４に於いて、 前記合成部にてマニュアル情報と前記第１の撮像手段に
より撮像された映像情報とを合成することを禁止する指
示を与える合成禁止操作手段を設け、 該合成禁止操作手段に基づき、前記第２の表示手段に前
記マニュアル情報を表示することを禁止する特徴とする
指示情報伝達装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11274968A JP2000299851A (ja) | 1999-02-12 | 1999-09-28 | 指示情報伝達装置 |
| US09/501,223 US6611242B1 (en) | 1999-02-12 | 2000-02-10 | Information transmission system to transmit work instruction information |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3424499 | 1999-02-12 | ||
| JP11-34244 | 1999-02-12 | ||
| JP11274968A JP2000299851A (ja) | 1999-02-12 | 1999-09-28 | 指示情報伝達装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000299851A true JP2000299851A (ja) | 2000-10-24 |
Family
ID=26373031
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11274968A Pending JP2000299851A (ja) | 1999-02-12 | 1999-09-28 | 指示情報伝達装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000299851A (ja) |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002132487A (ja) * | 2000-10-25 | 2002-05-10 | Oki Electric Ind Co Ltd | 遠隔作業支援システム |
| JP2004164429A (ja) * | 2002-11-14 | 2004-06-10 | Seiko Epson Corp | リサイクル作業支援システム、リサイクルセンタ設備、情報管理センタ設備及び設備用プログラム、並びにリサイクル作業支援方法 |
| JP2004336675A (ja) * | 2003-05-02 | 2004-11-25 | Figla Co Ltd | 撮像装置を用いた遠隔地の進捗状況管理システム及びそのシステムを用いた遠隔地の進捗状況管理方法。 |
| JP2005322055A (ja) * | 2004-05-10 | 2005-11-17 | Nippon Telegr & Teleph Corp <Ntt> | 作業支援用情報提示装置、作業支援用情報提示方法及び作業支援用情報を提示するためのプログラム |
| JP2006251206A (ja) * | 2005-03-09 | 2006-09-21 | Nippon Telegr & Teleph Corp <Ntt> | 情報提示装置及び情報提示方法とそのプログラム |
| JP2006259627A (ja) * | 2005-03-18 | 2006-09-28 | Nippon Telegr & Teleph Corp <Ntt> | 画像処理装置及び画像処理方法とそのプログラム |
| JP2007034238A (ja) * | 2005-07-29 | 2007-02-08 | Kobe Steel Ltd | 現場作業支援システム |
| JP2009122547A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 画像表示システム |
| WO2010082547A1 (ja) * | 2009-01-16 | 2010-07-22 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
| JP2012182701A (ja) * | 2011-03-02 | 2012-09-20 | Brother Ind Ltd | 頭部装着型撮像システム、頭部装着撮像装置、画像表示方法 |
| JP2013110764A (ja) * | 2013-02-19 | 2013-06-06 | Sony Corp | 撮像表示装置、撮像表示方法 |
| JP2014505627A (ja) * | 2011-01-13 | 2014-03-06 | ザ・ボーイング・カンパニー | 拡張コラボレーション・システム |
| US9665167B2 (en) | 2006-10-16 | 2017-05-30 | Sony Corporation | Imaging display apparatus and method |
| JP2018169649A (ja) * | 2017-03-29 | 2018-11-01 | 三菱電機株式会社 | 監視システムおよび監視用の端末 |
| JP2019120976A (ja) * | 2017-12-28 | 2019-07-22 | Ｄｙｎａｂｏｏｋ株式会社 | システム |
| WO2020157821A1 (ja) * | 2019-01-29 | 2020-08-06 | 三菱電機エンジニアリング株式会社 | 作業支援システム |
| JP2022122936A (ja) * | 2017-03-16 | 2022-08-23 | 株式会社デンソーウェーブ | 情報表示システム |
| JP7145553B1 (ja) | 2022-06-23 | 2022-10-03 | 英明 原田 | 遠隔指導管理装置及び遠隔指導システム |
| WO2022208595A1 (ja) * | 2021-03-29 | 2022-10-06 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび報知方法 |
| JPWO2022208600A1 (ja) * | 2021-03-29 | 2022-10-06 |
-
1999
- 1999-09-28 JP JP11274968A patent/JP2000299851A/ja active Pending
Cited By (32)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002132487A (ja) * | 2000-10-25 | 2002-05-10 | Oki Electric Ind Co Ltd | 遠隔作業支援システム |
| JP2004164429A (ja) * | 2002-11-14 | 2004-06-10 | Seiko Epson Corp | リサイクル作業支援システム、リサイクルセンタ設備、情報管理センタ設備及び設備用プログラム、並びにリサイクル作業支援方法 |
| JP2004336675A (ja) * | 2003-05-02 | 2004-11-25 | Figla Co Ltd | 撮像装置を用いた遠隔地の進捗状況管理システム及びそのシステムを用いた遠隔地の進捗状況管理方法。 |
| JP2005322055A (ja) * | 2004-05-10 | 2005-11-17 | Nippon Telegr & Teleph Corp <Ntt> | 作業支援用情報提示装置、作業支援用情報提示方法及び作業支援用情報を提示するためのプログラム |
| JP2006251206A (ja) * | 2005-03-09 | 2006-09-21 | Nippon Telegr & Teleph Corp <Ntt> | 情報提示装置及び情報提示方法とそのプログラム |
| JP2006259627A (ja) * | 2005-03-18 | 2006-09-28 | Nippon Telegr & Teleph Corp <Ntt> | 画像処理装置及び画像処理方法とそのプログラム |
| JP2007034238A (ja) * | 2005-07-29 | 2007-02-08 | Kobe Steel Ltd | 現場作業支援システム |
| US9665167B2 (en) | 2006-10-16 | 2017-05-30 | Sony Corporation | Imaging display apparatus and method |
| US9772686B2 (en) | 2006-10-16 | 2017-09-26 | Sony Corporation | Imaging display apparatus and method |
| JP2009122547A (ja) * | 2007-11-16 | 2009-06-04 | Canon Inc | 画像表示システム |
| WO2010082547A1 (ja) * | 2009-01-16 | 2010-07-22 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
| JP2010164814A (ja) * | 2009-01-16 | 2010-07-29 | Brother Ind Ltd | ヘッドマウントディスプレイ |
| JP2014505627A (ja) * | 2011-01-13 | 2014-03-06 | ザ・ボーイング・カンパニー | 拡張コラボレーション・システム |
| JP2012182701A (ja) * | 2011-03-02 | 2012-09-20 | Brother Ind Ltd | 頭部装着型撮像システム、頭部装着撮像装置、画像表示方法 |
| JP2013110764A (ja) * | 2013-02-19 | 2013-06-06 | Sony Corp | 撮像表示装置、撮像表示方法 |
| JP2022122936A (ja) * | 2017-03-16 | 2022-08-23 | 株式会社デンソーウェーブ | 情報表示システム |
| JP2018169649A (ja) * | 2017-03-29 | 2018-11-01 | 三菱電機株式会社 | 監視システムおよび監視用の端末 |
| JP2019120976A (ja) * | 2017-12-28 | 2019-07-22 | Ｄｙｎａｂｏｏｋ株式会社 | システム |
| US11010018B2 (en) | 2017-12-28 | 2021-05-18 | Toshiba Client Solutions CO., LTD. | System including wearable device and electronic device |
| JP7080636B2 (ja) | 2017-12-28 | 2022-06-06 | Ｄｙｎａｂｏｏｋ株式会社 | システム |
| JPWO2020157821A1 (ja) * | 2019-01-29 | 2021-09-30 | 三菱電機エンジニアリング株式会社 | 作業支援システム |
| JP7034340B2 (ja) | 2019-01-29 | 2022-03-11 | 三菱電機エンジニアリング株式会社 | 作業支援システム |
| WO2020157821A1 (ja) * | 2019-01-29 | 2020-08-06 | 三菱電機エンジニアリング株式会社 | 作業支援システム |
| WO2022208595A1 (ja) * | 2021-03-29 | 2022-10-06 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび報知方法 |
| JPWO2022208600A1 (ja) * | 2021-03-29 | 2022-10-06 | ||
| JPWO2022208595A1 (ja) * | 2021-03-29 | 2022-10-06 | ||
| WO2022208600A1 (ja) * | 2021-03-29 | 2022-10-06 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび表示方法 |
| JP7500866B2 (ja) | 2021-03-29 | 2024-06-17 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび表示方法 |
| JP7505112B2 (ja) | 2021-03-29 | 2024-06-24 | 京セラ株式会社 | ウェアラブル端末装置、プログラムおよび報知方法 |
| US12665999B2 (en) | 2021-03-29 | 2026-06-23 | Kyocera Corporation | Wearable terminal device, program, and display method |
| JP7145553B1 (ja) | 2022-06-23 | 2022-10-03 | 英明 原田 | 遠隔指導管理装置及び遠隔指導システム |
| JP2024002129A (ja) * | 2022-06-23 | 2024-01-11 | 英明 原田 | 遠隔指導管理装置及び遠隔指導システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5058042B2 (ja) | 画像通信システムおよび画像通信方法 | |
| US7460150B1 (en) | Using gaze detection to determine an area of interest within a scene | |
| JPH11220706A (ja) | テレビ電話システム | |
| JP2011035638A (ja) | 仮想現実空間映像制作システム | |
| EP2132932A1 (en) | First portable communication device | |
| EP0878962A3 (en) | Image pickup system | |
| KR20090088325A (ko) | 화상 처리 장치, 화상 처리 방법 및 촬상 장치 | |
| JP2009071478A (ja) | 情報通信端末および情報通信システム | |
| JP2000231625A (ja) | 指示情報伝達装置 | |
| JP2007259330A (ja) | 映像配信遠隔制御装置、映像配信システムおよび映像配信方法 | |
| CN112351251A (zh) | 图像处理系统和终端设备 | |
| JP3310325B2 (ja) | ヘッドマウントディスプレイ装置及びそれを用いたシステム | |
| JP3396190B2 (ja) | 画像処理装置 | |
| CN111447365B (zh) | 一种拍摄方法及电子设备 | |
| JP2008182321A (ja) | 画像表示システム | |
| CN109714585B (zh) | 图像传输方法及装置、显示方法及装置、存储介质 | |
| JP3449939B2 (ja) | 映像表示方法及びそのプログラムを記録した記録媒体 | |
| JP2000299852A (ja) | 指示情報伝達装置 | |
| CN108712604B (zh) | 一种全景拍摄方法及移动终端 | |
| JP2011163776A (ja) | 音源モニタリング装置 | |
| JP2001103464A (ja) | 指示情報伝達装置 | |
| JP2955451B2 (ja) | 作業遠隔指示装置 | |
| JP2000175166A (ja) | テレビ電話装置、テレビ電話装置の送受信方法及び記憶媒体 | |
| JP2003209821A (ja) | 指示確認システム | |
| CN112770149B (zh) | 视频处理方法、装置、终端及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041213 |
|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20051227 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060221 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060620 |