JP7746728B2 - 遠隔支援システム、端末装置、遠隔装置、誘導画像表示プログラム、及び遠隔支援プログラム - Google Patents

Description

本発明は、遠隔支援システム、端末装置、遠隔装置、誘導画像表示プログラム、及び遠隔支援プログラムに関する。

特許文献１には、遠隔監視センターによる巡回者の周囲状況の適切な把握による、巡回者の安全確保と、巡回警備の効率化を、低コストで実現する装置の提供を目的とした監視支援システムが開示されている。この監視支援システムは、三次元空間情報データベースと該情報を表示するバーチャルリアリティ表示部を具備する遠隔監視手段と、位置取得手段と指向方向取得手段を具備する携帯端末からなる。そして、この監視支援システムは、巡回者が所持する携帯端末の視線情報を遠隔監視手段に送信することで、遠隔監視手段からは、巡回者の眼前に広がる空間情報を低コスト且つ適切に把握する。

また、特許文献２には、適切な位置にユーザの視点を移動させることが可能となる仕組みを提供することを目的とした情報処理装置が開示されている。この情報処理装置は、装着型の表示装置の過去の位置に、表示装置の仮想空間における視点位置を移動する指示を受け付ける。そして、この情報処理装置は、当該視点位置の移動指示を受け付けた場合に、指示を受け付けた過去の表示装置の位置から所定距離離れた位置を、当該視点位置の移動先の位置として決定し、決定された位置に表示装置の仮想空間における視点位置を移動させるべく変更する。

更に、特許文献３には、ターゲットへのユーザ誘導を円滑に行うことを目的とした誘導支援方法が開示されている。この誘導支援方法は、予め記憶した空間情報の中からターゲット情報を検出し、前記空間情報が規定する空間における表示装置の位置とターゲット情報が規定するターゲットの位置を計測する。また、この誘導支援方法は、計測した前記表示装置の位置と前記ターゲットの位置とに基づいて前記表示装置に表示するアイコンの位置と該アイコンの動きを決定し、前記表示装置において決定した前記位置で決定した前記動きをする前記アイコンを表示する。そして、この誘導支援方法は、前記表示装置の位置の変化に応じて、該表示装置に表示する前記アイコンの位置及び動きを変更する処理を行う。

特開２００８－２５７３８５号公報 特開２０１８－０６３５８９号公報 特開２０１７－０６８６８９号公報

本発明は、一方向から撮影された撮影画像のみを用いて誘導する場合に比較して、より容易に利用者を要求される撮影位置に誘導することができる遠隔支援システム、端末装置、遠隔装置、誘導画像表示プログラム、及び遠隔支援プログラムを提供することを目的とする。

上記目的を達成するために、第１態様に係る遠隔支援システムは、端末装置と遠隔装置とを含む遠隔支援システムであって、前記端末装置は第１のプロセッサを備え、前記第１のプロセッサは、各々異なる方向から対象物を撮影して得られた複数の画像情報を前記遠隔装置に送信し、前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、受信した前記表示情報が示す誘導画像を表示し、前記遠隔装置は第２のプロセッサを備え、前記第２のプロセッサは、前記複数の画像情報を前記端末装置から受信し、受信した前記複数の画像情報が示す画像を表示し、表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、受け付けた画像を用いて前記表示情報を導出し、導出した前記表示情報を前記端末装置に送信する遠隔支援システムであり、前記第１のプロセッサが、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更するものである。

また、第２態様に係る遠隔支援システムは、第１態様に係る遠隔支援システムにおいて、前記画像情報が、静止画像を示す画像情報、及び動画像を示す画像情報の何れか一方であるものである。

また、第３態様に係る遠隔支援システムは、第２態様に係る遠隔支援システムにおいて、前記第１のプロセッサが、前記画像情報が前記動画像を示す画像情報である場合、当該動画像における予め定められた枚数毎に１枚の静止画像を選択して前記遠隔装置に送信するものである。

また、第４態様に係る遠隔支援システムは、第１態様～第３態様の何れか１態様に係る遠隔支援システムにおいて、前記誘導画像が、３次元の画像であるものである。

また、第５態様に係る遠隔支援システムは、第４態様に係る遠隔支援システムにおいて、前記３次元の画像が、前記対象物に対する撮影領域の３次元空間において仮想的に表示され、かつ、要求される前記対象物に対する撮影位置及び撮影方向を示す３次元の画像であるものである。

また、第６態様に係る遠隔支援システムは、第５態様に係る遠隔支援システムにおいて、前記３次元の画像が、多面体として構成されているものである。

また、第７態様に係る遠隔支援システムは、第１態様～第６態様の何れか１態様に係る遠隔支援システムにおいて、前記誘導画像が、端末装置が要求される撮影位置及び向きとなった場合に予め定められた状態となる画像であるものである。

また、第８態様に係る遠隔支援システムは、第７態様に係る遠隔支援システムにおいて、前記予め定められた状態が、歪みのない状態であるものである。

また、第９態様に係る遠隔支援システムは、第８態様に係る遠隔支援システムにおいて、前記歪みのない状態が、矩形の状態であるものである。

また、第１０態様に係る遠隔支援システムは、第１態様～第９態様の何れか１態様に係る遠隔支援システムにおいて、前記異なる方向が、対象物の正面に正対する一方向を含むものである。

また、第１１態様に係る遠隔支援システムは、第１態様～第１０態様の何れか１態様に係る遠隔支援システムにおいて、前記異なる方向が、対象物の正面、一方の側面、及び上面が１画像に含む一方向を含むものである。

また、第１２態様に係る遠隔支援システムは、第１態様～第１１態様の何れか１態様に係る遠隔支援システムにおいて、前記表示状態が、点滅間隔、表示色、透過率の少なくとも１つであるものである。

また、第１３態様に係る遠隔支援システムは、第１２態様に係る遠隔支援システムにおいて、前記第１のプロセッサが、前記透過率を変更する場合、前記ずれ量が少なくなるほど当該透過率を増加させるものである。

また、第１４態様に係る遠隔支援システムは、第１態様～第１３態様の何れか１態様に係る遠隔支援システムにおいて、前記第１のプロセッサが、対象物の対象とする位置が撮影されたら、当該位置にマーカを仮想的に表示するものである。

また、第１５態様に係る遠隔支援システムは、第１態様～第１４態様の何れか１態様に係る遠隔支援システムにおいて、前記第２のプロセッサが、受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信するものである。

また、第１６態様に係る遠隔支援システムは、第１５態様に係る遠隔支援システムにおいて、前記指示情報が、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含むものである。

また、上記目的を達成するために、第１７態様に係る端末装置は、プロセッサを備え、前記プロセッサは、各々異なる方向から対象物を撮影して得られた複数の画像情報を遠隔装置に送信し、前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、受信した前記表示情報が示す誘導画像を表示する端末装置であり、前記プロセッサが、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更するものである。

また、上記目的を達成するために、第１８態様に係る遠隔装置は、プロセッサを備え、前記プロセッサは、各々異なる方向から対象物を撮影して得られた複数の画像情報を端末装置から受信し、受信した前記複数の画像情報が示す画像を表示し、表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、受け付けた画像を用いて、要求される撮影位置に誘導する誘導画像を表示するための表示情報を導出し、導出した前記表示情報を前記端末装置に送信する遠隔装置であり、前記プロセッサが、受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信し、前記指示情報が、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含むものである。

また、上記目的を達成するために、第１９態様に係る誘導画像表示プログラムは、各々異なる方向から対象物を撮影して得られた複数の画像情報を遠隔装置に送信し、前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、受信した前記表示情報が示す誘導画像を表示する、処理であり、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更する、処理をコンピュータに実行させる。

更に、上記目的を達成するために、第２０態様に係る遠隔支援プログラムは、各々異なる方向から対象物を撮影して得られた複数の画像情報を端末装置から受信し、受信した前記複数の画像情報が示す画像を表示し、表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、受け付けた画像を用いて、要求される撮影位置に誘導する誘導画像を表示するための表示情報を導出し、導出した前記表示情報を前記端末装置に送信する、処理であり、受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信し、前記指示情報は、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含む、処理をコンピュータに実行させる。

第１態様、第１７態様～第２０態様によれば、一方向から撮影された撮影画像のみを用
いて誘導する場合に比較して、より容易に利用者を要求される撮影位置に誘導することができる。
また、第１態様、第１７態様～第２０態様によれば、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて誘導画像の表示状態を変更しない場合に比較して、より短時間で、利用者を要求される撮影位置に誘導することができる。

第２態様によれば、画像情報として静止画像を示す画像情報を適用する場合は、画像情報として動画像を示す画像情報を適用する場合に比較して、当該画像情報のための記憶容量を低減することができる。また、第２態様によれば、画像情報として動画像を示す画像情報を適用する場合は、画像情報として静止画像を示す画像情報を適用する場合に比較して、より多くの画像情報を得ることができる。

第３態様によれば、動画像を示す画像情報の全てを遠隔装置に送信する場合に比較して、より短時間に画像情報を遠隔装置に送信することができる。

第４態様によれば、誘導画像を１次元又は２次元の画像とする場合に比較して、より直感的に、利用者を要求される撮影位置に誘導することができる。

第５態様によれば、３次元の画像の誘導対象を撮影位置のみとする場合に比較して、より的確な撮影状態に利用者を誘導することができる。

第６態様によれば、３次元の画像を多面体としない場合に比較して、より容易に表示情報を導出することができる。

第７態様によれば、誘導画像を、端末装置が要求される撮影位置及び向きとなった場合も状態が変わらない画像とした場合に比較して、より的確な撮影状態に利用者を誘導することができる。

第８態様によれば、上記予め定められた状態を歪みがある状態とする場合に比較して、より直感的に、利用者を要求される撮影位置に誘導することができる。

第９態様によれば、上記歪みのない状態を矩形以外の状態とした場合に比較して、より直感的に、利用者を要求される撮影位置に誘導することができる。

第１０態様によれば、上記異なる方向を、対象物の正面に正対する一方向を含まないものとする場合に比較して、遠隔装置において選択される可能性がより高い画像情報を得ることができる。

第１１態様によれば、上記異なる方向を、対象物の正面、一方の側面、及び上面が１画像に含む一方向を含まないものとする場合に比較して、１つの画像に対象物の対象とする位置が含まれる可能性を高めることができる結果、より効率よく、利用者を要求される撮影位置に誘導することができる。

第１２態様によれば、適用した表示状態の変化を利用して、利用者と要求される撮影位置とのずれ量を把握することができる。

第１３態様によれば、上記透過率を変更する場合に、上記ずれ量が多くなるほど当該透過率を増加させる場合に比較して、対象物の視認性を向上させることができる。

第１４態様によれば、対象物の対象とする位置にマーカを表示しない場合に比較して、より容易に、利用者に対して対象とする位置を把握させることができる。

第１５態様によれば、受信した画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合でも再撮影を指示しない場合に比較して、より確実に、利用者を要求される撮影位置に誘導することができる。

第１６態様によれば、上記指示情報に、要求される撮影位置に最も近い撮影位置での撮影で得られた画像情報を特定する特定情報を含めない場合に比較して、既に得られている画像情報を有効利用することができる。

実施形態に係る遠隔支援システムのハードウェア構成の一例を示すブロック図である。 実施形態に係る遠隔支援システムの機能的な構成の一例を示すブロック図である。 実施形態に係る撮影関連情報データベースの構成の一例を示す模式図である。 実施形態に係る遠隔支援処理の説明に供する図であり、端末装置による撮影状況の一例を示す斜視図である。 第１実施形態に係る誘導画像表示処理の一例を示すフローチャートである。 実施形態に係る再撮影指示画面の一例を示す正面図である。 実施形態に係る誘導画像表示画面の一例を示す正面図である。 実施形態に係る誘導画像表示画面の他の例を示す正面図である。 実施形態に係る遠隔支援処理の一例を示すフローチャートである。 実施形態に係る画像選択画面の一例を示す正面図である。 実施形態に係る遠隔支援処理の説明に供する図であり、端末装置による撮影状況の他の一例を示す斜視図である。 第２実施形態に係る誘導画像表示処理の一例を示すフローチャートである。 実施形態に係る誘導画像の他の例を示す斜視図である。 実施形態に係る誘導画像表示画面の他の例を示す正面図である。 実施形態に係る誘導画像の他の一例を示す斜視図である。 実施形態に係る誘導画像の他の一例を示す斜視図である。 実施形態に係る誘導画像の他の一例を示す斜視図である。 実施形態に係る誘導画像の他の一例を示す斜視図である。

以下、図面を参照して、本発明を実施するための形態例を詳細に説明する。なお、本実施形態では、本発明を、各々利用者が個別に用いる携帯型の端末である複数の端末装置と、各端末装置とは離れた遠隔地に設けられた遠隔装置と、を含む遠隔支援システムに適用した場合について説明する。また、本実施形態では、利用者がデジタル複合機やプリンタ等の画像形成装置のメンテナンスを行う作業員であり、遠隔支援システムが、当該作業員の画像形成装置に対するメンテナンスを遠隔支援するシステムである場合について説明する。

［第１実施形態］
まず、図１及び図２を参照して、本実施形態に係る遠隔支援システム９０の構成を説明する。図１は、本実施形態に係る遠隔支援システムのハードウェア構成の一例を示すブロック図である。また、図２は、本実施形態に係る遠隔支援システムの機能的な構成の一例を示すブロック図である。

図１に示すように、本実施形態に係る遠隔支援システム９０は、ネットワーク８０に各々アクセス可能とされた、遠隔装置１０と、複数の端末装置３０と、を含む。なお、遠隔装置１０の例としては、パーソナルコンピュータ及びサーバコンピュータ等の情報処理装置が挙げられる。また、端末装置３０の例としては、スマートフォン、タブレット端末、ＰＤＡ（Personal Digital Assistant、携帯情報端末）等の携帯型の端末が挙げられる。

本実施形態に係る端末装置３０は、遠隔支援システム９０を利用する複数の利用者（以下、単に「利用者」という。）の各々が画像形成装置をメンテナンスする場合に所持する装置である。端末装置３０は、ＣＰＵ（Central Processing Unit）３１、一時記憶領域としてのメモリ３２、不揮発性の記憶部３３、タッチパネル等の入力部３４、液晶ディスプレイ等の表示部３５、及び媒体読み書き装置（Ｒ／Ｗ）３６を備えている。また、端末装置３０は、撮影部３８、マイク３９、位置検出部４０、及び無線通信部４２を備えている。ＣＰＵ３１、メモリ３２、記憶部３３、入力部３４、表示部３５、媒体読み書き装置３６、撮影部３８、マイク３９、位置検出部４０、及び無線通信部４２はバスＢ１を介して互いに接続されている。媒体読み書き装置３６は、記録媒体３７に書き込まれている情報の読み出し及び記録媒体３７への情報の書き込みを行う。

記憶部３３は、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、フラッシュメモリ等によって実現される。記憶媒体としての記憶部３３には、誘導画像表示プログラム３３Ａが記憶されている。誘導画像表示プログラム３３Ａは、誘導画像表示プログラム３３Ａが書き込まれた記録媒体３７が媒体読み書き装置３６にセットされ、媒体読み書き装置３６が記録媒体３７からの誘導画像表示プログラム３３Ａの読み出しを行うことで、記憶部３３へ記憶される。ＣＰＵ３１は、誘導画像表示プログラム３３Ａを記憶部３３から読み出してメモリ３２に展開し、誘導画像表示プログラム３３Ａが有するプロセスを順次実行する。

また、記憶部３３には、撮影関連情報データベース３３Ｂが記憶される。撮影関連情報データベース３３Ｂについては、詳細を後述する。

また、本実施形態に係る撮影部３８は、メンテナンスの対象とする画像形成装置を撮影するものであり、当該撮影によって得られた画像情報を出力する。また、本実施形態に係るマイク３９は、利用者が発した音声を収集し、音声情報を出力する。

更に、本実施形態に係る位置検出部４０は、自身の位置を検出し、位置情報を出力するものであり、本実施形態では、ＧＰＳ（Global Positioning Systems）を利用したものが適用されているが、この形態に限定されるものではない。例えば、ＷｉＦｉ（登録商標）のルータから取得される位置情報を用いるものや、ビーコン（Beacon）を利用して位置を検出するもの、撮影画像を用いた画像解析により位置を検出するもの等を位置検出部４０として適用する形態としてもよい。

一方、遠隔装置１０は、遠隔支援システム９０において中心的な役割を有する装置であり、利用者に対して提示される、詳細を後述する誘導画像を導出する装置である。遠隔装置１０は、ＣＰＵ１１、一時記憶領域としてのメモリ１２、不揮発性の記憶部１３、キーボードとマウス等の入力部１４、液晶ディスプレイ等の表示部１５、媒体読み書き装置１６及び通信インタフェース（Ｉ／Ｆ）部１８を備えている。ＣＰＵ１１、メモリ１２、記憶部１３、入力部１４、表示部１５、媒体読み書き装置１６及び通信Ｉ／Ｆ部１８はバスＢ２を介して互いに接続されている。媒体読み書き装置１６は、記録媒体１７に書き込まれている情報の読み出し及び記録媒体１７への情報の書き込みを行う。

記憶部１３はＨＤＤ、ＳＳＤ、フラッシュメモリ等によって実現される。記憶媒体としての記憶部１３には、遠隔支援プログラム１３Ａが記憶されている。遠隔支援プログラム１３Ａは、遠隔支援プログラム１３Ａが書き込まれた記録媒体１７が媒体読み書き装置１６にセットされ、媒体読み書き装置１６が記録媒体１７からの遠隔支援プログラム１３Ａの読み出しを行うことで、記憶部１３へ記憶される。ＣＰＵ１１は、遠隔支援プログラム１３Ａを記憶部１３から読み出してメモリ１２に展開し、遠隔支援プログラム１３Ａが有するプロセスを順次実行する。

なお、本実施形態では、ネットワーク８０として、インターネット、電話回線網等の公共の通信回線を適用しているが、この形態に限定されるものではない。例えば、ネットワーク８０として、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等の企業内の通信回線を適用してもよく、これらの企業内の通信回線及び公共の通信回線を組み合わせて適用してもよい。

次に、図２を参照して、本実施形態に係る遠隔装置１０及び端末装置３０の機能的な構成について説明する。

図２に示すように、本実施形態に係る端末装置３０は、第１送信部３１Ａ、第１受信部３１Ｂ、及び第１表示制御部３１Ｃを含む。端末装置３０のＣＰＵ３１が誘導画像表示プログラム３３Ａを実行することで、第１送信部３１Ａ、第１受信部３１Ｂ、及び第１表示制御部３１Ｃとして機能する。

本実施形態に係る第１送信部３１Ａは、各々異なる方向から対象物を撮影して得られた複数の画像情報（以下、単に「画像情報」という。）を遠隔装置１０に送信する。なお、本実施形態では、上述したように、対象物として、メンテナンスの対象である画像形成装置を適用している。

また、本実施形態に係る第１受信部３１Ｂは、画像情報を用いて遠隔装置１０によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報（以下、単に「表示情報」という。）を受信する。なお、本実施形態では、第１送信部３１Ａによる画像情報の送信、及び第１受信部３１Ｂによる表示情報の受信を、無線通信部４２を介して行っているが、これに限るものではない。

そして、本実施形態に係る第１表示制御部３１Ｃは、受信した表示情報が示す誘導画像（以下、単に「誘導画像」という。）を表示部３５により表示する。

一方、図２に示すように、本実施形態に係る遠隔装置１０は、第２受信部１１Ａ、第２表示制御部１１Ｂ、受付部１１Ｃ、導出部１１Ｄ、及び第２送信部１１Ｅを含む。遠隔装置１０のＣＰＵ１１が主として遠隔支援プログラム１３Ａを実行することで、第２受信部１１Ａ、第２表示制御部１１Ｂ、受付部１１Ｃ、導出部１１Ｄ、及び第２送信部１１Ｅとして機能する。

本実施形態に係る第２受信部１１Ａは、複数の画像情報を端末装置３０から受信する。また、本実施形態に係る第２表示制御部１１Ｂは、受信した複数の画像情報が示す画像を表示部１５により表示する。

また、本実施形態に係る受付部１１Ｃは、表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付ける。なお、本実施形態では、受付部１１Ｃによる画像の選択の受け付けを、入力部１４を介した遠隔装置１０のユーザによる操作によって行っているが、これに限るものではない。例えば、遠隔装置１０にマイク等の音声入力部を設けておき、当該音声入力部を介した音声により画像の選択の受け付けを行う形態としてもよい。

ここで、本実施形態に係る導出部１１Ｄは、受け付けた画像を用いて上述した表示情報を導出する。そして、本実施形態に係る第２送信部１１Ｅは、導出した表示情報を端末装置３０に送信する。

なお、本実施形態では、画像情報として、静止画像を示す画像情報を適用している。従って、端末装置３０に設けられた撮影部３８は、静止画像の撮影が可能とされたものとされているが、これに限るものではない。例えば、静止画像及び動画像の双方の撮影が可能とされた撮影部を撮影部３８として適用する形態としてもよいことは言うまでもない。また、本実施形態では、画像情報として、カラー画像を示す画像情報を適用しており、従って、本実施形態に係る撮影部３８は、カラー画像の撮影を行うことができるものとされているが、これに限るものではない。例えば、画像情報として、モノクロ画像を示す画像情報を適用し、撮影部３８として、モノクロ画像の撮影を行うことができるものを適用する形態としてもよい。

また、本実施形態では、誘導画像として、端末装置３０が要求される撮影位置及び向きとなった場合に予め定められた状態となる画像を適用しており、特に、本実施形態では、当該予め定められた状態として、歪みのない状態を適用している。更に、本実施形態では、当該歪みのない状態として、矩形の状態を適用している。

また、本実施形態では、上記異なる方向に、対象物の正面に正対する一方向を含むものとしている。

また、本実施形態では、第１表示制御部３１Ｃにより、利用者と要求される撮影位置とのずれ量に応じて誘導画像の表示状態を変更するものとしている。ここで、本実施形態では、当該表示状態として、透過率を適用しており、上記ずれ量が少なくなるほど当該透過率を増加させるものとしている。但し、この形態に限るものではなく、上記透過率に代えて、点滅間隔及び表示色の何れか一方を上記表示状態として適用する形態としてもよいし、点滅間隔、表示色、及び透過率の２つ、又は３つの組み合わせを上記表示状態として適用する形態としてもよい。

また、本実施形態では、第１表示制御部３１Ｃにより、対象物の対象とする位置が撮影されたら、当該位置にマーカを仮想的に表示する。

更に、本実施形態では、第２送信部１１Ｅが、受信した複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報（以下、単に「指示情報」という。）を端末装置３０に送信する。ここで、本実施形態では、指示情報に、要求される撮影位置に最も近い撮影位置での撮影で得られた画像情報を特定する特定情報を含むものとしている。

次に、図３を参照して、本実施形態に係る撮影関連情報データベース３３Ｂについて説明する。図３は、本実施形態に係る撮影関連情報データベース３３Ｂの構成の一例を示す模式図である。

本実施形態に係る撮影関連情報データベース３３Ｂは、上述した複数の画像情報に関する情報が登録されるデータベースである。図３に示すように、本実施形態に係る撮影関連情報データベース３３Ｂは、撮影順、撮影画像、撮影位置、及び向きの各情報が関連付けられて記憶される。

上記撮影順は、利用者による対象物に対する撮影順番を示す情報であり、上記撮影画像は、対応する撮影によって得られた画像情報そのものである。更に、上記撮影位置は、対応する撮影を行った際の端末装置３０の位置を示す情報であり、上記向きは、対応する撮影を行った際の端末装置３０の向きを示す情報である。

本実施形態では、上記撮影位置を示す情報として、位置検出部４０により、ＧＰＳを用いて、端末装置３０の水平方向及び高さ方向の３次元の位置を示す情報を得る形態としているが、これに限るものではない。例えば、ビーコン等を利用して位置を検出する形態等としてもよいことは上述した通りである。

また、本実施形態では、上記向きを示す情報として、端末装置３０に内蔵されたジャイロセンサ（図示省略。）により、対応する撮影位置において対象物を撮影部３８による撮影画角内の左右方向の略中央部に位置させた状態における、撮影部３８による撮影方向を示す情報を得るものとしている。但し、この形態に限るものではなく、例えば、加速度センサ等によって上記向きを示す情報を得る形態としてもよい。

即ち、本実施形態に係る遠隔支援システム９０では、メンテナンスの実施に先立ち、一例として図４に示すように、利用者が、自身が所持する端末装置３０を用いて、メンテナンスの対象とする対象物５０を、予め定められた複数の方向（本実施形態では、対象物５０の正面、右側面、背面、及び左側面の４方向）から撮影を行うものとされている。そして、本実施形態に係る端末装置３０は、上記複数の方向からの撮影によって得られた画像情報を、撮影順、及び撮影した際の端末装置３０による撮影位置及び向きを示す情報と共に、遠隔装置１０に送信する。

本実施形態に係る撮影関連情報データベース３３Ｂは、この遠隔装置１０への各情報の送信に先立って、当該各情報を端末装置３０自身で一時的に保持するためのものである。

次に、図５～図１０を参照して、本実施形態に係る遠隔支援システム９０の作用を説明する。まず、図５～図８を参照して、本実施形態に係る端末装置３０の作用を説明する。図５は、本実施形態に係る誘導画像表示処理の一例を示すフローチャートである。なお、錯綜を回避するために、以下では、遠隔支援システム９０による遠隔支援の対象とする作業そのものに関する指示を行うための処理については説明を省略し、利用者を要求される撮影位置に誘導するための処理のみについて説明する。

本実施形態に係る遠隔支援システム９０では、上述したように、利用者が端末装置３０を用いて、対象物５０を複数の方向から撮影し、これにより得られた複数の画像情報を、撮影順、撮影位置、及び向きの各情報と共に撮影関連情報データベース３３Ｂに登録する。

この状態において利用者により端末装置３０に対して、誘導画像表示処理の実行の指示入力が行われた場合に、端末装置３０のＣＰＵ３１が誘導画像表示プログラム３３Ａを実行することで、図５に示す誘導画像表示処理が実行される。

図５のステップ１００で、ＣＰＵ３１は、撮影関連情報データベース３３Ｂに記憶されている全ての情報（以下、「撮影関連情報」という。）を読み出し、ステップ１０２で、ＣＰＵ３１は、読み出した撮影関連情報を遠隔装置１０に送信する。

撮影関連情報を受信すると、遠隔装置１０は、当該撮影関連情報に含まれる画像情報が示す複数の撮影画像に、要求される撮影位置及び向きで撮影された画像（以下、「要求撮影画像」という。）が含まれていない場合は再撮影を指示する再撮影指示情報（上述した指示情報に相当。）をアクセス元の端末装置３０に送信する。この際、遠隔装置１０は、要求される撮影位置に最も近い撮影位置での撮影で得られた撮影画像を示す画像情報を特定する特定情報（本実施形態では、撮影順を示す情報）を再撮影指示情報に含めて端末装置３０に送信する。

そこで、ステップ１０４で、ＣＰＵ１１は、遠隔装置１０から再撮影指示情報を受信したか否かを判定し、否定判定となった場合はステップ１１０に移行する一方、肯定判定となった場合はステップ１０６に移行する。

ステップ１０６で、ＣＰＵ１１は、再撮影指示情報と共に受信した特定情報が示す画像情報を用いて、予め定められた構成とされた再撮影指示画面を表示するように表示部３５を制御した後、ステップ１０８で、利用者による再撮影が終了するまで待機する。図６には、本実施形態に係る再撮影指示画面の一例が示されている。

図６に示すように、本実施形態に係る再撮影指示画面では、要求される撮影位置に最も近い撮影位置での撮影で得られた撮影画像３５Ａが表示される。また、本実施形態に係る再撮影指示画面では、表示されている撮影画像３５Ａを撮影した位置に近い位置での再度の複数回の撮影を促すメッセージが表示される。

そこで、利用者は、再撮影指示画面に表示されている撮影画像３５Ａを撮影した際の位置付近の位置で端末装置３０により対象物５０に対する複数回の撮影を再度行うことで、撮影関連情報データベース３３Ｂの登録情報を更新する。そして、利用者は、再撮影指示画面に表示されている終了ボタン３５Ｅを、入力部３４を介して指定する。これに応じて、ステップ１０８が肯定判定となってステップ１００に戻り、ステップ１００からの処理が再度実行される。

一方、遠隔装置１０は、受信した撮影関連情報に含まれる画像情報が示す複数の撮影画像に要求撮影画像が含まれる場合は、この時点の撮影位置及び向きの各々を示す情報（以下、「位置・向き情報」という。）の送信を指示する位置・向き情報送信指示情報をアクセス元の端末装置３０に送信する。

そこで、ステップ１１０で、ＣＰＵ３１は、遠隔装置１０から位置・向き情報送信指示情報を受信したか否かを判定し、否定判定となった場合はステップ１００に戻る一方、肯定判定となった場合はステップ１１２に移行する。

ステップ１１２で、ＣＰＵ１１は、位置・向き情報を上述した方法で取得し、取得した位置・向き情報を遠隔装置１０に送信する。

遠隔装置１０は、アクセス元の端末装置３０から位置・向き情報を受信すると、当該情報と、要求撮影画像に関する撮影関連情報とを用いて、利用者に対し、端末装置３０を、要求撮影画像を撮影した際の撮影位置及び向きに誘導するための誘導画像を導出する。そして、遠隔装置１０は、導出した誘導画像を仮想的に表示するための誘導画像表示情報を導出してアクセス元の端末装置３０に送信する。この際、遠隔装置１０は、対象物５０のメンテナンスの対象とする位置（以下、「ターゲット」という。）にマーカを仮想的に表示するためのマーカ表示情報を誘導画像表示情報に含めて端末装置３０に送信する。

そこで、ステップ１１４で、ＣＰＵ３１は、誘導画像表示情報及びマーカ表示情報を遠隔装置１０から受信するまで待機する。ステップ１１６で、ＣＰＵ３１は、受信した誘導画像表示情報、マーカ表示情報、及びその時点で撮影部３８によって撮影されている画像（以下、「実撮影画像」という。）を用いて、予め定められた構成とされた誘導画像表示画面を表示するように表示部３５を制御する。図７には、本実施形態に係る誘導画像表示画面の一例が示されている。

図７に示すように、本実施形態に係る誘導画像表示画面では、誘導画像３５Ｂが予め定められた形状（本実施形態では、矩形）となるように、端末装置３０の撮影位置及び向きの設定を促すメッセージが表示される。また、本実施形態に係る誘導画像表示画面では、誘導画像３５Ｂが実撮影画像に重畳された状態で表示される。また、本実施形態に係る誘導画像表示画面では、利用者と要求される撮影位置とのずれ量に応じて誘導画像３５Ｂの表示状態（本実施形態では、透過率）が逐次変更（本実施形態では、ずれ量が少なくなるほど増加）される。更に、本実施形態に係る誘導画像表示画面では、要求される撮影方向（向き）を示す撮影方向画像３５Ｃ（本実施形態では、矢印を示す画像）が誘導画像３５Ｂと組み合わされた状態で表示される。

即ち、本実施形態に係る誘導画像３５Ｂは、端末装置３０による撮影位置及び向きが、要求される撮影位置及び向きとなった場合に上記予め定められた形状（本実施形態では、矩形。）及びサイズとなる３次元の画像とされている。

そして、本実施形態に係る端末装置３０では、端末装置３０による撮影位置及び向きが、要求される撮影位置及び向きとは異なる状態となっている場合には、その状態において、上記要求される撮影位置及び向きである場合に上記予め定められた形状及びサイズで見える誘導画像３５Ｂを見た場合の当該誘導画像３５Ｂが表示される。

図７に示す例では、この時点で対象物５０を正面から撮影しており、要求される撮影位置が対象物５０の右側面である場合の誘導画像表示画面の一例が示されている。この場合、誘導画像３５Ｂは、矩形が歪んだ状態である直線状に近い平行四辺形となり、その大きさは、端末装置３０から対象物５０までの距離が長くなるほど小さくなる。従って、利用者は、誘導画像表示画面を参照することで、対象物５０に対して要求される撮影位置及び向きを誘導画像３５Ｂの表示位置、形状、及びサイズから直感的に把握することができる。

図８に示す例は、図７に示す例において、端末装置３０が要求される撮影方向及び向きとなった場合の誘導画像表示画面の一例である。この場合、対象物５０が右側面側から撮影された状態で表示されると共に、誘導画像３５Ｂは矩形となる。また、この場合、撮影画角内にターゲットが含まれるため、上述したマーカ３５Ｄが表示される。このため、利用者は、ターゲットの位置も容易に把握することができる。

なお、本実施形態では、この端末装置３０による撮影位置及び向きによって、形状、サイズ、及び透過率の異なる誘導画像３５Ｂを示す情報を遠隔装置１０によって逐次生成しているが、これに限るものではない。例えば、遠隔装置１０では、誘導画像３５Ｂの単一の原形のみを生成してアクセス元の端末装置３０に送信し、当該端末装置３０において、自身の撮影位置及び向きに応じた誘導画像３５Ｂを生成する形態としてもよい。

ステップ１１８で、ＣＰＵ３１は、端末装置３０が要求される撮影位置及び向きとなり、利用者の誘導先への誘導が終了したか否かを判定し、否定判定となった場合はステップ１１２に戻る一方、肯定判定となった場合は本誘導画像表示処理を終了する。

このステップ１１２～ステップ１１８の繰り返し処理により、端末装置３０の表示部３５には、端末装置３０により撮影されている対象物５０が表示されると共に、端末装置３０による撮影位置及び向きに応じた状態の誘導画像３５Ｂが重畳された状態で表示される。従って、利用者は、この状態の誘導画像表示画面を参照することで、端末装置３０を、直感的に、要求される撮影位置及び向きとすることができる。

なお、誘導画像表示処理が終了すると、従来既知の技術により、対象物５０に対して必要なメンテナンスを行うための遠隔支援の処理が実行される。

次に、図９～図１０を参照して、本実施形態に係る遠隔装置１０の作用を説明する。図９は、本実施形態に係る遠隔支援処理の一例を示すフローチャートである。なお、ここでは、遠隔装置１０のユーザが、利用者に対して遠隔指示を行う人（以下、「遠隔指示者」という。）である場合について説明する。

本実施形態に係る遠隔支援システム９０では、何れかの端末装置３０から上述した撮影関連情報が受信された場合に、遠隔装置１０のＣＰＵ１１が遠隔支援プログラム１３Ａを実行することで、図９に示す遠隔支援処理が実行される。

図９のステップ２００で、ＣＰＵ１１は、受信した撮影関連情報を用いて、予め定められた構成とされた画像選択画面を表示するように表示部１５を制御した後、ステップ２０２で、ＣＰＵ１１は、予め定められた情報が入力されるまで待機する。図１０には、本実施形態に係る画像選択画面の一例が示されている。

図１０に示すように、本実施形態に係る画像選択画面では、誘導先において撮影された撮影画像、及び上述したターゲットの位置の指定を促すメッセージ、及び誘導先の撮影画像がない場合における、誘導先に最も近い撮影画像の指定を促すメッセージが表示される。また、本実施形態に係る画像選択画面では、受信した撮影関連情報に含まれる複数の画像情報が示す撮影画像（本実施形態では、対象物５０の正面、右側面、背面、及び左側面の４方向から撮影された４つの撮影画像１５ａ～１５ｄ）が表示される。

従って、遠隔指示者は、画像選択画面を参照することにより、アクセス元の利用者（以下、単に「利用者」という。）によって、端末装置３０により遠隔支援処理の実行に先立って撮影された全ての撮影画像を把握することができる。そこで、遠隔指示者は、表示されている複数の撮影画像に、要求される撮影位置及び向きで撮影された撮影画像（上述した要求撮影画像）が存在する場合、当該要求撮影画像、及び当該要求撮影画像におけるターゲットの位置を、入力部１４を介して指定する。そして、遠隔指示者は、これらの指定が終了すると、要求撮影画像指定ボタン１５Ａを、入力部１４を介して指定する。

本実施形態では、遠隔支援システム９０による遠隔支援の対象が対象物５０に対するメンテナンスであるため、上記要求される撮影位置は、当該メンテナンスを開始する時点において対象物５０に向き合う位置となる。例えば、対象物５０であるデジタル複合機の内部のメンテナンスを行う場合で、かつ、当該メンテナンスの最初にデジタル複合機の前面の扉を開ける必要がある場合がある。この場合、遠隔指示者は、デジタル複合機の正面の撮影位置からの撮影によって得られた撮影画像を要求撮影画像として指定する。

一方、遠隔指示者は、表示されている複数の撮影画像に要求撮影画像が存在しない場合、当該要求撮影画像の撮影位置に最も近い撮影位置から撮影された撮影画像（上述した撮影画像３５Ａに相当し、以下「最近位置撮影画像」という。）を、入力部１４を介して指定する。そして、遠隔指示者は、最近位置撮影画像の指定が終了すると、最近位置撮影画像指定ボタン１５Ｂを、入力部１４を介して指定する。

遠隔指示者によって要求撮影画像指定ボタン１５Ａ又は最近位置撮影画像指定ボタン１５Ｂが指定されると、ステップ２０２が肯定判定となってステップ２０４に移行する。

ステップ２０４で、ＣＰＵ１１は、遠隔指示者によって要求撮影画像が指定されたか否かを判定し、否定判定となった場合はステップ２０６に移行する。ステップ２０６で、ＣＰＵ１１は、上述した再撮影指示情報を生成してアクセス元の端末装置３０に送信し、その後に本遠隔支援処理を終了する。

一方、ステップ２０４において肯定判定となった場合はステップ２０８に移行し、ＣＰＵ１１は、上述した位置・向き情報送信指示情報をアクセス元の端末装置３０に送信する。これに応じて、アクセス元の端末装置３０から位置・向き情報が送信されてくるため、ステップ２１０で、ＣＰＵ１１は、アクセス元の端末装置３０からの位置・向き情報が受信されるまで待機する。

ステップ２１２で、ＣＰＵ１１は、受信した位置・向き情報と、指定された要求撮影画像に対応する撮影関連情報及びターゲットの位置を用いて、上述した誘導画像表示情報及びマーカ表示情報を導出する。ステップ２１４で、ＣＰＵ１１は、導出した誘導画像表示情報及びマーカ表示情報をアクセス元の端末装置３０に送信する。

ステップ２１６で、ＣＰＵ１１は、遠隔支援処理の終了タイミングが到来したか否かを判定し、否定判定となった場合はステップ２１０に戻る一方、肯定判定となった場合は本遠隔支援処理を終了する。なお、本実施形態では、上記終了タイミングとして、遠隔指示者によって、遠隔支援処理の終了を指示する指示入力が行われたタイミングを適用しているが、これに限るものではない。例えば、受信した位置・向き情報が示す撮影位置及び向きが、要求される撮影位置及び向きとなったことを検出したタイミングや、利用者から作業の終了を示す情報が受信されたタイミングを上記終了タイミングとして適用する形態としてもよい。

なお、上記実施形態では、遠隔支援処理の実行に先立って行う複数回の撮影として、一例として図４に示すように、対象物５０に対する正面、右側面、背面、及び左側面の４回の撮影を適用した場合について説明したが、これに限るものではない。撮影回数は、４回に限らず、複数回であれば如何なる回数でもよく、撮影位置及び向きについても、一例として図１１に示すように、右前方斜め上、左後方斜め下等といった任意の撮影位置及び向きを適用する形態としてもよい。

この場合、対象物５０の正面、一方の側面、及び上面が１画像に含む一方向を含むものとすることが、１画像で、より多くの面を撮影することができ、利用者を、より効率よく誘導することができ、好ましい。

また、上記実施形態では、利用者と要求される撮影位置とのずれ量に応じて変更する誘導画像の表示状態として透過率を適用した場合について説明したが、これに限るものではない。例えば、点滅間隔及び表示色の少なくとも一方を上記表示状態として適用する形態としてもよいし、点滅間隔及び表示色に透過率を加えた３種類の表示状態のうちの複数種類の組み合わせを上記表示状態として適用する形態としてもよいことは上述した通りである。例えば、上記表示状態として点滅間隔を適用する場合、上記ずれ量が少なくなるほど点滅間隔を短くする形態が例示され、上記表示状態として表示色を適用する場合、上記ずれ量が少なくなるほど赤色に近づける形態が例示される。

［第２実施形態］
第１実施形態では、遠隔支援処理の実行に先立って、端末装置３０により静止画像を撮影する場合の形態について例示したが、本実施形態では、遠隔支援処理の実行に先立って、端末装置３０により動画像を撮影する場合の形態例について説明する。

なお、本実施形態に係る遠隔支援システム９０の構成は、第１送信部３１Ａ及び撮影関連情報データベース３３Ｂを除いて第１実施形態に係る遠隔支援システム９０と同一である。このため、ここでは、本実施形態に係る第１送信部３１Ａ及び撮影関連情報データベース３３Ｂのみについて説明する。

即ち、本実施形態に係る第１送信部３１Ａは、遠隔支援処理の実行に先立って行われる、対象物に対する撮影が動画撮影である場合、当該動画撮影によって得られた動画像における予め定められた枚数毎に１枚の静止画像を選択して遠隔装置１０に送信する。

また、図示は省略するが、本実施形態では、撮影関連情報データベース３３Ｂにおける撮影画像を示す情報として、静止画像を示す情報に代えて、動画像を示す画像情報を登録する。また、撮影関連情報データベース３３Ｂにおける撮影位置及び向きの各情報として、対応する動画像における撮影位置及び向きの各情報を、予め定められた撮影期間（本実施形態では、０．３秒）毎に登録する。

以下、本実施形態に係る遠隔支援システム９０の作用を説明する。なお、本実施形態に係る作用は、誘導画像表示処理を除いて第１実施形態に係る遠隔支援システム９０と同一であるため、ここでは、図１２を参照して、誘導画像表示処理を実行する場合の本実施形態に係る端末装置３０の作用のみについて説明する。図１２は、本実施形態に係る誘導画像表示処理の一例を示すフローチャートであり、図５と同一の処理を行うステップについては図５と同一のステップ番号を付して、その説明を省略する。

図１２に示すように、本実施形態に係る誘導画像表示処理は、ステップ１００の処理に代えて、ステップ１０１Ａ及びステップ１０１Ｂの処理が適用されている点のみが第１実施形態に係る誘導画像表示処理と異なっている。

即ち、ステップ１０１Ａで、ＣＰＵ３１は、撮影関連情報データベース３３Ｂに記憶されている全ての情報（以下、「動画像情報」という。）を読み出す。ステップ１０１Ｂで、ＣＰＵ１１は、読み出した動画像情報から撮影位置及び向きを示す情報が記憶された画像情報を抽出し、抽出した画像情報から、予め定められた枚数（本実施形態では、１０枚）毎に１枚ずつの画像情報を選択する。

以上の処理によって選択された複数の画像情報は各々静止画像を示す情報であり、ステップ１０２で、ＣＰＵ１１は、当該画像情報と、当該画像情報に対応する撮影位置及び向きを示す情報とを関連付けて遠隔装置１０に送信することになる。そして、これ以降、端末装置３０及び遠隔装置１０は、第１実施形態と同様に作用する。

なお、上記各実施形態では、誘導画像として、一例として図７及び図８に示した矩形の誘導画像３５Ｂを適用した場合について説明したが、これに限るものではない。例えば、一例として図１３に示すように、要求される撮影方向（向き）に垂直な面である撮影方向指示面６０Ａを有する多面体を誘導画像６０として適用する形態としてもよい。なお、図１３は、この形態に係る誘導画像６０の一例を示す斜視図である。

図１３に示すように、この誘導画像６０は、上述した撮影方向指示面６０Ａと、８つの頂点６０ａ～６０ｈを有する正六面体（立方体）の形状とされている。

この誘導画像６０を適用する場合、遠隔装置１０のＣＰＵ１１は、一例として図１０に示した画像選択画面に引き続き、遠隔指示者によって指定された要求撮影画像を拡大して表示部１５に表示する。そして、遠隔装置１０のＣＰＵ１１は、誘導画像６０における撮影方向指示面６０Ａを除く画像、即ち、正六面体の辺のみで構成される画像（以下、「元誘導画像」という。）を要求撮影画像に重畳して表示部１５に表示する。

元誘導画像が表示部１５に表示されると、遠隔指示者は、表示された元誘導画像を要求される撮影位置に移動させる操作を行うと共に、撮影方向指示面６０Ａが、要求される向きによる撮影方向に垂直な面、又は当該面に傾斜角度が最も近い面となる頂点を指定する。図１３に示す例において撮影方向指示面６０Ａを指定する場合、遠隔指示者は、頂点６０ａ、頂点６０ｃ、及び頂点６０ｆの３つの頂点を指定する。遠隔指示者による指定によって誘導画像６０が得られると、遠隔装置１０のＣＰＵ１１は、当該誘導画像６０を示す誘導画像表示情報を、アクセス元の端末装置３０に送信する。

誘導画像表示情報を受信すると、アクセス元の端末装置３０のＣＰＵ３１は、受信した 誘導画像表示情報を用いて、一例として図１４に示す誘導画像表示画面を表示部３５によって表示する。

この場合、元誘導画像は正六面体であるため、撮影方向指示面６０Ａは、当該面を正面から見た場合に歪みのない正三角形となり、向きは右斜め下を向く向きとなり、傾斜角度は４５度となる。従って、この場合、利用者は、誘導画像表示画面を参照して、撮影方向指示面６０Ａが正三角形となるように端末装置３０による撮影位置及び向きを調整する。

なお、元誘導画像として正六面体を適用した場合で、かつ、撮影方向指示面６０Ａとして垂直な面を指定すると共に、撮影方向として右斜め前方を指定したい場合、一例として図１５に示すように、頂点６０ａ、頂点６０ｃ、頂点６０ｅ、及び頂点６０ｇの４つの頂点を指定すればよい。また、撮影方向指示面６０Ａとして元誘導画像の外周面を指定したい場合は、例えば、頂点６０ｂ、頂点６０ｃ、頂点６０ｆ、及び頂点６０ｇを指定すればよい。この場合、４つの頂点を指定することに代えて、撮影方向指示面６０Ａとしたい面を直接指定する形態としてもよい。この形態では、１度の指定操作のみで撮影方向指示面６０Ａを指定することができるため、頂点を指定することで撮影方向指示面６０Ａを指定する場合に比較して、より簡易に撮影方向指示面６０Ａを指定することができる。

また、上記多面体は正六面体に限るものではなく、一例として図１６に示すように、元誘導画像として正四面体とされた誘導画像６４を適用する形態としてもよく、各辺の長さが異なる六面体や四面体等を適用する形態としてもよい。更に、多面体を用いた誘導画像は、以上のような撮影方向指示面６０Ａのみを有するものに限るものではなく、一例として図１７に示すように、撮影方向指示面６０Ａを含み、かつ、対象物に至る柱状画像６６Ａを更に含む誘導画像６６を適用する形態としてもよい。なお、錯綜を回避するために、図１７では、撮影方向指示面６０Ａ及び対象物の記載を省略している。

更に、一例として図１８に示すように、端末装置３０の表示部３５に、誘導画像６０に加えて、当該誘導画像６０の多面体と同一形状及び同一寸法で、かつ、撮影方向指示面６０Ａを有しない複数の多面体６０Ｂを、対象物５０を含む領域を包含するように並べて表示する形態としてもよい。この形態によれば、対象物５０が比較的遠方に存在する場合であっても、遠隔指示者によって指定された、要求される撮影位置及び向きが把握しやすくなる。

以上、実施形態を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更又は改良を加えることができ、該変更又は改良を加えた形態も本発明の技術的範囲に含まれる。

また、上記実施形態は、クレーム（請求項）にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の組み合わせにより種々の発明が抽出される。実施の形態に示される全構成要件から幾つかの構成要件が削除されても、効果が得られる限りにおいて、この幾つかの構成要件が削除された構成が発明として抽出され得る。

また、上記実施形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ（例えば、ＣＰＵ等）や、専用のプロセッサ（例えば、ＧＰＵ： Graphics Processing Unit、ＡＳＩＣ： Application Specific Integrated Circuit、ＦＰＧＡ： Field Programmable Gate Array、プログラマブル論理デバイス、等）を含むものである。

更に、上記実施形態では、誘導画像表示処理及び遠隔支援処理を、プログラムを実行することにより、コンピュータを利用してソフトウェア構成により実現する場合について説明したが、本発明はこれに限定されるものではない。例えば、誘導画像表示処理及び遠隔支援処理を、ハードウェア構成や、ハードウェア構成とソフトウェア構成の組み合わせによって実現する形態としてもよい。

その他、上記実施形態で説明した遠隔装置１０及び端末装置３０の構成は一例であり、本発明の主旨を逸脱しない範囲内において不要な部分を削除したり、新たな部分を追加したりしてもよいことは言うまでもない。

また、上記実施形態で説明した誘導画像表示処理及び遠隔支援処理の流れも一例であり、本発明の主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

１０ 遠隔装置
１１ ＣＰＵ
１１Ａ 第２受信部
１１Ｂ 第２表示制御部
１１Ｃ 受付部
１１Ｄ 導出部
１１Ｅ 第２送信部
１２ メモリ
１３ 記憶部
１３Ａ 遠隔支援プログラム
１４ 入力部
１５ 表示部
１５Ａ 要求撮影画像指定ボタン
１５Ｂ 最近位置撮影画像指定ボタン
１５ａ～１５ｄ 撮影画像
１６ 媒体読み書き装置
１７ 記録媒体
１８ 通信Ｉ／Ｆ部
３０ 端末装置
３１ ＣＰＵ
３１Ａ 第１送信部
３１Ｂ 第１受信部
３１Ｃ 第１表示制御部
３２ メモリ
３３ 記憶部
３３Ａ 誘導画像表示プログラム
３３Ｂ 撮影関連情報データベース
３４ 入力部
３５ 表示部
３５Ａ 撮影画像
３５Ｂ 誘導画像
３５Ｃ 撮影方向画像
３５Ｄ マーカ
３５Ｅ 終了ボタン
３６ 媒体読み書き装置
３７ 記録媒体
３８ 撮影部
３９ マイク
４０ 位置検出部
４２ 無線通信部
５０ 対象物
６０ 誘導画像
６０Ａ 撮影方向指示面
６０Ｂ 多面体
６０ａ～６０ｈ 頂点
６４ 誘導画像
６６ 誘導画像
６６Ａ 柱状画像
８０ ネットワーク
９０ 遠隔支援システム

Claims (20)

1. 端末装置と遠隔装置とを含む遠隔支援システムであって、
   前記端末装置は第１のプロセッサを備え、
   前記第１のプロセッサは、
   各々異なる方向から対象物を撮影して得られた複数の画像情報を前記遠隔装置に送信し、
   前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、
   受信した前記表示情報が示す誘導画像を表示し、
   前記遠隔装置は第２のプロセッサを備え、
   前記第２のプロセッサは、
   前記複数の画像情報を前記端末装置から受信し、
   受信した前記複数の画像情報が示す画像を表示し、
   表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、
   受け付けた画像を用いて前記表示情報を導出し、
   導出した前記表示情報を前記端末装置に送信する、
   遠隔支援システムであり、
   前記第１のプロセッサは、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更する、
   遠隔支援システム。
2. 前記画像情報は、静止画像を示す画像情報、及び動画像を示す画像情報の何れか一方である、
   請求項１に記載の遠隔支援システム。
3. 前記第１のプロセッサは、前記画像情報が前記動画像を示す画像情報である場合、当該動画像における予め定められた枚数毎に１枚の静止画像を選択して前記遠隔装置に送信する、
   請求項２に記載の遠隔支援システム。
4. 前記誘導画像は、３次元の画像である、
   請求項１～請求項３の何れか１項に記載の遠隔支援システム。
5. 前記３次元の画像は、前記対象物に対する撮影領域の３次元空間において仮想的に表示され、かつ、要求される前記対象物に対する撮影位置及び撮影方向を示す３次元の画像である、
   請求項４に記載の遠隔支援システム。
6. 前記３次元の画像は、多面体として構成されている、
   請求項５に記載の遠隔支援システム。
7. 前記誘導画像は、端末装置が要求される撮影位置及び向きとなった場合に予め定められた状態となる画像である、
   請求項１～請求項６の何れか１項に記載の遠隔支援システム。
8. 前記予め定められた状態は、歪みのない状態である、
   請求項７に記載の遠隔支援システム。
9. 前記歪みのない状態は、矩形の状態である、
   請求項８に記載の遠隔支援システム。
10. 前記異なる方向は、対象物の正面に正対する一方向を含む、
    請求項１～請求項９の何れか１項に記載の遠隔支援システム。
11. 前記異なる方向は、対象物の正面、一方の側面、及び上面が１画像に含む一方向を含む、
    請求項１～請求項１０の何れか１項に記載の遠隔支援システム。
12. 前記表示状態は、点滅間隔、表示色、透過率の少なくとも１つである、
    請求項１～請求項１１の何れか１項に記載の遠隔支援システム。
13. 前記第１のプロセッサは、前記透過率を変更する場合、前記ずれ量が少なくなるほど当該透過率を増加させる、
    請求項１２に記載の遠隔支援システム。
14. 前記第１のプロセッサは、対象物の対象とする位置が撮影されたら、当該位置にマーカを仮想的に表示する、
    請求項１～請求項１３の何れか１項に記載の遠隔支援システム。
15. 前記第２のプロセッサは、受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信する、
    請求項１～請求項１４の何れか１項に記載の遠隔支援システム。
16. 前記指示情報は、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含む、
    請求項１５に記載の遠隔支援システム。
17. プロセッサを備え、
    前記プロセッサは、
    各々異なる方向から対象物を撮影して得られた複数の画像情報を遠隔装置に送信し、
    前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、
    受信した前記表示情報が示す誘導画像を表示する、
    端末装置であり、
    前記プロセッサは、利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更する、
    端末装置。
18. プロセッサを備え、
    前記プロセッサは、
    各々異なる方向から対象物を撮影して得られた複数の画像情報を端末装置から受信し、
    受信した前記複数の画像情報が示す画像を表示し、
    表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、
    受け付けた画像を用いて、要求される撮影位置に誘導する誘導画像を表示するための表示情報を導出し、
    導出した前記表示情報を前記端末装置に送信する、
    遠隔装置であり、
    前記プロセッサは、受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信し、
    前記指示情報は、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含む、
    遠隔装置。
19. 各々異なる方向から対象物を撮影して得られた複数の画像情報を遠隔装置に送信し、
    前記画像情報を用いて前記遠隔装置によって導出された、要求される撮影位置に誘導する誘導画像を表示するための表示情報を受信し、
    受信した前記表示情報が示す誘導画像を表示する、
    処理であり、
    利用者による撮影位置と、要求される撮影位置とのずれ量に応じて前記誘導画像の表示状態を変更する、
    処理をコンピュータに実行させるための誘導画像表示プログラム。
20. 各々異なる方向から対象物を撮影して得られた複数の画像情報を端末装置から受信し、
    受信した前記複数の画像情報が示す画像を表示し、
    表示した画像からの、要求される撮影位置から撮影された画像の選択を受け付け、
    受け付けた画像を用いて、要求される撮影位置に誘導する誘導画像を表示するための表示情報を導出し、
    導出した前記表示情報を前記端末装置に送信する、
    処理であり、
    受信した前記複数の画像情報が示す画像に、要求される撮影位置から撮影されたものが含まれない場合、再撮影を指示する指示情報を前記端末装置に送信し、
    前記指示情報は、要求される撮影位置に最も近い撮影位置での撮影で得られた前記画像情報を特定する特定情報を含む、
    処理をコンピュータに実行させるための遠隔支援プログラム。