JP2005123750A - 映像・地図連動システム及びその連動方法 - Google Patents

Abstract

【課題】 遠隔地のカメラで撮影される撮影映像と、対応する地図とを、利用端末画面上で連動させて表示すると共に、撮影映像を地図上で容易に特定する。
【解決手段】 映像・地図連動システムは、利用端末５１と、遠隔地に設けられたカメラ３１と、利用端末５１及びカメラ３１に通信ネットワークを介して接続される映像・地図情報処理サーバー４１と、を備え、映像・地図情報処理サーバー４１は、操作認識部２１と、映像・地図同期処理部１４と、地図・映像位置データ記憶部１３と、を含み、映像・地図同期処理部１４は、映像又は地図についての操作入力信号に基づき、カメラ３１で撮影される撮影対象物を含む映像データを取得すると共に、地図・映像位置データ記憶部１３から映像データに対応する地図データを取得し、撮影対象物を含む映像データに関する撮影情報を地図データ上に反映させる。
【選択図】図１

Description

この発明は、インターネット等の通信回線を利用する、映像と地図とを連動させて表示するシステム及びその連動方法に関し、より詳細には、利用端末における画面上に、遠隔地で取得される映像の撮影方向や撮影の倍率等に対応して、映像と地図とを連動させて表示する映像・地図連動システム及びその連動方法に関する。

近年、インターネット等の通信回線の発達に伴い、インターネットを通じてニュースや音楽、買い物・観光等の情報を映像で配信することが行われている。また、防犯や災害対策等のために、監視する目的で監視対象となる映像をインターネットを通じて配信することも行われている。これらに伴い、インターネット上で遠隔地に設置された定点カメラ等のカメラにより撮影される映像と、このカメラが設置される地点周辺の地図とを、利用端末上に表示させるシステムが開発されている。

上記に関連する従来技術として、下記の特許文献１には、監視地点が選択されると、選択された監視地点の局域地図と共に、選択された監視地点の監視カメラから撮像動画を受信して、その映像を画面表示する監視システムが開示されている。
特開平１１−１０２４９５号公報（第１頁、第６図）

しかしながら、従来のシステムでは、撮影の方向や、撮影の倍率にもとづいて決定される視野の範囲等の撮影情報を地図上に反映させたり、このような撮影情報を反映させた地図と撮影される映像とを連動させて表示することは出来ない。このため、利用端末の画面に表示される撮影映像を見ている者は、その画面に撮影映像として映っている風景や撮影の対象物等が具体的に何かを特定することは難しく、撮影映像についての情報を容易に把握することが出来ないという問題があった。

即ち、従来のように、カメラが設置される地点周辺の地図を利用端末の画面上に表示するのみでは、カメラにより撮影された映像（撮影映像）が表示されている画面を見た者は、その撮影映像が、具体的に地図上のどの方向の風景を示しているのか、又はどの対象物を示しているのか等の情報を容易に把握することはできない。

また、防犯や災害対策等のために監視する目的においても、画面に表示される映像（撮影映像）について具体的に特定できることが要望される。

本発明は、遠隔地に設置されたカメラにより撮影される映像と、この映像に対応する地図とを、利用端末における画面上で連動させて表示することができると共に、撮影された映像について、地図上で容易に特定することができる映像・地図連動システム及びその連動方法を実現することを課題とするものである。

また、利用端末の画面上において、遠隔地に設置されたカメラで撮影される映像と連動して表示される地図を基に、容易に所望とする映像を表示させることができる映像・地図連動システム及びその連動方法を実現することを課題とするものである。

本発明は上記課題を解決するために、一つ又は複数の利用端末と、遠隔地に設けられた少なくとも１つのカメラと、前記利用端末及び前記カメラに通信ネットワークを介して接続される映像・地図情報処理サーバーと、を備えた映像・地図連動システムであって、前記映像・地図情報処理サーバーは、操作認識部と、映像・地図同期処理部と、地図・映像位置データ記憶部と、を含んでおり、前記操作認識部は、前記利用端末からの入力に基づき、映像又は地図についての操作入力信号を前記映像・地図同期処理部に送り、前記地図・映像位置データ記憶部は、地図データと、該地図データに対応させて、少なくとも前記カメラの位置データを記憶し、前記映像・地図同期処理部は、前記映像又は地図についての操作入力信号に基づき、前記カメラで撮影される撮影対象物を含む映像データを取得すると共に、前記地図・映像位置データ記憶部から前記映像データに対応する地図データを取得し、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることを特徴とする映像・地図連動システムを提供する。

前記映像・地図同期処理部は、前記カメラの位置から前記カメラで撮影される撮影対象物の位置までの平面上における距離を算出して、前記地図データ上における前記撮影対象物の位置を特定することにより、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることが好ましい。

前記撮影対象物を含む前記映像データに関する撮影情報には、少なくとも前記カメラの撮影方向、撮影の視野範囲、撮影の倍率、前記撮影対象物の位置、及び、前記撮影対象物についての情報が含まれていることが好ましい。

前記撮影情報のうち少なくとも前記撮影対象物についての情報を、音声により伝達することにしてもよい。

また本発明は、一つ又は複数の利用端末と、遠隔地に設けられた少なくとも１つのカメラとに、通信ネットワークを介して映像・地図情報処理サーバーを接続し、前記カメラで撮影される映像を、地図と共に前記利用端末に表示させる映像・地図連動方法であって、前記利用端末からの入力に基づき、前記カメラで撮影される撮影対象物を含む映像データを取得すると共に、該映像データに対応する地図データを取得し、前記カメラの位置から前記撮影対象物の位置までの平面上における距離を算出することにより、前記地図データ上における前記撮影対象物の位置を特定し、特定された前記撮影対象物の位置を基に、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることを特徴とする映像・地図連動方法を提供する。

前記撮影対象物を含む前記映像データに関する撮影情報には、少なくとも前記カメラの撮影方向、撮影の視野範囲、撮影の倍率、前記撮影対象物の位置、及び、前記撮影対象物についての情報が含まれていることが好ましい。

前記撮影情報のうち少なくとも前記撮影対象物についての情報を、音声により伝達することにしてもよい。

以上の構成から成る本発明に係る映像・地図連動システム及びその連動方法によると、遠隔地に設置されたカメラにより撮影される所望の撮影映像と、この撮影映像に対応する地図とを、利用端末における画面上で連動させて表示することができると共に、撮影された所望の映像について、地図上で容易に特定することができる。

また、利用端末の画面上において、遠隔地に設置されたカメラで撮影される映像と連動して表示される地図を基にして、容易に所望とする撮影映像を表示させることができる。

本発明に係る映像・地図連動システム及びその連動方法を実施するための最良の形態を実施例に基づいて図面を参照して説明する。

図１は、本発明の実施例１に係る映像・地図連動システムの全体構成を示す図である。この映像・地図連動システムは、複数の利用端末５１と、少なくとも一つのカメラ３１と、利用端末５１及びカメラ３１に、通信ネットワークを介して接続された映像・地図情報処理サーバー４１とを備える。なお、図１では、複数の利用端末５１のうち一つの利用端末５１のみが図示されている。また、利用端末５１は一つであってもよい。

利用端末５１は、入出力インターフェイス、ＣＰＵ（中央演算処理装置）、記憶装置等（以上、特に図示せず）を備えており、入力部１９及び表示部２０が設けられた通常のパーソナルコンピューター（パソコン）である。

図２は、利用端末５１の画面５２の一例を具体的に示した図である。利用端末５１の画面５２には、表示部２０として、映像表示部２０ａと地図表示部２０ｂとが並んで示されている。映像表示部２０ａはカメラ３１で撮影された映像を表示し、地図表示部２０ｂは、この映像に対応した（連動した）地図を表示する。

本発明の特徴の一つは、撮影された映像と対応して表示させた地図上に、撮影の方向、撮影の視野範囲等、この映像（映像データ）に関する撮影情報を地図（地図データ）上に反映させていることである。

具体的には、地図表示部２０ｂでは、地図上における（表示された）カメラ３１’の位置を中心にして扇形の撮影の視野範囲３７’が表示されている。カメラ３１’の位置から撮影された映像の焦点、言い換えれば、地図上における撮影対象物の位置までが矢印３６で表されている。つまり、カメラ３１’の位置から延びる矢印３６の先端にこの撮影対象物が位置している。矢印３６の長さｌ（エル）は、カメラ３１’の位置から撮影対象物の位置までの、この地図上における距離を表す。

画面５２上には、表示部２０と共に、入力部１９が示されている。入力部１９は、映像表示部２０ａに表示された映像を拡大又は縮小する倍率変更についての操作入力ボタン１９ａと、映像表示部２０ａに表示された映像の方向を操作する操作入力ボタン１９ｂと、地図表示部２０ｂに表示された地図を拡大又は縮小する倍率変更についての操作入力ボタン１９ｃと、地図表示部２０ｂに表示された地図の方向を操作する操作入力ボタン１９ｄとを有する。

操作入力ボタン１９ａ、１９ｃのうち、＋の印が付けられた操作入力ボタンは、それぞれ映像又は地図を拡大するときに操作し、−の印が付けられた操作入力ボタンは、それぞれ映像又は地図を縮小するときに操作する。操作入力ボタン１９ｂのうち、図２の紙面に向かって右側の操作入力ボタンは、映像表示部２０ａに表示されている映像を基準にして、さらに右方向の映像を見たい場合に操作し、図２の紙面に向かって左側の操作入力ボタンは、さらに左方向の映像を見たい場合に操作する。

一方、操作入力ボタン１９ｄのうち、図２の紙面に向かって右側の操作入力ボタンは、地図表示部２０ｂに表示されている地図上のカメラ３１’の視野範囲３７’を基準にして、この視野範囲３７’よりもさらに右周り方向にある視野範囲（映像表示部２０ａで表示されている映像のさらに右方向の映像に対応する）を見たい場合に操作する。同様に、操作入力ボタン１９ｄのうち、図２の紙面に向かって左側の操作入力ボタンは、地図上に示されているカメラ３１’の視野範囲３７’よりもさらに左周り方向にある視野範囲（映像表示部２０ａで表示されている映像のさらに左方向の映像に対応する）を見たい場合に操作する。

なお、本実施例では、入力部１９として利用端末５１の画面５２上に操作入力ボタン１９ａ〜１９ｄを設けているが、同様の操作を利用端末５１に接続される例えばキーボードから入力することにしてもよい。

再び、図１を参照して、カメラ３１は、遠隔地に設けられる定点カメラ（ライブカメラ）である。カメラ３１は、例えば、ニュースや音楽、買い物・観光等の情報を映像で配信するためや、防犯、災害対策等の監視カメラとして利用され得る。なお、実施例１ではカメラ３１として、例えば自動焦点機能を有するカメラを用いている。また、カメラ３１は、パン、ＰＡＮ機能（左右方向にカメラが首振り状に回る機能）及びチルト、ＴＩＬＴ機能（上下方向にカメラが首振り状に動く機能）を有する。

なお、カメラとして、自動焦点機能を有さずに、３６０度全方位において映像データの取得を可能とする全方位撮影型のカメラ（後述する実施例２参照）を用いても良い。また、実施例１の自動焦点機能を有する（全方位型でない）カメラ３１と、後述する実施例２の全方位撮影型のカメラとを組合わせて複数用いてもよい。

自動焦点機能を有する実施例１の３１カメラは、信号入力部７と、受信された信号を制御する制御部５と、映像撮影部１と、映像出力部６と、信号出力部８と、を備える。そして、映像撮影部１は、焦点計測部２、方向計測部３、及び角度計測部４を有する。

信号入力部７は、例えば通信ネットワークを介してカメラ３１と接続された映像・地図情報処理サーバー４１からの信号を受信する。制御部５は、受信された信号に基づき映像撮影部１を制御する。映像撮影部１は、この信号に基づき所望の映像を撮影する。撮影の際には、映像撮影部１において、焦点計測部２、方向計測部３、角度計測部４は、それぞれ、カメラ３１で撮影される撮影対象物までの焦点距離、方向、角度を計測する。映像出力部６は、撮影された撮影対象物を含む映像データを映像・地図情報処理サーバー４１に通信ネットワークを介して送信する。信号出力部８は、撮影対象物について計測された、これらの焦点距離、方向、角度についての計測値のデータを、映像データに関する撮影情報として、同様に映像・地図情報処理サーバー４１に通信ネットワークを介して送信する。

映像・地図情報処理サーバー４１は、映像入力部９と、信号出力部１０と、信号入力部１１と、映像変換（処理）部１２と、地図・映像位置データ記憶部１３と、映像・地図同期処理部１４と、映像・地図出力部１５と、操作認識部２１と、を備える。

操作認識部２１は、利用端末５１からの入力に基づき映像又は地図についての操作入力信号を映像・地図同期処理部１４に送る。具体的には、操作認識部２１は、倍率変更認識部１６と、カメラ方向変更認識部１７と、地図方向変更（操作）認識部１８と、を有する。

倍率変更認識部１６は、利用端末５１の入力部１９から入力される、映像データ又は地図データを拡大又は縮小する倍率変更についての指示に基づき、その操作入力信号を映像・地図同期処理部１４に送る。具体的には、図２に示されるように、映像表示部２０ａに表示された映像を参照して映像データの拡大又は縮小についての指示、もしくは地図表示部２０ｂに表示された地図を参照して地図の拡大又は縮小についての指示が、それぞれ操作入力ボタン１９ａ、１９ｃにより行われる。すると、この操作入力ボタン１９ａ、１９ｃにより行われた拡大又は縮小の倍率変更についての指示入力量が定量化（数値データ化）されて操作入力信号として映像・地図同期処理部１４に送られる。

カメラ方向変更認識部１７は、利用端末５１の入力部１９から入力される、映像データの方向についての指示に基づき、その操作入力信号を映像・地図同期処理部１４に送る。具体的には、図２に示されるように、映像表示部２０ａに表示された映像を基に、見たい方向についての指示入力が操作入力ボタン１９ｂにより行われる。すると、操作入力ボタン１９ｂにより行われた入力量が定量化（数値データ化）されて操作入力信号として映像・地図同期処理部１４に送られる。

地図方向変更（操作）認識部１８は、利用端末５１の入力部１９から入力される、地図についての操作入力信号を映像・地図同期処理部１４に送る。具体的には、地図表示部２０ｂに表示された視野範囲３７’を基に、さらに見たい視野範囲の方向についての指示が、操作入力ボタン１９ｄにより行われる。すると、操作入力ボタン１９ｄにより行われた入力量が、上記と同様にして定量化（数値データ化）されて操作入力信号として映像・地図同期処理部１４に送られる。

利用端末５１から送られてきたこれらの操作入力信号はそれぞれ、映像・地図同期処理部１４で映像を撮影するための信号に変換された後、信号出力部１０から、通信ネットワークを介してカメラ３１内に送信される。

映像入力部９は、カメラ３１で撮影された映像データを、通信ネットワークを介してデジタル信号として受信する。映像変換（処理）部１２は、このデジタル信号を映像入力部９から受け取り映像データに変換した後、映像・地図同期処理部１４へ送る。

信号入力部１１は、カメラ３１で撮影された映像データに関する撮影情報、具体的には例えば、カメラ３１内の信号出力部８から送信される、撮影の際の映像についての焦点距離の計測値、方向の計測値、及び、角度の計測値についてのデータを受信し、映像・地図同期処理部１４に送る。

一方、地図・映像位置データ記憶部１３は、少なくとも、設置されているカメラ３１の位置データ（カメラ３１の位置についてのデータ、例えばカメラ３１の位置座標データ）を、地図データに対応させて記憶している。つまり、カメラ３１の位置データと、地図データ上におけるカメラ３１’の位置データとを対応させて記憶している。

さらには、地図・映像位置データ記憶部１３に、カメラ３１で撮影される撮影対象物の地図データ上における位置（撮影対象物の位置データ、例えば撮影対象物の位置座標データ）と、この撮影対象物の位置データに対応させて、その撮影対象物についての情報を記憶させておいてもよい。地図データ上における撮影対象物についての情報としては、例えば、その撮影対象物が建物の場合、建物の名称、建物の所在地の住所、建物が有しているホームページのアドレス等の建物についての情報が挙げられる。また、その撮影対象物が山等の景色の場合であっても、同様に、その山の名称、その山の所在地の住所、その山への行き方、その山についての情報が掲載されているホームページのアドレス等の情報が挙げられる。

なお、またさらに、地図・映像位置データ記憶部１３に、カメラ３１で撮影される撮影対象物の撮影画面上における位置データ、つまり、カメラ３１の映像撮影部１の撮影画面を座標に見立て、この座標に見立てた撮影画面上における撮影対象物の位置データと、地図データ上における撮影対象物の位置データとを予め対応づけて記憶させておくことにしてもよい。

映像・地図同期処理部１４では、映像変換（処理）部１２から送られてきた映像データと、地図・映像位置データ記憶部１３に記憶されている地図データとを連動させる。つまり、映像・地図同期処理部１４は、カメラ３１で撮影された撮影対象物を含む映像データを、映像変換（処理）部１２を経て取得すると共に、この映像データに対応する地図データを地図・映像位置データ記憶部１３から取得する。それと同時に、信号入力部１１から送られてきた撮影方向、撮影の視野範囲、撮影の中心点、撮影の倍率等の映像データに関する撮影情報を取得した地図データに反映させる。このような映像・地図同期処理部１４の構成及び動作については、さらに詳しく後述する。

映像・地図出力部１５は、映像・地図同期処理部１４から送られてきた上記の映像データと、この映像データに連動する地図データとを受け取り、利用端末５１に出力送信する。

上述した映像・地図同期処理部１４において、映像データと地図データとを連動させる方法（要するに、取得した映像データに関する撮影情報を、映像データと対応して取得した地図データ上に反映させる方法、映像・地図連動方法）として、例えば以下の方法がある。その方法は、少なくとも、カメラ３１の位置からカメラ３１で撮影される撮影対象物の位置までの平面上（水平面上）における距離を、カメラ３１の位置に基づいて算出し、この算出された平面上における距離から、地図データ上におけるカメラの位置に基づいて撮影対象物の位置を特定する映像・地図連動方法である。つまり、この映像・地図連動方法では、カメラ３１の位置に基づいてカメラ３１の位置から撮影対象物の位置までの平面上における距離を算出する。この算出された平面上における距離に対応して、地図データ上におけるカメラの位置からの距離が求められる。地図データ上において、カメラの位置からの距離が求められことにより、その距離の先端に位置する撮影対象物の位置が特定されるのである。そして、特定された地図データ上における撮影対象物の位置を基に、撮影対象物を含む映像データに関する撮影情報を地図データ上に反映させる（表示、図示する）。

実施例１では、図１に示される映像・地図同期処理部１４の構成、及び、上記映像・地図連動方法を用いた映像・地図同期システムの動作を以下に詳しく説明する。映像・地図同期処理部１４は、視野算出部１４ａと、カメラ倍率算出部１４ｂと、地図倍率算出部１４ｃと、カメラ方向算出部１４ｄと、地図方向算出部１４ｅと、地図再生処理部１４ｆと、映像・地図同期部１４ｇと、を有する。

カメラ倍率算出部１４ｂは、倍率変更認識部１６から受け取った映像又は地図を拡大又は縮小する倍率変更についての操作入力信号を基に、この倍率変更率を数値データ化する。

地図倍率算出部１４ｃは、カメラ倍率算出部１４ｂで数値データ化された地図の倍率変更率に基づいて、地図・映像位置データ記憶部１３から所望の倍率の地図データを取得する。

カメラ方向算出部１４ｄは、カメラ方向認識部１７から受け取った映像の方向についての操作入力信号を基に、カメラ３１を実際に動かす（映像を撮影する）ためのデータ（信号）に変換して信号出力部１０に送る。また、この変換された映像を撮影するためのデータは、対応する数値データ化された地図上の視野範囲の方向変更率に変換され、地図方向算出部１４ｅに送られる。

地図方向算出部１４ｅは、地図方向変更（操作）認識部１８から受け取った地図についての操作入力信号（地図上における撮影対象物の方向変更についての操作入力信号）を基に、この方向変更率を数値データ化する。また、この数値データ化された方向変更率は、カメラ方向算出部１４ｄに送られる。カメラ方向算出部１４ｄでは、送られてきた撮影対象物の方向変更率に対応して、映像を撮影するためのデータに変換される。

視野算出部１４ａは、カメラ３１内の焦点計測部２及び角度計測部４において計測された数値データより、カメラ３１の位置から映像の焦点Ｆとなる撮影対象物３２までの地上の平面上における距離Ｌを算出する（後述する図３参照）。さらに、視野算出部１４ａは、算出された距離Ｌと、カメラ倍率算出部１４ｂで数値データ化された映像（カメラ）の倍率変更率とから、距離Ｌに対応する地図上における距離ｌ（エル）を算出する。さらに、視野算出部１４ａは、この距離ｌ（エル）や、カメラ倍率算出部１４ｂで数値データ化された倍率変更率や、地図方向算出部１４ｅで数値データ化された方向変更率から、視野の範囲を導き出す（視野の範囲を規定する新たな境界線を算出する）。

地図再生処理部１４ｆは、地図倍率算出部１４ｃにより地図・映像データ記憶部１３から倍率変更率に応じて取得された地図データに、視野算出部１４ａで算出された地図上に表示すべき、距離ｌを有し撮影対象物を示す矢印や、視野の範囲を規定する新たな境界線を図示する。即ち、地図再生処理部１４ｆでは、撮影方向、視野の範囲、撮影対象物（撮影の中心点、映像の焦点）、撮影の倍率等の撮影データに関する撮影情報が反映された地図データが再生される。

映像・地図同期部１４ｇは、地図再生処理部１４ｆで再生された撮影情報が反映された地図データと、映像変換部１２から送られてきた映像データとを同期させる。同期された映像データと地図データとは、映像・地図出力部１５から出力され、利用端末５１に送信され、表示部２０に表示される。

上述した映像データと地図データとを連動させる映像・地図連動方法について、以下にさらに詳述する。図３（ａ）は、視野算出部１４ａにおいて、カメラ３１の位置から映像の焦点Ｆとなる撮影対象物３２の位置までの地上の平面上における距離Ｌを算出する原理を示す図であり、図３（ｂ）は、撮影された映像データと連動して地図データが表示された地図表示部２０ｂを示す図である。

ここで、図３（ａ）に示されるように、地上の平面をＸＹ平面とし、初期状態として所定の倍率に設定された撮影条件において、カメラ３１の位置から撮影対象物３２の位置までの焦点距離をｆ、焦点距離ｆとＸＹ平面とが成す角度をθとする。すると、視野算出部１４ａでは、カメラ３１の位置から撮影対象物３２の位置までのＸＹ平面上における距離Ｌは、Ｌ＝ｆ×cosθとして算出される。算出された距離Ｌに対応して、初期状態において設定されカメラ倍率算出部１４ｂで数値データ化された倍率（倍率変更率）を基に、地図データ上におけるカメラ３１’の位置から撮影対象物３２’の位置までの距離ｌ（エル）が設定（算出）される。つまり、地図データ上における撮影対象物３２’の位置が特定されるのである。なお、設定された距離ｌは、図３（ｂ）の地図表示部２０ｂでは、地図上においてカメラ３１’の位置から撮影対象物３２’の位置に向かう長さ（距離）ｌを有する矢印３６として表示される。

さらに視野算出部１４ａは、地図表示部２０ｂにおいて表示されるべき視野の範囲を設定する（導き出す）。つまり、既に述べたように、算出された距離ｌと、例えば初期状態において設定され地図方向算出部１４ｅで数値データ化された方向（方向変更率）とから、地図上の視野の範囲３７’を規定する境界線が算出（設定）される。つまり、視野範囲３７’は、図３（ｂ）に示されるように、視野の境界線３３、３４と円弧３５とで囲まれた円弧状図形（扇形図形）である。ここで、視野の境界線３３、３４が成す角をαとする。なお、円弧３５の中心には、撮影の中心点、つまり地図上において映像の焦点Ｆ’となる撮影対象物３２’が位置している。

上記のように視野算出部１４ａで算出された地図上に図示すべき距離ｌ（エル）や視野範囲３７’、撮影の中心点（撮影対象物の位置）３２’、撮影の倍率等の映像データに関する撮影情報は、地図再生処理部１４ｆにおいて地図データに反映される。さらに、地図データ上において特定された撮影対象物３２’の位置（位置データ）を基に、撮影対象物３２’の名称や住所等といった撮影対象物３２’についての情報を含む映像データに関する撮影情報が、地図データ上に表示させることができる。撮影情報が反映された地図データは、地図・映像同期部１４ｇで対応する映像データと同期され、同期された映像データと地図データとは、映像・地図出力部１５を介して利用端末５１に送信され、表示部２０に表示される。

なお、少なくとも撮影対象物についての情報を含む映像データに関する撮影情報は、地図データ上に反映（表示）させると共に、利用端末５１から音声出力させることにしてもよい。

次に、利用端末５１から例えば映像を拡大又は縮小する倍率変更についての新たな操作入力、続いて、地図上における撮影の視野範囲（撮影対象物の方向）を変更する新たな操作入力が行われたとする。この場合、まず、カメラ倍率算出部１４ｂは、倍率変更認識部１６から受け取った映像データを拡大又は縮小する倍率変更率についての操作入力信号を基に、この映像の倍率変更率を数値データ化する。そして、カメラ倍率算出部１４ｂは、映像についての数値データ化された倍率変更率と対応する地図についての倍率変更率を算出する。

なお、本実施例では、対応する地図についての倍率変更率の算出を、カメラ倍率算出部１４ｂで行っているが、地図倍率算出部１４ｃが、カメラ倍率算出部１４ｂで算出された映像についての倍率変更率を基に、地図についての倍率変更率を算出することにしてもよい。

一方、地図方向算出部１４ｅは、地図方向変更（操作）認識部１８から受け取った地図上における撮影の視野範囲（例えば撮影対象物の方向）を変更する新たな操作入力信号を基に、撮影対象物の方向変更率を数値データ化する。言い換えれば、地図方向算出部１４ｅは、数値データ化した方向変更率（図２に示した矢印３６の方向についての移動量）を算出し、視野算出部１４ａに送る。

地図倍率算出部１４ｃは、カメラ倍率算出部１４ｂで算出された地図についての倍率変更率に基づいて、地図・映像位置データ記憶部１３からこの倍率変更率に対応する地図データを取得する。そして、視野算出部１４ａは、カメラ倍率算出部１４ｂで算出された地図についての倍率変更率や地図方向算出部１４ｅで算出された撮影対象物の方向変更率を基に、利用端末５１の画面５２上に表示する地図データ上の視野範囲を規定する新たな境界線を算出するのである。

ここで、地図データ上の視野範囲を規定する新たな境界線を算出する原理について具体的に以下に説明する。倍率が変更された新たな地図データを地図・映像位置データ記憶部１３から取得する場合、その倍率の変化率をｐとする。すると、地図再生処理部１４ｆは、倍率変更率ｐに対応して拡大又は縮小された（倍率を変更した）地図を地図・映像位置データ記憶部１３から取得する。なお、倍率変更されると、実際の映像において、カメラ３１の位置から焦点Ｆとなる撮影対象物の位置までの平面上における距離Ｌは変化するが、上記のように倍率変更率ｐに対応して拡大又は縮小された地図を取得するので、地図上に距離ｌとして表示される矢印３６の長さ自体は変化しない。（同様に、地図上に表示される視野の境界線３３、３４の長さ自体も、変化しない。）

倍率変更されて取得された地図上において、新たな視野の境界線３３ａ、３４ａが成す角度をα’とすると、角度α’は、以下の式（１）で表される。

α’＝α／ｐ （１）

式（１）より、新たに規定される視野の境界線３３ａ、３４ａが成す角度α’が求められる。図３（ｃ）に、新たに規定される視野の範囲、つまり、視野の境界線３３ａ、３４ａ及び視野の境界線３３ａ、３４ａが成す角度α’が表示される模式的な図を示す。

さらに、地図データ上における撮影の方向（撮影対象物の方向）が変更されると、新たな撮影の方向についての視野範囲が地図データ上に反映（図示）される。具体的には、地図方向変更認識部１８から送られてくる方向についての操作入力信号に基づいて、地図方向算出部１４ｅで算出された矢印３６の方向についての移動量（数値データ化された方向変更率）を基に、視野算出部１４ａにおいて、視野の境界線３３ａ、３４ａ及び矢印３６の方向が変更された新たな視野の範囲（視野範囲）が算出される。

新たに算出された視野範囲は、地図再生処理部１４ｆにおいて、地図倍率算出部１４ｃから送られてきた地図データ上に反映される（図示される）。その後、映像・地図同期部１４ｇにおいて、新たな視野範囲等が反映された地図データと、カメラ３１から送られてきた映像データとが同期される。同期された地図データと映像データとは、映像地図出力部１５を介して送信され、利用端末５１の表示部２０に表示される。

このように、本発明の映像・地図連動システムによれば、遠隔地に設置されたカメラ３１により、撮影される所望の映像と、この映像に対応して、この映像に関する撮影情報を反映させた地図とを、利用端末５１の表示部２０上で連動させて表示等させることができる。そして、撮影情報としては、上述したように、カメラ３１の撮影方向、撮影の視野範囲、撮影の倍率、撮影対象物の位置、及び、撮影対象物についての情報が、少なくとも含まれる。

（作用）
次に、図１及び図４を参照しつつ、実施例１の映像・地図連動システムの作用（映像・地図連動方法）について説明する。図４は、実施例１に係る映像・地図連動システムの作用（映像・地図連動方法）を説明するフローチャートである。

ステップＳ１で本実施例の映像・地図連動システムの動作を開始すると、撮影倍率、撮影方向等について初期状態に設定された撮影条件下で、カメラ３１で撮影された映像データは、例えば通信ネットワークを介して映像・地図情報処理サーバー４１に送信される。そして、この映像データは、映像・地図情報処理サーバー４１の映像入力部９でデジタル信号として受信された後、映像変換（処理）部１２で映像データに変換され（ステップＳ２）、映像・地図同期処理部１４に送られる。同時に、この映像データに含まれる撮影対象物について計測された焦点距離ｆ、撮影方向等の撮影情報の元となる計測データが、映像・地図情報処理サーバー４１の信号入力部１１で受信され、映像・地図同期処理部１４内に送られる。映像・地図同期処理部１４の視野算出部１４ａで、視野範囲や、カメラ３１の位置から撮影対象物の位置までの平面上における距離Ｌ等が算出される。（ステップＳ３）。算出された視野範囲等は、地図上に表示すべき映像データに関する撮影情報となる。

一方、初期状態に設定された撮影倍率についての数値データは、カメラ倍率算出部１４ｂから地図倍率算出部１４ｃへと送られ、撮影倍率に対応した地図倍率を有する地図データが取得される。そして、地図再生処理部１４ｆにおいて、この地図データに、視野算出部１４ａで算出された映像データに関する撮影情報が図示される（表示される。反映される）。

ステップＳ４で、この映像データに関する撮影情報（撮影方向、撮影の視野範囲、撮影の中心点、撮影の倍率等）が反映された地図データとカメラ３１から映像入力部９及び映像変換部１２を介して送られてきた映像データとが、映像・地図同期部１４ｇにおいて同期される。このようにして、地図データと映像データとが連動される。

同期された映像データと地図データとは、映像・地図出力部１５から利用端末５１に出力送信され、利用端末５１の表示部２０に表示される（ステップＳ５）。

ステップＳ６では、利用端末５１から入力する操作の種類が次のように選択される。映像の倍率変更についての操作入力が行われた場合には、この操作入力についての信号は通信ネットワークを介して地図・映像情報処理サーバー４１に送信され、倍率変更認識部１６を介してこの操作入力量を定量化した操作入力信号が映像・地図同期処理部１４に送られる。この操作入力信号を基に、映像・地図同期処理部１４のカメラ倍率算出部１４ｂにおいてカメラの倍率変更率が算出される（ステップＳ７）。カメラ倍率算出部１４ｂは、算出されたカメラの倍率変更率に対応して地図の倍率変更率を算出する（ステップＳ８）。

ステップＳ６で、地図の倍率変更についての操作入力が行われた場合には、同様にして、カメラ倍率算出部１４ｂは、地図の倍率変更率を算出する（ステップＳ９）。さらに、カメラ倍率算出部１４ｂは、算出された地図の倍率変更率に対応してカメラの倍率変更率を算出する（ステップＳ１０）。

算出されたカメラの倍率変更率は、さらには、実際に映像を撮影するための信号に変換され、信号出力部１０からカメラ３１に送信される。この映像を撮影するための信号に基づきカメラ３１の制御が行われる（ステップＳ１１）。つまり、カメラ３１内の信号入力部７で受信された映像を撮影するための信号は制御部５に送られ、この信号に基づいて制御部５が撮影映像部１を制御し、所望の映像が撮影される。倍率変更されて撮影された新たな映像データは、映像出力部６から映像・地図情報処理サーバー４１に送信される。この新たな映像データは、映像・地図情報処理サーバー４１の映像入力部９で受信され、映像変換部１２を経て、映像・地図同期処理部１４に送られる。

映像・地図同期処理部１４では、信号入力部１１から送られてきた新たな撮影データに含まれる撮影対象物に関する撮影情報となる計測データ（具体的にはカメラ３１の焦点計測部２や角度計測部４で計測された数値データ）に基づいて、既に述べた映像・地図連動方法（取得した映像データに関する撮影情報を、映像データと対応して取得した地図データ上に反映させる、つまり、表示・図示する方法）を用いることにより、受信した映像データと地図データとを連動させる。

具体的には、視野算出部１４ａは、カメラ３１から送られてきた上記撮影情報となる計測データに基づき、カメラ３１の位置から撮影対象物３２の位置までの平面上における距離Ｌを算出する（ステップＳ１２）。さらに、視野算出部１４ａは、算出した距離Ｌと、カメラ倍率算出部１４ｂで算出された（数値データ化された）カメラの倍率変更率とから、地図上において距離Ｌと対応する距離ｌ（エル）や、地図上に表示すべき視野の範囲を導き出す（視野の範囲規定する新たな境界線を算出する）（ステップＳ１３）。この距離ｌ（エル）が導き出される（算出される）ことにより、地図（地図データ）上における撮影対象物３２’の位置が特定されることとなる。つまり、撮影対象物３２’は、地図上において距離ｌ（エル）を有する矢印３６の先端に位置するものとして特定される（図３（ｂ）参照）。

一方、ステップＳ８又はステップＳ９でカメラ倍率算出部１４ｂにおいて算出された地図の倍率変更率を基に、地図倍率算出部１４ｃは、地図・映像データ記憶部１３から所望の倍率の地図データを取得する（ステップＳ１４）。

次に、地図再生処理部１４ｆは、視野算出部１４ａで導き出された距離ｌ（エル）、言い換えれば、距離ｌ（エル）により特定された地図データ上における撮影対象物３２’の位置を基に、カメラの撮影方向、撮影の視野範囲、撮影の倍率、撮影対象物３２’の位置、撮影対象物３２’についての情報（例えば、撮影対象物３２’の名称、住所、行き方、ホームページアドレス等の情報）等の映像データに関する撮影情報を、地図倍率算出部１４ｃにより取得された地図データに反映させる（表示する。図示する）。このようにして、撮影情報を反映させた地図データが再生される（ステップＳ１５）。そして、映像・地図同期部１４ｇにおいて、上記のようにして新たに倍率変更されて撮影された映像データと撮影情報を反映させた地図データとが同期され（ステップＳ１６）、映像・地図出力部１５から出力される（ステップＳ１７）。

ステップＳ６で、映像の方向（撮影対象物の方向）変更についての操作入力が行われた場合には、この操作入力に基づく信号が、ネットワーク通信を介して映像・地図情報処理サーバー４１に送信され、カメラ方向認識部１７により映像データの方向についての操作入力信号に変えられて映像・地図同期処理部１４に送られる。

ステップＳ１９で、カメラ方向算出部１４ｄは、受け取った映像データの方向についての操作入力信号を基に、カメラ３１を実際に動かす（映像を撮影する）ための信号に変換する（カメラ方向を算出する）（ステップＳ１９）。さらに、カメラ方向算出部１４ｄは、カメラ方向の算出に対応して、地図上における撮影対象物の方向変更率、つまり、図２の地図上に示される矢印３６の方向についての移動量を算出する（ステップＳ２０）。

同様にして、ステップＳ６で、地図上における撮影対象物（撮影）の方向を変更する操作入力が行われた場合には、この操作入力に基づく信号が、映像・地図処理サーバー４１に送信された後、地図方向操作（変更）認識部１８で地図上における撮影対象物の方向についての操作入力信号に変えられる。この操作入力信号を基に、地図方向算出部１４ｅで、地図上における撮影対象物の（地図についての）方向変更率が算出される（ステップＳ２１）。算出された方向変更率は、カメラ方向算出部１４ｄに送られ、カメラ方向算出部１４ｄにおいて、対応するカメラ方向が算出される（ステップＳ２２）。

算出されたカメラ方向についての信号、つまり、カメラ３１を実際に動かすための信号は、信号出力部１０を介してカメラ３１に送信され、この送信された信号に基づいてカメラ制御が行われる（ステップＳ２３）。そして、所望の方向について映像が撮影される。

一方、ステップＳ２０又はステップＳ２１において算出された地図上における撮影対象物についての（地図についての）方向変更率を基に、視野算出部１４ａにおいて、方向変更された新たな視野範囲が算出される。つまり、地図上に図示されるべき新たな撮影対象物の方向についての矢印と視野範囲とが導き出され、方向変更された後の地図上における撮影対象物の位置が特定される。そして、特定された撮影対象物の位置を基に、この撮影対象物についての情報や導き出された視野範囲等の撮影対象物を含む映像データに関する撮影情報は、地図再生処理部１４ｆにおいて、地図データに反映される（表示、図示される）（ステップＳ２４）。

カメラ３１から送られてきた所望の方向についての映像データと、地図再生処理部１４ｆで撮影情報が反映された地図データとは、映像・地図同期部１４ｇで同期され（ステップＳ１６）、映像・地図出力部１５を介して出力される（ステップＳ１７）。上記のようにして、所望の方向について撮影される映像データと地図データとが連動される。

出力された映像データと地図データとは、映像・地図出力部１５からネットワーク通信を介して利用端末５１に送信され、利用端末５１の表示部２０に表示される。なお、このとき、少なくとも撮影対象物３２’についての情報を、利用端末５１に設けられるスピーカ（図示せず）を介して音声により出力する（伝達する）ことにしてもよい。

図５、図６は、上述した本発明に係る映像・地図連動システムにより得られた映像データと地図データとが、それぞれ利用端末５１の映像表示部２０ａと地図表示部２０ｂとに表示された例である。

図５は、撮影の倍率（撮影の視野範囲、視野の範囲）を変更して表示された映像及び地図の例である。図５（ａ）では、初期状態に設定された（基本の）撮影の倍率（視野の範囲）で撮影された映像と、この映像に連動した地図とが示される。図５（ｂ）では、図５（ａ）で撮影された映像について遠方を拡大したとき（望遠時）の映像とそれに連動した地図とが示される。図５（ｃ）では、図５（ａ）で撮影された映像について近方を拡大したとき（近方拡大時）の映像とそれに連動した地図とが示される。

図６は、撮影された映像についての倍率、視野の範囲等の撮影情報を地図上に反映させる表示形態の例を示す。図６（ａ）では、映像表示部２０ａで示される映像に対応して、図３で既に説明したように、地図上のカメラ３１’の位置を基点として視野の範囲の境界線３３ｂ、３４ｂと円弧３５ｂとで囲まれた視野の範囲、及び、カメラ３１’の位置から撮影の対象物の位置までの方向と距離とを表す矢印３６ｂが地図表示部２０ｂに示されている。図６（ｂ）には、撮影された映像（撮影対象となる映像）の中心点３２ｃが例えば星印で地図表示部２０ｂに示されている。撮影の中心点、つまり、撮影される映像の焦点となる対象物は、地図上においてこの中心点３２ｃに位置する。

上記のように、カメラで撮影された映像と地図とを連動させる。つまり、カメラで撮影された映像に対応する地図が表示されると共に、カメラの撮影の方向、撮影の視野範囲、撮影の倍率、撮影対象物の位置（撮影の中心点）といった映像データに関する撮影情報を地図上に反映させる（表示、図示する）。したがって、このような地図及び撮影された映像を見比べることにより、画面５２を見ている者は、映像中の撮影対象物は何か（どの対象物を見ているのか）、また、どの方向を見ているのか、さらにはどの撮影範囲を見ているのか等を容易に理解することができる。よって、撮影の対象物を容易に特定することができ、また、撮影された映像についての情報を把握することができる。

さらに、映像データに関する撮影情報として、撮影対象物についての情報（例えば、撮影対象物の名称、住所、行き方、ホームページアドレス等の情報）も上記映像データに関する撮影情報と共に、表示する及び／又は音声により出力することにより、一層撮影対象物の特定や情報把握が容易となり、利便性を高めることができる。

図７は、本発明の実施例２に係る映像・地図連動システムの全体構成を示す図である。実施例２の映像・地図連動システムは、実施例１の映像・地図連動システムに類似し、同一の構成部分には、同一の参照符号を付して説明を省略する。

実施例２が実施例１と異なるのは、映像・地図連動システムを構成するカメラとして、３６０度全方位において映像データの取得を可能とする全方位撮影型のカメラ１３１が用いられていることである。したがって、実施例２の映像・地図連動システムでは、全方位撮影型のカメラ１３１に対応した構成を有すると共にこのカメラ１３１に対応した処理を行う。以下に、実施例１と異なる点について、実施例２の映像・地図連動システムの構成を簡単に説明する。

実施例２の映像・地図連動システムは、実施例１と同様の利用端末５１の他、全方位撮影型のカメラ１３１と、カメラ１３１に対応した処理を行う映像・地図情報処理サーバー１４１とを備える。全方位撮影型のカメラ１３１では、予め定められた倍率の下で、全方位、つまり３６０度に渡る全ての方向についての映像データが撮影される。したがって、カメラ１３１の位置から撮影対象物の位置までの距離Ｌは、例えば予め算出されている。撮影された全方位についての映像データは、映像・地図情報処理サーバー１４１に通信ネットワークを介して送信される。

映像・地図情報処理サーバー１４１内には、実施例１のカメラ方向変更認識部１７（図１参照）に代えて、映像方向変更認識部１１７が設けられている。また、映像・地図情報処理サーバー１４１は、所望の映像データと地図データとを連動させる映像・地図同期処理部１１４を有する。映像・地図同期処理部１１４は、映像方向算出部１１４ｄと、映像倍率算出部１１４ｂと、地図内表示視野算出部１１４ａと、映像データ処理部１１４ｈと、を含む。

映像方向算出部１１４ｄは、映像方向変更認識部１１７から送られてくる映像の所望の方向についての操作入力信号に基づき、取得すべき映像データの方向についての信号（映像の方向データ）を算出する。映像倍率算出部１１４ｂは、倍率変更認識部１６から送られてくる所望の映像又は地図の倍率についての操作入力信号を基づき、映像及び地図それぞれの倍率変更率を算出する。地図内表示視野算出部１１４ａは、映像倍率算出部１１４ｂで算出される倍率変更率と、地図方向算出部１４ｅで算出される地図方向データ、つまり、地図上に示される矢印３６の方向（図２参照）についての移動量を基に、地図内に表示すべき視野の範囲を導く。この視野の範囲等の撮影情報は、実施例１と同様にして、地図倍率算出部１４ｃにより地図・映像位置データ記憶部１３から取得された所望の倍率の地図上に、地図再生処理部１４ｆにおいて図示される（反映される）。

映像データ処理部１１４ｈは、映像方向算出部１１４ｄで算出された映像方向データ、及び映像倍率算出部１１４ｂで算出された倍率変更率を基に、カメラ１３１から送られてきた全方位についての映像データのうち所望の方向の映像データを取得すると共に、所望の倍率にする処理を行う。

このようにして得られた所望の映像データと、この映像データに関する撮影情報が反映された地図データとは、実施例１と同様に、映像・地図同期部１４ｇで同期され、映像・地図出力部１５を介して出力され、利用端末５１の表示部２０に表示される。本実施例においても、撮影対象物についての情報を含む映像データに関する撮影情報を、利用端末５１において音声出力することができる。その他、本実施例においても、実施例１と同様の効果が得られる。

（作用）
次に、図７、図８を参照しつつ、上述した実施例２に係る映像・地図連動システムの作用（映像・地図連動方法）について説明する。図８は、実施例２に係る映像・地図連動システムの作用（映像・地図連動方法）を説明するフローチャートである。

ステップＳ１０１で、実施例２の映像・地図連動システムの動作を開始すると、予め定められた撮影倍率の下で、カメラ１３１で撮影された全方位についての映像データは、映像・地図情報処理サーバー１４１に送信される。

この全方位についての映像データは、映像・地図情報処理サーバー１４１の映像入力部９で、デジタル信号として受信された後、映像変換部１２で映像データに変換され（ステップＳ１０２）、映像・地図同期処理部１１４内に送られる。

映像・地図同期処理部１１４では、映像方向算出部１１４ｄは、初期状態において取得すべき映像の方向データ、つまり、全方位の映像データのうちどの方向の映像データを初期状態において取得するかについてのデータを算出している。この映像の方向データに基づいて、映像データ処理部１１４ｈは、予め定められた倍率を有する全方位についての映像データから初期状態における方向の映像データを取得する（ステップＳ１０３）。

さらに、映像方向算出部１１４ｄでは、算出された映像の方向データに対応して地図の方向データを算出している。この地図の方向データは地図方向算出部１４ｅを介して地図内表示視野算出部１１４ａに送られる。地図内表示視野算出部１１４ａにおいて、カメラ１３１の位置から対象物の位置までの距離Ｌに対応する地図上での距離ｌ（エル）（この距離ｌにより、地図上における撮影対象物の位置が特定される）、地図上に表示すべき視野の範囲等の撮影データに関する撮影情報が算出される。算出された撮影データに関する撮影情報は、地図再生処理部１４ｆに送られる。

一方、予め定められた撮影倍率についての数値データは、映像倍率算出部１１４ｂから地図倍率算出部１４ｃへと送られ、地図倍率算出部１４ｃで撮影倍率に対応した地図倍率を有する地図データが地図・映像位置データ記憶部１３から取得される。取得された地図データは、地図再生処理部１４ｆに送られ、地図再生処理部１４ｆにおいて、この地図データに、地図内表示視野算出部１１４ａで算出された撮影データに関する撮影情報が反映される（表示、図示される）。

ステップＳ１０４で、この撮影データに関する撮影情報が反映された地図データと、ステップＳ１０３で取得された映像データとは、映像・地図同期部１４ｇで同期される。同期された映像データと地図データとは、映像・地図出力部１５を介して利用端末５１に送信され、表示部２０に表示される（ステップＳ１０５）。

ステップＳ１０６では、利用端末５１から入力する操作の種類が次のように選択される。映像の倍率変更についての新たな操作入力が行われた場合には、この操作入力についての信号は通信ネットワークを介して地図・映像情報処理サーバー１４１に送信され、倍率変更認識部１６を介してこの操作入力量を定量化した操作入力信号が映像・地図同期処理部１１４に送られる。この操作入力信号を基に、映像・地図同期処理部１１４の映像倍率算出部１１４ｂにおいて映像の倍率変更率が算出される（ステップＳ１０７）。映像倍率算出部１１４ｂは、算出された映像の倍率変更率に対応して地図の倍率変更率を算出する（ステップＳ１０８）。算出された地図の倍率変更率は、地図倍率算出部１４ｃに送られる。

ステップＳ１０６で、地図の倍率変更についての新たな操作入力が行われた場合には、同様にして、映像倍率算出部１１４ｂは、地図の倍率変更率を算出する（ステップＳ１０９）。さらに、映像倍率算出部１１４ｂは、算出された地図の倍率変更率に対応して映像の倍率変更率を算出する（ステップＳ１１０）。算出された映像の倍率変更率は、映像データ処理部１１４ｈに送られる。

映像データ処理部１１４ｈでは、全方位の映像データから初期状態の倍率及び方向で取得されている映像データについて、ステップＳ１１０で新たに算出された倍率変更率に基づき、拡大又は縮小の倍率変更についての処理が行われ、新たな映像データが生成される（ステップＳ１１１）。

一方、ステップＳ１０８又はステップＳ１０９で映像倍率算出部１１４ｂにおいて算出された地図の倍率変更率を基に、地図倍率算出部１４ｃは、地図・映像データ記憶部１３から所望の倍率の地図データを取得する（ステップＳ１１２）取得された所望の倍率の地図データは、地図再生処理部１４ｆに送られる。

次に、地図再生処理部１４ｆは、地図倍率算出部１４ｃで取得された地図データに、地図内視野算出部１１４ａで算出された視野の範囲等の映像データに関する撮影情報を反映させる（表示、図示する）。このようにして、映像データに関する撮影情報を反映させた地図データが再生される（ステップＳ１１３）。上記のように、新たに倍率変更された映像データと、この映像データについての撮影情報を反映させた地図データとは、映像・地図同期部１４ｇで同期され（ステップＳ１１４）、映像・地図出力部１５から出力される（ステップＳ１１５）。

ステップＳ１０６で、映像の方向変更についての新たな操作入力が行われた場合には、この操作入力に基づく信号が、ネットワーク通信を介して映像・地図情報処理サーバー４１に送信され、映像方向変更認識部１１７により映像データの方向についての操作入力信号に変えられて映像・地図同期処理部１１４に送られる。

ステップＳ１１６で、映像方向算出部１１４ｄは、受け取った映像データの方向についての操作入力信号を基に、映像の方向データ、つまり、全方位の映像データのうちどの方向の映像データを取得するかについてのデータに変換する。（映像方向を算出する）（ステップＳ１１６）。この映像の方向データに対応して、地図方向算出部１４ｅは、地図の方向データ、つまり、地図上に示される矢印３６の方向（図２参照）についての移動量を算出する（地図方向を算出する）（ステップＳ１１７）。

同様にして、ステップＳ１０６で、地図の方向変更についての新たな操作入力が行われた場合には、この操作入力に基づく信号が、映像・地図処理サーバー１４１に送信された後、地図方向変更認識部１８で地図の方向についての操作入力信号に変えられ、この操作入力信号を基に、地図方向算出部１４ｅで地図の方向データが算出される（ステップＳ１１８）。そして、この地図の方向データに対応して、映像方向算出部１１４ｄは、映像の方向データを算出する（ステップＳ１１９）。算出された映像の方向データは、映像データ処理部１１４ｈに送られる。

算出された映像の方向データに基づき、映像データ処理部１１４ｈでは、予め定められた倍率を有する全方位についての映像データから所望の方向についての映像データを取得する。こうして、新たな映像データが生成される（ステップＳ１２０）。

一方、ステップＳ１１７又はステップＳ１１８において算出された地図の方向データは、地図内表示視野算出部１１４ａに送られ、地図内視野算出部１１４ａにおいて、方向変更された視野範囲が算出される。つまり、地図上に図示されるべき新たな方向についての矢印と視野の範囲とが導き出される。そして、導き出された視野範囲等についての映像データに関する撮影情報は、地図再生処理部１４ｆに送られ、地図再生処理部１４ｆにおいて、地図データに反映される（図示される）（ステップＳ１２１）。

ステップ１２０で生成された映像データと、ステップ１２１でこの映像データに関する撮影情報が反映された地図データとは、映像・地図同期部１４ｇで同期され（ステップＳ１１４）、映像・地図出力部１５を介して出力される（ステップＳ１１５）。上記のようにして、所望の方向についての映像データと地図データとが連動される。

出力された映像データと地図データとは、映像・地図出力部１５からネットワーク通信を介して利用端末５１に送信され、利用端末５１の表示部２０に表示される。本実施例においても、実施例１と同様に、少なくとも撮影対象物についての情報を利用端末５１のスピーカから音声により出力（伝達）することにしてもよい。

図９（ａ）は、実施例２の映像・地図連動システムにより全方位についての映像から所望の方向の映像を取得する様子を示す。所望の方向について取得された映像は、利用端末５１の映像表示部２０ａに表示される（映像表示部２０ａについては図２参照）。また、図９（ｂ）は、図９（ａ）で取得された映像（映像データ）に連動して利用端末５１の地図表示部２０ｂに表示される地図を示す。

図９（ａ）で取得される映像の端の点Ａ、Ｂはそれぞれ、図９（ｂ）で地図上に表示される視野範囲１３７’の両端を表す点Ａ、Ｂに対応している。なお、地図上の矢印１３６は、地図上におけるカメラ１３１’の位置からの撮影の方向（撮影対象となる中心方向）を示している。以上説明したように、本実施例においても、実施例１と同様の効果が得られる。

なお、上記各実施例、特に実施例１では、映像・地図連動方法として、カメラ３１の位置データからカメラ３１で撮影される撮影対象物までの平面上（水平面上）における距離を、カメラ３１に基づいて算出し、地図データ上における撮影対象物の位置を特定する方法を用いた。しかし、上記映像・地図連動方法には限られず、他の映像・地図連動方法として、地図・映像位置データ記憶部１３に予め対応づけて記憶させておいた撮影画面上における撮影対象物の位置データを基にして、地図データ上における撮影対象物の位置を特定する方法を用いてもよい。

以上、本発明に係る映像・地図連動システム及びその連動方法の最良の形態を実施例に基づいて説明したが、本発明は特にこのような実施例に限定されることなく、特許請求の範囲記載の技術的事項の範囲内でいろいろな実施例があることはいうまでもない。

本発明の活用例として、インターネットを通じてのニュースや音楽、買い物・観光等の情報を映像で配信するシステムとしての利用、さらには、防犯や災害対策等のために、監視する目的で監視対象となる映像をインターネットを通じて配信するシステムとしての利用が挙げられる。

本発明の実施例１に係る映像・地図連動システムの全体構成を示すブロック図である。 利用端末の画面の一例を具体的に示した図である。 図３（ａ）は、視野算出部において、カメラの位置から映像の焦点Ｆとなる対象物（撮影対象とされる映像）の位置までの地上における距離Ｌを算出する原理を示す図であり、図３（ｂ）は、撮影された映像データと連動して地図データが表示された地図表示部を示す図であり、図３（ｃ）は、新たに規定される視野の境界線及び視野の境界線が成す角度α’が表示される模式的な図を示す。 実施例１に係る映像・地図連動システムの操作を説明するフローチャートである。 撮影の倍率（視野の範囲）を変更して表示された映像及び地図の例である。 撮影された映像についての倍率、視野の範囲等の撮影情報を地図上に反映させる表示形態の例を示す。 本発明の実施例２に係る映像・地図連動システムの全体構成を示すブロック図である。 実施例２に係る映像・地図連動システムの作用を説明するフローチャートである。 図９（ａ）は、実施例２の映像・地図連動システムにより全方位についての映像から所望の方向の映像を取得する様子を示す図であり、図９（ｂ）は、図９（ａ）で取得された映像（映像データ）に連動して利用端末の地図表示部に表示される地図を示す図である。

符号の説明

１ 映像撮影部
２ 焦点計測部
３ 方向計測部
４ 角度計測部
５ 制御部
６ 映像出力部
７、１１ 信号入力部
８、１０ 信号出力部
９ 映像入力部
１２ 映像変換（処理）部
１３地図・映像位置データ記憶部
１４、１１４ 映像・地図同期処理部
１４ａ 視野算出部
１４ｂ カメラ倍率算出部
１４ｃ 地図倍率算出部
１４ｄ カメラ方向算出部
１４ｅ 地図方向算出部
１４ｆ 地図再生処理部
１４ｇ 映像・地図同期部
１５ 映像・地図出力部
１６ 倍率変更認識部
１７ カメラ方向変更認識部
１８ 地図方向操作（変更）認識部
１９ 入力部
１９ａ、１９ｂ、１９ｃ、１９ｄ 操作入力ボタン
２０ 表示部
２０ａ 映像表示部
２０ｂ 地図表示部
２１ 操作認識部
３１、３１’、１３１、１３１’ カメラ
３２、３２’ 撮影対象物
３３、３４ 境界線
３５ 円弧
３６、１３６ 矢印
３７’１３７’ 視野範囲
４１、１４１ 映像・地図情報処理サーバー
５１ 利用端末
５２ 画面
１１４ａ 地図内視野算出部
１１４ｂ 映像倍率算出部
１１４ｄ 映像方向算出部
１１４ｈ 映像データ処理部

Claims (7)

1. 一つ又は複数の利用端末と、遠隔地に設けられた少なくとも１つのカメラと、前記利用端末及び前記カメラに通信ネットワークを介して接続される映像・地図情報処理サーバーと、を備えた映像・地図連動システムであって、
   前記映像・地図情報処理サーバーは、操作認識部と、映像・地図同期処理部と、地図・映像位置データ記憶部と、を含んでおり、
   前記操作認識部は、前記利用端末からの入力に基づき、映像又は地図についての操作入力信号を前記映像・地図同期処理部に送り、
   前記地図・映像位置データ記憶部は、地図データと、該地図データに対応させて、少なくとも前記カメラの位置データを記憶し、
   前記映像・地図同期処理部は、前記映像又は地図についての操作入力信号に基づき、前記カメラで撮影される撮影対象物を含む映像データを取得すると共に、前記地図・映像位置データ記憶部から前記映像データに対応する地図データを取得し、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることを特徴とする映像・地図連動システム。
2. 前記映像・地図同期処理部は、前記カメラの位置から前記カメラで撮影される撮影対象物の位置までの平面上における距離を算出して、前記地図データ上における前記撮影対象物の位置を特定することにより、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることを特徴とする請求項１記載の映像・地図連動システム。
3. 前記撮影対象物を含む前記映像データに関する撮影情報には、少なくとも前記カメラの撮影方向、撮影の視野範囲、撮影の倍率、前記撮影対象物の位置、及び、前記撮影対象物についての情報が含まれていることを特徴とする請求項１又は２に記載の映像・地図連動システム。
4. 前記撮影情報のうち少なくとも前記撮影対象物についての情報を、音声により伝達することを特徴とする請求項３に記載の映像・地図連動システム。
5. 一つ又は複数の利用端末と、遠隔地に設けられた少なくとも１つのカメラとに、通信ネットワークを介して映像・地図情報処理サーバーを接続し、前記カメラで撮影される映像を、地図と共に前記利用端末に表示させる映像・地図連動方法であって、
   前記利用端末からの入力に基づき、前記カメラで撮影される撮影対象物を含む映像データを取得すると共に、該映像データに対応する地図データを取得し、
   前記カメラの位置から前記撮影対象物の位置までの平面上における距離を算出することにより、前記地図データ上における前記撮影対象物の位置を特定し、
   特定された前記撮影対象物の位置を基に、前記撮影対象物を含む前記映像データに関する撮影情報を前記地図データ上に反映させることを特徴とする映像・地図連動方法。
6. 前記撮影対象物を含む前記映像データに関する撮影情報には、少なくとも前記カメラの撮影方向、撮影の視野範囲、撮影の倍率、前記撮影対象物の位置、及び、前記撮影対象物についての情報が含まれていることを特徴とする請求項５に記載の映像・地図連動方法。
7. 前記撮影情報のうち少なくとも前記撮影対象物についての情報を、音声により伝達することを特徴とする請求項６に記載の映像・地図連動方法。

Images