JPH10243380A - 映像監視システム - Google Patents

Abstract

(57)【要約】 【課題】 カメラ制御情報を記録、管理していないの
で、映像データと同期してカメラが設置された地図等の
上にカメラ制御情報を表示する等の高度な映像監視を行
うことができないという課題があった。 【解決手段】 映像情報に該映像情報が入力された時刻
を示す時刻情報を付加して時系列に記録装置３に蓄積
し、さらに、映像情報に同期してカメラ制御部５から入
力されるカメラ制御情報があるならばカメラ制御情報に
時刻情報を付加して時系列に記録装置３に蓄積し、さら
に、要求に応じて所望の一連の映像情報およびこれに対
応する一連のカメラ制御情報を読み出して同期して出力
するストリームデータ蓄積・読み出し部７を備えた。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、外部から動作制
御可能なカメラからの映像情報を防犯、防災、機器異常
検知等を目的として再生表示するための映像監視システ
ムに関するものである。

【０００２】

【従来の技術】近年、防犯、防災、機器異常検知等を目
的として、監視センタから遠く離れた場所に設置された
監視用のカメラによって撮影された映像情報をネットワ
ークを介して監視センタに伝送し、映像情報を表示装置
に再生表示するための映像監視システムが普及してきて
いる。

【０００３】図１８は従来の映像監視システムの一例の
構成を示すブロック図である。図において、１はカメ
ラ、２はカメラ１で撮影された映像情報を表示するため
の表示装置、３はカメラ１で撮影され表示装置１に表示
された映像データを蓄積するための記録装置、４は映像
監視システムを制御するためのシステム制御部、５はシ
ステム制御部４の制御のもとでカメラ１の位置や方向等
を制御し、また、カメラ１をズームインないしズームア
ウトさせたりする等の制御を実行するカメラ制御部、６
はカメラ１からの映像データを受信しこの映像データを
処理するために映像データ処理部１７０へ送信する映像
入力部、９は監視員により入力された指示を受信しこれ
をシステム制御部４に伝えるマンマシンＩ／Ｆである。

【０００４】次に動作について説明する。映像入力部６
がカメラ１で撮像された映像を受信すると、映像監視シ
ステムは、この映像データを記録装置３に蓄積するとと
もに、映像データ処理部１７０を用いて所定の処理を施
した後表示装置２に表示する。また、カメラ１は外部制
御可能なように構成されており、監視員がマンマシンＩ
／Ｆ９を介してカメラ１を制御するためのある特定の指
示を映像監視システムに与えると、システム制御部４は
入力された指示、即ち、カメラ制御情報をカメラ制御部
５に送付する。カメラ制御部５はそのカメラ制御情報に
応じて、例えば、カメラ１の位置や方向の変えたり、カ
メラ１のズーム位置を調節することができる。

【０００５】図１９は大きいビルの防災や大規模プラン
トの監視などを目的とした、従来の映像監視システムの
構成を示すブロック図である。図において、図１８に示
すものと同一の構成要素には同一符号を付しており、以
下ではその説明を省略する。１０１は実際のビル、プラ
ント等の現場に設置されており、カメラ１からの映像デ
ータを現場とは離れた場所にある映像監視システムの主
要部に送信するローカル装置、１０２はその映像監視シ
ステムの主要部に相当し、監視員の居る部屋などに設置
され得るセンタ装置、１００はローカル装置１０１とセ
ンタ装置１０２との間で映像データおよびカメラ制御情
報を送受信するためのネットワーク、１０６はローカル
装置１０１に設けられており、カメラ１からの映像情報
をセンタ装置１０２に送信し、センタ装置１０２から送
信されるカメラ制御情報を受信するための通信Ｉ／Ｆ、
１０７はセンタ装置１０２に設けられており、ローカル
装置１０１から送られるカメラ１からの映像データを受
信し、システム制御部４からのカメラ制御情報をローカ
ル装置１０１へ送信するための通信Ｉ／Ｆである。

【０００６】次に動作について説明する。図１８に示す
ように、ローカル装置１０１は、カメラ１で得た映像を
映像入力部６を介して受信し、映像データを通信Ｉ／Ｆ
１０６およびネットワーク１００を介して遠隔地にある
センタ装置１０２に送信する。センタ装置１０２は、ロ
ーカル装置１０１で撮影された映像を通信Ｉ／Ｆ１０７
を介して受信すると、映像データを蓄積するとともに、
映像データ処理部１７０を用いて所定の処理を施した後
表示装置２に表示する。また、カメラ１は外部制御可能
なように構成されており、監視員がマンマシンＩ／Ｆ９
を介してカメラ１を制御するためのある特定の指示をセ
ンタ装置１０２に与えると、システム制御部４は入力さ
れた指示、即ち、カメラ制御情報を通信Ｉ／Ｆ１０７お
よびネットワーク１００を介してローカル装置１０１に
送信する。ローカル装置１０１はこのカメラ制御情報を
通信Ｉ／Ｆ１０６を介して受信すると、このカメラ制御
情報をカメラ制御部５に送付する。カメラ制御部５はそ
のカメラ制御情報に応じて、例えば、カメラ１の位置や
方向の変えたり、カメラ１のズーム位置を調節すること
ができる。

【０００７】ネットワーク１００を構成する、遠隔映像
監視のための通信媒体としては、映像データはデータ量
が多いので、従来は同軸ケーブルや光ファイバ等の専用
ケーブルが主に用いられていた。しかしながら、近年
は、大容量高速通信を可能にするＡＴＭやＦＤＤＩ等の
高速通信媒体の実用化が進んできている。一方、映像デ
ータや音声データの伝送・蓄積を効率的（速く・安く）
に行う為に、ＪＰＥＧ、ＭＰＥＧ等のデジタル圧縮技術
が開発・実用化されてきている。

【０００８】以上の様な技術の進歩により映像データお
よび音声データのディジタル通信が実用化されてきたこ
とから、既存のコンピュータネットワークを利用して、
複数の監視映像の送信や表示を制御する映像監視システ
ムが提案されている。

【０００９】図２０は特開平８−２２８３４０号公開広
報で開示されたそのような従来の映像監視システムの構
成を示すブロック図、図２１はこの映像監視システムに
よって得られる監視映像表示の例を示した説明図であ
る。図２０において、１ａ〜１ｇはカメラ、２００ａ〜
２００ｄはネットワーク１００に接続されたＬＡＮ通信
回線、３００ａ〜３００ｃはコンピュータ装置である。

【００１０】この従来の映像監視システムでは、既存の
コンピュータネットワークを利用し、遠隔の複数地点に
備えられた監視用のカメラ１ａ〜１ｇが撮影した映像
を、ＬＡＮ通信回線２００ａ〜２００ｄを介してネット
ワーク１００に接続されたコンピュータ装置３００ａ〜
３００ｃ上で表示して見ることができる。また、この映
像監視システムでは、映像データの属性情報として映像
送信要求時の映像送信要求条件を付加して送信し、監視
センタにおいて、映像送信要求条件に基づいて、図２１
（ａ），（ｂ）に示すようにカメラ設置場所を地図表示
したり、図２１（ｃ）に示すように監視する場所のスケ
ジュール表を表示したり、図２１（ｄ）に示すように撮
像時刻などの属性情報をワープロ文書作成ウィンドウ上
に重畳表示するなどの、良好な監視映像表示を実現して
いる。

【００１１】

【発明が解決しようとする課題】従来の映像監視システ
ムは以上のように構成されているので、位置、方向、撮
像範囲等の撮像状態が外部から制御できるカメラ１をカ
メラ制御情報に応じて制御してはいるが、カメラ制御情
報を記録、管理していないので、映像データと同期して
例えばカメラ１が設置された地図ないし図面上にカメラ
制御情報を表示する等の高度な映像監視を行うことがで
きないという課題があった。

【００１２】また、従来の映像監視システムは、入力し
て蓄積した映像データを検索する際に、カメラ１の位置
や方向等のカメラ制御情報を検索キーとして用いて目的
の映像データを検索できないという課題があった。

【００１３】さらに、過去に発行したカメラ制御情報を
履歴情報として記録し映像表示に併せて映像が入力され
た時刻のカメラ制御情報を表示することが考えられる
が、例えばカメラ１およびカメラ制御部５が監視センタ
とネットワークを介して接続されているような場合には
ネットワークの制約により通信遅延が生じたり、映像監
視システムの他の処理負荷状態によっては、カメラ制御
情報が発行された時刻と実際にその制御が実行される時
刻との間に時間差が生じてしまう可能性が高い。このよ
うな場合、履歴情報に基づいて表示されるカメラ制御情
報と実際に映像が入力された時のカメラ制御情報とが一
致しないという課題がある。

【００１４】この発明は上記のような課題を解決するた
めになされたもので、カメラ制御情報を随時表示装置に
映像データとともに表示する等の高度な映像監視を実現
し且つカメラ制御情報を検索キーとして用いて目的の映
像データおよび音声データを含む映像情報を検索できる
映像監視システムを得ることを目的とする。

【００１５】さらに、ネットワークを介してカメラから
の映像情報を入手する場合においても、映像情報とそれ
に対応するカメラ制御情報とを確実に同期して監視セン
タに伝送できる映像監視システムを得ることを目的とす
る。

【００１６】

【課題を解決するための手段】請求項１記載の発明に係
る映像監視システムは、映像入力手段から入力される映
像情報に該映像情報が入力された時刻を示す時刻情報を
付加してストリームデータとして記録装置に蓄積し、さ
らに、映像情報が入力される周期とは必ずしも一致しな
い周期でまたは非周期的に映像情報の入力に同期してカ
メラ制御手段から入力されるカメラ制御情報があるなら
ばカメラ制御情報に時刻情報を付加してストリームデー
タとして記録装置に蓄積するストリームデータ蓄積手段
と、所望の一連の映像情報とこれに対応する一連のカメ
ラ制御情報とを読み出して所定の処理を施す際に、一連
の映像情報およびこれに対応する一連のカメラ制御情報
を記録装置から順次読み出して所定の処理のために同期
して出力するストリームデータ読み出し手段とを備えた
ものである。

【００１７】請求項２記載の発明に係る映像監視システ
ムは、ストリームデータ蓄積手段は、映像情報ストリー
ムとカメラ制御情報ストリームとを別個に記録装置に蓄
積するように構成されており、ストリームデータ読み出
し手段は、記録装置に蓄積された映像情報ストリームか
ら所望の一連の映像情報とこれに対応する一連のカメラ
制御情報を読み出し、これらの情報を同期させて処理の
ために出力するものである。

【００１８】請求項３記載の発明に係る映像監視システ
ムは、ストリームデータ蓄積手段は、映像情報、カメラ
制御情報および時刻情報を合成し、この合成情報を合成
情報ストリームとして記録装置に蓄積し、ストリームデ
ータ読み出し手段は、記録装置に蓄積された合成情報ス
トリームから所望の一連の合成情報を読み出すものであ
る。

【００１９】請求項４記載の発明に係る映像監視システ
ムは、ある時刻に入力された映像情報に対応するカメラ
制御情報が入力されない場合、ストリームデータ蓄積手
段が所定の補間方法を用いて既に蓄積された過去のカメ
ラ制御情報から映像情報に対応するカメラ制御情報を求
めるものである。

【００２０】請求項５記載の発明に係る映像監視システ
ムは、対応するカメラ制御情報が記憶装置に蓄積されて
いない映像情報をストリームデータ読み出し手段が読み
出し出力した場合、所定の補間方法を用いて既に蓄積さ
れた過去のカメラ制御情報から映像情報に対応するカメ
ラ制御情報を求めるものである。

【００２１】請求項６記載の発明に係る映像監視システ
ムは、ストリームデータ読み出し手段は、読み出した映
像情報に対応するカメラ制御情報が記録装置内に存在し
ない場合または読み出した合成情報中にカメラ制御情報
が存在しない場合に、所定の補間方法を用いて既に蓄積
された過去のカメラ制御情報から映像情報に対応するカ
メラ制御情報を求めるものである。

【００２２】請求項７記載の発明に係る映像監視システ
ムは、カメラ制御情報補間手段は、過去のカメラ制御情
報に含まれる、カメラが載置される雲台の移動速度、カ
メラのパン速度、チルト速度、およびズーム速度のうち
の少なくともいずれか１つを用いて、カメラの位置、方
向、またはズーム位置に関するカメラ制御情報を補間す
るものである。

【００２３】請求項８記載の発明に係る映像監視システ
ムは、時系列に入力される映像情報と、映像情報が入力
される周期とは必ずしも一致しない周期でまたは非周期
的に映像情報の入力に同期してカメラ制御手段から入力
されるカメラ制御情報があるならば、カメラ制御情報と
を同期させてネットワークに送出するストリームデータ
同期送信手段を具備するローカル装置と、ネットワーク
から映像情報およびカメラ制御情報を同期して受信し
て、映像情報およびカメラ制御情報を同期を取ってスト
リームデータとして記録装置に蓄積し且つ所望の一連の
映像情報およびこれに対応する一連のカメラ制御情報を
記録装置から読み出しこれらを同期させて後の処理のた
めに内部に出力するセンタ装置とを備えたものである。

【００２４】請求項９記載の発明に係る映像監視システ
ムは、ローカル装置は、時系列に入力される映像情報と
カメラ制御情報とにそれぞれ時刻情報を付加して同期さ
せて別々にネットワークに送出し、センタ装置は、ネッ
トワークを介して受信した映像情報およびカメラ制御情
報に付加された２つの時刻情報を参照して同時刻の映像
情報およびカメラ制御情報を受け取った際にこれらを同
期させて後の処理のために内部に出力するものである。

【００２５】請求項１０記載の発明に係る映像監視シス
テムは、ローカル装置は、時系列に入力される映像情報
とカメラ制御情報に映像情報が入力された時刻を示す時
刻情報を付加して合成情報を生成し、この合成情報をネ
ットワークに送出し、センタ装置は、ネットワークを介
して受信した合成情報から映像情報とカメラ制御情報と
を抽出しこれらを同期させて後の処理のために内部に出
力するものである。

【００２６】請求項１１記載の発明に係る映像監視シス
テムは、入力される映像情報と、映像情報が入力される
周期とは必ずしも一致しない周期でまたは非周期的に映
像情報の入力と同期してカメラ制御手段から入力される
カメラ制御情報があるならばこのカメラ制御情報とに、
これらの情報が入力された時刻を示す時刻情報を付加し
てストリームデータとしてそれぞれ記録装置に蓄積し、
さらに、所望の一連の映像情報およびこれに対応する一
連のカメラ制御情報を記録装置から順次所定の処理のた
めに同期して読み出して、さらに同期を取ってネットワ
ークに送出するローカル装置と、ネットワークから一連
の映像情報およびこれに対応する一連のカメラ制御情報
を同期して受信して所定の処理のために同期して後の処
理のために内部に出力するセンタ装置とを備えたもので
ある。

【００２７】請求項１２記載の発明に係る映像監視シス
テムは、センタ装置が映像情報に対応するカメラ制御情
報を受信しない場合に、所定の補間方法を用いて既に蓄
積された過去のカメラ制御情報から映像情報に対応する
カメラ制御情報を求めるものである。

【００２８】請求項１３記載の発明に係る映像監視シス
テムは、ある時刻に入力された映像情報に対応するカメ
ラ制御情報が入力されない場合、ストリームデータ蓄積
手段は、所定の補間方法を用いて既に蓄積された過去の
カメラ制御情報から映像情報に対応するカメラ制御情報
を求めるものである。

【００２９】請求項１４記載の発明に係る映像監視シス
テムは、過去のカメラ制御情報に含まれる、カメラが載
置される雲台の移動速度、カメラのパン速度、チルト速
度、およびズーム速度のうちの少なくともいずれか一つ
を用いて、カメラの位置、方向、またはズーム位置に関
するカメラ制御情報を補間するものである。

【００３０】

【発明の実施の形態】以下、この発明の実施の一形態を
説明する。 実施の形態１．図１はこの発明の実施の形態１による映
像監視システムの概略構成を示すブロック図である。図
において、１はカメラ、２はカメラ１で撮影された映像
情報を表示するための表示装置、３はカメラ１で撮影さ
れ表示装置１に表示された映像情報を蓄積するための記
録装置、４は映像監視システムを制御するためのシステ
ム制御部、５はシステム制御部４の制御のもとでカメラ
１の位置や方向等を制御し、また、カメラ１をズームイ
ンないしズームアウトさせたりする等の制御を実行する
カメラ制御部（カメラ制御手段）、６はカメラ１からの
映像情報を入力しこの映像情報を時系列に記録装置に蓄
積するために送出する映像入力部（映像入力手段）、７
は映像入力部６から入力された映像情報に該映像情報が
入力された時刻を示す時刻情報を付加して時系列に記録
装置３に蓄積し、さらに、映像情報に同期してカメラ制
御部５から入力されるカメラ制御情報があるならばカメ
ラ制御情報に上記の時刻情報を付加して時系列に記録装
置３に蓄積するとともに、所望の一連の映像情報とこれ
に対応する一連のカメラ制御情報とを読み出して所定の
処理、例えば、表示装置２に表示を行うための処理を施
す際に、一連の映像情報およびこれに対応する一連のカ
メラ制御情報を記録装置３から順次読み出してその所定
の処理のために同期してストリームデータ処理部８へ出
力するストリームデータ蓄積・読み出し部（ストリーム
データ蓄積手段、ストリームデータ読み出し手段）、９
は監視員により入力された指示を受信にこれをシステム
制御部４に伝えるマンマシンＩ／Ｆである。

【００３１】次に動作について説明する。システム制御
部４は監視員の操作等によりマンマシンＩ／Ｆ９を介し
て入力されたカメラ制御情報をカメラ制御部５に送出す
る。図２はそのようなカメラ制御情報の一例のテーブル
を示す説明図、図３はカメラ１の位置、方向を規定する
カメラ制御情報を示す説明図である。カメラ１によって
撮像される映像の位置および撮像範囲は、カメラ１が載
置される雲台の位置、雲台の基準方向、基準方向に対す
るカメラ１の向き、および撮像範囲によって特定するこ
とができる。図３に示すように、雲台の位置C0(positio
n_x,position_y,position_z)および雲台の基準方向をオ
ブジェクト座標系(X,Y,Z) で表す。雲台の基準方向は視
線方向ベクトル(eye_x,eye_y,eye_z)および上面方向ベ
クトル(up_x,up_y,up_z) で定義される。カメラ座標系
は、左手法則座標（Cx：左手親指、Cy：左手人差し指、
Cz：左手中指）で表し、カメラ１の視線方向ベクトルを
Cz軸とし、カメラ１の上面に垂直な上面方向ベクトルを
Cy軸とする座標系で定義する。カメラ１の向きはカメラ
座標系(Cx,Cy,Cz)において、パン角度とチルト角度で定
義される。パン角度はCyを軸とする回転角度（゜）であ
り、Cz軸の正の方向を０として反時計回りを正とする。
チルト角度はCxを軸とする回転角度（゜）であり、Cz軸
の正の方向を０として反時計回りを正とする。カメラ１
の撮像範囲はズーム位置によって定義され、ズーム位置
は焦点距離(mm)で表される。また、カメラ１の位置、向
き、ズームが連続的に変化する場合は、雲台位置速度
（mm/sec）（ x_speed,y_speed,z_speed）、パン速度
（゜/sec）、チルト速度（゜/sec）、ズーム速度(mm/se
c ）が各々設定される。また、図２に示す変化フラグは
各カメラ制御状態パラメータのうちのどのパラメータが
変化し得るのかを示すフラグである。

【００３２】カメラ制御部５はシステム制御部４から受
信したカメラ制御情報に従ってカメラ制御状態パラメー
タを再設定し、再設定した各カメラ制御状態パラメータ
に従って雲台の位置および方向、カメラ１の制御を行
う。そして、各カメラ制御状態パラメータの値をカメラ
制御情報としてストリームデータ蓄積・読み出し部７に
送出する。一方、映像入力部６は、カメラ１により撮像
された映像データおよび音声データを含む映像情報を受
け取ると、その映像情報をストリームデータ蓄積・読み
出し部７に送出する。

【００３３】ストリームデータ蓄積・読み出し部７は映
像入力部６から入力された映像情報を受け取ると、後で
述べるように、その入力時の時刻を示す時刻情報を映像
情報に付加して映像情報ストリームのデータ形式へと変
換して時系列に記録装置３に蓄積するとともに、映像情
報に同期してカメラ制御部５から入力されるカメラ制御
情報があるならばカメラ制御情報に時刻情報を付加して
カメラ制御情報ストリームのデータ形式へと変換して時
系列に記録装置３に蓄積する。即ち、カメラ制御情報
は、映像情報が入力される周期とは必ずしも一致しない
周期でまたは非周期的に映像情報の入力に同期してカメ
ラ制御部５から入力される。このようにして、新たな映
像情報およびカメラ制御情報が、それぞれ時刻情報とと
もに映像情報ストリームおよびカメラ制御情報ストリー
ムの新たな一要素として（即ち、それぞれ映像情報スト
リームおよびカメラ制御情報ストリームに追加して）記
録装置３に記録される。また、ストリームデータ蓄積・
読み出し部７は、システム制御部４の指示により所望の
一連の映像情報、即ち、所望の期間内の映像情報ストリ
ーム、およびその映像情報ストリームに対応するカメラ
制御情報ストリームを読み出すことができる。ストリー
ムデータ蓄積・読み出し部７が記録装置３からそのよう
な映像情報ストリームおよびカメラ制御情報ストリーム
を読み出す際には、記録装置３内に蓄積されている映像
情報ストリームおよびカメラ制御情報ストリーム内の映
像情報およびカメラ制御情報に付加されている時刻情報
を参照して、上記所望の期間内に該当する時刻情報を有
する一連の映像データおよび対応する一連のカメラ制御
情報を読み出す。

【００３４】ストリームデータ蓄積・読み出し部７によ
り読み出された映像情報ストリーム内の各映像情報はス
トリームデータ処理部８によって所定の処理が施された
後表示装置２に順次表示される。図４はストリームデー
タ処理部８の概略構成を示すブロック図である。図に示
すように、ストリームデータ処理部８は、システム制御
部４の指示に基づき、ストリームデータ蓄積・読み出し
部７により読み出された所望の期間内に該当する時刻情
報を有する一連の映像情報を順次タイミングを取るとと
もに、以下に示すカメラ制御情報ストリーム処理部から
送出されるカメラ制御情報に同期させて送出する映像情
報ストリーム処理部３１と、映像情報ストリーム処理部
３１からの映像情報中の映像データを復元して表示装置
２に表示する映像表示部３３と、カメラ制御情報ストリ
ームを処理するために、システム制御部４の指示に基づ
き、ストリームデータ蓄積・読み出し部７により読み出
された所望の期間内に該当する時刻情報を有する一連の
対応するカメラ制御情報を順次タイミングを取って送出
するカメラ制御情報ストリーム処理部３２と、カメラ制
御情報ストリーム処理部３２からのカメラ制御情報中に
含まれるカメラ１の位置および撮像方向をカメラ１が載
置されている場所の地図ないしその場所の位置関係を示
す図面上に合成して表示装置２に表示する地図情報表示
部３４とを備えている。このように、指定された時刻情
報を有する一連の映像情報から成る映像情報ストリーム
は、図５に示すように、カメラ１の位置および撮像方向
が示された地図等とともに表示装置２に順次表示され
る。図５に示す例では、表示装置２の画面の左側にカメ
ラ１で撮影された監視映像が表示され、右側にはカメラ
１の位置および撮像方向が示されたフロア図面が表示さ
れている。尚、映像情報中に含まれる音声データについ
ても同様にして、映像データと同期してスピーカ等を介
して再生することが可能である。

【００３５】次に、ストリームデータ蓄積・読み出し部
７の詳細な構成および動作について説明する。図６はこ
の実施の形態１による映像監視システムのストリームデ
ータ蓄積・読み出し部７の一例の構成を示すブロック図
である。図において、５１は映像監視システムのシステ
ムクロック等から現在時刻を入手する時刻発生部、５２
は入力された映像データおよび音声データを含む映像情
報に時刻発生部５１からの現在時刻を時刻情報として付
加し映像情報ストリームデータの形式のデータを生成す
る（即ち、映像情報ストリームデータの形式へ変換す
る）映像情報ストリーム生成部（映像情報ストリーム生
成・蓄積手段）、５３は生成した映像情報ストリームデ
ータ形式のデータを映像情報ストリームの一要素として
記録装置３に蓄積する映像情報ストリーム蓄積部（映像
情報ストリーム生成・蓄積手段）、５５は映像情報が入
力される周期とは必ずしも一致しない周期でまたは非周
期的に映像情報の入力に同期してカメラ制御部５から入
力されるカメラ制御情報に時刻発生部５１からの現在時
刻を時刻情報として付加しカメラ制御情報ストリームの
形式のデータを生成するカメラ制御情報ストリーム生成
部（カメラ制御情報ストリーム生成・蓄積手段）、５６
は生成したカメラ制御情報ストリーム形式のデータをカ
メラ制御情報ストリームの一要素として記録装置３に蓄
積するカメラ制御情報ストリーム蓄積部（カメラ制御情
報ストリーム生成・蓄積手段）、５４は記録装置３内に
記録されている映像情報ストリーム内の各映像情報に付
加された時刻情報をサーチして、該当する時刻情報を有
する一連の映像情報、即ちある期間内の映像情報ストリ
ームを読み出す映像情報ストリーム読み出し部（映像情
報ストリーム読み出し手段）、５７は記録装置３内に記
録されているカメラ制御情報ストリーム内の各カメラ制
御情報に付加された時刻情報をサーチして、該当する時
刻情報を有する一連のカメラ制御情報、即ちあるカメラ
制御情報ストリームを読み出すカメラ制御情報ストリー
ム読み出し部（カメラ制御情報ストリーム読み出し手
段）、５８は指定された時間区間の映像情報ストリーム
およびカメラ制御情報ストリームを同期して読み出すよ
うに映像情報ストリーム読み出し部５４およびカメラ制
御情報ストリーム読み出し部５７を制御して読み出した
映像情報ストリームおよびカメラ制御情報ストリームを
ストリームデータ処理部８に送出するストリームデータ
同期処理部（ストリームデータ同期処理手段）である。

【００３６】ストリームデータ蓄積・読み出し部７の映
像情報ストリーム生成部５２は、映像入力部６を介して
入力された映像情報に、時刻発生部５１が入手した現在
時刻を時刻情報として付加して映像情報ストリームデー
タ形式のデータに変換し、これを映像情報ストリーム蓄
積部５３へ送出する。映像情報ストリーム蓄積部５３は
受け取った映像情報ストリームデータ形式のデータを既
に蓄積された映像情報ストリームの最後尾に付加するよ
うに記録装置３に記録する。この際、初めて記録装置３
に記録する場合には、映像情報ストリームを格納する領
域の先頭に映像情報ストリームデータ形式に変換された
データが記録される。図７はこのようにして映像情報ス
トリーム生成部５２により生成された映像情報ストリー
ムの例を示す説明図である。図７に示すように、映像情
報ストリーム中の一組のデータは、映像データと共に入
力された音声データ、その音声を入力したマイクの位置
や音声データの符号化方法等を示す音声ヘッダ、映像デ
ータ、その映像のサイズや符号化方法等を示す映像ヘッ
ダ、および音声データと映像データを入力した時刻を示
す時刻情報から構成される。

【００３７】同時に、カメラ制御情報ストリーム生成部
５５は、カメラ制御部５を介して入力されたカメラ制御
情報に、時刻発生部５１が入手した上記現在時刻を時刻
情報を付加してカメラ制御情報ストリームデータ形式の
データに変換し、これをカメラ制御情報ストリーム蓄積
部５６へ送出する。カメラ制御情報ストリーム蓄積部５
６は受け取ったカメラ制御情報ストリームデータ形式の
データを既に蓄積されたカメラ制御情報ストリームの最
後尾に付加するように記録装置３に記録する。この際、
初めて記録装置３に記録する場合には、カメラ制御情報
ストリームを格納する領域の先頭に映像情報ストリーム
データ形式に変換されたデータが記録される。図８はこ
のようにしてカメラ制御情報ストリーム生成部５５によ
り生成されたカメラ制御情報ストリームの例を示す説明
図である。図８に示すように、カメラ制御情報ストリー
ムの一組のデータは、カメラ制御情報と、カメラ制御情
報を入力した時刻を示す時刻情報とから構成される。
尚、上記したように、カメラ制御情報ストリーム生成部
５５は、映像情報が入力される周期とは必ずしも一致し
ない周期でまたは非周期的に映像情報の入力に同期して
カメラ制御部５から入力されるカメラ制御情報に時刻発
生部５１からの現在時刻を時刻情報として付加しカメラ
制御情報ストリームデータ形式のデータを生成する。即
ち、入力される映像情報のサンプリングレートとカメラ
制御情報のサンプリングレートとが異なる場合がある。
例えば、映像のフレームレート（映像は単位時間毎にサ
ンプリングされる「フレーム」と呼ばれる画像の集合で
あって、フレームをサンプリングする周期をフレームレ
ートと称する。また、この発明では一つの映像情報が一
つのフレームに対応している。）に比べてカメラ制御情
報をサンプリングする周期が大きい場合や、カメラ制御
情報のサンプリングが周期的に行われない場合がある。
従って、映像情報ストリームの全映像情報に対応する全
てのカメラ制御情報が存在するわけではなく、実施の形
態５で説明するように、ある時刻の映像情報に対応する
カメラ制御情報が存在しない場合、これを過去のカメラ
制御情報から補間によって算出することが好ましい。

【００３８】監視員等がある時間区間に入力された映像
情報ストリームおよびカメラ制御情報ストリームを表示
するようにマンマシンＩ／Ｆ９を介して指示すると、シ
ステム制御部４はその指示された時間区間に入力された
一連の映像情報、即ちその時間区間内に付加または生成
された映像情報ストリームおよびこれに対応するカメラ
制御情報ストリームを同期して読み出すようにストリー
ムデータ蓄積・読み出し部７を制御する。ストリームデ
ータ蓄積・読み出し部７は、ストリームデータ同期処理
部５８により上記指示に基づき映像情報ストリーム読み
出し部５３およびカメラ制御情報ストリーム読み出し部
５７を同期して操作し、記録装置３内に記録されている
各ストリーム内の時刻情報をサーチして、該当する時刻
情報を有する映像情報ストリームおよびカメラ制御情報
ストリームを読み出す。システム制御部４で指示された
時間区間のスタート時刻およびエンド時刻と同時刻の時
刻情報が見つからない場合は、映像情報ストリーム読み
出し部５３およびカメラ制御情報ストリーム読み出し部
５６は、指示された時間区間内の時刻情報を有する一連
の映像情報、即ちその時間区間内に付加または生成され
た映像情報ストリームとそれに対応するカメラ制御情報
ストリームを読み出す。そして、ストリームデータ同期
処理部５８は、指定された時間区間の映像情報ストリー
ムおよびカメラ制御情報ストリームを互いに同期させて
ストリームデータ処理部８に送出する。

【００３９】このように、この実施の形態１による映像
監視システムのストリームデータ蓄積・読み出し部７
は、映像情報ストリームとカメラ制御情報ストリームと
を別々のストリームデータとして蓄積し、且つ読み出す
ように構成されており、さらに、読み出す際にストリー
ムデータ同期処理部５８を用いて映像情報ストリームと
カメラ制御情報ストリームの読みとりの同期を取る様に
構成されているので、映像情報ストリームとカメラ制御
情報ストリームがともに必要な場合はこれら２つのスト
リームを時間同期を取って読み出すことが可能である。
さらに、一方のストリームのみ必要な場合は、必要な方
のストリームのみ読み出すことも可能である。これによ
り、ストリーム読み出し処理を高速化することができ
る。

【００４０】従って、この実施の形態１によれば、過去
の映像情報についても、その映像入力時の対応するカメ
ラ制御情報を読み出すことができ、映像データと同期し
てカメラ制御情報を表示できるので、映像の撮像位置や
方向について正確な情報を監視員等に提示することが可
能となる効果がある。

【００４１】また、この実施の形態１による映像監視シ
ステムは、上記したように、時刻情報を付加して映像情
報ストリームおよびカメラ制御情報ストリームを生成し
記録装置３に蓄積しているので、ストリームデータ蓄積
・読み出し部７を用いて、カメラ１の撮像位置や方向等
のカメラ制御情報を検索キーとして用いて映像情報スト
リームの所望の映像情報を検索することができる。スト
リームデータ蓄積・読み出し部７は、記録装置３内に蓄
積されたカメラ制御情報ストリームをサーチして所望の
カメラ制御情報を割り出し、このカメラ制御情報に付加
されている時刻情報を調べる。そして、この時刻情報を
検索キーとして用いて映像情報ストリームを検索し、そ
の時刻情報が付加された映像情報または時系列の一連の
映像情報、即ちある時間期間内の映像情報ストリームを
読み出すことができる。これにより、より高度な映像検
索機能を実現することができ、監視員の負荷を軽減する
効果がある。また、カメラ制御情報を検索キーとして検
索を行う場合に、この実施の形態１では、カメラ制御情
報ストリーム内のみをサーチすればよいので、検索を高
速化することができる。

【００４２】実施の形態２．図９はこの発明の実施の形
態２による映像監視システムのストリームデータ蓄積・
読み出し部７０の概略構成を示すブロック図である。こ
の実施の形態２による映像監視システムは、映像入力部
６から入力される映像情報およびカメラ制御部５から入
力されるカメラ制御情報を合成してこれに時刻情報を付
加してストリームデータ形式の合成情報を生成して合成
情報ストリームの一要素として記録するように構成され
ている。尚、映像監視システムの基本的な構成は、図１
に示すものと同一であり、ここではその基本構成の説明
は省略する。図９において、８１は映像情報およびカメ
ラ制御情報を合成してこれに現在時刻に関する時刻情報
を付加してストリームデータ形式の合成情報を生成する
合成情報ストリーム生成部（合成情報ストリーム生成・
蓄積手段）、８２はその合成情報を合成情報ストリーム
の一要素として（即ち、合成情報ストリームに付加し
て）記録装置３に蓄積する合成情報ストリーム蓄積部
（合成情報ストリーム生成・蓄積手段）、８３はシステ
ム制御部４により指示される時間区間に相当する一連の
合成情報、即ちその時間区間内に付加または生成された
合成情報ストリームを記録装置３から読み出す合成情報
ストリーム読み出し部（合成情報ストリーム読み出し手
段）である。

【００４３】次に動作について説明する。システム制御
部４は監視員の操作等によりマンマシンＩ／Ｆ９を介し
て入力されたカメラ制御情報をカメラ制御部５に送出す
る。カメラ制御情報は、図２に示すように、カメラ１の
位置、方向を規定するものである。このカメラ制御情報
については、上記実施の形態１で説明したとおりである
のでここでは省略する。

【００４４】その後、上記実施の形態１と同様に、カメ
ラ制御部５はシステム制御部４から受信したカメラ制御
情報に従ってカメラ制御状態パラメータを再設定し、再
設定した各カメラ制御状態パラメータに従って雲台の位
置および方向、カメラ１の制御を行う。そして、各カメ
ラ制御状態パラメータの値をカメラ制御情報としてスト
リームデータ蓄積・読み出し部７０に送出する。一方、
映像入力部６は、カメラ１により撮像された映像データ
および音声データを含む映像情報を受け取ると、その映
像情報を映像情報ストリームとして蓄積するためにスト
リームデータ蓄積・読み出し部７０に送出する。ストリ
ームデータ蓄積・読み出し部７０が映像入力部６からの
映像情報とカメラ制御部５からのカメラ制御情報とを受
け取ると、映像情報ストリーム生成部８１がこれら２つ
の情報を合成し、さらに、時刻発生部５１から入手した
現在時刻を時刻情報として合成した情報に付加して合成
情報を生成し、映像情報ストリーム蓄積部８２が生成さ
れた合成情報を記録装置３に蓄積する。この際、既に一
連の合成情報が合成情報ストリームとして記録装置３に
存在するならば、生成された合成情報はその合成情報ス
トリームの最後尾に付加される。また、初めて記録装置
３に記録する場合には、合成情報ストリームを格納する
領域の先頭にそのストリームデータ形式に変換された合
成情報が記録される。

【００４５】図１０はこの実施の形態２のストリームデ
ータ蓄積・読み出し部７０が記録装置３に蓄積した合成
情報ストリームの一例を示す説明図である。図に示すよ
うに、合成情報ストリーム中の１つの合成情報は、それ
に含まれる映像情報およびカメラ制御情報が得られた現
在時刻を示す時刻情報、カメラ制御情報、映像データと
共に入力された音声データ、その音声を入力したマイク
の位置や音声データの符号化方法等を示す音声ヘッダ、
映像データ、その映像のサイズや符号化方法等を示す映
像ヘッダとから構成される。

【００４６】ストリームデータ蓄積・読み出し部７０
は、システム制御部４の指示により所望の時系列の一連
の映像情報およびこれに対応する一連のカメラ制御情報
を含む合成情報ストリームを読み出すことができる。ス
トリームデータ蓄積・読み出し部７０が記録装置３から
指定された時間区間の合成情報ストリームを読み出す際
には、合成情報ストリーム読み出し部８３を介して、記
録装置３内に蓄積されている合成情報ストリームの各合
成情報内に記載されている時刻情報を参照して、該当す
る時刻の一連の合成情報を読み出す。この場合、合成情
報ストリーム読み出し部８３は、システム制御部４によ
り指示される時間区間に相当する合成情報ストリームを
記録装置３から読み出す。ストリームデータ蓄積・読み
出し部７０により読み出された合成情報ストリーム内の
映像データはストリームデータ処理部８によって所定の
処理が施された後、表示装置２に表示される。この際、
上記実施の形態１と同様に、指定された時刻の映像デー
タは、カメラ１の位置および撮像方向が示された地図等
とともに表示装置２に表示され得る。

【００４７】以上のように、この実施の形態２によれ
ば、映像情報と該映像情報の入力時のカメラ制御情報
が、１つの合成情報としてまとめて記録装置３に記録さ
れるので、合成情報ストリーム読み出し時に、上記実施
の形態１で設けたような特別なストリームデータ同期処
理部５８を必要としない。従って、映像監視システムの
装置構成を簡単にすることができる効果がある。

【００４８】実施の形態３．図１１はこの発明の実施の
形態３による映像監視システムのシステム構成を示すブ
ロック図である。図において、図１に示す実施の形態１
による映像監視システムと同一または相当する構成要素
には同一の符号を付してその説明を省略する。また、図
１１において、１０１は実際のビル、プラント等の現場
に設置されており、カメラ１からの映像情報およびカメ
ラ制御部５からのカメラ制御情報を現場とは離れた場所
にある映像監視システムの主要部に送信するローカル装
置、１０２はその映像監視システムの主要部に相当し、
監視員の居る部屋などに設置され得るセンタ装置、１０
０はローカル装置１０１とセンタ装置１０２との間で映
像情報およびカメラ制御情報を送受信するためのネット
ワーク、１０３は入力された映像情報にその入力時の時
刻を時刻情報として付加しストリームデータ形式のデー
タに映像情報を変換する映像情報ストリーム生成部、１
０４は入力されたカメラ制御情報にその入力時の時刻を
時刻情報として付加しストリームデータ形式のデータに
カメラ制御情報を変換するカメラ制御情報ストリーム生
成部、１０５は生成されたストリームデータ形式の映像
情報およびカメラ制御情報に記載されている時刻情報を
参照し、これらを同期させてセンタ装置１０２に送出す
るストリームデータ同期通信部（ストリームデータ同期
送信手段）、１０６はローカル装置１０１に設けられて
おり、上記ストリームデータ形式の映像情報およびカメ
ラ制御情報をネットワーク１００を介してセンタ装置１
０２に送信し、さらに、センタ装置１０２から送信され
るカメラ制御情報を受信するための通信Ｉ／Ｆ、１０７
はセンタ装置１０２に設けられており、ローカル装置１
０１から送られるストリームデータ形式の映像情報およ
びカメラ制御情報を受信する通信Ｉ／Ｆ、１０８は受信
したその映像情報およびカメラ制御情報を同期させてス
トリムデータ蓄積・読み出し部７００に送出するストリ
ームデータ同期通信部（ストリームデータ同期受信手
段）である。

【００４９】このように、この実施の形態３による映像
監視システムは、カメラ１、映像入力部６、カメラ制御
部５、映像情報ストリーム生成部１０３、カメラ制御情
報ストリーム生成部１０４、ストリームデータ同期通信
部１０５、および通信Ｉ／Ｆ１０６を備えたローカル装
置１０１と、通信Ｉ／Ｆ１０７、ストリームデータ同期
通信部１０８、ストリームデータ蓄積・読み出し部７０
０、記録装置３、マンマシンＩ／Ｆ９、システム制御部
４、ストリームデータ処理部８、および表示装置２を備
えており、ローカル装置１０１で生成したストリームデ
ータ形式の映像情報およびカメラ制御情報をネットワー
ク１００を介して受信し、これらを蓄積し、表示処理を
行うセンタ装置１０２とから構成される。

【００５０】次に動作について説明する。センタ装置１
０２のシステム制御部４は監視員の操作等によりマンマ
シンＩ／Ｆ９を介して入力されたカメラ制御情報を通信
Ｉ／Ｆ１０７を介してネットワーク１００へ送出する。
ローカル装置１０１は通信Ｉ／Ｆ１０６を介してこのカ
メラ制御情報を受け取ると、このカメラ制御情報をカメ
ラ制御部５に送出する。カメラ制御情報は、図２に示し
たように、カメラ１の位置、方向を規定するものであ
る。このカメラ制御情報については、上記実施の形態１
で説明したとおりであるのでここでは省略する。

【００５１】映像情報ストリーム生成部１０３は、ロー
カル装置１０１の映像入力部６から映像データおよび音
声データを含む映像情報を受け取ると、その映像情報を
入手した時の時刻を時刻情報として映像情報に付加して
ストリームデータ形式の映像情報を生成しストリームデ
ータ同期通信部１０５に送る。一方、カメラ制御情報ス
トリーム生成部１０４は、カメラ制御部５から得られる
カメラ制御情報に該カメラ制御情報を入手した時の時刻
を時刻情報として付加してストリームデータ形式のカメ
ラ制御情報を生成し、同様にストリームデータ同期通信
部１０５に送る。

【００５２】ストリームデータ同期通信部１０５は、映
像情報ストリーム生成部１０３からのストリームデータ
形式の映像情報とカメラ制御情報ストリーム生成部１０
４からのストリームデータ形式のカメラ制御情報とに記
載されている２つの時刻情報を参照し、これらの２つの
ストリームデータ形式の情報を同期させて通信Ｉ／Ｆ１
０６を介してネットワーク１００に送出する。同期の方
法は上記実施の形態１による映像監視システムのストリ
ームデータ蓄積・読み出し部７のストリームデータ転送
の際の同期の方法と同様である。

【００５３】図１２は、この実施の形態２による映像監
視システムのローカル装置１０１およびセンタ装置１０
２のストリームデータ同期通信部１０５，１０８の構成
を示すブロック図である。図において、１０５１は映像
情報ストリーム生成部１０３から送られたストリームデ
ータ形式の映像情報を一端蓄える映像情報ストリームバ
ッファ、１０５２はカメラ制御情報ストリーム生成部１
０４から送られたストリームデータ形式のカメラ制御情
報を一端蓄えるカメラ制御情報ストリームバッファ、１
０５３はこれらストリームデータ形式の映像情報および
カメラ制御情報中に含まれる時刻情報を参照して、同一
時刻の２つのストリームデータ形式の情報がそろった時
に、映像情報ストリームバッファ１０５１およびカメラ
制御情報ストリームバッファ１０５２にこれら２つのス
トリームデータ形式の情報をセンタ装置１０２に向けて
送出させる時刻情報監視部、１０８１は通信Ｉ／Ｆ１０
７を介して受信したストリームデータ形式の映像情報を
一端蓄える映像情報ストリームバッファ、１０８２は受
信部１０７を介して受信したストリームデータ形式のカ
メラ制御情報を一端蓄えるカメラ制御情報ストリームバ
ッファ、１０８３はこれらストリームデータ形式の映像
情報およびカメラ制御情報中に含まれる時刻情報を参照
して、映像情報ストリームバッファ１０８１およびカメ
ラ制御情報ストリームバッファ１０８２に２つのストリ
ームデータ形式の情報がそろった時に、これら２つのス
トリームデータ形式の情報をストリームデータ蓄積・読
み出し部７００に向けて同期させて送出させる時刻情報
監視部である。このように、時刻情報監視部１０８３
は、通信遅延およびジッタのあるネットワーク１００を
介して伝送された際に生ずる映像情報とカメラ制御情報
との同期のずれを解消する役割を果たす。

【００５４】ローカル装置１０１のストリームデータ同
期通信部１０５は、このように、２つのストリームデー
タ形式の映像情報とカメラ制御情報内の時刻情報を参照
して、同時刻の２つのストリームデータ形式の映像情報
およびカメラ制御情報を同時にネットワーク１００を介
してセンタ装置１０２に送出する。この方法によれば、
システム制御部４の指示により、ストリームデータ形式
の映像情報とカメラ制御情報のうち必要な情報のみを選
択して送信することもできる。センタ装置１０２のスト
リームデータ同期通信部１０８が、通信Ｉ／Ｆ１０７を
介してローカル装置１０１から送られてきたストリーム
データ形式の映像情報およびカメラ制御情報、またはス
トリームデータ形式の映像情報およびカメラ制御情報の
いずれか一方を受信すると、図７および図８に示すよう
に、これらの情報は映像情報ストリームおよびカメラ制
御情報ストリームとして記録装置３に蓄積される。

【００５５】以上述べたように、この実施の形態３によ
れば、ネットワーク１００を介して映像情報とカメラ制
御情報を伝送する場合もこれらの情報を同期をとって送
受信できる効果がある。また、センタ装置１０２にスト
リームデータを蓄積するようにしたので、過去のストリ
ームデータを高速に読み出すことができる効果がある。

【００５６】ストリームデータ形式の映像情報およびカ
メラ制御情報を別々に送信する代わりに、これらの映像
情報およびカメラ制御情報を合成してそれに時刻情報を
付加してストリームデータ形式の合成情報を生成してこ
れを送信するように構成してもよい。図１３は、映像情
報およびカメラ制御情報を合成してネットワーク１００
を介して送受信するように構成された、ローカル装置１
０１およびセンタ装置１０２のストリームデータ同期通
信部１０５，１０８の構成を示すブロック図である。図
において、１０５４は映像情報ストリームバッファ１０
５１に格納されたストリームデータ形式の映像情報とカ
メラ制御情報ストリームバッファ１０５２に格納された
ストリームデータ形式のカメラ制御情報とを合成しスト
リームデータ形式の合成情報を生成しその合成情報を通
信Ｉ／Ｆ１０６を介してネットワーク１００に送出する
ストリームデータ合成部、１０８４は通信Ｉ／Ｆ１０７
を介して受信したストリームデータ形式の合成情報から
ストリームデータ形式の映像情報とカメラ制御情報とを
分離してそれぞれ映像情報ストリームバッファ１０８１
とカメラ制御情報ストリームバッファ１０８２に送出す
るストリームデータ分離部である。

【００５７】センタ装置１０２のストリームデータ同期
通信処理部１０８は、受信したストリームデータ形式の
合成情報をストリームデータ分離部１０８４を用いて、
ストリームデータ形式の映像情報とカメラ制御情報とに
分離することができる。このようにして、図１０に示す
ような合成情報ストリームがセンタ装置１０２の記録装
置３に記録される。

【００５８】従って、以上の合成情報を生成して送信す
る方法によれば、映像情報を順次受信したストリームデ
ータ形式の合成情報から単に分離することによって、ス
トリームデータ形式の映像情報と該映像情報に同期した
ストリームデータ形式のカメラ制御情報とを得ることが
でき、特別な同期処理を必要としない。従って、映像監
視システムの装置構成を簡単にすることができる効果が
ある。

【００５９】実施の形態４．図１４はこの発明の実施の
形態４による映像監視システムのシステム構成を示すブ
ロック図である。図において、図１に示す実施の形態１
による映像監視システムおよび図１１に示す実施の形態
３による映像監視システムと同様な構成要素には同一の
符号を付してその説明を省略する。

【００６０】図１１に示したように、上記実施の形態３
による映像監視システムは、ローカル装置１０１におい
て生成したストリームデータ形式の映像情報およびカメ
ラ制御情報、またはストリームデータ形式の合成情報を
ストリームデータ同期通信部１０５を用いてセンタ装置
１０２に伝送し、受信したストリームデータ形式の情報
をセンタ装置１０２に接続された記録装置３に蓄積する
ように構成されている。このように、上記実施の形態３
による映像監視システムでは、映像情報ストリームとカ
メラ制御情報ストリーム、または合成情報ストリームが
センタ装置１０２に接続された記録装置３に蓄積されて
おり、ストリームデータ処理部８は必要なストリームを
直ちに記録装置３から読み出すことができる。

【００６１】しかしながら、複数のローカル装置１０１
がネットワーク１００を介してセンタ装置１０２と接続
されている場合、全てのローカル装置１０１が生成した
映像情報およびカメラ制御情報を常にセンタ装置１０２
に伝送すると、ネットワーク１００の負荷が増大し、通
信遅延が大きくなったり、ネットワーク１００を構成す
る通信路の種類によってはデータが欠落する場合が生じ
る。また、センタ装置１０２内での処理の負荷も増大し
てしまう。これを解決するために、センタ装置１０２で
処理しようとするストリームデータを該当するローカル
装置１０１から読み出して処理する方法が考えられる
が、上記実施の形態３による映像監視システムは、ロー
カル装置１０１内にストリームデータを蓄積する機能を
有していないので、センタ装置１０２が読み出さなかっ
た過去のストリームデータをシステム内に保存すること
はできない。

【００６２】この実施の形態４による映像監視システム
は、上記の問題を解決するために、ローカル装置１０１
内に記録装置３を備えるように構成したものである。

【００６３】次に動作について説明する。センタ装置１
０２のシステム制御部４は監視員の操作等によりマンマ
シンＩ／Ｆ９を介して入力されたカメラ制御情報を通信
Ｉ／Ｆ１０７を介してネットワーク１００へ送出する。
ローカル装置１０１は通信Ｉ／Ｆ１０６を介してこのカ
メラ制御情報を受け取ると、このカメラ制御情報をカメ
ラ制御部５に送出する。カメラ制御情報は、図２に示し
たように、カメラ１の位置、方向を規定するものであ
る。このカメラ制御情報については、上記実施の形態１
で説明したとおりであるのでここでは省略する。

【００６４】その後、上記実施の形態３と同様に、カメ
ラ制御部５はシステム制御部４から受信したカメラ制御
情報に従ってカメラ制御状態パラメータを再設定し、再
設定した各カメラ制御状態パラメータに従って雲台の位
置および方向、カメラ１の制御を行う。そして、各カメ
ラ制御状態パラメータの値をカメラ制御情報としてスト
リームデータ蓄積・読み出し部７０１に送出する。一
方、映像入力部６は、カメラ１により撮像された映像デ
ータおよび音声データを含む映像情報を受け取ると、そ
の映像情報をスリームデータ蓄積・読み出し部７０１に
送出する。ストリームデータ蓄積・読み出し部７０１は
映像入力部６からの映像情報とカメラ制御部５からのカ
メラ制御情報とを受け取ると、これらの情報にそれぞれ
情報を入手した時刻を時刻情報として付加してストリー
ムデータ形式の映像情報およびカメラ制御情報を生成し
て、図７および８に示したように、別個に映像情報スト
リームおよびカメラ制御情報ストリームとして記録装置
３に記録するか、図９に示すような合成情報ストリーム
生成部８１を用いて２つの情報を合成しさらに時刻発生
部５１から入手した現在時刻を時刻情報として付加して
ストリームデータ形式の合成情報を生成し、図１０に示
すような合成情報ストリームとして記録装置３に蓄積す
る。即ち、この実施の形態４によるストリームデータ蓄
積・読み出し部７０１は、図６に示した、上記実施の形
態１による映像監視システムのストリームデータ蓄積・
読み出し部７と同様な構成を有しているか、または、図
９に示した、上記実施の形態２による映像監視システム
のストリームデータ蓄積・読み出し部７０と同様な構成
を有している。

【００６５】このように、この実施の形態４による映像
監視システムでは、ローカル装置１０１において、映像
情報ストリームおよびカメラ制御情報ストリーム、また
は合成情報ストリームを記録装置３に蓄積することがで
きる。そして、ローカル装置１０１は、センタ装置１０
２からの要求に応じて、ストリームデータ蓄積・読み出
し部７０１を用いて、必要としているストリームを記録
装置３から読み出し、ストリームデータ同期通信部１０
５によって映像情報ストリームとカメラ制御情報ストリ
ームを同期を取りながらセンタ装置１０２に通信Ｉ／Ｆ
１０６およびネットワーク１００を介して伝送する。

【００６６】この実施の形態４による映像監視システム
のローカル装置１０１およびセンタ装置１０２のストリ
ームデータ同期通信部１０５，１０８は、上記実施の形
態３で述べた図１２または図１３に図示した構成を有し
ている。しかしながら、ストリームデータ蓄積・読み出
し部７０１が図６に示す上記実施の形態１によるストリ
ームデータ蓄積・読み出し部７と同様な構成を有してお
り、映像情報ストリームおよびカメラ制御情報ストリー
ム、または映像情報ストリームのみを記録装置３から読
み出し、ストリームデータ同期処理部５８を用いてそれ
らの映像情報ストリームおよびカメラ制御情報ストリー
ムを同期させて同時にセンタ装置１０２に伝送するか、
映像情報ストリームのみを伝送する場合には、図１２に
示すようなストリームデータ同期通信部１０５は必要で
はない。さらに、ストリームデータ蓄積・読み出し部７
０１が図９に示す上記実施の形態２によるストリームデ
ータ蓄積・読み出し部７０と同様な構成を有しており、
同時刻の映像情報およびカメラ制御情報をそれぞれ合成
した一連の合成情報から成る合成情報ストリームを記録
装置３から読み出しセンタ装置１０２に伝送する場合
は、ストリームデータ蓄積・読み出し部７０により読み
出した合成情報ストリームをそのままのデータフォーマ
ットを維持して伝送すればよいので、ローカル装置１０
１側の図１３に示すようなストリームデータ同期通信部
１０５は必要ではない。また、ストリームデータ蓄積・
読み出し部７０１が図９に示した上記実施の形態２によ
るストリームデータ蓄積・読み出し部７０と同様な構成
を有しており、ストリームデータ蓄積・読み出し部７０
の合成情報ストリーム読み出し部８３で読み出された合
成情報ストリームから、映像情報ストリームまたはカメ
ラ制御情報ストリームのどちらか一方のみを伝送するよ
うな場合は、ストリームデータ蓄積・読み出し部７０１
と図１２に示すストリームデータ同期通信部１０５との
間に、ストリームデータ分離部を設け、読み出した合成
情報ストリームを映像情報ストリームとカメラ制御情報
ストリームに分離し、必要なストリームのみを選んでス
トリームデータ同期通信部１０５を介してセンタ装置１
０２に伝送するようにすればよい。

【００６７】以上述べたように、この実施の形態４によ
れば、ローカル装置１０１にストリームデータを蓄積
し、センタ装置１０２側で必要なストリームデータを選
択して読み出すことができるので、ネットワーク１００
の負荷およびセンタ装置１０２内での処理の負荷を軽減
することができる効果がある。

【００６８】実施の形態５．図１５はこの発明の実施の
形態５による映像監視システムのカメラ制御情報の補間
方法を示す説明図である。この実施の形態５による映像
監視システムは、上記した実施の形態１〜４のいずれか
一つと同様な構成を有しており、その構成についての説
明は省略する。

【００６９】次に動作について説明する。以下では、こ
の実施の形態５によるカメラ制御情報の補間方法につい
て説明する。カメラ制御情報は先に図２および図３を用
いて説明したように、入力された映像の撮像位置、撮影
範囲、方向等を示す情報である。一般に、映像監視シス
テムに使用されるカメラ１は、数十分の１秒ごとに１フ
レーム分の映像を映像情報として出力する。これに対
し、カメラ１の制御は、これよりも長い時間間隔で制御
される場合が多い。カメラ制御部５は、カメラ制御情報
を受信する毎に一つのカメラ制御情報を送信するように
構成されている。この際、カメラ制御部５が一定時間以
上カメラ制御情報を受信しない場合に、予め設定された
時間毎に現行のカメラ制御状態パラメータをシステム制
御部４から読み出し、そのカメラ制御状態パラメータを
カメラ制御情報として送信するようにしてもよい。

【００７０】カメラ制御情報が得られる時間間隔（以
下、第１の時間間隔と呼ぶ）が、映像情報が得られる時
間間隔（以下、第２時間間隔と呼ぶ）よりも長い場合、
即ち、カメラ制御情報のサンプリングレートが映像情報
のサンプリングレートより遅い場合、この実施の形態５
によるカメラ制御情報の補間方法を用いることにより、
第２の時間間隔の各時刻におけるカメラ制御情報を求め
ることができる。カメラ制御情報が変化していないなら
ば、上記したように、所定の時間毎に現行のカメラ制御
状態パラメータをシステム制御部４から読み出してそれ
をカメラ制御情報として送信するようにしてもよいが、
カメラの位置および方向等が変化しつつある場合には、
以下に示す補間方法を用いる方が好ましい。

【００７１】今、図１５に示すように、映像情報（図中
(ａ)）が時間間隔1/10秒（t(0),t(1),t(2)... ）で入力
され、カメラ制御情報（図中(ｂ)）が時間間隔１秒（t
(0),t(10),t(20)... ）で入力されたとする。この場
合、映像データが入力されるt(1),t(2)...の各時刻に相
当するカメラ制御情報（図中(ｃ)）が得られていない。
従って、もし補間を実施しないと、図１６（ａ）に示す
ようなカメラ制御情報ストリームが記録装置３に記録さ
れることになる（尚、図示している例は映像情報AV(t
(i))およびカメラ制御情報CM(t(i))が合成されている合
成情報ストリームである）。

【００７２】そこで、この実施の形態５による補間方法
により、第１の時間間隔で得られたカメラ制御情報(CM
(t(0)),CM(t(10)),CM(t(20))...）からカメラ制御情報
補間データ(CM(t(1)),CM(t(2)),... )を求める。図１７
はカメラ１がパンしている場合のパン角度の補間データ
を求める方法を示す説明図である。時刻t(0)におけるカ
メラ制御情報から時刻t(0）でのカメラのパン角度がpan
(t(0))゜、パン速度がｐ゜/secであることがわかる。そ
こで、時刻t(0)からt(10) までの間、カメラ１が指定さ
れたスピードｐ゜/secでパンしていると仮定して、任意
の時刻t(n)でのパン角度は、pan(t(n))=pan(t(n-1))+p/
10で求めることができる。同様にして、他のカメラ制御
情報補間データも算出できる。このようにして、図１６
（ｂ）に示すような補間データが追加されたカメラ制御
情報ストリームが記録装置３に記録されることになる。

【００７３】この実施の形態５によるカメラ制御情報の
補間方法は、上記のように、図６に示した上記実施の形
態１によるカメラ情報ストリーム生成部５５に適用でき
る。カメラ制御情報が映像情報よりも長い時間間隔でし
か得られない場合、カメラ制御情報ストリーム生成部５
５は、映像情報ストリーム生成部５２が出力する映像情
報ストリームに対応した時刻のカメラ制御情報がないと
きに上述の様なカメラ制御情報の補間処理を行うことに
より求めたストリームデータ形式のカメラ制御情報をカ
メラ制御情報ストリーム蓄積部５６に出力する。このよ
うな構成により、ストリームデータ処理部８の映像表示
部３３によって表示される映像に対応した時刻のカメラ
制御情報を常に映像と同期して表示することができる。

【００７４】また、この実施の形態５によるカメラ制御
情報の補間方法を、図４に示した上記実施の形態１によ
るストリームデータ処理部８のカメラ制御情報ストリー
ム処理部３２に適用できる。カメラ制御情報が映像情報
よりも長い時間間隔でしか得られない場合、カメラ制御
情報ストリーム処理部３２は、上述の様なカメラ制御情
報の補間処理を行うことにより、映像表示部３３によっ
て表示される映像に対応した時刻のカメラ制御情報を補
間により生成して映像と同期して表示することができ
る。

【００７５】これに代わって、この実施の形態５による
カメラ制御情報の補間方法を、図６に示した上記実施の
形態１によるストリームデータ同期処理部５８に適用し
てもよい。カメラ制御情報が映像情報よりも長い時間間
隔でしか得られない場合、ストリームデータ同期処理部
５８は、映像情報ストリーム読み出し部５４が出力する
映像情報ストリームに対応した時刻のカメラ制御情報が
ないときに上述の様なカメラ制御情報の補間処理を行う
ことにより求めたカメラ制御情報を映像情報ストリーム
に同期してカメラ制御情報ストリームを出力する。この
ような構成によっても、ストリームデータ処理部８の映
像表示部３３によって表示される映像に対応した時刻の
カメラ制御情報を映像と同期して表示することができ
る。

【００７６】また、この実施の形態５によるカメラ制御
情報の補間方法を、図９に示した上記実施の形態２によ
る映像情報ストリーム生成部８１、および図１３に示し
た上記実施の形態４によるストリームデータ合成部１０
５４に適用してもよい。この場合、例えば、合成情報ス
トリーム生成部８１は上記補間処理を行い、図1６
（ｂ）に示すような、カメラ制御情報の補間データも含
み得る合成情報ストリームを映像情報を受信する度に生
成する。これにより、記録装置３に蓄積されているかま
たはセンタ装置１０２に送信されてくる合成情報ストリ
ーム内には各映像情報に対応するカメラ制御情報が必ず
含まれているので、図１に示したストリームデータ処理
部８または図１４に示したストリームデータ同期通信部
１０８において、特別な同期処理や補間処理を行う必要
がない。

【００７７】さらに、この実施の形態５によるカメラ制
御情報の補間方法は、記録装置３に蓄積された映像情報
ストリームおよびカメラ制御情報ストリームを検索して
読み出す際に該当する時刻のカメラ制御情報が記録装置
３に蓄積されていない場合にも適用できる。

【００７８】システム制御部４が過去のある時間区間の
映像情報ストリームおよびカメラ制御情報ストリームの
読み出し指示を出した場合、例えば図１に示すストリー
ムデータ蓄積・読み出し部７は記録装置３内の各ストリ
ーム内をサーチして、配信要求された期間内に相当する
時刻情報を抽出し、該時刻情報を先頭とする映像情報ス
トリームおよびカメラ制御情報ストリームを読み出しス
トリームデータ処理部８に送信する。配信要求のあった
期間内のある時刻におけるカメラ制御情報が無い場合
は、その時刻から最も近い過去と未来のカメラ制御情報
を抽出して前述の補間処理を行い、配信要求されたその
時刻におけるカメラ制御情報を補間により生成してスト
リームデータ処理部８に送出する。また、システム制御
部４が過去のある期間の映像情報ストリームの読み出し
指示を出した場合も、同様に、配信要求された期間内の
時刻におけるカメラ制御情報が無いならば、前述の補間
処理を行って対応するカメラ制御情報を生成してストリ
ームデータ処理部８に送出することもできる。

【００７９】以上述べたように、この実施の形態５によ
れば、雲台やカメラの動き等を示す補間情報を含むカメ
ラ制御情報を用いることにより、カメラ制御情報がカメ
ラ制御部５から入手できない時刻におけるカメラ制御情
報を補間計算によって求めることができる効果がある。
さらに、補間計算によって求められた補間データも含め
て映像情報と同期して表示することにより、カメラ制御
情報をよりなめらかに映像情報に追従して表示装置２に
表示することができる。

【００８０】上記の実施の形態１〜５においては、過去
の映像情報を検索する際に時刻情報を検索キーとして用
いているが、映像の撮像場所を検索キーとして用い記録
装置３に蓄積された映像情報ストリームから所望の映像
情報ないし所望の一連の映像情報を含む映像情報ストリ
ームを検索するように構成してもよい。この場合、シス
テム制御部４は、検索キーとして、カメラ１の雲台位置
から所望の撮像位置への方向をオブジェクト座標系にお
けるベクトル値（以下、「Ｓベクトル」と記す）を指示
する。例えば図１に示すストリームデータ蓄積・読み出
し部７は、カメラ制御情報ストリームに時系列に蓄積さ
れているカメラ制御情報からＳベクトルがカメラ撮像範
囲内に含まれるかどうかを順次判定していく。判定の結
果、Ｓベクトルがカメラ撮像範囲内に含まれているカメ
ラ制御情報をカメラ制御情報ストリーム内に発見した場
合、そのカメラ制御情報に付加されている時刻情報（第
１の時刻情報）を読み出す。引き続いて、カメラ制御情
報からＳベクトルがカメラ撮像範囲内に含まれるかどう
かを順次判定し、Ｓベクトルが撮像範囲に含まれないカ
メラ制御情報を発見した時に、このカメラ制御情報に付
加されている時刻情報（第２の時刻情報）を読み出す。
そして、第１の時刻情報から第２の時刻情報の一つ手前
までの時刻情報を有するカメラ制御情報ストリームに対
応する映像情報ストリームを読み出し、ストリームデー
タ処理部８に送出する。この際に、同時に検索したカメ
ラ制御情報ストリームを送出してもよい。

【００８１】上記した検索方法は、Ｓベクトルが撮像範
囲に含まれるカメラ制御情報を発見する毎に、該当する
映像情報ストリームをストリームデータ処理部８に送出
する様に構成されているが、映像の検索方法はこれに限
らない。例えば、予め記録装置３内に蓄積されている全
カメラ制御情報ストリームについて、Ｓベクトルを撮像
範囲に含み且つ１つ前の時刻のカメラ制御情報がＳベク
トルを含まないカメラ制御情報に付加されている時刻情
報（以下「Ｓ時刻」と記す）と、Ｓベクトルを含まない
カメラ制御情報で且つ１つ前の時刻のカメラ制御情報が
Ｓベクトルを含むカメラ制御情報に付加されている時刻
情報（以下「Ｅ時刻」と記す）を全て抽出し、全Ｓ時刻
および全Ｅ時刻をシステム制御部４に送出する。システ
ム制御部４は、全Ｓ時刻および全Ｅ時刻の中から所望の
Ｓ時刻およびＥ時刻を選択し、この所望のＳ時刻および
Ｅ時刻をストリームデータ蓄積・読み出し部７に送出す
る。ストリームデータ蓄積・読み出し部７はシステム制
御部４で選択されたそのＳ時刻とＥ時刻を受け取り、こ
れらＳ時刻からＥ時刻の間のカメラ制御情報ストリーム
と映像情報ストリームを記録装置３から抽出してストリ
ームデータ処理部８に送出する。

【００８２】尚、映像の撮像場所を検索キーとして用い
記録装置３に蓄積された映像情報ストリームから所望の
映像情報ないし所望の一連の映像情報を含む映像情報ス
トリームを検索する場合に、システム制御部４が指定す
るＳベクトルとしては、例えば監視員等によってマンマ
シンＩ／Ｆ９を介して入力されたような、ベクトル値を
用いてもよいし、図４に示した地図情報表示部３４によ
り表示されている地図上で監視員等がポインティングデ
バイス等を用いて指定したベクトル値を使用してもよ
い。

【００８３】また、上記の実施の形態１〜５の映像監視
システムは、ストリームデータ処理部８を用いて映像情
報およびカメラ制御情報のストリームデータを同期して
表示装置２上に表示するように構成されていたが、映像
情報およびカメラ制御情報の処理の内容は表示に限った
ものではなく、入力したストリームデータを他の監視端
末に転送したり、ストリームデータ蓄積・読み出し部に
よって記録したものとは別に、他のデータフォーマット
で再記録を行ったり、映像データから復元される画像に
画像処理を施すように構成されていてもよい。例えば、
カメラ制御情報に映像撮像時の明るさや絞りの情報を含
めておき、映像データから復元される画像に例えば２値
化等の画像処理を施す際の処理パラメータを該映像入力
時のカメラ制御情報に含まれる明るさや絞りの情報に基
づいて設定する様にしても良い。

【００８４】また、図１に示すように、上記実施の形態
１〜５による映像監視システムはいずれも、カメラ制御
情報を監視員がマンマシンＩ／Ｆ９を用いて入力するよ
うに構成されているが、これに限るものではない。例え
ば、予めカメラ１の動作パターンをカメラ制御部５に記
録しておき、カメラ制御部５がその動作パターンに従っ
て自動的にカメラ１を制御するようにしてもよい。ま
た、例えば圧力センサや温度センサ、音センサ等の他の
センサの情報を用いてカメラ１の撮像位置、方向を制御
するようにしてもよい。さらに、ナビゲーションシステ
ムを搭載した自走式システムにカメラ１を設け、ナビゲ
ーションシステムにより得られる位置情報をカメラ制御
部５にフィードバックするようにしても良い。また、入
力した映像データに対して画像処理を施し、その処理結
果に基づいてカメラ１を制御するようにしてもよい。例
えば、連続する２つのフレーム間で差分処理を行うこと
により画像中の変化した領域を検出し、検出した領域の
方向にカメラ１を向けるように制御したり、ズームパラ
メータを制御してその領域にカメラ１をズームインする
ことも可能である。

【００８５】

【発明の効果】以上のように、請求項１記載の発明によ
れば映像監視システムを映像入力手段から入力される映
像情報に該映像情報が入力された時刻を示す時刻情報を
付加してストリームデータとして記録装置に蓄積し、さ
らに、映像情報が入力される周期とは必ずしも一致しな
い周期でまたは非周期的に映像情報の入力に同期してカ
メラ制御手段から入力されるカメラ制御情報があるなら
ばカメラ制御情報に時刻情報を付加してストリームデー
タとして記録装置に蓄積するストリームデータ蓄積手段
と、所望の一連の映像情報とこれに対応する一連のカメ
ラ制御情報とを読み出して所定の処理を施す際に、一連
の映像情報およびこれに対応する一連のカメラ制御情報
を記録装置から順次読み出して所定の処理のために同期
して出力するストリームデータ読み出し手段とを備える
ように構成したので、過去の映像情報についてもその映
像の入力時の対応するカメラ制御情報を読み出し、映像
情報とカメラ制御情報とを同期して表示できるので、映
像の撮像位置や方向について正確な情報を監視員に提示
することが可能となる効果がある。また、過去の映像情
報を検索する際に時刻情報だけでなくカメラの撮像位置
や方向などのカメラ制御情報を検索キーとして用いて検
索し読み出すといった、より高度な映像検索機能を実現
することができ、監視員の負荷を軽減することができる
効果がある。

【００８６】請求項２記載の発明によれば映像監視シス
テムを映像情報ストリームとカメラ制御情報ストリーム
とを別個に記録装置に蓄積し、ストリームデータ読み出
し手段を記録装置に蓄積された映像情報ストリームから
所望の一連の映像情報とこれに対応する一連のカメラ制
御情報を読み出し、これらの情報を同期させて出力する
ように構成したので、カメラ制御情報を検索キーとして
用いて検索を行う場合にカメラ制御情報ストリーム内の
みをサーチすれば良いので、検索を高速化することがで
きる効果がある。また、映像情報ストリームまたはカメ
ラ制御情報ストリームのいずれか一方のみが必要な場合
は必要なストリームのみを読み出すことができるので、
ストリーム読み出し処理を高速化することができる効果
がある。

【００８７】請求項３記載の発明によれば映像監視シス
テムを映像情報、カメラ制御情報および時刻情報を合成
し、この合成情報を合成情報ストリームとして記録装置
に蓄積し、ストリームデータ読み出し手段を記録装置に
蓄積された合成情報ストリームから所望の一連の合成情
報を読み出すように構成したので、ストリーム読み出し
時に特別な同期処理を必要とせず、装置構成を簡単にす
ることができる効果がある。

【００８８】請求項４記載の発明によれば映像監視シス
テムを、ある時刻に入力された映像情報に対応するカメ
ラ制御情報が入力されない場合、所定の補間方法を用い
て既に蓄積された過去のカメラ制御情報から映像情報に
対応するカメラ制御情報を求めて記録装置に映像情報ス
トリームおよびカメラ制御情報ストリームとして記録す
るように構成したので、カメラ制御情報が入手できなか
った時刻におけるカメラ制御情報を補間計算によって求
めることができ、補間計算によって求められた補間デー
タも含めて映像情報と同期して表示する事により、カメ
ラ制御情報をよりなめらかに映像情報に追従して表示す
ることができる効果がある。

【００８９】請求項５記載の発明によれば映像監視シス
テムを、対応するカメラ制御情報が記憶装置に蓄積され
ていない映像情報をストリームデータ読み出し手段が読
み出し出力した場合、所定の補間方法を用いて既に蓄積
された過去のカメラ制御情報から映像情報に対応するカ
メラ制御情報を求めるように構成したので、カメラ制御
情報が入手できなかった時刻におけるカメラ制御情報を
補間計算によって求めることができ、補間計算によって
求められた補間データも含めて映像情報と同期して表示
する事により、カメラ制御情報をよりなめらかに映像情
報に追従して表示することができる効果がある。

【００９０】請求項６記載の発明によれば映像監視シス
テムをストリームデータ読み出し手段が読み出す映像情
報に対応するカメラ制御情報が記録装置に蓄積されてい
ない場合または読み出した合成情報中に映像情報に対応
するカメラ制御情報が存在しない場合に、所定の補間方
法を用いて既に蓄積された過去のカメラ制御情報から映
像情報に対応するカメラ制御情報を求めるように構成し
たので、カメラ制御情報が入手できなかった時刻におけ
るカメラ制御情報を補間計算によって求めることがで
き、補間計算によって求められた補間データも含めて映
像情報と同期して表示する事により、カメラ制御情報を
よりなめらかに映像情報に追従して表示することができ
る効果がある。

【００９１】請求項７記載の発明によれば映像監視シス
テムをカメラ制御情報補間手段が過去のカメラ制御情報
に含まれる、カメラが載置される雲台の移動速度、カメ
ラのパン速度、チルト速度、およびズーム速度のうちの
少なくともいずれか１つを用いて、カメラの位置、方
向、またはズーム位置に関するカメラ制御情報を補間す
るように構成したので、カメラ制御情報が入手できなか
った時刻におけるカメラ制御情報を補間計算によって求
めることができる効果がある。

【００９２】請求項８記載の発明によれば映像監視シス
テムを、時系列に入力される映像情報と、映像情報が入
力される周期とは必ずしも一致しない周期でまたは非周
期的に映像情報の入力に同期してカメラ制御手段から入
力されるカメラ制御情報があるならば、カメラ制御情報
とを同期させてネットワークに送出するストリームデー
タ同期送信手段を具備するローカル装置と、ネットワー
クから映像情報およびカメラ制御情報を同期して受信し
て、映像情報およびカメラ制御情報を同期を取ってスト
リームデータとして記録装置に蓄積し且つ所望の一連の
映像情報およびこれに対応する一連のカメラ制御情報を
記録装置から読み出しこれらを同期させて後の処理のた
めに内部に出力するセンタ装置とを備えるように構成し
たので、ネットワークを介して映像情報とカメラ制御情
報を伝送する場合も同期をとって送受信できる効果があ
る。また、センタ装置にストリームデータを蓄積するよ
うにしたので、過去のストリームデータを高速に読み出
すことができる効果がある。さらに、ローカル装置の装
置構成を簡単にすることができる効果がある。

【００９３】請求項９記載の発明によれば映像監視シス
テムをローカル装置が時系列に入力される映像情報とカ
メラ制御情報とにそれぞれ時刻情報を付加して同期させ
て別々にネットワークに送出し、センタ装置がネットワ
ークを介して受信した映像情報およびカメラ制御情報に
付加された２つの時刻情報を参照して同時刻の映像情報
およびカメラ制御情報を受け取った際にこれらを同期さ
せて後の処理のために内部に出力するように構成したの
で、ネットワークを介して映像情報とカメラ制御情報を
伝送する場合も同期をとって送受信できる効果がある。
また、センタ装置にストリームデータを蓄積するように
したので、過去のストリームデータを高速に読み出すこ
とができる効果がある。さらに、カメラ制御情報を検索
キーとして用いて検索を行う場合にカメラ制御情報スト
リーム内のみをサーチすれば良いので、検索を高速化す
ることができる効果がある。また、映像情報ストリーム
またはカメラ制御情報ストリームのいずれか一方のみが
必要な場合は必要なストリームのみを読み出すことがで
きるので、ストリーム読み出し処理を高速化することが
できる効果がある。

【００９４】請求項１０記載の発明によれば映像監視シ
ステムをローカル装置が時系列に入力される映像情報と
カメラ制御情報に映像情報が入力された時刻を示す時刻
情報を付加して合成情報を生成し、この合成情報をネッ
トワークに送出し、センタ装置がネットワークを介して
受信した合成情報から映像情報とカメラ制御情報とを抽
出しこれらを同期させて後の処理のために内部に出力す
るように構成したので、ストリーム読み出し時に特別な
同期処理を必要とせず、装置構成を簡単にすることがで
きる効果がある。

【００９５】請求項１１記載の発明によれば映像監視シ
ステムを、入力される映像情報と、映像情報が入力され
る周期とは必ずしも一致しない周期でまたは非周期的に
映像情報の入力と同期してカメラ制御手段から入力され
るカメラ制御情報があるならばこのカメラ制御情報と
に、これらの情報が入力された時刻を示す時刻情報を付
加してストリームデータとしてそれぞれ記録装置に蓄積
し、さらに、所望の一連の映像情報およびこれに対応す
る一連のカメラ制御情報を記録装置から順次所定の処理
のために同期して読み出して、さらに同期を取ってネッ
トワークに送出するローカル装置と、ネットワークから
一連の映像情報およびこれに対応する一連のカメラ制御
情報を同期して受信して所定の処理のために同期して後
の処理のために内部に出力するセンタ装置とを備えるよ
うに構成したので、ローカル装置にストリームデータを
蓄積し、センタ装置側で必要なストリームデータを選択
して読み出すことができ、ネットワークの負荷およびセ
ンタ装置内での処理の負荷を軽減することができる効果
がある。

【００９６】請求項１２記載の発明によれば映像監視シ
ステムをセンタ装置が映像情報に対応するカメラ制御情
報を受信しない場合に、所定の補間方法を用いて既に蓄
積された過去のカメラ制御情報から映像情報に対応する
カメラ制御情報を求めるように構成したので、カメラ制
御情報が入手できなかった時刻におけるカメラ制御情報
を補間計算によって求めることができ、補間計算によっ
て求められた補間データも含めて映像情報と同期して表
示する事により、カメラ制御情報をよりなめらかに映像
情報に追従して表示することができる効果がある。

【００９７】請求項１３記載の発明によれば映像監視シ
ステムを、ある時刻に入力された映像情報に対応するカ
メラ制御情報が入力されない場合、ストリームデータ蓄
積手段が所定の補間方法を用いて既に蓄積された過去の
カメラ制御情報から映像情報に対応するカメラ制御情報
を求めるように構成したので、カメラ制御情報が入手で
きなかった時刻におけるカメラ制御情報を補間計算によ
って求めることができ、補間計算によって求められた補
間データも含めて映像情報と同期して表示する事によ
り、カメラ制御情報をよりなめらかに映像情報に追従し
て表示することができる効果がある。

【００９８】請求項１４記載の発明によれば映像監視シ
ステムを過去のカメラ制御情報に含まれる、カメラが載
置される雲台の移動速度、カメラのパン速度、チルト速
度、およびズーム速度のうちの少なくともいずれか一つ
を用いて、カメラの位置、方向、またはズーム位置に関
するカメラ制御情報を補間するように構成したので、カ
メラ制御情報が入手できなかった時刻におけるカメラ制
御情報を補間計算によって求めることができる効果があ
る。

【図面の簡単な説明】

【図１】 この発明の実施の形態１による映像監視シス
テムの概略構成を示すブロック図である。

【図２】 この発明によるカメラ制御情報を示す表図で
ある。

【図３】 図２に示すカメラ制御情報を規定するカメラ
座標系を示す説明図である。

【図４】 この発明の実施の形態１による映像監視シス
テムのストリームデータ処理部の概略構成を示すブロッ
ク図である。

【図５】 この発明の実施の形態１による映像監視シス
テムの監視映像および地図情報の表示例を示す図であ
る。

【図６】 この発明の実施の形態１による映像監視シス
テムのストリームデータ蓄積・読み出し部の構成を示す
ブロック図である。

【図７】 この発明の実施の形態１による映像監視シス
テムで生成される映像情報ストリームの一例を示す説明
図である。

【図８】 この発明の実施の形態１による映像監視シス
テムで生成されるカメラ制御情報ストリームの一例を示
す説明図である。

【図９】 この発明の実施の形態２による映像監視シス
テムのストリームデータ蓄積・読み出し部の構成を示す
ブロック図である。

【図１０】 この発明の実施の形態２による映像監視シ
ステムで生成される合成情報ストリームの一例を示す説
明図である。

【図１１】 この発明の実施の形態３による映像監視シ
ステムの概略構成を示すブロック図である。

【図１２】 この発明の実施の形態３による映像監視シ
ステムのストリームデータ同期通信部の一例の構成を示
すブロック図である。

【図１３】 この発明の実施の形態３による映像監視シ
ステムのストリームデータ同期通信部の他の例の構成を
示すブロック図である。

【図１４】 この発明の実施の形態４による映像監視シ
ステムの概略構成を示すブロック図である。

【図１５】 この発明の実施の形態５による補間方法で
生成されるカメラ制御情報と映像情報との関係を示す説
明図である。

【図１６】 補間方法によって得られるカメラ制御情報
を含む合成情報ストリームの一例を示す説明図である。

【図１７】 この発明の実施の形態５によるカメラ制御
情報の補間方法の一例を具体的に示す説明図である。

【図１８】 従来の映像監視システムの一例の構成を示
すブロック図である。

【図１９】 従来のネットワークを用いた映像監視シス
テムの一例の構成を示すブロック図である。

【図２０】 従来のネットワークを用いた映像監視シス
テムの他の例の構成を示すブロック図である。

【図２１】 図２０に示した映像監視システムの表示例
を示す図である。

【符号の説明】

１ カメラ、３ 記録装置、５ カメラ制御部（カメラ
制御手段）、６ 映像入力部（映像入力手段）、７ ス
トリームデータ蓄積・読み出し部（ストリームデータ蓄
積手段、ストリームデータ読み出し手段）、５２ 映像
情報ストリーム生成部（映像情報ストリーム生成・蓄積
手段）、５３ 映像情報ストリーム蓄積部（映像情報ス
トリーム生成・蓄積手段）、５４ 映像情報ストリーム
読み出し部（映像情報ストリーム読み出し手段）、５５
カメラ制御情報ストリーム生成部（カメラ制御情報ス
トリーム生成・蓄積手段）、５６ カメラ制御情報スト
リーム蓄積部（カメラ制御情報ストリーム生成・蓄積手
段）、５７ カメラ制御情報ストリーム読み出し部（カ
メラ制御情報ストリーム読み出し手段）、５８ ストリ
ームデータ同期処理部（ストリームデータ同期処理手
段）、８１ 合成情報ストリーム生成部（合成情報スト
リーム生成手段）、８２ 合成情報ストリーム蓄積部
（合成情報ストリーム蓄積手段）、８３ 合成情報スト
リーム読み出し部（合成情報ストリーム読み出し手
段）、１０１ ローカル装置、１０２ センタ装置、１
０５ ストリームデータ同期通信部（ストリームデータ
同期送信手段）、１０６ ストリームデータ同期通信部
（ストリームデータ同期受信手段）。

Claims (14)

【特許請求の範囲】
1. 【請求項１】 外部制御可能なカメラと、カメラ制御情
   報に基づき前記カメラを制御するカメラ制御手段と、前
   記カメラからの映像を入力する映像入力手段と、前記映
   像入力手段から入力される映像情報に該映像情報が入力
   された時刻を示す時刻情報を付加してストリームデータ
   として記録装置に蓄積し、さらに、前記映像情報が入力
   される周期とは必ずしも一致しない周期でまたは非周期
   的に前記映像情報の入力と同期して前記カメラ制御手段
   から入力されるカメラ制御情報があるならば該カメラ制
   御情報に前記時刻情報を付加してストリームデータとし
   て前記記録装置に蓄積するストリームデータ蓄積手段
   と、所望の一連の映像情報とこれに対応する一連のカメ
   ラ制御情報とを読み出して所定の処理を施す際に、前記
   一連の映像情報およびこれに対応する一連のカメラ制御
   情報を前記記録装置から順次読み出して前記所定の処理
   のために同期して出力するストリームデータ読み出し手
   段とを備えた映像監視システム。
2. 【請求項２】 ストリームデータ蓄積手段は、映像入力
   手段から入力した映像情報に該映像情報が入力された時
   刻を示す時刻情報を付加して、これを映像情報ストリー
   ムとして記録装置に蓄積する映像情報ストリーム生成・
   蓄積手段と、前記映像情報に同期して前記カメラ制御手
   段から入力されるカメラ制御情報があるならば該カメラ
   制御情報に前記時刻情報を付加して、これをカメラ制御
   情報ストリームとして記録装置に前記映像情報ストリー
   ムとは別に蓄積するカメラ制御情報ストリーム生成・蓄
   積手段とを備えており、ストリームデータ読み出し手段
   は、前記記録装置に蓄積された前記映像情報ストリーム
   から所望の一連の映像情報を読み出す映像情報ストリー
   ム読み出し手段と、前記記録装置に蓄積された前記カメ
   ラ制御情報ストリームから前記所望の一連の映像情報に
   対応する一連のカメラ制御情報を読み出すカメラ制御情
   報ストリーム読み出し手段と、読み出された前記一連の
   映像情報とこれに対応する前記一連のカメラ制御情報と
   をそれぞれ同期させて出力するストリームデータ同期処
   理手段とを備えたことを特徴とする請求項１記載の映像
   監視システム。
3. 【請求項３】 ストリームデータ蓄積手段は、映像入力
   手段から入力された映像情報に、該映像情報に同期して
   カメラ制御手段から入力されるカメラ制御情報があるな
   らば該カメラ制御情報と前記映像情報が入力された時刻
   を示す時刻情報とを付加して、これらの映像情報、カメ
   ラ制御情報および時刻情報を合成し、この合成情報を合
   成情報ストリームとして記録装置に蓄積する合成情報ス
   トリーム生成・蓄積手段を備えており、ストリームデー
   タ読み出し手段は、前記記録装置に蓄積された前記合成
   情報ストリームから所望の一連の合成情報を読み出す合
   成情報ストリーム読み出し手段を備えたことを特徴とす
   る請求項１記載の映像監視システム。
4. 【請求項４】 ある時刻に入力された映像情報に対応す
   るカメラ制御情報が入力されない場合、ストリームデー
   タ蓄積手段は、所定の補間方法を用いて既に蓄積された
   過去のカメラ制御情報から前記映像情報に対応する前記
   カメラ制御情報を求めるカメラ制御情報補間手段を具備
   することを特徴とする請求項１から請求項３のうちのい
   ずれか１項記載の映像監視システム。
5. 【請求項５】 対応するカメラ制御情報が記憶装置に蓄
   積されていない映像情報をストリームデータ読み出し手
   段が読み出し出力した場合、所定の補間方法を用いて既
   に蓄積された過去のカメラ制御情報から前記映像情報に
   対応する前記カメラ制御情報を求めるカメラ制御情報補
   間手段を設けたことを特徴とする請求項１から請求項３
   のうちのいずれか１項記載の映像監視システム。
6. 【請求項６】 ストリームデータ読み出し手段は、読み
   出す映像情報に対応するカメラ制御情報が記録装置に蓄
   積されていない場合または読み出した合成情報中に映像
   情報に対応するカメラ制御情報が存在しない場合に、所
   定の補間方法を用いて既に蓄積された過去のカメラ制御
   情報から前記映像情報に対応するカメラ制御情報を求め
   るカメラ制御情報補間手段を具備することを特徴とする
   請求項１から請求項３のうちのいずれか１項記載の映像
   監視システム。
7. 【請求項７】 カメラ制御情報補間手段は、過去のカメ
   ラ制御情報に含まれる、カメラが載置される雲台の移動
   速度、カメラのパン速度、チルト速度、およびズーム速
   度のうちの少なくともいずれか１つを用いて、カメラの
   位置、方向、またはズーム位置に関するカメラ制御情報
   を補間する手段であることを特徴とする請求項４から６
   のうちのいずれか１項記載の映像監視システム。
8. 【請求項８】 外部制御可能なカメラと、カメラ制御情
   報に基づき前記カメラを制御するカメラ制御手段と、前
   記カメラからの映像を入力する映像入力手段と、前記映
   像入力手段より時系列に入力される映像情報と該映像情
   報が入力される周期とは必ずしも一致しない周期でまた
   は非周期的に前記映像情報の入力に同期して前記カメラ
   制御手段から入力されるカメラ制御情報があるならば該
   カメラ制御情報とを同期させてネットワークに送出する
   ストリームデータ同期送信手段とを具備するローカル装
   置と、前記ネットワークから前記映像情報およびカメラ
   制御情報を同期して受信するストリームデータ同期受信
   手段と、前記映像情報およびカメラ制御情報を同期を取
   ってストリームデータとして記録装置に蓄積するストリ
   ームデータ蓄積手段と、所望の一連の映像情報とこれに
   対応する一連のカメラ制御情報とを読み出して所定の処
   理を施す際に、前記一連の映像情報およびこれに対応す
   る一連のカメラ制御情報を前記記録装置から順次読み出
   して前記所定の処理のために同期して出力するストリー
   ムデータ読み出し手段とを具備するセンタ装置とを備え
   た映像監視システム。
9. 【請求項９】 ローカル装置は、映像入力手段より時系
   列に入力される映像情報に該映像が入力された時刻を示
   す時刻情報を付加して送出する手段と、前記映像情報に
   同期してカメラ制御手段から入力されるカメラ制御情報
   があるならば該カメラ制御情報に前記時刻情報を付加し
   て送出する手段と、前記映像情報に付加された時刻情報
   と前記カメラ制御情報に付加された時刻情報とを参照し
   て同時刻の映像情報およびカメラ制御情報を受け取った
   際にこれらを同期させてネットワークに送出するストリ
   ームデータ同期送信手段とを具備しており、センタ装置
   は、前記ネットワークを介して受信した前記映像情報お
   よび前記カメラ制御情報に付加された２つの時刻情報を
   参照して同時刻の映像情報およびカメラ制御情報を受け
   取った際にこれらを同期させて送出するストリームデー
   タ同期受信手段を具備していることを特徴とする請求項
   ８記載の映像監視システム。
10. 【請求項１０】 ローカル装置は、時系列に入力される
    映像情報に、該映像情報の入力に同期してカメラ制御手
    段から入力されるカメラ制御情報があるならば該カメラ
    制御情報と前記映像情報が入力された時刻を示す時刻情
    報とを付加して合成情報を生成し、この合成情報をネッ
    トワークに送出するストリームデータ同期送信手段を具
    備しており、センタ装置は、前記ネットワークを介して
    受信した前記合成情報から映像情報とカメラ制御情報と
    を抽出しこれらを同期させて送出するストリームデータ
    同期受信手段を具備していることを特徴とする請求項８
    記載の映像監視システム。
11. 【請求項１１】 外部制御可能なカメラと、カメラ制御
    情報に基づき前記カメラを制御するカメラ制御手段と、
    前記カメラからの映像を入力する映像入力手段と、前記
    映像入力手段から入力される映像情報に該映像情報が入
    力された時刻を示す時刻情報を付加してストリームデー
    タとして記録装置に蓄積し、さらに、前記映像情報が入
    力される周期とは必ずしも一致しない周期でまたは非周
    期的に前記映像情報の入力と同期して前記カメラ制御手
    段から入力されるカメラ制御情報があるならば該カメラ
    制御情報に前記時刻情報を付加してストリームデータと
    して前記記録装置に蓄積するストリームデータ蓄積手段
    と、所望の一連の映像情報とこれに対応するカメラ制御
    情報とを読み出して所定の処理を施す際に、前記一連の
    映像情報およびこれに対応する一連のカメラ制御情報を
    前記記録装置から順次読み出して前記所定の処理のため
    に同期して出力するストリームデータ読み出し手段と、
    前記一連の映像情報およびこれに対応する前記一連のカ
    メラ制御情報を同期させてネットワークに送出するスト
    リームデータ同期送信手段とを具備するローカル装置
    と、前記ネットワークから前記一連の映像情報およびこ
    れに対応する前記一連のカメラ制御情報を同期して受信
    して前記所定の処理のために同期して出力するストリー
    ムデータ同期受信手段を具備するセンタ装置とを備えた
    映像監視システム。
12. 【請求項１２】 ストリームデータ同期受信手段は、受
    信した映像情報に対応するカメラ制御情報を受信しない
    場合に、所定の補間方法を用いて既に蓄積された過去の
    カメラ制御情報から前記映像情報に対応するカメラ制御
    情報を求めるカメラ制御情報補間手段を具備することを
    特徴とする請求項８から請求項１１のうちのいずれか１
    項記載の映像監視システム。
13. 【請求項１３】 ある時刻に入力された映像情報に対応
    するカメラ制御情報が入力されない場合、ストリームデ
    ータ蓄積手段は、所定の補間方法を用いて既に蓄積され
    た過去のカメラ制御情報から前記映像情報に対応する前
    記カメラ制御情報を求めるカメラ制御情報補間手段を具
    備することを特徴とする請求項８から請求項１１のうち
    のいずれか１項記載の映像監視システム。
14. 【請求項１４】 カメラ制御情報補間手段は、過去のカ
    メラ制御情報に含まれる、カメラが載置される雲台の移
    動速度、カメラのパン速度、チルト速度、およびズーム
    速度のうちの少なくともいずれか一つを用いて、カメラ
    の位置、方向、またはズーム位置に関するカメラ制御情
    報を補間する手段であることを特徴とする請求項１２ま
    たは請求項１３記載の映像監視システム。