JPH1091232A - 自動監視装置 - Google Patents

Abstract

(57)【要約】 【課題】映像ずれに対して補正機能を追加することな
く、対象目的の状態検知を可能とする。 【解決手段】監視対象物を離れた位置から連続的に映像
化する撮像装置１からの映像信号を処理して幾何学的な
特徴を計測した画像に変換する画像処理手段１４と、正
常時の映像を画像化してデータベースに保存する記憶装
置８と、画像処理手段１４により変換された画像と前記
データベースに格納された画像とを比較し、これらの画
像の差分量から映像の変化を評価する比較処理手段１５
と、この比較処理手段１５による評価結果を画面上に表
示する表示装置９とを備えた。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、発電所などにおい
て監視対象物である各種機器の異常を自動的に監視する
自動監視装置に関する。

【０００２】

【従来の技術】最近、発電所などにおいて人間の視覚に
よる監視作業を、撮像機能を有した画像処理コンピュー
タに代替させることが試みられている。この試みは、特
に放射線管理区域や非常時に危険性の高い区域について
強い要望がある。一般的に画像処理により対象機器の状
態を検知する場合には、通常時の画像を正常データとし
てデータベースとし、このデータベースとの比較処理に
より状態を検知する手段が用いられる。このとき、入力
される画像とデータベースの画像の処理範囲は、同一に
する必要がある。

【０００３】しかし、これらの画像が一箇所を対象とし
た固定の撮像装置から得られたものであれば撮像範囲に
問題が生じないものの、複数箇所を一つの撮像装置によ
り監視する場合には、その撮像装置に設けた旋回・俯仰
機構の制御誤差などにより撮像範囲の位置ずれが生じ、
比較が困難となる。

【０００４】従来、このような問題を回避するための手
段としては、画面内の基準位置を認識してずれ量を計算
し、それを撮像系にフィードバックして位置を合せ、新
たに画像を入力するなどの処理が行われていた。

【０００５】

【発明が解決しようとする課題】しかしながら、上述し
た従来の技術のように、前処理として画面のずれ量を計
算して、撮像系を再度位置合せすることは、前処理に時
聞を費やすだけでなく、そのための機能を追加しなけれ
ばならないため、高速性および経済性の面から不利にな
る場合がある。

【０００６】本発明は上述した事情を考慮してなされた
もので、映像ずれに対して補正機能を追加することな
く、対象目的の状態検知が可能な自動監視装置を提供す
ることを目的とする。

【０００７】

【課題を解決するための手段】上述した課題を解決する
ために、本発明の請求項１は、監視対象物を離れた位置
から連続的に映像化する撮像装置と、この撮像装置によ
る撮像箇所を任意の位置に変更するための位置調整手段
と、この位置調整手段を制御して前記撮像装置を所定の
位置に合わせる撮像装置制御手段と、前記撮像装置から
の映像信号を処理して幾何学的な特徴を計測した画像に
変換する画像処理手段と、正常時の映像を画像化してデ
ータベースに保存する記憶装置と、前記画像処理手段に
より変換された画像と前記データベースに格納された画
像とを比較し、これらの画像の差分量から映像の変化を
評価する比較処理手段と、この比較処理手段による評価
結果を画面上に表示する表示装置とを備えたことを特徴
とする。

【０００８】請求項２は、請求項１記載の画像処理手段
が、前記撮像装置からの映像信号をディジタル画像に変
換するアナログプロセッサと、このアナログプロセッサ
により変換された画像を領域分割し、各領域における重
心座標からの方向画素数を計測する演算ユニットと、こ
の演算ユニットにおける計測処理で一時的にデータを保
存するフレームメモリとを有することを特徴とする。

【０００９】請求項３は、請求項１または２記載の比較
処理手段が、通常時の映像を前記画像処理手段により変
換してデータベースに保存する前記記憶装置と、監視時
の変換画像および前記データベース画像を一時的に格納
する前記フレームメモリと、画像間の特徴差を計算し、
状態変化の有無を判断する前記演算ユニットおよびＣＰ
Ｕとを有することを特徴とする。

【００１０】請求項４は、請求項３記載の比較処理手段
が、監視画像とデータベース画像の特徴差を計算するに
際し、比較する領域を決定する手段に各領域の重心座標
を用い、指定範囲内で最も近接した領域間で比較処理す
ることを特徴とする。

【００１１】請求項５は、請求項３記載の比較処理手段
が、監視画像とデータベース画像の特徴差を計算するに
際し、比較する領域データの内、選択された領域の方向
画素数を単位角度毎にずらして領域間の輝度差を計算
し、得られた結果の最小値を特徴差として評価すること
を特徴とする。

【００１２】

【発明の実施の形態】以下、本発明の実施形態を図面に
基づいて説明する。

【００１３】図１は本発明に係る自動監視装置の一実施
形態を示すブロック図、図２は図１の実施形態のハード
ウェアの構成を示すブロック図である。

【００１４】図２に示すように、自動監視装置は監視対
象物を離れた位置から連続的に映像化する撮像装置１を
有し、この撮像装置１は、位置調整手段としての旋回・
俯仰機構２に取り付けられおり、この旋回・俯仰機構２
は演算プロセッサ３から送信される３次元位置情報によ
って撮像装置１の撮像範囲を決定する。これら撮像装置
１と旋回・俯仰機構２は、その主要な構成要素が監視対
象物を撮影できる場所に設置され、これら以外の構成要
素は監視室などに設置されて遠隔で制御可能とする。

【００１５】撮像装置１の出力はアナログプロセッサ４
に送出され、このアナログプロセッサ４では撮像装置１
から得られた映像信号を標本・量子化して８ビットのデ
ィジタル画像に変換する。このアナログプロセッサ４
と、このアナログプロセッサ４により変換されたディジ
タル画像を領域分割し、重心座標からの方向画素数を計
測する演算ユニット５と、この演算ユニット５による計
測処理や比較処理の結果を一時的に格納するフレームメ
モリ６とが画像バス１０により接続されている。

【００１６】また、アナログプロセッサ４と、演算ユニ
ット５と、フレームメモリ６と、対象物の３次元位置を
送信し画像処理開始命令を出力するとともに、画像間の
特徴差を計算し、状態変化の有無を判断する演算プロセ
ッサ３と、全体的な制御を実行するＣＰＵ７と、比較さ
れる正常時データとして変換画像をデータベースに保存
しておく記憶装置８と、正常時データと比較処理後の結
果を表示する表示装置９とがシステムバス１１により接
続されている。

【００１７】次に、図１は図２に示した実施形態を機能
ブロックで表したものであり、図中、図２と同一の構成
要素は同一の符号を付して説明する。自動監視装置は、
処理の開始命令と対象物の３次元位置を送信して撮像装
置１を制御する撮像装置制御手段１３と、受信した座標
位置に向けて旋回および俯仰し、撮像装置１の撮像範囲
を決定する旋回・俯仰機構２と、監視対象物の映像を離
れた位置から連続的に出力する撮像装置１と、この撮像
装置１の映像信号を処理して幾何学的な特徴を計測した
画像に変換する画像処理手段１４と、正常時データをデ
ータベースに保存しておく記憶装置８と、点検時の変換
画像と記憶装置８に保存されているデータベースの画像
とを比較し、これらの画像の差分量から映像の変化を評
価する比較処理手段１５と、この比較処理手段１５によ
る処理結果を画面上に表示する表示装置９とから構成さ
れている。

【００１８】したがって、画像処理手段１４は、撮像装
置１からの映像信号をディジタル画像に変換するアナロ
グプロセッサ４と、このアナログプロセッサ４により変
換された画像を領域分割し、各領域における重心座標か
らの方向画素数を計測する演算ユニット５と、この演算
ユニット５における計測処理で一時的にデータを保存す
るフレームメモリ６とから構成されている。

【００１９】また、比較処理手段１５は、通常時の映像
を画像処理手段１４により変換してデータベースに保存
する記憶装置８と、監視時の変換画像および前記データ
ベース画像を一時的に格納するフレームメモリ６と、画
像間の特徴差を計算し、状態変化の有無を判断する演算
ユニット５およびＣＰＵ７とから構成されている。

【００２０】次に、本実施形態の作用を説明する。

【００２１】特定の対象物について点検監視が要求され
ると、旋回・俯仰機構２は、与えられた３次元座標に基
づいて撮像装置１を対象物に向ける。次に、画像処理手
段１４は、撮像装置１で得られた映像信号を取り込み、
アナログプロセッサ４により８ビットの画像に変換す
る。この８ビットに変換された画像は、演算ユニット５
により任意のしきい値で領域分割され、領域ごとに重心
座標からの方向画素数を計測する。この計測した値は８
ビットで正規化され、フレームメモリ６に順次格納す
る。演算ユニット５で設定した全てのしきい値に対して
計測処理を実行し、フレームメモリ６に画像を保存す
る。

【００２２】次いで、比較処理手段１５は、上述の画像
処理手段１４により変換された画像と記憶装置８に保存
されているデータベースの画像とを比較する。この比較
するデータベースは、対象物の正常時の画像を上述の画
像処理手段１４により変換し、予め構築しておく必要が
ある。比較処理は、先ず、監視画像と一枚のデータベー
ス画像をフレームメモリ６に格納する。次に、監視画像
のある領域と同じしきい値で計測された領域をデータベ
ース画像から抽出し、両者の重心座標が指定範囲内で最
も近接する領域を選択する。

【００２３】そして、決定した一方の領域の方向画素数
を単位角度毎にずらして輝度差を計算し、最小値を領域
間の特徴差とする。この計算を画像の全領域について行
い、差分の総和値をデータベースの番号と関連づけて保
存しておく。この処理をデータベースの全画像について
行い、差分の総和値の大きさによって状態変化の有無を
検出する。この処理結果を表示装置９に表示することに
より、機器の異常を検知することが可能となる。

【００２４】また、本実施形態の動作を、図１，図３お
よび図４を参照してさらに詳しく説明する。

【００２５】まず、図１における撮像装置制御手段１３
は、旋回・俯仰機構２に３次元位置情報を送信し、撮像
装置１の方向を点検する対象物の位置に合わせる。その
後、撮像装置制御手段１３は、旋回・俯仰機構２から位
置合わせ完了の信号を受信し、次いで、画像処理手段１
４による画像変換処理を行う。この画像変換処理手順を
図３のフローチャートに示す。

【００２６】図３に示すように、ステップＰ１でスター
トすると、撮像装置制御手段１３からの映像信号取り込
み命令によりステップＰ２で、撮像装置１から映像信号
を取り込み、アナログプロッサ４で８ビット、２５６階
調のディジタル信号に変換し、フレームメモリ（０）に
格納する。このフレームメモリ（０）に格納されるデー
タを図５に示す。

【００２７】次に、ステップＰ３で２値化による分割処
理の回数を、予め設定しておいたデータテーブルから参
照する。ステップＰ４で同じくデータテーブルから２値
化しきい値を先頭から順に参照し、ステップＰ５で２値
化処理を実行する。このステップＰ５において、輝度が
０か１に２値化された画像について、ステップＰ６でそ
の１の領域数をカウントし、ステップＰ７でそれぞれの
領域に一意の番号を付ける。また、１の領域に０の領域
が内在する場合には、この０の領域についても同様にカ
ウントし、これらにも一意の番号を付けることにした。
これにより、次に述べる計測処理で、内在する領域の情
報が失われてしまうのを補うことができる。

【００２８】ステップＰ７で与えられた番号の順に次の
ステップＰ８〜Ｐ１０までの処理が実行される。ステッ
プＰ８では処理する領域の番号を選択し、ステップＰ９
では図６に示すような計測処理を行う。すなわち、ステ
ップＰ９では、まず選択された領域の重心座標を計測す
る。次いで、この重心座標から領域の外周画素までの画
素数を、設定された角度方向について計測する。

【００２９】この計測する角度の設定は、画像の特徴や
計測の精度などにより任意の値になるが、本実施形態で
は０度から３６０度までの間を５度間隔で設定し、７２
方向について計測した。計測結果はステップＰ１０で８
ビットに正規化し、図７および図８に示すように２値化
しきい値，重心座標，そして０度から３６０度の方向画
素数の順に並べてフレームメモリ（１）に格納する。

【００３０】Ρ１１で全領域について上述の計測処理を
実行したかを判定し、まだ処理していない領域があれば
ステップＰ８〜Ｐ１０までの処理を繰り返し、全ての領
域について処理が終了すれば、ステップＰ１２に移る。

【００３１】ステップＰ１２ではデータテーブルに設定
した処理回数を終了していなければステップＰ４〜Ｐ１
１までの処理を繰り返し、終了していればステップＰ１
３に移り、フレームメモリ（１）の処理結果をディスク
に格納して、次の比較処理手段１５に処理を移す。この
ように、重心から設定角度方向の外周画素までの画素数
を特徴としているため、画像範囲内において相似な領域
が上下左右にずれた場合にも、特徴量は同じとなる。ま
た、回転方向にずれた場合にも、格納される特徴量の並
びは同じであるため、比較処理時に格納位置をずらして
比較することで、領域の対応が可能となる。

【００３２】次に、比較処理手段１５における監視対象
の状態を検知する処理のフローチャートを図４に示す。
この処理は、データベース画像と監視時の画像とを比較
し、その違いの大きさにより、状態変化の有無を判断す
るものである。このため、事前準備として上述の変換処
理を用いて、通常運転時の監視対象の映像を画像化し、
データベースにしておく必要がある。まず、ステップＰ
１３でディスクに格納された変換画像を、ステップＰ１
４でフレームメモリ（１）に読み込む。次に、ステップ
Ｐ１５〜Ｐ２５でデータベースの画像との比較処理を実
行する。

【００３３】すなわち、ステップＰ１５でデータベース
の先頭から順に一枚の画像を、フレームメモリ（２）に
読み込む。ステップＰ１６でフレームメモリ（１）の画
像から、まず一つの領域データ（以下、Ａという。）に
ついて２値化しきい値を読み込む。次に、ステップＰ１
７でフレームメモリ（２）の画像の中から、Ａと同じ２
値化しきい値の領域データ（以下、Ｂ群という。）を検
索する。このとき、同じ２値化しきい値の領域データが
ない場合、比較対象が存在しないものとしてステップＰ
２１に進み、Ａの方向画素数の総和を計算し、ステップ
Ｐ２２でレジスタＣに記憶させる。

【００３４】ステップＰ１７で同じ２値化しきい値の領
域データが存在した場合、ステップＰ１８でＡの重心座
標と、Ｂ群の重心座標とを比較し、Ａの重心座標に最も
近接した重心座標の領域をＢ群の中から選択し、この領
域を比較対象領域とする。次に、ステップΡ１９で選択
条件として比較対象範囲を設定しておき、Ｂ群から選択
された領域の重心座標が、Ａの重心座標からの指定範囲
をはずれた場合は、比較対象が存在しないものとしてス
テップＰ２１に進み、Ａの方向画素数の総和を計算し、
ステップＰ２２でレジスタＣに記憶させる。

【００３５】ステップΡ１９で指定範囲内の比較対象が
存在した場合は、ステップＰ２０でＡの方向画素数とＢ
群から選択された領域の方向画素数を各画素毎に減算
し、その絶対値を計算する。このとき、Ａの方向画素数
の角度情報を単位角度ずつずらして領域間の輝度差を計
算し、つまり減算および絶対値計算をし、全角度情報と
の計算が終了した時点で一番小さな値を計算結果とし、
ステップΡ２２でレジスタＣに記憶させる。

【００３６】これにより、撮像装置１からの信号が回転
方向にずれていた場合においても、領域間で補正して比
較することが可能になる。また、このように選択条件に
比較対象の範囲を指定することで、撮像装置１からの映
像信号が上下左右に位置ずれした場合においても、指定
範囲内のずれであれば、領域間で比較することが可能と
なる。これらの処理により、機械的な制御誤差などによ
る映像ずれが処理に影響することを回避することができ
る。

【００３７】このステップＰ１６〜Ｐ２３の処理を、フ
レームメモリ（１）の画像およびフレームメモリ（２）
の画像の全領域について実行する。ステップＰ２３で全
領域について処理が終了した場合は、ステップＰ２４で
レジスタＣの値をデータベース番号と対応して、フレー
ムメモリ（３）に格納する。ステップＰ２５で次のデー
タベースの存在を確認し、存在する場合はステップＰ１
５に戻り、データベースから新たに画像を読み込み、存
在しない場合はステップＰ２６で判定処理に移る。

【００３８】このステップＰ２６では、フレームメモリ
（３）に格納された全計算結果の中から、最も小さい値
を抽出し、予め設定しておいた判定値とこの値を比較す
る。判定値よりも小さい場合はステップＰ２７に進み、
データベースとの違いが少ないため正常と判定する。ス
テップＰ２６で判定値よりも大きい場合はステップＰ２
８に進み、違いが多いため異常と判定する。この結果を
ステップＰ２９で表示装置９に表示して終了する（ステ
ップＰ３０）。

【００３９】

【発明の効果】以上説明したように、本発明の請求項１
によれば、監視対象物を離れた位置から連続的に映像化
する撮像装置と、この撮像装置による撮像箇所を任意の
位置に変更するための位置調整手段と、この位置調整手
段を制御して撮像装置を所定の位置に合わせる撮像装置
制御手段と、撮像装置からの映像信号を処理して幾何学
的な特徴を計測した画像に変換する画像処理手段と、正
常時の映像を画像化してデータベースに保存する記憶装
置と、画像処理手段により変換された画像とデータベー
スに格納された画像とを比較し、これらの画像の差分量
から映像の変化を評価する比較処理手段と、この比較処
理手段による評価結果を画面上に表示する表示装置とを
備えたことにより、映像の位置ずれおよび回転ずれの影
響を受けることなく比較照合できるため、機械的な制御
誤差などによる映像ずれを事前に補正することなく、監
視対象の状態変化を検出することができる。

【００４０】請求項２によれば、請求項１記載の画像処
理手段が、撮像装置からの映像信号をディジタル画像に
変換するアナログプロセッサと、このアナログプロセッ
サにより変換された画像を領域分割し、各領域における
重心座標からの方向画素数を計測する演算ユニットと、
この演算ユニットにおける計測処理で一時的にデータを
保存するフレームメモリとを有することにより、請求項
１と同様の効果が得られる。

【００４１】請求項３によれば、請求項１または２記載
の比較処理手段が、通常時の映像を画像処理手段により
変換してデータベースに保存する記憶装置と、監視時の
変換画像およびデータベース画像を一時的に格納するフ
レームメモリと、画像間の特徴差を計算し、状態変化の
有無を判断する演算ユニットおよびＣＰＵとを有するこ
とにより、請求項１と同様の効果が得られる。

【００４２】請求項４によれば、請求項３記載の比較処
理手段が、監視画像とデータベース画像の特徴差を計算
するに際し、比較する領域を決定する手段に各領域の重
心座標を用い、指定範囲内で最も近接した領域間で比較
処理することにより、請求項１と同様の効果が得られ
る。

【００４３】請求項５によれば、請求項３記載の比較処
理手段が、監視画像とデータベース画像の特徴差を計算
するに際し、比較する領域データの内、選択された領域
の方向画素数を単位角度毎にずらして領域間の輝度差を
計算し、得られた結果の最小値を特徴差として評価する
ことにより、請求項１と同様の効果が得られる。

【図面の簡単な説明】

【図１】本発明に係る自動監視装置の一実施形態を示す
ブロック図。

【図２】図１の実施形態のハードウェアの構成を示すブ
ロック図。

【図３】図１の画像処理手段による画像変換処理の手順
を示すフローチャート。

【図４】図１の比較処理手段による監視対象の状態を検
知する処理手順を示すフローチャート。

【図５】図２のフレームメモリに格納されるデータを示
す説明図。

【図６】図１の画像処理手段により計測処理を示す説明
図。

【図７】図１の画像処理手段により計測処理結果を示す
図。

【図８】図２のフレームメモリに格納される別のデータ
を示す説明図。

【符号の説明】

１ 撮像装置 ２ 旋回・俯仰機構（位置調整手段） ３ 演算プロセッサ ４ アナログプロセッサ ５ 演算ユニット ６ フレームメモリ ７ ＣＰＵ ８ 記憶装置 ９ 表示装置 １０ 画像バス １１ システムバス １３ 撮像装置制御手段 １４ 画像処理手段 １５ 比較処理手段

フロントページの続き (72)発明者 黒木 雅彦 神奈川県横浜市鶴見区江ヶ崎町４番１号 東京電力株式会社エネルギー・環境研究所 内 (72)発明者 倉澤 英暁 神奈川県横浜市鶴見区江ヶ崎町４番１号 東京電力株式会社エネルギー・環境研究所 内 (72)発明者 相川 徹郎 神奈川県横浜市磯子区新杉田町８番地 株 式会社東芝横浜事業所内 (72)発明者 横山 邦彦 東京都港区芝浦一丁目１番１号 株式会社 東芝本社事務所内

Claims (5)

【特許請求の範囲】
1. 【請求項１】 監視対象物を離れた位置から連続的に映
   像化する撮像装置と、この撮像装置による撮像箇所を任
   意の位置に変更するための位置調整手段と、この位置調
   整手段を制御して前記撮像装置を所定の位置に合わせる
   撮像装置制御手段と、前記撮像装置からの映像信号を処
   理して幾何学的な特徴を計測した画像に変換する画像処
   理手段と、正常時の映像を画像化してデータベースに保
   存する記憶装置と、前記画像処理手段により変換された
   画像と前記データベースに格納された画像とを比較し、
   これらの画像の差分量から映像の変化を評価する比較処
   理手段と、この比較処理手段による評価結果を画面上に
   表示する表示装置とを備えたことを特徴とする自動監視
   装置。
2. 【請求項２】 前記画像処理手段は、前記撮像装置から
   の映像信号をディジタル画像に変換するアナログプロセ
   ッサと、このアナログプロセッサにより変換された画像
   を領域分割し、各領域における重心座標からの方向画素
   数を計測する演算ユニットと、この演算ユニットにおけ
   る計測処理で一時的にデータを保存するフレームメモリ
   とを有することを特徴とする請求項１記載の自動監視装
   置。
3. 【請求項３】 前記比較処理手段は、通常時の映像を前
   記画像処理手段により変換してデータベースに保存する
   前記記憶装置と、監視時の変換画像および前記データベ
   ース画像を一時的に格納する前記フレームメモリと、画
   像間の特徴差を計算し、状態変化の有無を判断する前記
   演算ユニットおよびＣＰＵとを有することを特徴とする
   請求項１または２記載の自動監視装置。
4. 【請求項４】 前記比較処理手段は、監視画像とデータ
   ベース画像の特徴差を計算するに際し、比較する領域を
   決定する手段に各領域の重心座標を用い、指定範囲内で
   最も近接した領域間で比較処理することを特徴とする請
   求項３記載の自動監視装置。
5. 【請求項５】 前記比較処理手段は、監視画像とデータ
   ベース画像の特徴差を計算するに際し、比較する領域デ
   ータの内、選択された領域の方向画素数を単位角度毎に
   ずらして領域間の輝度差を計算し、得られた結果の最小
   値を特徴差として評価することを特徴とする請求項３記
   載の自動監視装置。