JP2016187162A - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Abstract

【課題】撮像画像上においてユーザが意図する所望箇所を正確に指定することを容易とする情報処理装置、情報処理方法、及びプログラムを提供する。【解決手段】撮像装置（カメラ）１０１により撮像された撮像画像のうち一部の領域の指定を受け付ける。指定された一部の領域の撮像画像に対して撮像装置１０１の光学系に起因する歪曲を低減する歪曲補正を施して得られる補正画像を表示装置（モニタ）１０５に表示させ、補正画像において指定された位置に対応する撮像画像上の位置に所定の画像を表示装置１０５に表示させる。【選択図】図１

Description

本発明は、情報処理装置、情報処理方法、及びプログラムに関する。

以前より、店舗や駐車場内における窃盗行為や違法行為を監視するため、又は外部からの第三者の進入等を監視するために、店舗や駐車場、又は特定の建造物を取り囲むフェンス上などに、監視カメラが配置されている。このような監視カメラシステムにおいて、監視及び管理運営をより効率よく行うために、人の動きを自動的に計測し解析することへのニーズが高まっている。例えば、施設に出入りする人間が現在何人でありどちらにどの程度の速度で移動しているかを自動解析することにより、施設内の部分的な通行量や施設の利用状況を把握することができる。また、観測エリア周辺の混雑状態を解析し、群衆を誘導するための情報を得ることもできる。このような機能は、公共施設又はレジャー施設等においても有用である。

特許文献１では、出入口で集散する歩行者等のように移動方向が一定でない人物を方向別に計数する方法が記載されている。また、計数の際に用いる計数ラインをレンズのひずみに合わせることも記載されている。特許文献２には、観測画像上に仮想ゲートを設定し、仮想ゲートを横切った移動体をリアルタイムに検出処理する方法が記載されている。

特許第３１８３３２０号公報 特許第３２１８５２１号公報

例えば測定ラインを通過した物体の数を計測する場合、所望の計測データを得るためには、撮像画像上に測定ラインの位置を正確に設定する必要がある。しかしながら、監視カメラは撮像範囲を広げるために得られた撮像画像の歪みが大きいことが多いため、撮像画像上に所望の測定箇所を設定することは容易ではなかった。例えば、魚眼レンズを備える全方位カメラにより得られる画像の端部では、被写体は小さくなり、従って設定しようとする測定ラインも小さくなる。このように、撮像画像上で所望箇所の位置指定を正確に行うことは容易ではなかった。

本発明は、撮像画像上においてユーザが意図する所望箇所を正確に指定することを支援することを目的とする。

本発明の目的を達成するために、例えば、本発明の情報処理装置は以下の構成を備える。すなわち、
撮像装置により撮像された撮像画像のうち一部の領域の指定を受け付ける受付手段と、
指定された前記一部の領域の撮像画像に対して前記撮像装置の光学系に起因する歪曲を低減する歪曲補正を施して得られる補正画像を表示装置に表示させ、前記補正画像において指定された位置に対応する前記撮像画像上の位置に所定の画像を前記表示装置に表示させる表示制御手段と
を備えることを特徴とする。

撮像画像上においてユーザが意図する所望箇所を正確に指定することを容易とする。

実施形態１に係る撮像システムの構成を示す概略ブロック図。 実施形態１に係るクライアント装置における表示の一例を示す図。 実施形態１に係るクライアント装置における表示の一例を示す図。 実施形態１に係るクライアント装置における表示の一例を示す図。 実施形態１に係るカメラの構成を示す概略ブロック図。 実施形態１に係る処理のフローチャート。 実施形態２に係る処理のフローチャート。 実施形態２に係るクライアント装置における表示の一例を示す図。 実施形態３に係るコンピュータの構成を示す概略ブロック図。

以下に、本発明の実施形態を、添付の図面に基づいて詳細に説明する。しかしながら、本発明が以下の実施形態に限定されるわけではない。

［実施形態１］
以下、図面を参照して、本発明の実施形態１を説明する。なお、各図において、共通する構成要素、たとえば同一の又は類似する構成要素には同一の符号が付されている。以下で、共通する構成要素について重複する説明は省略する。

図１は、実施形態１に係る撮像システム１００の一例を示す。本実施形態に係る撮像システムは、撮像装置であるとともに情報処理装置でもあるカメラ１０１と、情報処理装置であるクライアント装置１０２とを備える。カメラ１０１とクライアント装置１０２とは、ネットワーク１０３を介して接続されている。カメラ１０１は複数の撮像画像で構成される動画像を撮像する。カメラ１０１により撮像される撮像画像は何らかの歪曲を有している。一実施形態においてカメラ１０１は魚眼レンズを搭載した全方位カメラであるが、カメラ１０１がこれに限定されるわけではない。カメラ１０１は、例えば天井に取り付けられており、人間などの物体を監視するために用いることができる。カメラ１０１により得られた撮像画像は、ネットワーク１０３を介して、クライアント装置１０２へと送信される。また、カメラ１０１により得られた撮像画像は、録画サーバ（不図示）等の外部装置に送信されてもよい。

クライアント装置１０２は、カメラ１０１から、又は録画サーバ（不図示）等の外部装置から、動画像を取得する。クライアント装置１０２はまた、モニタ１０５を有しており、動画像をモニタ１０５に表示することができる。図１には、モニタ１０５に表示されている、カメラ１０１により撮像された撮像画像１０６が示されている。ここで、カメラ１０１により撮像された動画像には、通路にいる監視対象者１０４が映っている。

次に、本実施形態により実現される処理について、図２〜４を参照して説明する。図２は、カメラ１０１により撮像された動画像を表示する表示モードにおいて、モニタ１０５に表示される画面２００の例を示す。画面２００には、店舗の天井に取り付けられたカメラ１０１により撮像された撮像画像１０６が表示されている。この撮像画像１０６は、店舗内の全方位画像である。上述したようにカメラ１０１は複数の撮像画像で構成される動画像を撮像するから、撮像画像１０６も刻々と変化しうる。

撮像画像１０６には、商品棚２０１，２０２が映っている。ここで、ユーザは、商品棚２０１，２０２の間を通過する人の数を計数することを意図している。本実施形態において、クライアント装置１０２は、カメラ１０１により撮像された動画像を参照して、設定された検出ラインを通過する人の数を計数する検知手段（不図示）を有している。このために、ユーザは、検出ライン２０３の位置を設定しようとしている。ここで、設定しようとする「検出ラインの位置」は、検出ラインの位置、形状、及び大きさを含む。

ユーザが検出ライン２０３の位置を設定するために、クライアント装置１０２はユーザの指示に従って設定モードへと移行する。一実施形態においては、ユーザが撮像画像１０６上の位置を指定した際に、クライアント装置１０２は設定モードへと移行することができる。この場合、ユーザは検出ラインの位置を撮像画像１０６上で仮指定することができ、ユーザは仮指定された位置を設定モードにおいて確認又は修正することができる。以下では、ユーザは撮像画像１０６上で検出ライン２０３の位置を指定したものとする。もっとも、商品棚２０１，２０２付近において撮像画像１０６は歪んでいるから、撮像画像１０６上で、商品棚２０１，２０２の間に検出ライン２０３を正確に引くことは、ユーザには困難である。

図３は、設定モードにおいてモニタ１０５に表示される画面３００の例を示す。画面３００には、撮像画像１０６と、補正画像３１０とが含まれる。補正画像３１０は、カメラ１０１の光学系に起因する歪曲を低減する歪曲補正が施された撮像画像１０６の少なくとも一部を含んでいる。すなわち、補正画像３１０は、撮像画像１０６の一部の領域の撮像画像を補正した画像である。このように歪曲が低減された画像を参照することにより、ユーザは、より正確に検出ライン３０１の位置を設定することができる。

一実施形態において、ユーザは、撮像画像上における検出ライン３０１の位置を、補正画像３１０上で指定できる。検出ライン３０１の位置を指定する指示は、カメラ１０１に送られ、指示に従う位置に検出ラインを設定するために用いられる。画面３１０は例えば、検出ライン３０１を設定するためのユーザインタフェースを表示中に、ユーザが撮像画像１０６における位置を指定した場合に表示される。位置の指定は例えば、撮像画像１０６における２点の指定とすることができる。また例えば、撮像画像１０６のうち補正画像３１０を生成すべき領域を示す枠を表示させる操作をユーザが行うことによって位置の指定を行うこととしてもよい。

また、撮像画像１０６上で指定された検出ライン２０３の位置に対応する補正画像３１０上の位置を示す位置情報が、モニタ１０５にさらに表示されてもよい。例えば、撮像画像１０６上で仮指定された検出ライン２０３の位置に対応する検出ラインが補正画像３１０上に表示されてもよい。歪曲補正前の画像中の画素と歪曲補正後の画像中の画素とは一対一の対応を有するから、歪曲補正前の撮像画像１０６上の位置に対応する歪曲補正後の補正画像３１０上の位置を算出することができる。その後、ユーザは、補正画像３１０上に表示された検出ラインの位置を補正することにより、検出ライン３０１の位置を指定することができる。検出ライン３０１の位置を補正する指示は、カメラ１０１に送られ、指示に従う位置に検出ラインを設定するために用いられる。

補正画像３１０上に表示された検出ラインの位置が満足できる場合には、ユーザは単に仮指定の結果を承認することもできる。すなわち、ユーザは、モニタ１０５に表示された位置情報が示す補正画像３１０上の位置を、ユーザにより指定された位置として設定する、ユーザ指示を送信することができる。この指示は、カメラ１０１に送られ、その後カメラ１０１は撮像画像１０６上で指定された検出ライン２０３の位置を登録する。

一実施形態において、補正画像３１０は、ユーザにより撮像画像１０６上で指定された位置を含む拡大画像である。例えば、図３の例において、補正画像３１０は、ユーザにより撮像画像１０６上で指定された検出ライン２０３の位置を含んでいる。このような構成によれば、ユーザによる検出ライン３０１の位置指定がより容易となる。言い換えれば、ユーザは、撮影画像１０６上で位置を指定することにより、撮像画像１０６のうち一部の領域の指定を行うことができる。すると、ユーザにより指定された撮像画像１０６のうち一部の領域に対して歪曲補正を施して得られる補正画像３１０が、モニタ１０５に表示される。別の実施形態において、ユーザは撮影画像１０６における所望領域を指定することもできる。この場合、ユーザにより指定された撮影画像１０６における所望領域に対して
歪曲補正を施して得られる補正画像３１０を、モニタ１０５に表示することができる。

補正画像３１０の表示サイズ及び補正画像３１０の拡大率は、特に限定されない。例えば、あらかじめ設定されている表示サイズ及び拡大率に従って補正画像３１０を表示することができる。また、ユーザが指定した表示サイズ及び拡大率に従って補正画像３１０を表示することもできる。さらに、図３においては撮像画像１０６上に補正画像３１０が重畳されているが、表示形式は特に限定されず、撮像画像１０６と補正画像３１０とが並列表示されてもよい。

ユーザによる検出ライン３０１の設定が終了すると、クライアント装置１０２は再び表示モードへと移行する。例えば、設定モードの終了を示すユーザ入力に応じて、クライアント装置１０２は表示モードへと移行することができる。この際に、カメラ１０１は、補正画像３１０上で指定された検出ライン３０１の位置に対応する、撮像画像上における検出ライン４０１の位置を算出する。上述のように、歪曲補正前の画像中の画素と歪曲補正後の画像中の画素とは一対一の対応を有するから、歪曲補正の逆変換を行うことにより、歪曲補正後の補正画像３１０上の位置に対応する歪曲補正前の撮像画像上の位置を算出することができる。

このように、撮像画像上における検出ライン４０１の位置が設定されると、カメラ１０１は、クライアント装置１０２へと、撮像画像を含む動画像及び撮像画像上の検出ラインの位置を示す情報を送信する。これらの情報を受信したクライアント装置１０２のモニタ１０５は、撮像画像４００と、撮像画像４００上の検出ライン４０１の位置に所定の画像を表示する。言い換えれば、カメラ１０１は、検出ラインの位置、すなわち補正画像３１０においてユーザにより指定された位置に対応する撮像画像４００上の位置に、所定の画像を表示するようにモニタ１０５を制御することができる。所定の画像は、検出ライン４０１の位置を示すために用いることができ、例えば所定の画像として検出ライン４０１の画像を表示することができる。

例えば図４に示すように、撮像画像４００上における検出ライン４０１の位置が、撮像画像４００上に示されるように、モニタ１０５上における撮像画像４００及び撮像画像１０６上の検出ラインの位置を示す情報の表示が行われる。また、これらの情報を受信したクライアント装置１０２は、動画像上において検出ライン４０１を通過した物体を検知することができる。特に、クライアント装置１０２は、上述のように、撮像画像上において検出ライン４０１を通過した物体の数を計数することができる。

次に、図５を使用して、映像信号及びコントロール信号の流れについて説明する。カメラ１０１は、魚眼レンズユニット５０１、撮像素子５０２、信号処理部５０３、歪曲補正部５０４、ＯＳＤ５０５、エンコーダ５０６、及びネットワーク部５０７を有する。本実施形態においては、カメラ１０１がクライアント装置１０２のモニタ１０５に表示される画像を生成する。

被写体の光学像は、魚眼レンズユニット５０１を介して撮像素子５０２へと入射する。撮像素子５０２は光学像を電気信号に変換し、信号処理部５０３へと送る。信号処理部５０３は、電気信号に対して色分離処理、ホワイトバランス処理、ガンマ補正等の各種画像処理を行うことにより、撮像画像を生成する。

歪曲補正部５０４は、撮像画像に対して歪曲補正を行う。より具体的には、歪曲補正部５０４は、魚眼レンズユニット５０１及び撮像素子５０２を含む撮像装置により撮像された撮像画像に対して、撮像装置の光学系に、例えば魚眼レンズユニット５０１等に起因する歪曲を低減する歪曲補正を行う。例えば、歪曲補正部５０４は、クライアント装置１０２からの要求に応じて、様々な表示モードに対応する歪曲補正を行うことができる。表示モードとしては、通常は歪曲補正を必要としない全方位画像モードの他に、３６０度パノラマモード、１８０度ダブルパノラマモード、４画面切り出しモード、８画面切り出しモード等が挙げられ、それぞれの表示モードに対応して適切な歪曲補正が行われる。歪曲補正部５０４による歪曲補正処理により生成された補正画像には、このようにして撮像画像に対して歪曲補正を施して得られる画像の少なくとも一部が含まれる。

設定部１００１は、上述のように検出ラインの設定を行う。具体的には、設定部１００１は、ユーザにより補正画像３１０上で指定された検出ライン３０１の位置を、撮像画像上の対応する位置に変換する。そして、設定部１００１は、変換により得られた、撮像画像上での検出ラインの位置を記録する。記録された検出ラインの位置は、撮像画像上で検出ラインを通過した物体の数を計数するために用いられる。

ＯＳＤ５０５は、撮像画像又は補正画像に対して様々な情報を重畳することができる。例えば、ＯＳＤ５０５は、設定された検出ラインの位置を示す情報を、撮像画像（全方位画像）に対して重畳することができる。具体例としては、カメラ１０１に起因する歪曲に従って曲がるように設定されている検出ラインの画像レイヤーを用意し、撮像画像に対してこの画像レイヤーを重畳することにより、撮像画像上で検出ラインの位置を示すことができる。

また、ＯＳＤ５０５は、補正画像（例えば３６０度パノラマ画像、１８０度ダブルパノラマ画像、４画面切り出し画像、８画面切り出し画像等）に対して、時刻、日時、カメラの名称、及び撮影方角等を示す文字を重畳することができる。撮像画像（全方位画像）に対して文字情報を重畳すると、歪曲補正の後に文字が崩れてしまう可能性がある。このため、ＯＳＤ５０５は、撮像画像（全方位画像）の黒画像部分に、時刻、日時、カメラの名称、及び撮影方角等を示す文字を重畳することができる。この場合、黒画像部分は歪曲補正の対象から除外することができる。また、これらの情報を黒画像部分にデータとして埋め込むこともできる。この場合、クライアント装置１０２は取得した画像を展開する際にこれらの情報を取得することができる。

エンコーダ５０６は、撮像画像、補正画像、またはＯＳＤ５０５によって情報が重畳された画像に対してエンコード処理を行う。ネットワーク部５０７は、エンコード処理によって生成した符号化データを、ネットワーク１０３を介してクライアント装置１０２又は録画サーバ５１１等の外部装置へと配信する。このように、エンコーダ５０６は、ネットワーク部５０７を介して、画像を表示するようにモニタ１０５等の表示装置を制御する表示制御を行うことができる。例えば、エンコーダ５０６は、歪曲補正部５０４による歪曲補正処理により生成された、撮像画像に対して歪曲補正を施して得られる画像の少なくとも一部が含まれる補正画像を、モニタ１０５に表示させることができる。

また、クライアント装置１０２又は録画サーバ５１１等の外部装置からは、カメラ１０１に対して制御信号が送られる。この制御信号は、ネットワーク１０３を介してネットワーク部５０７により受信され、コントローラ５０９により解析される。

コントローラは、制御信号の解析結果に従い、カメラ１０１が有する各部を制御する。例えば、コントローラ５０９は、検出ラインを設定するために撮像画像上又は補正画像上でユーザに指定された検出ラインの位置を、クライアント装置１０２から取得することができる。こうして、コントローラ５０９は、撮像画像のうち一部の領域の指定を受付することができ、また撮像画像上の位置の指定を受付することができる。また、クライアント装置１０２から１８０度ダブルパノラマ画像を要求する信号が送信されると、コントローラ５０９は、１８０度ダブルパノラマ画像を生成するように歪曲補正部５０４を制御することができる。

次に、本実施形態に係る処理の流れを、図６のフローチャートを参照して説明する。ステップＳ６０１において処理が開始する。ステップＳ６０２において、ネットワーク部５０７は、歪曲補正部５０４により生成された撮像画像（全方位画像）１０６をクライアント装置１０２へと送信する。そして、クライアント装置１０２は、送信された撮像画像１０６をモニタ１０５に表示する。

ステップＳ６０３において、コントローラ５０９は、クライアント装置１０２が現在検出ラインを設定する設定モード中であるか否かを判定する。設定モード中である場合、処理はステップＳ６０４に進む。設定モード中ではない場合、処理はステップＳ６０９に進む。

ステップＳ６０４において、コントローラ５０９は、撮像画像１０６上の検出ラインの位置が指定されたか否かを判定し、検出ラインの位置が指定されている場合にはコントローラ５０９は指定された検出ラインの位置を取得する。検出ラインの位置の指定は上述のように、例えば撮像画像１０６上でユーザが検出ラインの位置を指定することにより行うことができる。撮像画像１０６上の検出ラインの位置が指定された場合、処理はステップＳ６０５に進む。撮像画像１０６上の検出ラインの位置が指定されていない場合、処理はステップＳ６０９に進む。

ステップＳ６０５において、エンコーダ５０６は、ネットワーク部５０７を介して、歪曲補正部５０４により生成された補正画像３１０をクライアント装置１０２へと送信する。この補正画像３１０には、ステップＳ６０４において指定された撮像画像１０６上の位置における画像に歪曲補正を施して得られる画像、すなわち指定された検出ラインの位置における歪曲補正された画像が含まれている。そして、クライアント装置１０２は、送信された補正画像３１０をモニタ１０５に表示する。

ステップＳ６０６において、ユーザによる検出ラインの位置の補正が、上述のようにモニタ１０５に表示された補正画像３１０を参照しながら行われる。

ステップＳ６０７において、クライアント装置１０２は、設定モードを終了するか否かを判定する。設定モードを終了する場合、処理はステップＳ６０８に進む。例えば、ユーザにより設定モードを終了する指示が入力されている場合、クライアント装置１０２は設定モードを終了することができる。設定モードを終了しない場合、処理はステップＳ６０５に戻る。この場合、ステップＳ６０５において新たな補正画像がモニタ１０５に表示される。

ステップＳ６０８において、クライアント装置１０２は表示モードに移行する。すなわち、エンコーダ５０６は、ネットワーク部５０７を介して、歪曲補正部５０４により生成された撮像画像をクライアント装置１０２へと送信する。また、設定部１００１は、上述のようにステップＳ６０６において補正画像３１０上で指定された検出ラインの位置を、撮像画像上の位置に変換する。エンコーダ５０６がクライアント装置１０２へと送信する撮像画像４００には、変換により求められた検出ラインの位置が示されている。そして、クライアント装置１０２は、送信された撮像画像４００をモニタ１０５に表示する。

ステップＳ６０９において処理は終了する。ステップＳ６０９の後にステップＳ６０１に戻り、新たな撮像画像をモニタ１０５に表示することもできる。この場合にも、モニタ１０５に表示される撮像画像上で検出ラインの位置を示すことができる。また、ステップＳ６０９の後に、クライアント装置１０２が有する検知手段は、自動的に又はユーザの指示に応じて、撮像画像１０６上において検出ライン４０１を通過した物体の数を計数することができる。

実施形態１では、カメラ１０１は撮像画像の歪曲補正及び検出ラインの記録を行い、クライアント装置１０２は撮像画像及び検出ラインの位置情報を取得して検出ラインを通過する物体の検知を行った。しかしながら、歪曲補正、検出ラインの記録、及び物体検知は、カメラ１０１とクライアント装置１０２とのいずれが行ってもよい。例えば、一実施形態においては、カメラ１０１はクライアント装置１０２への撮像画像の送信を行い、クライアント装置１０２は歪曲補正、検出ラインの記録、及び物体検知を行う。また、別の実施形態においては、カメラ１０１は歪曲補正、検出ラインの記録、及び物体検知を行い、クライアント装置１０２は画像表示及びユーザ入力の取得を行う。

また、実施形態１では、撮像画像上における検出ラインの位置を設定する場合について主に説明した。しかしながら、本発明の方法の適用例は、検出ラインの位置の設定には限られない。すなわち、実施形態１の方法を用いて、歪曲を含む撮像画像上の所望の位置をより正確に指定することが可能となる。また、実施形態１の方法を用いることにより、ラインだけでなく、点の位置又は領域の位置（形状及び大きさを含む）を指定することも可能である。また、物体検知において、検出ラインを通過した物体の数を計数するだけでなく、指定された領域に入っている物体の数を計数することも可能である。

広角画像又は全方位画像のような広範囲の画像を見る監視者の違和感を無くすために、光学系に起因する画像の中心位置のずれをさらに補正し、ビューワーと中心位置を一致させることも有効である。また、本実施形態は、イメージサークルを正円形ではなく楕円形とすることにより撮像素子の有効面積を増加させ、周辺解像度を向上させる全方位レンズを用いて撮像を行う場合にも同様に適用可能である。

［実施形態２］
実施形態２では、補正画像を参照してユーザが検出ラインを補正する前に検出ラインが自動的に補正される。以下、図７〜図９を参照して本実施形態について説明する。本実施形態に係る撮像システム１００の構成は実施形態１と同様であり、その説明は省略する。

図９は本実施形態における処理のフローチャートである。ステップＳ９０１〜Ｓ９０４は、実施形態１のステップＳ６０１〜Ｓ６０４と同様に行われる。

ステップＳ９０５において、ライン補正部１００２は、検出ラインを補正する。以下では、図２に示すように、ユーザが撮像画像１０６上で検出ライン２０３の位置を指定したものとする。すると、ライン補正部１００２は、画像上のオブジェクトの位置を参照して、検出ラインの位置を補正する。一実施形態において、ライン補正部１００２は、オブジェクトの輪郭情報を参照して検出ラインの位置を補正することができる。オブジェクトの輪郭情報は、例えば画像に対してエッジ抽出処理を行うことにより得ることができる。

検出ラインの位置の補正方法としては、以下のようなものが挙げられる。例えば、通路又は廊下等の、画像上のオブジェクト間の境界に沿うように、検出ラインの位置を補正することができる。一例として、２つの通路の色が異なっており、色が異なる通路の境界付近に検出ラインが位置する場合について説明する。このような場合、ライン補正部１００２は、画像に対してエッジ抽出処理を行った後に、検出ラインの法線方向に位置する、検出ラインの各画素に最も近いエッジ画素を探索することができる。補正後の検出ライン８０１は、探索された各エッジ画素で構成される。このような方法によれば、検出ラインを通路境界に沿って設定することができる。

また、検出ラインの延長線上に、又は延長線の近傍に位置するエッジ画素群を検出し、このエッジ画素群を通る近似曲線を算出することができる。そして、検出ラインの法線方向に位置する、検出ラインの各画素に最も近い近似曲線上の画素を探索することができる。補正後の検出ラインは、探索された各画素で構成される。図２の例では、検出ラインの延長線上近傍には、商品棚２０１，２０２のエッジが存在する。したがって、商品棚２０１，２０２のエッジを通る近似曲線に基づいて、検出ラインの位置を補正することができる。このような方法によれば、検出ラインを通路の入り口に沿って設定することができる。

検出ラインの位置の別の補正方法として、補正後の検出ラインの端点が画像上のオブジェクトに接触するように、検出ラインの位置を補正することができる。一例として、検出ラインの両端のそれぞれに最も近い１組のエッジ画素を検出することができる。そして、検出された１組のエッジ画素が補正後の検出ラインの両端となるように、検出ラインを延長、短縮及び移動することができる。図２の例では、検出ラインの両端の近傍には、商品棚２０１，２０２のエッジが存在する。したがって、商品棚２０１のエッジと商品棚２０２のエッジとを結ぶように検出ラインの位置を補正することができる。このような方法によれば、検出ラインを通路の幅に合わせて設定することができる。

さらには、補正後の検出ラインの端点が画像上のオブジェクトの角に接触するように、検出ラインの位置を補正することもできる。例えば、図８に示すように、検出ライン８０１の両端が商品棚の角８０２，８０３に接触するように、検出ラインを延長することができる。具体的な方法の一例として、検出ラインの両端のそれぞれに最も近い、１組のオブジェクトの角を検出することができる。オブジェクトの角は、例えば、方向の異なる２本以上のエッジが接触する点として定義できる。そして、検出された１組の角が補正後の検出ラインの両端となるように、検出ラインを延長、短縮及び移動することができる。図２の例では、検出ラインの両端の近傍には、商品棚２０１，２０２の角が存在する。したがって、商品棚２０１の角と商品棚２０２の角とを結ぶように検出ラインの位置を補正することができる。このような方法によれば、検出ラインを通路の入り口及びその幅に合わせて設定することができる。

ライン補正部１００２は、撮像画像上の検出ライン２０３の指定された位置を、撮像画像１０６を参照して補正することができる。この場合、撮像画像１０６上での像の歪曲を考慮して上記の処理を行うことができる。例えば、上記のようにエッジ画素群を通る近似曲線を算出する場合、算出される近似曲線に対して歪曲補正を行うと直線になるように、算出される近似曲線の曲率を、検出ライン２０３の位置における像の歪曲に従って決定することができる。また、検出ライン２０３を延長する場合、検出ライン２０３の位置における像の歪曲に従って歪曲補正を行うと直線になるように決定された延長曲線に沿って、検出ライン２０３を延長することができる。

別の実施形態において、ライン補正部１００２は、撮像画像上の検出ライン２０３の指定された位置に対応する補正画像上の位置を、補正画像８１０を参照して補正することができる。ライン補正部１００２は、補正画像８１０を参照して上記の処理を行うことができる。この補正画像８１０は、実施形態１と同様に、撮像画像１０６を歪曲補正して得られる画像であって、撮像画像上で指定された検出ラインの位置を含んでいる。また、設定部１００１は、実施形態１と同様に補正画像８１０上における検出ラインの位置を算出することができ、そして補正画像８１０上の検出ラインの位置を補正することができる。この場合、上記のようにエッジ画素群を通る近似曲線を算出する場合、エッジ画素群を通る近似直線を近似曲線として算出することができる。また、検出ラインを延長する場合、検出ラインを近似する直線に沿って検出ラインを延長することができる。

ステップＳ９０６は、実施形態１のステップＳ６０５と同様に行うことができる。ステップＳ９０７において、コントローラ５０９は、補正後の検出ライン８０１の位置を承認するか否かを示すユーザ入力を、クライアント装置１０２を介して受け取る。ユーザが補正後の検出ライン８０１の位置を承認しない場合、実施形態１のステップＳ６０６と同様にユーザは検出ライン８０１の位置を補正してもよい。ユーザは、検出ライン８０１の位置に満足した時に、補正後の検出ライン８０１の位置を承認することができる。その後、承認された検出ライン８０１の位置に対応する撮像画像上の位置に、検出ラインが設定されることとなる。ユーザが補正後の検出ライン８０１の位置を承認すると、処理はステップＳ９０８に進む。

ステップＳ９０８，Ｓ９０９は、実施形態１のステップＳ６０８，Ｓ６０９と同様に行うことができる。

［実施形態３］
上述の実施形態においては、例えば図１等に示される各処理部は、専用のハードウェアによって実現される。しかしながら、カメラ１０１及びクライアント装置１０２が有する一部又は全部の処理部が、コンピュータにより実現されてもよい。本実施形態では、上述の各実施形態に係る処理の少なくとも一部がコンピュータにより実行される。

図９はコンピュータの基本構成を示す図である。図９においてプロセッサ１５１は、例えばＣＰＵであり、コンピュータ全体の動作をコントロールする。メモリ１５２は、例えばＲＡＭであり、プログラム及びデータ等を一時的に記憶する。コンピュータが読み取り可能な記憶媒体１５３は、例えばハードディスク又はＣＤ−ＲＯＭ等であり、プログラム及びデータ等を長期的に記憶する。本実施形態においては、記憶媒体１５３が格納している、各部の機能を実現するプログラムが、メモリ１５２へと読み出される。そして、プロセッサ１５１が、メモリ１５２上のプログラムに従って動作することにより、各部の機能が実現される。

図９において、入力インタフェース１５４は外部の装置から情報を取得するためのインタフェースである。また、出力インタフェース１５５は外部の装置へと情報を出力するためのインタフェースである。バス１５６は、上述の各部を接続し、データのやりとりを可能とする。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

５０１：魚眼レンズユニット、５０２：撮像素子、５０３：信号処理部、５０４：歪曲補正部、５０５：ＯＳＤ、５０６：エンコーダ、５０７：ネットワーク部、１００１：設定部、１００２：ライン補正部

Claims (12)

1. 撮像装置により撮像された撮像画像のうち一部の領域の指定を受け付ける受付手段と、
   指定された前記一部の領域の撮像画像に対して前記撮像装置の光学系に起因する歪曲を低減する歪曲補正を施して得られる補正画像を表示装置に表示させ、前記補正画像において指定された位置に対応する前記撮像画像上の位置に所定の画像を前記表示装置に表示させる表示制御手段と
   を備えることを特徴とする情報処理装置。
2. 前記撮像画像上の指定された位置を取得する取得手段をさらに備え、
   前記表示制御手段は、前記撮像画像上の前記指定された位置に対応する前記補正画像上の位置を示す位置情報を前記表示装置にさらに表示させる
   ことを特徴とする、請求項１に記載の情報処理装置。
3. 前記取得手段は、前記表示装置に表示された前記撮像画像上でユーザにより指定された位置を、前記指定された撮像画像上の位置として取得することを特徴とする、請求項２に記載の情報処理装置。
4. 前記取得手段は、前記位置情報が示す前記補正画像上の位置を、前記指定された前記補正画像上の位置として設定するユーザ指示をさらに取得することを特徴とする、請求項２又は３に記載の情報処理装置。
5. 前記位置情報が示す前記補正画像上の位置を補正し及び当該補正後の位置を前記指定された前記補正画像上の位置として設定するユーザ指示を、前記取得手段がさらに取得することを特徴とする、請求項２又は３に記載の情報処理装置。
6. 前記撮像画像上の前記指定された位置を前記撮像画像を参照して補正する、又は前記撮像画像上の前記指定された位置に対応する前記補正画像上の位置を前記補正画像を参照して補正する、補正手段をさらに備えることを特徴とする、請求項２乃至５の何れか１項に記載の情報処理装置。
7. 前記補正手段は、前記撮像画像から検出された画像中のオブジェクトの輪郭情報を用いて前記撮像画像上の前記指定された位置を補正する、又は前記補正画像から検出された画像中のオブジェクトの輪郭情報を用いて前記撮像画像上の前記指定された位置に対応する前記補正画像上の位置を補正することを特徴とする、請求項６に記載の情報処理装置。
8. 前記表示制御手段は、前記撮像画像と、前記変換により得られた前記撮像画像上の位置を示す位置情報と、を前記表示装置に表示させることを特徴とする、請求項１乃至７の何れか１項に記載の情報処理装置。
9. 前記撮像装置が撮像した撮像画像により構成される動画像において、前記撮像画像上に設定された検出ラインを通過した物体を検知する検知手段をさらに備え、
   前記指定された前記補正画像上の位置は、前記撮像画像上に設定する検出ラインの位置に対応する前記補正画像上の位置を示し、
   前記表示制御手段は、前記補正画像において指定された位置に対応する前記撮像画像上の位置に検出ラインを表示させる
   ことを特徴とする、請求項１乃至８の何れか１項に記載の情報処理装置。
10. 前記撮像画像により構成される動画像を撮像する撮像手段と、
    前記動画像において、前記撮像画像上に設定された検出ラインを通過した物体を検知する情報処理装置に対して、前記動画像と、前記検出ラインの前記撮像画像上の位置を示す情報と、を送信する送信手段と、をさらに備え、
    前記指定された前記補正画像上の位置は、前記撮像画像上に設定する検出ラインの位置に対応する前記補正画像上の位置を示し、
    前記表示制御手段は、前記補正画像において指定された位置に対応する前記撮像画像上の位置に検出ラインを表示させる
    ことを特徴とする、請求項１乃至８の何れか１項に記載の情報処理装置。
11. 情報処理装置が行う情報処理方法であって、
    撮像装置により撮像された撮像画像のうち一部の領域の指定を受け付ける受付工程と、
    指定された前記一部の領域の撮像画像に対して前記撮像装置の光学系に起因する歪曲を低減する歪曲補正を施して得られる補正画像を表示装置に表示させ、前記補正画像において指定された位置に対応する前記撮像画像上の位置に所定の画像を前記表示装置に表示させる表示制御工程と、
    を備えることを特徴とする情報処理方法。
12. コンピュータを、請求項１乃至９の何れか１項に記載の情報処理装置の各手段として機能させるためのプログラム。