JP5637633B2 - 画像配信装置 - Google Patents

Description

本発明は、カメラなどにより撮影された画像を配信する装置であって、特にプライバシーに配慮したセキュリティを実現する画像配信装置に関するものである。

近年ネットワークに接続された、高解像度で、かつ、画像認識処理を行うことで効率を向上させることが可能なセキュリティカメラが開発されている。このようなセキュリティカメラでは、これまでよりも桁違いの高解像度の画像を撮影することができ、また、広範囲な領域をカバーするセキュリティシステムを構築することができる。また、画像認識を行うことで、セキュリティカメラで不審者を抽出したり、子供など、特に見守りたい特定の人物を登録しておけば、登下校時のセキュリティサービスの提供が可能になる。しかしながら、一方で、公共の場所や住宅などを撮影する場合、他人のプライバシーに配慮を行いつつ撮影をすることが求められる。

従来のセキュリティカメラシステムや、監視システムとしては、プライバシー、あるいは、個人情報の保護のために、セキュリティカメラで撮影した画像をそのままユーザに配信するのではなく、画像にマスキング処理を行った上で、配信するものがあった（例えば、特許文献１参照）。特許文献１に記載された従来の技術では、単純にマスク領域を一つだけ保持して撮影した画像をマスクするのではなく、ユーザごとにマスク領域を変更し、適切にプライバシーを保護する。例えば、駐車場の監視を行う場合、契約している箇所だけ監視できるようして、契約していない箇所はマスク処理を行うことで、他人のプライバシーに配慮することが開示されている。あるいは、一般ユーザ、警備員、警察官などのユーザの区分によって、画像を見てもよい範囲を変えることができる例がある。例えば、事件解決に関して十分な情報を得る必要がある警察官は、全てを見ることができるが、その必要がない一般ユーザは、見ることのできる範囲を制限するなどといったことができる。また、カメラの移動、ズームなどによって撮影範囲が変わる場合には、マスク領域の範囲を変更することができ、セキュリティを確保するために監視は行いつつ、プライバシーに配慮した撮影を行うことができる。

また、他の例としては、撮影側で行ったプライバシー保護の設定内容を外部から確認し、変更可能なものがあった（例えば、特許文献２参照）。特許文献２に記載された従来の技術では、住宅Ａに設定されているカメラのプライバシー保護の設定を、住宅Ｂに住んでいる人が、自宅の写り具合を確認し、プライバシー保護のための設定内容に不満がある場合、マスク領域の変更を要求することができる。住宅Ａに住んでいる人はその要求を受けて、設定内容を変更するか、あるいは変更しないことができる。このような機能を設けることにより、撮影される側から設定内容を確認することができ、より信頼性の高いプライバシー保護機能を提供することができる。

特開２００３−４６７４５号公報 特開２００５−２５２８４９号公報

特許文献１の構成では、ユーザごとにマスク領域を適切な大きさに設定するように登録することはできた。しかし、ユーザがカメラ画像の視聴を要求する任意の領域の各部分について、ユーザに応じて、適切な解像度によって画像を撮影し処理するので、システムにかかる処理負荷が大きくなっていた。例えば、各ユーザが最も詳細な画像データを必要としている自分の家などを含む領域は、高解像度の画像を送る必要があった。また、ユーザの家の領域に対して不審者だと判定された人物の画像は、たとえ背景が他人のプライベートな領域であったとしても、背景はぼかし処理をしつつ、人物は、最も高解像度の画像を送る必要があった。このため、特許文献１の構成では、システムの処理負荷を下げつつ、必要十分なプライバシーの保護と、セキュリティを両立できないという課題を有していた。

また、人によっては、この程度の解像度であれば問題ないという人もいれば、親戚の人には低解像度であればみせてもよい、あるいは、まったく見せたくないという人もいるなど、プライバシーに対する希望は異なる。しかし、それぞれの被撮影者に対して確認する手間を省くために、一律に各被撮影者の領域をマスク処理する場合は、必要以上にマスク処理領域が増えることで、見える領域が減少し、より大きな負荷がシステムにかかるといった課題があった。特に、高解像度のカメラで多数の人がいる領域を同時に撮影するような場合、そのコストは大きくなる。また、逆にそれぞれの被撮影者に希望を確認することは、大きなコストがかかるという問題があった。

また、特許文献２の構成では、被撮影者は自分のプライベート領域を登録できたが、その登録したプライベート領域が、他人のプライベート領域と近い、あるいは重なっている場合、お互いに画像で撮影領域を確認し合って調整するなど、時間と労力を必要とするという課題を有していた。特に高解像度のカメラで多数の人の領域を同時に撮影するような場合、その労力は大きくなる。更に建物の形や、植物の成長に伴って、その領域が変化する場合には、再度調整が必要になるという課題もあった。

それ故に、本発明は、前記従来の課題を解決するもので、任意の撮影された領域について、ユーザに応じて、適切に画像を加工することで、処理の負荷を下げつつ、必要十分なプライバシーと、セキュリティの保護を両立するセキュリティカメラを容易に提供することを目的とする。

上記目的を達成するために、本発明の画像配信装置は、クライアント装置と通信する通信部と、画像を取得する画像取得部と、ユーザのプライバシーに関わる領域であるプライベート領域を保存するプライベート領域保存部と、通信部を介して、クライアント装置から受け取った画像の配信要求に含まれる情報からユーザを認証する認証部と、認証されたユーザの配信希望領域を切り出し領域として保存する切り出し領域保存部と、プライバシーが異なる領域に応じて、画像処理レベルを定めた画像処理ルールを保存する画像処理レベル保存部と、切り出し領域保存部から認証されたユーザの切り出し領域を取得し、当該取得した切り出し領域の画像に関して、プライベート領域保存部から認証されたユーザのプライベート領域と、認証されたユーザ以外の他人のプライベート領域とを取得し、画像処理レベル保存部から画像処理ルールを取得し、当該取得した画像処理ルールに応じて、切り出し領域の各領域について、画像処理方法を決定する画像処理領域生成部と、画像処理領域生成部が決定した画像処理方法に応じて、画像取得部が取得した画像を加工する画像加工部とを備える。

画像処理レベル保存部は、認証されたユーザのプライベート領域と、認証されたユーザ以外の他人のプライベート領域とに対する画像処理レベルを定めた画像処理ルールを保存する。他人のプライベート領域に対する画像処理レベルは、プライバシー保護のため、認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである。

画像処理レベル保存部は、プライベート領域間の境界領域に対する画像処理レベルを定めた画像処理ルールを保持し、認証されたユーザのプライベート領域と、他人のプライベート領域とが近接している領域とその近辺の領域については、境界領域に対する画像処理レベルを画像処理領域生成部に通知する。境界領域に対する画像処理レベルは、プライバシー保護のため、認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである。

画像処理レベル保存部は、プライベート領域間の境界領域に対する画像処理レベルを定めた画像処理ルールを保持し、認証されたユーザのプライベート領域と、他人のプライベート領域とが重なっている領域とその近辺の領域については、境界領域に対する画像処理レベルを画像処理領域生成部に通知する。境界領域に対する画像処理レベルは、プライバシー保護のため、認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである。

画像処理レベル保存部は、全てのプライベート領域以外からなるパブリック領域に対する画像処理レベルを定めた画像処理ルールを保持する。パブリック領域に対する画像処理レベルは、プライバシー保護のため、認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである。

画像処理領域生成部は、画像処理レベル保存部から取得した画像処理ルールに応じて、認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、他人のプライベート領域に対しては、低解像度で画像処理することを決定する。

画像処理領域生成部は、画像処理レベル保存部から取得した画像処理ルールに応じて、認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、境界領域に対しては、低解像度で画像処理することを決定する。

画像処理領域生成部は、認証されたユーザの切り出し領域の中から全てのプライベート領域以外からなるパブリック領域を算出し、画像処理レベル保存部から取得した画像処理ルールに応じて、認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、パブリック領域に対しては、低解像度で画像処理することを決定する。

画像配信装置は、関係者の顔画像が登録される画像登録部をさらに備える。
画像処理領域生成部は、他人のプライベート領域に重なって撮影された人物の顔画像が、画像登録部に登録された関係者の顔画像と一致しないときに、撮影された人物を不審者であると判定し、不審者を高解像度で画像処理することを決定する。

画像処理レベル保存部は、不審者に対する画像処理レベルを定めた画像処理ルールをさらに保持する。画像処理領域生成部は、不審者に対する画像処理レベルに応じて、不審者の画像処理レベルを決定する。

画像配信装置は、認証されたユーザのＩＤと、認証されたユーザの配信希望領域とに対応したパブリック領域を保存するパブリック領域保存部をさらに備える。画像処理領域生成部は、同じユーザによって同じ配信希望領域が要求された場合、パブリック領域保存部から、認証されたユーザのＩＤと、認証されたユーザの配信希望領域とに対応したパブリック領域を読み出し、当該読み出したパブリック領域に対して、画像処理することを決定する。

画像処理レベル保存部は、プライベート領域に対応した解像度閾値を保持する。画像処理領域生成部は、他人のプライベート領域の大きさが解像度閾値よりも小さい場合には、他人のプライベート領域に対しては、プライバシー保護のために、低解像度で画像処理しないことを決定する。

画像処理レベル保存部は、プライベート領域に対応した追加許可ユーザＩＤを保持する。画像処理領域生成部は、画像配信先のユーザＩＤが、追加許可ユーザＩＤと一致する場合には、他人のプライベート領域に対しては、低解像度で画像処理しないことを決定する。

切り出し領域保存部は、認証されたユーザから、刻々と変わる配信希望領域を受け付け、当該受け取った領域に応じて、切り出し領域を変更する。

画像取得部はステレオ画像を取得するものである。画像配信装置は、画像取得部が取得したステレオ画像から三次元モデルを作成し、二次元のプライベート領域が書かれた地図データとの対応付けを行うことで、ステレオ画像の各領域が各ユーザのプライベート領域であるのかを判定し、当該判定したプライベート領域をプライベート領域保存部に登録するプライベート領域登録部をさらに備える。

画像加工部は、ユーザに送信する画像データの周辺部分がプライバシーを保護するための画像処理されていることを検出すると、その部分を削除して通信部に通知する。

本発明の画像配信装置によれば、高解像度のカメラを多人数で共有しつつセキュリティシステムを実現する場合において、ユーザが高優先度で監視をしたい自分の家などのプライベート領域は高解像度で画像を確認できる。また、通行人がいて、他人のプライバシーを守りつつ、子供の安全のみを確認できればよい公共の道路などのパブリック領域については低解像度で画像を確認できる。さらに、各自のプライベート領域が他人に配信される場合は、ぼかし処理を行うことができる。また、プライベート領域間の境界領域については、他人のプライバーを考慮した解像度で画像を確認できる。従って、領域に応じた画像の解像度などの制御が効率よくでき、プライバシーとセキュリティの保護を両立することが容易にできる。

本発明の第１の実施形態に係るセキュリティシステムの構成の一例を示すブロック図 本発明の第１の実施形態に係る画像配信装置１００の構成の一例を示すブロック図 本発明の第１の実施形態に係る切り出し領域保存部１３が保持する切り出し領域を示すデータの一例を示す図 本発明の第１の実施形態に係るプライベート領域保存部１４が保持するプライベート領域のデータの一例を示す図 本発明の第１の実施形態に係るプライベート領域保存部１４が保持するプライベート領域のデータの一例を示す図 本発明の第１の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域種別プライバシーレベル管理テーブル）の一例を示す図 本発明の第１の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域属性情報管理テーブル）の一例を示す図 本発明の第１の実施形態に係る画像配信装置１００が、画像を配信する時の動作の一例を示すフローチャート 本発明の第１の実施形態に係るプライベート領域保存部１４が保持するプライベート領域のデータの一例を示す図 本発明の第１の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域属性情報管理テーブル）の一例を示す図 本発明の第１の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域種別プライバシーレベル管理テーブル）の一例を示す図 本発明の第１の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域属性情報管理テーブル）の一例を示す図 本発明の第１の実施形態に係るプライベート領域保存部１４が保持するプライベート領域のデータの一例を示す図 本発明の第１の実施形態における配信領域を削減する場合の一例を示す図 本発明の第１の実施形態における３Ｄ画像と２Ｄ画像を用いてプライベート領域を決定する場合の一例を示す図 本発明の第１の実施形態に係る画像配信装置１００ｂの構成の一例を示すブロック図 本発明の第２の実施形態に係る画像配信装置２００の構成の一例を示すブロック図 本発明の第２の実施形態に係るパブリック領域保存部１９に保存されているパブリック領域を示すデータの一例を示す図 本発明の第３の実施形態に係る画像配信装置３００の構成の一例を示すブロック図 カメラの撮影位置を検出する第１の方法を説明する図 カメラの撮影位置を検出する第２の方法を説明する図 本発明の第４の実施形態に係る画像配信装置３００の構成の一例を示すブロック図 本発明の第４の実施形態におけるプライベート領域と不審者が重なっている場合の一例を示す図 画像登録部２１に登録される関係者の顔画像のデータベースの一例を示す図 本発明の第４の実施形態に係る画像配信装置４００が画像を配信する時の動作の一例を示すフローチャート 本発明の第４の実施形態に係る画像処理レベル保存部１５が保持する画像処理ルール（領域種別プライバシーレベル管理テーブル）の一例を示す図 集積回路化された画像配信装置１００の構成の一例を示すブロック図

（第１の実施形態）
図１は、本発明の第１の実施形態に係るセキュリティカメラシステムの構成の一例を示すブロック図である。図１において、画像配信装置１００は、例えばレンズを備えたカメラを構成に含み、画像を撮影し、加工した上で、ネットワーク３０を介して、複数のクライアント装置５０に画像を配信する。クライアント装置５０は、画像配信装置１００から送られる画像を再生する。

図２は、本発明の第１の実施形態に係る画像配信装置１００の構成の一例を示すブロック図である。図２において、画像配信装置１００は、通信部１１、認証部１２、切り出し領域保存部１３、プライベート領域保存部１４、画像処理レベル保存部１５、画像加工部１７、及び画像取得部１８を備える。通信部１１は、ネットワーク３０と接続され、画像をクライアント装置５０に対して配信する。なお、通信部１１は、ネットワーク３０に有線で接続されてもよいし、無線ＬＡＮなどの無線で接続されてもよい。また、通信部１１は、クライアント装置５０から画像の配信要求を受け付けて、クライアント装置５０との通信を開始する。

認証部１２は、通信部１１を介してクライアント装置５０からユーザ情報を受け取り、画像の配信先のユーザが、誰であるのかを認証する。認証方法は、ＩＤとパスワードによって行ってもよいし、虹彩や指紋、静脈などを利用した生体認証などにより行ってもよい。

切り出し領域保存部１３は、ユーザに配信する画像の切り出し領域を保存する。画像の切り出し領域は、通信部１１を介して、ユーザからの配信要求に応じて毎回指定されてもよいし、初回に指定されたものを保存しておいてもよいし、任意のタイミングで更新されてもよい。また、切り出し領域保存部１３は、ユーザに応じたデフォルトの画像領域を切り出し領域として保存しておいてもよい。

プライベート領域保存部１４は、セキュリティカメラシステムを利用するユーザのプライベート領域を保存する。プライベート領域とは、ユーザのプライバシーに関わる領域が、画面上のどこに当たるのかを示す領域である。つまり、プライベート領域保存部１４には、ユーザ毎に他人に見せたくない画像の領域等がプライベート領域として保存されている。プライベート領域保存部１４には、ユーザのプライベート領域が予め保存されていてもよいし、例えば初回時等の任意のタイミングでユーザから登録されてもよい。また、プライベート領域は、認証部１２で認証されたユーザだけがプライベート領域保存部１４に登録できるようにしてもよい。

画像処理レベル保存部１５は、プライバシーなどのレベルが異なる領域に応じて、どのような画像処理を行うかを示す画像処理レベルを定めた画像処理ルールが保存されている。画像処理ルールは、どのプライベート領域にぼかし処理を施すかなどの判定に利用される。例えば、画像処理ルールとしては、プライベート領域を登録したユーザに画像を配信する際には、高解像度の画像を配信し、他人に配信する場合には、ぼかし処理を施した画像を配信するなどといったルールが登録される。

また、画像処理ルールとして、プライベート領域として登録されていない領域は、パブリック領域であるため、低解像度の画像を配信するなどのルールが登録されてもよい。あるいは、画像処理ルールとして、画像の解像度が低い場合は、ぼかし処理を施さないなどのルールや、切り出し領域内のプライベート領域では、一律に決められた解像度に達していない領域については、ぼかし処理を省くなどのルールが登録されてもよい。また、画像処理ルールの１つとして、プライベート領域とプライベート領域とが重なっている場合、あるいは、プライベート領域同士が近接している場合には、プライベート領域とプライベート領域との間に境界領域があると認識し、境界領域とその境界領域の近辺の領域では、画像の解像度を落とすようなルールが登録されてもよい。

画像処理領域生成部１６は、ユーザに配信する画像の領域と、画像の処理方法とを決定する。まず、画像処理領域生成部１６には、認証部１２で認証されたユーザ情報に基づいて、切り出し領域保存部１３からユーザが要求している切り出し領域と、プライベート領域保存部１４からユーザが登録したプライベート領域とを取得する。そして、画像処理領域生成部１６は、ユーザが要求している切り出し領域内で、配信先のユーザに対して、どの領域が画像を要求しているユーザのプライベート領域か、どの領域がユーザ以外のプライベート領域か、どの領域がパブリック領域なのか等を決定する。また、画像処理領域生成部１６は、画像処理レベル保存部１５から画像処理ルールを取得し、各プライベート領域や、パブリック領域を、どのような解像度の画像にするのか、あるいは、ぼかし処理が必要かなどの、最終的な画像処理方法を決定する。

画像加工部１７は、画像処理領域生成部１６が決定した画像処理方法に応じて、画像を加工して、ユーザが要求している領域の画像を切り出して、通信部１１に対して画像データを通知する。画像取得部１８は、例えばカメラであって、セキュリティ対象の領域の画像を撮影し、画像加工部１７に通知する。本実施形態では、カメラの撮影範囲は固定されているものとする。

次に、本発明の第１の実施形態に係る画像配信装置１００が用いるデータについて、詳細を説明する。図３は、切り出し領域保存部１３に保存されている切り出し領域を示すデータの一例である。切り出し領域保存部１３は、ユーザからの配信要求を受信した時等に、当該受信した配信要求に設定された領域を切り出し領域として保存する。この例では、切り出し領域は、矩形であり、左上座標のＸ、Ｙ座標と、矩形の横幅（Ｗ）、縦幅（ｈ）によって表されている。

図４Ａ及び図４Ｂは、プライベート領域保存部１４に保存されているプライベート領域を示すデータの一例である。図４Ａは、プライベート領域が直線で囲まれた領域として保存されている場合の例を示している。図４Ａに示す例では、プライベート領域として、ユーザＩＤ毎に、領域ＩＤと、座標点（ｘ１，ｘ２，ｘ３，ｘ４）とが登録されている。なお、プライベート領域は、各座標点を結ぶ直線のつながりとして保存されているが、ベジエ曲線など曲線のつながりとして保存されていてもよい。また、図４Ｂは、プライベート領域を画像データとして保存している場合の例を示している。図４Ｂに示す例では、プライベート領域として、ユーザＩＤ毎に、領域ＩＤと、画像データのアドレスとが保存されている。また、画像データは、例えば、ビットマップデータとして、プライベート領域保存部１４に保存される。

次に、画像処理レベル保存部１５に保存されている画像処理ルールについて説明する。図５Ａは、画像処理ルールのうち、領域種別プライバシーレベル管理テーブルの一例を示す図である。図５Ａにおいて、領域種別プライバシーレベル管理テーブルには、プライバシーのレベルに対応した領域種別（例えば、プライベート領域、パブリック領域、他人のプライベート領域、境界領域等）に応じた、画像処理レベルが保存されている。画像処理領域生成部１６は、領域種別プライバシーレベル管理テーブルに基づいて、例えば、プライベート領域を高解像度で画像処理し、境界領域を中程度の解像度の画像へ変更することを決定する。画像処理ルールには、プライベート領域に解像度の高い（すなわち、鮮明な）画像処理レベルが設定され、他の領域については、プライバシー保護のために、プライベート領域よりも解像度を低下させた（すなわち、不鮮明な）画像処理レベルが設定される。なお、解像度を低下させた画像処理レベルとは、プライバシー保護のために、画像の解像度を低下させるだけなく、画像にぼかし処理やモザイク処理等を施すことを含めた概念であるものとする。

図５Ｂは、画像処理ルールのうち、領域属性情報管理テーブルの一例を示す図である。図５Ｂにおいて、領域属性情報管理テーブルには、領域ＩＤ毎に、追加許可ユーザＩＤと、解像度閾値とが登録されている。領域属性情報管理テーブルを用いることで、領域ＩＤに対応した領域ごとに、各領域に対するユーザの属性を設定することができる。例えば、領域ＩＤが「１」の領域は、追加許可ユーザＩＤが「３５０」のユーザに対して、その領域内では、画像を低解像度で処理することなく（例えば、ぼかし処理を施すことなく）送信することが設定されている。すなわち、領域ＩＤに対応する領域が他人のプライベート領域であったとしても、追加許可ユーザＩＤに登録されたユーザには、自分のプライベート領域と同様に、高解像度で画像を送信することができる。

また、図５Ｂにおいて、領域属性情報管理テーブルには、解像度閾値を用いることで、領域ＩＤに対応した領域では、画像を低解像度で処理されなくなる（例えば、ぼかし処理されなくなる）解像度のレベルを設定することができる。例えば、領域ＩＤが「１」に対応した領域の場合、領域の大きさが５ピクセル以下となるような解像度で撮影されている場合は、十分小さく、プライベートな情報として配信される恐れがないため、ぼかし処理を行わずに、画像を配信する。なお、画像処理レベル保存部１５は、画像処理ルールとして、図５Ａに示す領域種別プライバシーレベル管理テーブルのみを保存しておいてもよいし、図５Ａに示す領域種別プライバシーレベル管理テーブルと、図５Ｂに示す領域属性情報管理テーブルとの両方を保存しておいてもよい。

次に、本発明の第１の実施形態に係る画像配信装置１００が、画像を配信する時の動作について、図６を用いて説明する。図６を参照して、画像配信装置１００は、クライアント装置５０からの入力を受け付ける状態で待っている（ステップＳ１０）。画像配信を要求するユーザの操作によって、クライアント装置５０からネットワーク３０を通じて画像配信装置１００に対して、画像の配信要求が送信される。配信要求には、ユーザ情報と、ユーザが配信を希望する領域（配信希望領域）とが設定される。

次に、配信要求を受けた画像配信装置１００において、通信部１１は、配信要求に設定されているユーザ情報を認証部１２に渡す。認証部１２は、渡されたユーザ情報からユーザを認証できた場合（ステップＳ１１：Ｙｅｓ）、ステップＳ１２に遷移する。ユーザが認証できない場合（ステップＳ１１：Ｎｏ）、要求はエラーになり（ステップＳ１７）、処理を終了する。

また、認証部１２は、ユーザ情報からユーザＩＤを決定し、通信部１１から受け取った配信希望領域と、ユーザＩＤとを切り出し領域保存部１３に渡す。切り出し領域保存部１３は、例えば図３に示すように、リクエストＩＤを割り振り、ユーザＩＤと共に、受け取った配信希望領域を切り出し領域として保存する（ステップＳ１２）。

画像処理領域生成部１６は、切り出し領域保存部１３に切り出し領域が保存されると、ユーザＩＤと共に、切り出し領域内にプライベート領域が含まれているか否かをプライベート領域保存部１４に対して問い合わせる。プライベート領域保存部１４は、切り出し領域内で、ユーザＩＤに基づいて、ユーザのプライベート領域と、ユーザ以外の他人のプライベート領域とを抽出し、画像処理領域生成部１６に返す（ステップＳ１３）。

次に、画像処理領域生成部１６は、画像処理レベル保存部１５に対して、ユーザのプライベート領域と、他人のプライベート領域と、その他の領域であるパブリック領域とについて、どのような解像度で画像を処理すべきか、あるいは画像を加工すべきかを問い合わせる。また、プライベート領域のそれぞれについて、追加許可ユーザＩＤがユーザＩＤと一致するか否かをチェックし、一致していた場合には、そのプライベート領域はユーザに対して画像を配信してもよい領域とする。

また、画像処理領域生成部１６は、プライベート領域の解像度が決定した段階で、そのプライベート領域が、幾つのピクセルデータが面積として占めるのかを計算し、その面積が解像度閾値として保存されている値よりも、小さい場合は、十分画像が粗いために、プライバシーの問題を生じる事がないと判断し、ぼかし処理を省くことができる。これらの処理の後で、最終的な画像加工方法を決定し、画像加工部１７に通知する（ステップＳ１４）。

画像加工部１７は、画像取得部１８から得られる画像を、画像処理領域生成部１６から得た画像加工方法によって処理し（ステップＳ１５）、通信部１１、及びネットワーク３０を介してクライアント装置５０に送信する（ステップＳ１６）。なお、複数の他人のプライベート領域に対しては、ＯＲ演算が行われ１つの領域として通知されるので、画像加工部１７は、その１つの領域に対して画像を処理すればよい。

次に、複数人が同一領域を自分のプライベート領域に指定した場合の動作について説明する。なお、明らかに他人が自分のプライベート領域を指定している場合は、その他人（または管理者）等に連絡し、プライベート領域の指定を変更してもらえばよい。また、自分のプライベート領域と、他人とのプライベート領域との重なり領域が誤差の範囲であれば、重なり領域を境界領域として、境界領域をぼかすなどで対応すればよい。また、自分のプライベート領域と、他人とのプライベート領域との重なり領域が、一定量以上の範囲であれば、重なり領域を自分のプライベート領域として扱うことができる。

複数人が同一領域を自分のプライベート領域に指定する場合としては、２世帯住宅や集合住宅で共有部分を、複数人がプライベート領域に指定する場合が想定される。この場合、同一範囲に他人のプライベート領域が指定されていても、自分のプライベート領域を指定した場合は、自分のプライベート領域の指定を優先すればよい。例えば、プライベート領域保存部１４には、ユーザＩＤが異なるが、同一領域を指定した２つのプライベート領域が保存されていることを想定する（例えば、図７Ａ参照）。なお、領域ＩＤは、同一領域に同一の領域ＩＤが設定されてもよいし、異なる領域ＩＤが設定されてもよい。この場合、画像処理領域生成部１６は、プライベート領域保存部１４を参照して、認証されたユーザＩＤに対応した領域を優先して、プライベート領域として扱う。

また、複数人が同一領域を自分のプライベート領域に指定する場合としては、画像処理ルールのうち、領域属性情報管理テーブルを用いて、複数人で共有部分をプライベート領域として扱うように設定してもよい。すなわち、領域属性情報管理テーブルにおいて、共有部分を表す領域ＩＤに、追加許可ＩＤを設定することで、共有部分を複数人がプライベート領域に指定することができる。図７Ｂに示す例では、領域ＩＤが「１」の領域に、追加許可ユーザＩＤの「５７０」と「５７１」とが設定されている。

また、画像処理ルールのうち、領域種別プライバシーレベル管理テーブルに、領域種別として「グループ領域」を追加してもよい（例えば、図７Ｃ参照）。グループ領域とは、複数人が監視対象として指定できる領域である。また、画像処理ルールのうち、領域属性情報管理テーブルに、領域種別を追加する（例えば、図７Ｄ参照）。この場合、プライベート領域保存部１４に保存されているプライベート領域として、一人のユーザ（ユーザＩＤ「５６８」）が、プライベート領域の領域ＩＤ「１」と、グループ領域の領域ＩＤ「２」の両方を持てるものとする（例えば、図７Ｅ参照）。グループ領域の領域ＩＤを複数人が指定することで、グループ領域を複数人で共有し、解像度レベルを変更することができる。

以上により、画像配信装置１００は、ユーザに対して、ユーザのプライベート領域と、ユーザ以外の他人のプライベート領域と、パブリック領域等を区別し、それぞれの領域に対して最適な解像度で画像処理し、あるいはぼかし処理などを行い、画像を配信することができる。これにより、ユーザのプライベート領域、公共の領域であるパブリック領域などに応じてセキュリティと、プライバシーの保護を両立しつつ、適切な画像の配信を行うことができる。例えば、配信要求したユーザは、ユーザ自身のプライベート領域は高解像度な画像で隅々まで確認することができると共に、公共の道路については、他人のプライバシーにも一定の配慮を行い、低解像度で確認することができる。

また、プライベート領域は、各ユーザが登録するため、他人に見えて欲しくない領域は必要十分にカバーされると共に、配信される画像を見るユーザは、どの領域が誰のプライバシーに関係する領域であるのかを知らなくても、他人のプライバシーに関係のない全ての領域を見ることができる。また、プライベート領域が、小さく写されているため、十分既にプライバシーに配慮されている状態では、ぼかし処理を行わないようにすることもできる。

なお、プライベート領域保存部１４は、任意のプライベート領域間の重なり部分、あるいはその周辺を含む領域を、境界領域として認識し、画像処理領域生成部１６に伝えてもよい。また、プライベート領域間の境界領域の検出は、画像処理領域生成部１６が、プライベート領域のデータを基に行ってもよい。画像処理領域生成部１６は、境界領域に対する処理を画像処理レベル保存部１５から取得し、当該取得した内容に応じて画像加工部１７は境界領域の画像を処理してもよい。図５Ａに示す例では、境界領域については、中程度の解像度で表示されるため、プライバシーとセキュリティの保護に配慮した画像の配信が可能となる。

また、ユーザに配信する領域はユーザが指定した領域であるとしたが、例えば、図８に示すように、配信する領域に他人のプライベート領域のようにぼかされた領域５１が含まれる場合は、画像加工部１７は、ぼかされた領域５１を削除するように画像を加工してもよい。ぼかされた領域５１は、映像配信を受けるユーザにとって、意味のない部分になる。このため、画像配信装置１００は、ぼかされた領域５１を配信しないようにすることで、配信する矩形領域が小さくなる。このようにユーザにとって不要な領域を削除して配信することで、通信時間や、通信量の削減することが可能になる。

また、上述した説明では、プライベート領域として、図４Ａ及び図４Ｂに示すように、ユーザが二次元の直線、あるいは曲線で囲まれた領域を、プライベート領域保存部１４に登録することを説明した。しかし、画像配信装置１００ｂは、図９Ａに示すように、位置やカメラのパラメータが既知のステレオカメラで撮影したステレオ画像から３Ｄモデルを生成し、その３Ｄモデルを２Ｄのプライベート領域と付き合わせることで、ステレオ画像のどの領域がどのユーザのプライベート領域に属するものなのかを判定して、プライベート領域として保持してもよい。

図９Ｂは、画像配信装置１００ｂの構成の一例を示すブロック図である。図９Ｂにおいて、画像取得部２８は、ステレオカメラから構成される。プライベート領域登録部２９は、ステレオカメラで撮影されたステレオ画像から取得したプライベート領域を、プライベート領域保存部１４に保存する機能を有する。プライベート領域登録部２９は、例えば、ステレオ画像から生成された３ＤモデルのＸ座標、Ｙ座標を、予め保持しているプライベート領域のＸ座標、Ｙ座標と比較し、該当する３Ｄモデルでの点の集合を２次元画像に再度復元すると２次元の画像上で、どの領域がどのユーザのプライベート領域に対応するのか求め、プライベート領域保存部１４に登録する。このように、画像配信装置１００ｂは、ステレオカメラで撮影されたステレオ画像と、２Ｄのプライベート領域を示す地図とを用いてプライベート領域を登録することで、ユーザが毎回プライベート領域を登録する手間を省くことが可能となる。

（第２の実施形態）
図１０は、本発明の第２の実施形態に係る画像配信装置２００の構成の一例を示すブロック図である。図１０において、画像配信装置２００は、第１の実施形態に係る画像配信装置１００と比較して、パブリック領域保存部１９をさらに備える。パブリック領域保存部１９は、画像処理領域生成部１６で作成された、ユーザＩＤと、ユーザの配信希望領域に対応するパブリック領域とを保存する。画像配信装置２００において、図１および図２と同じ構成要素については同じ参照符号を用い、説明を省略する。

図１１は、パブリック領域保存部１９に保存されているパブリック領域を示すデータの一例である。図１１に示すように、ユーザＩＤが「５６８」のユーザが、左上のＸ座標、Ｙ座標、横幅、高さが、それぞれ（１０、１０、３０、５０）の領域を要求した場合、その時のパブリック領域をパブリック領域保存部１９に保存しておく。この場合、パブリック領域ＩＤを「５００」として、家の前のパブリック領域が保存されている。そして、画像処理領域生成部１６は、同じユーザによって同じ配信希望領域が要求された場合、再度パブリック領域を計算するのではなく、このパブリック領域保存部１９に保存された領域のデータを利用する。画像加工部１７は、画像処理領域生成部１６から通知されるパブリック領域に応じて、画像を処理する。

以上の構成により、パブリック領域保存部１９に保存されているパブリック領域のデータを使用することで、毎回ユーザからの要求を受け付けてパブリック領域を計算するよりは、高速にパブリック領域を求めることができ、処理の高速化を行うことができる。

なお、パブリック領域保存部１９では、パブリック領域のみを保存するのではなく、その領域の加工方法や、あるいは境界領域やその加工方法なども同時に保存してもよい。

（第３の実施形態）
第３の実施形態に係る画像配信装置３００は、ユーザからの要求に応じて、カメラがズームや移動しながら撮影することが可能である。図１２は、本発明の第３の実施形態に係る画像配信装置３００の構成の一例を示すブロック図である。図１２において、画像配信装置３００は、第１の実施形態に係る画像配信装置１００と比較して、撮影位置検出部２０をさらに備える。撮影位置検出部２０は、カメラがズームや移動した際に、カメラの撮影位置を検出する。画像取得部３８は、通信部１１等を介して入力されたカメラをズームや移動させる指示に従って、カメラの撮影位置を変化させる。画像配信装置３００において、図１および図２と同じ構成要素については同じ参照符号を用い、説明を省略する。

画像配信装置３００は、カメラがズームや移動しながら撮影する場合、例えば、以下の２つの方法を用いて、カメラの撮影位置を検出することができる。第１の方法では、撮影位置検出部２０は、図１３Ａに示すように、カメラの基本位置において、撮影領域内の基準画像５０２を予め保存しておく。次に、カメラがズームや移動して撮影領域が変化した場合、撮影位置検出部２０は、画像認証処理により撮影領域内で基準画像５０２がどのように変化したかを判定し、基準画像５０２の変化からカメラの撮影位置を検出する。

第２の方法では、撮影位置検出部２０は、図１３Ｂに示すように、カメラの基本位置において、任意の対象の点と、カメラの撮影位置との相対関係（例えば、対象の点とカメラとの距離等）を保持しておく。次に、撮影位置検出部２０は、カメラのパンなどによる移動角度から、移動後の対象の点とカメラとの相対関係を求める。次に、その相対関係の変化と、カメラの焦点距離などカメラの固有のパラメータとを用いて、対象の点が画像のどこの位置に変換されるのかを計算で求める。これにより、撮影位置検出部２０は、カメラの撮影位置を検出する。

以上により、画像配信装置３００は、カメラがズームや移動しながら撮影する場合も、撮影位置検出部２０がカメラの撮影位置を検出するので、ユーザのプライベート領域と、ユーザ以外のプライベート領域と、パブリック領域とを区別し、それぞれの領域に対して最適な解像度で画像処理し、あるいはぼかし処理などを行い、画像を配信することができる。

（第４の実施形態）
第４の実施形態に係る画像配信装置４００は、目標物を発見した場合に、目標物については、他人のプライベート領域と重なっている場合であっても、高解像度の画像（または、自分のプライベート領域と同様に処理された画像）を配信することが可能である。図１４は、本発明の第４の実施形態に係る画像配信装置４００の構成の一例を示すブロック図である。図１４において、画像配信装置４００は、第１の実施形態に係る画像配信装置１００と比較して、画像登録部２１を備える点がさらに備える。以下、目標物が不審者であるときの処理について説明する。

画像配信装置４００は、図１５に示すように、他人のプライベート領域５０４に不審者５０３が重なっている場合、不審者５０３については、高解像度の画像を配信する。画像登録部２１には、例えば、図１６に示すように、関係者の顔画像のデータベースが登録されている。関係者の顔画像は、画像登録部２１に予め登録されていてもよいし、通信部１１を介して、クライアント装置５０から登録されてもよい。なお、画像配信装置４００は、他人のプライベート領域５０４に不審者５０３が重なっている場合だけに限らず、プライバシー保護のために、プライベート領域よりも解像度を低下させた（すなわち、不鮮明な）画像処理レベルが設定された領域に不審者５０３が重なっている場合にも、不審者５０３については、高解像度の画像を配信してもよい。

図１７は、画像配信装置４００が画像を配信する時の動作の一例を示すフローチャートである。図１７を参照して、ステップＳ１０〜Ｓ１３、及びステップＳ１４〜Ｓ１７までの動作は、第１の実施形態と同様であるので説明を省略する。ステップＳ２１において、画像処理領域生成部１６は、他人のプライベート領域５０４に重なって人物の顔画像が撮影されているか否かを判定する。人物の顔画像が撮影されていなければ（ステップＳ２１：Ｎｏ）、ステップＳ１４に遷移し、第１の実施形態と同様の処理を行う。

一方、人物の顔画像が撮影されていれば（ステップＳ２１：Ｙｅｓ）、撮影された人物の顔画像が、画像登録部２１に登録された関係者の顔画像のいずれかに一致するか否かを判定する（ステップＳ２２）。撮影された人物の顔画像が関係者の顔画像のいずれにも一致しない場合は（ステップＳ２２：Ｎｏ）、画像処理領域生成部１６は、撮影された人物を不審者５０３と判定し、不審者５０３（または不審者５０３が撮影された領域）を高解像度で画像処理することを決定する（ステップＳ２３）。一方、撮影された人物の顔画像が関係者の顔画像のいずれかと一致する場合は（ステップＳ２２：Ｙｅｓ）、画像処理領域生成部１６は、撮影された人物を関係者と判定し、他人のプライベート領域５０４と同様に画像処理することを決定する。

なお、画像配信装置４００は、不審者５０３の顔画像が予め分かっている場合は、不審者５０３の顔画像を画像登録部２１に登録し、不審者５０３を直接に捜すものであってもよい。不審者５０３の顔画像は、画像登録部２１に予め登録されていてもよいし、通信部１１を介して、クライアント装置５０から登録されてもよい。この場合、画像処理領域生成部１６は、画像処理方法を決定する際に、他人のプライベート領域５０４に重なって人物の顔画像が撮影されていれば、撮影された人物の顔画像が、画像登録部２１に登録された不審者５０３の顔画像のいずれかに一致するか否かを判定する。

撮影された人物の顔画像が不審者５０３の顔画像に一致する場合は、画像処理領域生成部１６は、撮影された人物を不審者５０３と判定し、不審者５０３（または不審者５０３が撮影された領域）を高解像度で画像処理することを決定する。一方、撮影された人物の顔画像が不審者５０３の顔画像と一致しない場合は、画像処理領域生成部１６は、撮影された人物を不審者５０３以外であると判定し、他人のプライベート領域５０４と同様に画像処理することを決定する。

なお、図１８に示すように、領域種別プライバシーレベル管理テーブルには、領域種別として、不審者領域が登録されていてもよい。この場合、画像処理領域生成部１６は、不審者５０３（または不審者５０３が撮影された領域）を、領域種別プライバシーレベル管理テーブルに従った、レベルで画像処理することを決定する。なお、目標物は、不審者に限られるものではなく、例えば、特定の人物や動物、あるいは特定の車両等であってもよい。

以上の構成により、画像配信装置４００は、目標物を発見した場合に、目標物については、他人のプライベート領域と重なっている場合であっても、高解像度の画像を配信することが可能である。

また、本発明の各実施形態において開示された画像配信装置が備える各機能ブロックが実行するそれぞれの処理手順は、記憶装置（ＲＯＭ、ＲＡＭ、ハードディスク等）に格納された上述した処理手順を実行可能な所定のプログラムデータが、ＣＰＵによって解釈実行されることで実現されてもよい。この場合、プログラムデータは、記憶媒体を介して記憶装置内に導入されてもよいし、記憶媒体上から直接実行されてもよい。なお、記憶媒体は、ＲＯＭやＲＡＭやフラッシュメモリ等の半導体メモリ、フレキシブルディスクやハードディスク等の磁気ディスクメモリ、ＣＤ−ＲＯＭやＤＶＤやＢＤ等の光ディスクメモリ、及びメモリカード等をいう。また、記憶媒体は、電話回線や搬送路等の通信媒体を含む概念である。

また、本発明の各実施形態において開示された画像配信装置が備える各機能ブロックは、集積回路であるＬＳＩにより実現されてもよい。例えば、図１９を参照して、画像配信装置１００において、認証部１２、切り出し領域保存部１３、プライベート領域保存部１４、画像処理レベル保存部１５、及び画像処理領域生成部１６は、集積回路により構成されてもよい。これらは個別に１チップ化されてもよいし、一部または全てを含むように１チップ化されてもよい。このＬＳＩは、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。

また、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサが利用されてもよい。あるいは、ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサが利用されてもよい。また、プロセッサやメモリ等を備えたハードウエア資源においてプロセッサがＲＯＭに格納された制御プログラムを実行する構成が用いられてもよい。

さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術等が適応され得る。

本発明に係る画像配信装置は、画像をプライバシーに配慮して加工する機能を有し、セキュリティカメラや監視システム等として有用である。

１００、２００，３００，４００ 画像配信装置
１１ 通信部
１２ 認証部
１３ 切り出し領域保存部
１４ プライベート領域保存部
１５ 画像処理レベル保存部
１６ 画像処理領域生成部
１７ 画像加工部
１８，２８，３８ 画像取得部
１９ パブリック領域保存部
２０ 撮影位置検出部
２１ 画像登録部
３０ ネットワーク
５０ クライアント装置

Claims (19)

1. クライアント装置に撮影した画像を配信する画像配信装置であって、
   前記クライアント装置と通信する通信部と、
   前記画像を取得する画像取得部と、
   ユーザのプライバシーに関わる領域であるプライベート領域を保存するプライベート領域保存部と、
   前記通信部を介して、前記クライアント装置から受け取った画像の配信要求に含まれる情報からユーザを認証する認証部と、
   前記認証されたユーザの配信希望領域を切り出し領域として保存する切り出し領域保存部と、
   前記認証されたユーザのプライベート領域、前記認証されたユーザ以外の他人のプライベート領域、及びプライベート領域間の境界領域の、それぞれに対する画像処理レベルを定めた画像処理ルールを保存する画像処理レベル保存部と、
   前記切り出し領域保存部から前記認証されたユーザの切り出し領域を取得し、当該取得した切り出し領域の画像に関して、前記プライベート領域保存部から前記認証されたユーザのプライベート領域と、前記認証されたユーザ以外の他人のプライベート領域とを取得し、前記画像処理レベル保存部から前記画像処理ルールを取得し、当該取得した画像処理ルールに応じて、前記切り出し領域の各領域について、画像処理方法を決定する画像処理領域生成部と、
   前記画像処理領域生成部が決定した画像処理方法に応じて、前記画像取得部が取得した画像を加工する画像加工部とを備える、画像配信装置。
2. 前記他人のプライベート領域に対する画像処理レベルは、プライバシー保護のため、前記認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである、請求項１に記載の画像配信装置。
3. 前記画像処理レベル保存部は、前記認証されたユーザのプライベート領域と、前記他人のプライベート領域とが近接している領域とその近辺の領域については、前記境界領域に対する画像処理レベルを前記画像処理領域生成部に通知し、
   前記境界領域に対する画像処理レベルは、プライバシー保護のため、前記認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである、請求項１に記載の画像配信装置。
4. 前記画像処理レベル保存部は、前記認証されたユーザのプライベート領域と、前記他人のプライベート領域とが重なっている領域とその近辺の領域については、前記境界領域に対する画像処理レベルを前記画像処理領域生成部に通知し、
   前記境界領域に対する画像処理レベルは、プライバシー保護のため、前記認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである、請求項１に記載の画像配信装置。
5. 前記画像処理レベル保存部は、全てのプライベート領域以外からなるパブリック領域に対する画像処理レベルを定めた画像処理ルールを保持し、
   前記パブリック領域に対する画像処理レベルは、プライバシー保護のため、前記認証されたユーザのプライベート領域よりも不鮮明な画像処理レベルである、請求項１に記載の画像配信装置。
6. 前記画像処理領域生成部は、前記画像処理レベル保存部から取得した前記画像処理ルールに応じて、前記認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、前記他人のプライベート領域に対しては、低解像度で画像処理することを決定する、請求項２に記載の画像配信装置。
7. 前記画像処理領域生成部は、前記画像処理レベル保存部から取得した前記画像処理ルールに応じて、前記認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、前記境界領域に対しては、低解像度で画像処理することを決定する、請求項３又は４に記載の画像配信装置。
8. 前記画像処理領域生成部は、前記認証されたユーザの前記切り出し領域の中から前記全てのプライベート領域以外からなるパブリック領域を算出し、前記画像処理レベル保存部から取得した前記画像処理ルールに応じて、前記認証されたユーザのプライベート領域に対しては、高解像度で画像処理し、前記パブリック領域に対しては、低解像度で画像処理することを決定する、請求項５に記載の画像配信装置。
9. 関係者の顔画像が登録される画像登録部をさらに備え、
   前記画像処理領域生成部は、前記他人のプライベート領域に重なって撮影された人物の顔画像が、前記画像登録部に登録された関係者の顔画像と一致しないときに、前記撮影された人物を不審者であると判定し、前記不審者を高解像度で画像処理することを決定する、請求項６に記載の画像配信装置。
10. 前記画像処理レベル保存部は、前記不審者に対する画像処理レベルを定めた画像処理ルールをさらに保持し、
    前記画像処理領域生成部は、前記不審者に対する画像処理レベルに応じて、前記不審者の画像処理レベルを決定する、請求項９に記載の画像配信装置。
11. 前記認証されたユーザのＩＤと、前記認証されたユーザの配信希望領域とに対応した前記パブリック領域を保存するパブリック領域保存部をさらに備え、
    前記画像処理領域生成部は、同じユーザによって同じ配信希望領域が要求された場合、前記パブリック領域保存部から、前記認証されたユーザのＩＤと、前記認証されたユーザの配信希望領域とに対応した前記パブリック領域を読み出し、当該読み出したパブリック領域に対して、前記画像処理することを決定する、請求項８に記載の画像配信装置。
12. 前記画像処理レベル保存部は、前記プライベート領域に対応した解像度閾値を保持し、
    前記画像処理領域生成部は、前記他人のプライベート領域の大きさが前記解像度閾値よりも小さい場合には、前記他人のプライベート領域に対しては、プライバシー保護のために、低解像度で画像処理しないことを決定する、請求項６に記載の画像配信装置。
13. 前記画像処理レベル保存部は、前記プライベート領域に対応した追加許可ユーザＩＤを保持し、
    前記画像処理領域生成部は、画像配信先のユーザＩＤが、前記追加許可ユーザＩＤと一致する場合には、前記他人のプライベート領域に対しては、低解像度で画像処理しないことを決定する、請求項６に記載の画像配信装置。
14. 前記切り出し領域保存部は、前記認証されたユーザから、刻々と変わる前記配信希望領域を受け付け、当該受け取った領域に応じて、前記切り出し領域を変更する、請求項１に記載の画像配信装置。
15. 前記画像取得部はステレオ画像を取得し、
    前記画像取得部が取得したステレオ画像から三次元モデルを作成し、二次元のプライベート領域が書かれた地図データとの対応付けを行うことで、前記ステレオ画像の各領域が各ユーザのプライベート領域であるのかを判定し、当該判定したプライベート領域を前記プライベート領域保存部に登録するプライベート領域登録部をさらに備える、請求項１に記載の画像配信装置。
16. 前記画像加工部は、ユーザに送信する画像データの周辺部分がプライバシーを保護するための画像処理されていることを検出すると、その部分を削除して前記通信部に通知する、請求項１に記載の画像配信装置。
17. クライアント装置に撮影した画像を配信する画像配信装置が実行する方法であって、
    前記画像配信装置は、
    ユーザのプライバシーに関わる領域であるプライベート領域を保存するプライベート領域保存部と、
    ユーザに配信する画像の切り出し領域を保存する切り出し領域保存部と、
    前記認証されたユーザのプライベート領域、前記認証されたユーザ以外の他人のプライベート領域、及びプライベート領域間の境界領域の、それぞれに対する画像処理レベルを定めた画像処理ルールを保存する画像処理レベル保存部とを備え、
    前記画像を取得するステップと、
    前記クライアント装置から受け取った画像の配信要求に含まれる情報からユーザを認証するステップと、
    前記認証されたユーザの配信希望領域を前記切り出し領域として、前記切り出し領域保存部に保存するステップと、
    前記切り出し領域保存部から前記認証されたユーザの切り出し領域を取得し、当該取得した切り出し領域の画像に関して、前記プライベート領域保存部から前記認証されたユーザのプライベート領域と、前記認証されたユーザ以外の他人のプライベート領域とを取得し、前記画像処理レベル保存部から前記画像処理ルールを取得し、当該取得した画像処理ルールに応じて、前記切り出し領域の各領域について、画像処理方法を決定するステップと、
    前記画像処理方法に応じて、前記取得した画像を加工するステップとを備える、方法。
18. クライアント装置に撮影した画像を配信する画像配信装置が実行するプログラムであって、
    前記画像配信装置は、
    ユーザのプライバシーに関わる領域であるプライベート領域を保存するプライベート領域保存部と、
    ユーザに配信する画像の切り出し領域を保存する切り出し領域保存部と、
    前記認証されたユーザのプライベート領域、前記認証されたユーザ以外の他人のプライベート領域、及びプライベート領域間の境界領域の、それぞれに対する画像処理レベルを定めた画像処理ルールを保存する画像処理レベル保存部とを備え、
    前記画像を取得するステップと、
    前記クライアント装置から受け取った画像の配信要求に含まれる情報からユーザを認証するステップと、
    前記認証されたユーザの配信希望領域を前記切り出し領域として、前記切り出し領域保存部に保存するステップと、
    前記切り出し領域保存部から前記認証されたユーザの切り出し領域を取得し、当該取得した切り出し領域の画像に関して、前記プライベート領域保存部から前記認証されたユーザのプライベート領域と、前記認証されたユーザ以外の他人のプライベート領域とを取得し、前記画像処理レベル保存部から前記画像処理ルールを取得し、当該取得した画像処理ルールに応じて、前記切り出し領域の各領域について、画像処理方法を決定するステップと、
    前記画像処理方法に応じて、前記取得した画像を加工するステップとを実行する、プログラム。
19. クライアント装置に撮影した画像を配信する画像配信装置が備える集積回路であって、
    前記画像配信装置は、
    前記クライアント装置と通信する通信部と、
    前記画像を取得する画像取得部とを備え、
    前記集積回路は、
    ユーザのプライバシーに関わる領域であるプライベート領域を保存するプライベート領域保存部と、
    前記通信部を介して、前記クライアント装置から受け取った画像の配信要求に含まれる情報からユーザを認証する認証部と、
    前記認証されたユーザの配信希望領域を切り出し領域として保存する切り出し領域保存部と、
    前記認証されたユーザのプライベート領域、前記認証されたユーザ以外の他人のプライベート領域、及びプライベート領域間の境界領域の、それぞれに対する画像処理レベルを定めた画像処理ルールを保存する画像処理レベル保存部と、
    前記切り出し領域保存部から前記認証されたユーザの切り出し領域を取得し、当該取得した切り出し領域の画像に関して、前記プライベート領域保存部から前記認証されたユーザのプライベート領域と、前記認証されたユーザ以外の他人のプライベート領域とを取得し、前記画像処理レベル保存部から前記画像処理ルールを取得し、当該取得した画像処理ルールに応じて、前記切り出し領域の各領域について、画像処理方法を決定する画像処理領域生成部と、
    前記画像処理領域生成部が決定した画像処理方法に応じて、前記画像取得部が取得した画像を加工する画像加工部とを備える、集積回路。

Images