JP2010056768A - 撮影システム並びに当該撮影システムを構成する撮影装置及び操作装置 - Google Patents

Abstract

【課題】遠隔撮影をネットワークを介して行ってもユーザーの意図したタイミングの画像を高画質を維持して撮影すること。
【解決手段】第２のカメラ１０２は、第１のカメラ１０１から送信されたライブビュー画像データＦ１の中から任意の画像データを撮影選択画像データＨとして選択して第１のカメラ１０１に送信し、一方、第１のカメラ１０１は、被写体像の連続撮影を行って取得された画像データを例えば一時記憶画像データｆ１〜ｆ３として一時的に記憶し、かつライブビュー画像データＦ１を順次第２のカメラ１０２に送信し、第２のカメラ１０２から送信された撮影選択画像データＨと一時記憶画像データｆ１〜ｆ３との相関性を検出し、撮影選択画像データＨに対して相関性が最も高い例えば一時記憶画像データｆ３を抽出画像データとして抽出して第２のカメラ１０２に送信する。
【選択図】図１

Description

本発明は、被写体像を撮影する撮影装置と、この撮影装置を操作する操作装置とをネットワークを介してデータ通信可能とする撮影システム、並びに当該撮影システムを構成する撮影装置及び操作装置に関する。

近年、撮影装置であるデジタルカメラは、多種多様な通信インタフェースに対応するものが出回り始めている。特に無線により直接ネットワークに接続可能なデジタルカメラも登場している。
このようなデジタルカメラは、当該デジタルカメラを例えば操作者から遠隔地に設け、この遠隔地に設けられたデジタルカメラをネットワークを介して操作することにより撮影を行ったり、この撮影により取得された画像データをダウンロードする等の様々なメリットを有する。

しかしながら、遠隔地のデジタルカメラに対してネットワークを介して撮影を行う場合、デジタルカメラと操作側との間のネットワーク上のデータ通信に時間を要することからデジタルカメラと操作側との間でデータ通信に遅延が生じる。このネットワークのデータ通信の遅延の影響を受けて、遠隔地のデジタルカメラにより撮影を行う場合、この撮影の操作性が著しく低下することがある。
例えば、動いている被写体を撮影する場合、撮影側の撮像装置から送信された画像データがネットワークを介して撮影側に送られて被写体を画像として表示するので、撮影側の撮像装置により撮影する被写体の状況と、操作側で確認できる被写体の状況とに大きな時差が発生する。
ユーザーは、操作側で被写体像を確認しながら撮影側の撮像装置によって撮影を行うが、実際に撮影側で撮影が行われるのは、ユーザーが確認する時点の被写体の状況のよりも一定時間経過後の時点の被写体の状況を撮影することになる。このため、ユーザーの意図とは相違する被写体の状況の画像が撮影されてしまう。

このような問題を解決する技術として例えば特許文献１がある。この特許文献１は、画像を撮像する撮像装置と、この撮像装置とは別体の表示装置とを備え、撮像装置が画像を連続的に撮影し、表示装置に表示させるための表示用画像データと記憶保存するための記憶用画像データとを連続的に生成する工程と、撮像装置が記憶用画像データとその記憶用画像データを撮像したタイミングを示すタイミングデータとを関連づけてバッファに対し連続的に一時記憶する工程と、撮像装置が表示用画像データとその表示用画像データを撮像したタイミングを示すタイミングデータとを関連づけて連続的に表示装置に送信する工程と、表示装置が撮像装置から受信した表示用画像データに基づいた画像を表示している状態で撮像指示を受け付ける工程と、表示装置が撮像指示を受け付けた時点で表示装置に表示されていた画像を特定し、画像を撮像したタイミングを示すタイミングデータを撮像装置に送信する工程と、撮像装置が表示装置からタイミングデータを受信し、受信したタイミングデータに対応する記憶用画像データを前記バッファから読出して、画像保管手段に記憶する工程とを有することを開示する。これにより、特許文献１は、撮像装置（カメラ部）と表示装置（ビューア部）とが別体構成である無線通信カメラにおいて、ユーザーに十分なフレームレートのファインダー画像を提供しつつ、ユーザーが意図するタイミングにおける画像を撮影することを可能とする。
特開２００６−３２５１５０号公報

しかしながら、上記の如き無線通信カメラでは、ユーザーに見せるためのファインダー画像と、バッファに一時的に記憶される撮影画像が一対一で対応している必要がある。
一般的に電子ビューファインダーで違和感の無いファインダー画像を提供するためには、フレームレートが例えば３０フレーム／秒以上であることが良いとされる。一方、撮影により取得される画像データ（本画像データ）は、デジタルカメラの進歩に伴い、画素数が増大しており、一千万画素を超えるものも少なくない。このような多画素のデジタルカメラでは、ファインダー画像と同じ枚数の画像を連続撮影して一時蓄積することに課題が多い。例えば、１秒間に３０枚以上の画像を撮影する高速連写では、高価な撮像素子を必要としてコストアップに繋がる。又、連続撮影した多数の画像を一時保持するためにメモリの容量を増大しなければならず、このメモリの増大によるコストアップや、連続撮影による消費電力の増大がある。

本発明は、上記課題に着目してなされたもので、遠隔撮影をネットワークを介して行ってもユーザーの意図したタイミングの画像を高画質を維持して撮影できる撮影システム並びに当該撮影システムを構成する撮影装置及び操作装置を提供することを目的とする。

本発明の主要な局面に係る撮影システムは、被写体像を撮影する撮影装置と、この撮影装置をネットワークを介して操作する操作装置とを有する撮影システムであって、操作装置は、撮影装置から送信された画像データを順次受信する画像受信手段と、画像受信手段により受信した画像データの中から任意の画像データを選択画像データとして選択する画像選択手段と、画像選択手段において選択された選択画像データを撮影装置に送信する選択画像送信手段とを具備し、撮影装置は、被写体像の連続撮影を行う撮影手段と、撮影手段の撮影により取得された画像データを一時記憶画像データとして一時的に記憶する一時記憶手段と、撮影手段の撮影により取得された画像データを順次操作装置に送信する画像送信手段と、操作装置から送信された選択画像データを受信する選択画像受信手段と、一時記憶手段に記憶されている一時記憶画像データと選択画像受信手段により受信された選択画像データとの相関性を検出する相関性検出手段と、相関性検出手段により検出された相関性に基づいて選択画像データに対して相関性が最も高い一時記憶画像データを抽出画像データとして抽出する画像抽出手段と、画像抽出手段により抽出された抽出画像データを操作装置に送信する抽出画像送信手段とを具備する。

本発明の主要な局面に係る操作装置は、撮影装置をネットワークを介して操作するもので、撮影装置から送信された画像データを順次受信する画像受信手段と、画像受信手段により受信した画像データの中から任意の画像データを選択画像データとして選択する画像選択手段と、画像選択手段において選択された選択画像データを撮影装置に送信する選択画像送信手段とを具備する。

本発明の主要な局面に係る撮影装置は、操作装置からの操作をネットワークを介して受けるもので、被写体像の連続撮影を行う撮影手段と、撮影手段の撮影により取得された画像データを一時記憶画像データとして一時的に記憶する一時記憶手段と、撮影手段の撮影により取得された画像データを順次操作装置に送信する画像送信手段と、操作装置から送信された選択画像データを受信する選択画像受信手段と、一時記憶手段に記憶されている一時記憶画像データと選択画像受信手段により受信された選択画像データとの相関性を検出する相関性検出手段と、相関性検出手段により検出された相関性に基づいて選択画像データに対して相関性が最も高い一時記憶画像データを抽出画像データとして抽出する画像抽出手段と、画像抽出手段により抽出された抽出画像データを操作装置に送信する抽出画像送信手段とを具備する。

本発明によれば、遠隔撮影をネットワークを介して行ってもユーザーの意図したタイミングの画像を高画質を維持して撮影できる撮影システム並びに当該撮影システムを構成する撮影装置及び操作装置を提供できる。

以下、本発明の一実施の形態について図面を参照して説明する。
図１は無線通信機能を持つ例えば２つのカメラを用いてネットワークを経由して遠隔操作をする撮影システムの一例を示す。この撮影システムは、被写体像を撮影する撮影端末としての撮影装置、例えば第１のカメラ１０１と、この第１のカメラ１０１をネットワークを介して操作する操作端末としての操作装置、例えば第２のカメラ１０２とを有し、第１のカメラ１０１と第２のカメラ１０２とを無線ローカルエリアネットワーク（無線ＬＡＮ）を構成するルーター１０３を経由して接続している。

なお、この撮影システムは、第１のカメラ１０１と第２のカメラ１０２とをルーター１０３を経由して接続しているが、特にこれに限定するものでなく、例えばアドホックによる直接接続する通信、又はBLUETOOTH（登録商標）等でもよいし、有線接続であってもよい。又、第１のカメラ１０１と第２のカメラ１０２とは、同一機種、同一構成のカメラであってもよいし、機種等の異なるカメラであってもよい。第１と第２のカメラ１０１、１０２は、設定を変更することにより撮影端末又は操作端末のいずれにも成り得る。以下、第１と第２のカメラ１０１、１０２は、同一機種、同一構成のカメラとして説明する。

第１のカメラ１０１は、図１において、カメラ本体の正面側を示し、第２のカメラ１０２は、背面側を示す。これら第１及び第２のカメラ１０１の正面側には、撮影光学系２０１が設けられている。第１及び第２のカメラ１０１の背面側には、電子ファインダーとしての薄型フィルム液晶パネル（以下、ＴＦＴパネルと称する）２０５と、設定スイッチ２０８とが設けられている。又、第１及び第２のカメラ１０１の上面側には、アンテナ２０４ａと、レリーズボタン２０９とが設けられている。

次に、図２（ａ）乃至同図（ｄ）を参照して本撮影システムの遠隔操作による撮影の概略を４つのフェーズに分けて説明する。
先ず、待ち受け状態を同図（ａ）に示す。第１のカメラ１０１は、被写体を撮影して取得した画像データをライブビュー画像データＦ１として通信ネットワークを経由して第２のカメラ１０２に送信する。第２のカメラ１０２は、第１のカメラ１０１からのライブビュー画像データＦ１を受信し、電子ファインダーとしてのＴＦＴパネル２０５にリアルタイムでライブビュー画像を表示する。
ユーザーは、ＴＦＴパネル２０５にライブビュー画像を表示している状態で、電子ファインダーとしてのＴＦＴパネル２０５の視野を確認しながら撮影タイミングを待つ。

次に、撮影準備状態を同図（ｂ）に示す。第２のカメラ１０２は、ユーザーによるレリーズボタン２０９に対する半押し（１ｓｔレリーズ）を検知すると、第１のカメラ１０１に対して連続撮影開始指示Ｋを送信する。この連続撮影開始指示Ｋを受けた第１のカメラ１０１は、連続撮影を開始する。この状態で、ユーザーは、撮影タイミングに近づくと、レリーズボタン２０９を半押し（１ｓｔレリーズ）することにより撮影タイミングを待ち構える。

次に、撮影状態を同図（ｃ）に示す。第２のカメラ１０２は、ユーザーのレリーズボタン２０９の全押し（２ｎｄレリーズ）を検知すると、この検知時に、ＴＦＴパネル２０５に表示しているライブビュー画像を形成する１枚の画像データを保持すると共に、当該画像データを撮影選択画像データＨとして第１のカメラ１０１に送信する。このとき、第１のカメラ１０１は、第２のカメラ１０２からの撮影選択画像データＨを受信し、これと同時に連続撮影により取得した複数の画像データを例えば各一時記憶画像データｆ１〜ｆ３として蓄積する。

次に、撮影画像送信状態を同図（ｄ）に示す。第１のカメラ１０１は、第２のカメラ１０２から受信した撮影選択画像データＨと連続撮影により蓄積された各一時記憶画像データｆ１〜ｆ３とを比較し、相関が一番高い画像データ、例えば一時記憶画像データｆ３を選択し、当該一時記憶画像データｆ３を抽出画像データｆ３として第２のカメラ１０２に送信する。
第２のカメラ１０２は、第１のカメラ１０１から受信した抽出画像データｆ１を記録することで一連の遠隔操作での撮影を終える。

次に、具体的に第１と第２のカメラ１０１、１０２の内部構成について図３を参照して説明する。
第１と第２のカメラ１０１、１０２には、撮影光学系２０１が設けられている。この撮影光学系２０１は、被写体像を結像するもので、ズームレンズ群及びフォーカスレンズにより構成される。ＣＣＤ２０２は、被写体像の連続撮影を行う撮影手段として機能を有するもので、撮影光学系２０１により結像された被写体像を電気信号に変換する。

ＷＬＡＮモジュール２０４には、アンテナ２０４ａが接続されている。このＷＬＡＮモジュール２０４は、無線ＬＡＮを経由して第１又は第２のカメラ１０１、１０２との間でデータ通信するための通信モジュールである。
このＷＬＡＮモジュール２０４は、第１のカメラ１０１において、当該第１のカメラ１０１の撮影により取得されたライブビュー画像データＦ１を順次第２のカメラ１０２に送信する画像送信手段と、第２のカメラ１０２から送信された選択画像データＨを受信する選択画像受信手段と、システムコントローラ２０３のＣＰＵ３０２により抽出された例えば抽出画像データｆ３を第２のカメラ１０２に送信する抽出画像送信手段との機能を有する。
又、ＷＬＡＮモジュール２０４は、第２のカメラ１０２において、第１のカメラ１０１から送信されたライブビュー画像データＦ１を順次受信する画像受信手段と、システムコントローラ２０３のＣＰＵ３０２において選択された撮影選択画像データＨを第１のカメラ１０１に送信する選択画像送信手段と、第１のカメラ１０１から送信された例えば抽出画像データｆ３を受信する抽出画像受信手段との機能を有する。

ＴＦＴパネル２０５は、被写体像の画像、撮影により取得される画像及びユーザーによって設定を行う際に、当該第１又は第２のカメラ１０１、１０２の状態やメニューを表示する。このＴＦＴパネル２０５は、第２のカメラ１０２において、第１のカメラ１０１から送信されたライブビュー画像データＦ１をリアルタイムで順次表示する画像表示手段としての機能を有する。
メモリカード２０６は、撮影により取得した本画像データを記録する。システムメモリ２０７は、ＣＣＤ２０２の撮影により取得された画像データを一時記憶画像データ、例えば一時記憶画像データｆ１〜ｆ３として一時的に記憶するもので、撮影時の本画像データやライブビュー画像データＦ１を一時的に記憶したり、又当該第１又は第２のカメラ１０１、１０２の撮影動作を行わせるためのプログラムなどを保持する。システムコントローラ２０３は、当該第１又は第２のカメラ１０１、１０２内の各部の制御を行う。
設定スイッチ２０８は、当該第１又は第２のカメラ１０１、１０２の動作に係る各種設定、カメラ動作の選択を行うためのスイッチである。
レリーズボタン２０９は、当該第１又は第２のカメラ１０１、１０２の各撮影の開始を指示する。第２のカメラ１０２におけるレリーズボタン２０９は、第１のカメラ１０１に対して連続撮影開始の指示Ｋを行う開始指示手段としての機能を有する。第１のカメラ１０１は、第２のカメラ１０２からの連続撮影開始の指示Ｋを受けると、この指示Ｋに応答して被写体像の連続撮影を開始する。

図４はシステムコントローラ２０３の内部の詳細な構成図を示す。このシステムコントローラ２０３は、システムバス３００を備える。このシステムバス３００には、各機能を持った機能ブロックとして例えば、ＣＣＤコントローラ３０１と、ＣＰＵ３０２と、画像処理部３０３と、ＬＣＤコントローラ３０４と、ＳＤＲＡＭコントローラ３０５と、通信インタフェース３０６と、相関検出回路３０７と、メモリカードインタフェース３０８とが接続されている。

ＣＰＵ３０２は、システムコントローラ２０３内の各ブロック、すなわち画像処理部３０３と、ＬＣＤコントローラ３０４と、ＳＤＲＡＭコントローラ３０５と、通信インタフェース３０６と、相関検出回路３０７と、メモリカードインタフェース３０８とを制御する。
第２のカメラ１０２におけるＣＰＵ３０２は、第１のカメラ１０１から受信したライブビュー画像データＦ１の中から任意の画像データを撮影選択画像データＨとして選択する画像選択手段の機能を有する。この画像選択手段としてのＣＰＵ３０２は、レリーズボタン２０９が全押し（２ｎｄレリーズ）された時点で、ＴＦＴパネル２０５に表示されていたライブビュー画像データＦ１を撮影選択画像データＨとして選択する。

第１のカメラ１０１におけるＣＰＵ３０２は、相関検出回路３０７により検出された相関性に基づいて撮影選択画像データＨに対して相関性が最も高い例えば一時記憶画像データｆ３を抽出画像データとして抽出する画像抽出手段としての機能を有する。この画像抽出手段としてのＣＰＵ３０２は、画像処理部３０３により生成された複数の相関検出用画像データのうち撮影選択画像データＨに対して相関性が最も高い相関検出用画像データに対応する例えば一時記憶画像データｆ３を抽出画像データとして抽出する。

ＳＤＲＡＭコントローラ３０５は、各機能ブロックから要求に応じてシステムメモリ２０７に各種データを書き込んだり、読み出したりする。
ＣＣＤコントローラ３０１は、ＣＣＤ２０２により被写体像を光電変換した電気信号を画像データとして読み出し、この画像データをＳＤＲＡＭコントローラ３０５を経由してシステムメモリ２０７に格納するための制御を行う。このとき、ＣＣＤコントローラ３０１は、ライブビュー映像の読み出しの動作と本撮影の動作とでそれぞれ読み出し方式を変更する。すなわち、ＣＣＤコントローラ３０１は、ライブビュー映像の読み出しの場合、ＣＣＤ２０２からの映像データに対して間引きや画素平均等の処理を行わせて画像データのデータ量を削減するモードで撮影させる。又、ＣＣＤコントローラ３０１は、本撮影の読み出し動作の場合、ＣＣＤ２０２の全画素からの画像データを読み出す。

画像処理部３０３は、画像データに対するフィルタ処理や画像の圧縮、ＴＦＴパネル２０５における画像の表示に対応した画像フォーマット（ＴＦＴフォーマット）への変換等の様々な画像処理を行う。当該第１又は第２のカメラ１０１、１０２における画像処理部３０３の処理は、例えばローパスフィルタ、ＪＰＥＧ圧縮、ＴＦＴフォーマット変換を行う。この画像処理部３０３の処理結果は、ＳＤＲＡＭコントローラ３０５を経由してシステムメモリ２０７に記録される。
又、画像処理部３０３は、第１のカメラ１０１において、システムメモリ２０７に記憶されている例えば一時記憶画像データｆ１〜ｆ３に基づいて相関検出用画像データを生成する相関検出画像生成手段としての機能を有する。
又、画像処理部３０３は、第１のカメラ１０１において、ＣＣＤ２０２の撮影により取得された画像データを第２のカメラ１０２に送信するに適した形式の送信画像データに生成する送信画像生成手段としての機能を有する。

ＬＣＤコントローラ３０４は、画像処理部３０３によりＴＦＴフォーマットに変換された画像データを同期信号に合わせてＴＦＴパネル２０５に表示出力するための制御を行う。又、ＬＣＤコントローラ３０４は、ＴＦＴフォーマットに変換された画像データに対してＴＦＴパネル２０５の特性に合わせてガンマ補正を行う。

メモリカードインタフェース３０８は、本撮影により取得された画像データをメモリカード２０５に記録させる。このメモリカードインタフェース３０８は、第２のカメラ１０２において、第１のカメラ１０１から送られてきた画像データをメモリカード２０５に記録する。
通信インタフェース３０６は、ＷＬＡＮモジュール２０４との間で通信を行い、ルーター１０３を有する無線ＬＡＮに接続された外部機器、ここでは第１のカメラ１０１、第２のカメラ１０２との間でデータの送受信を行う。例えば、第１のカメラ１０１の通信インタフェース３０６であれば、第２のカメラ１０２との間でデータの送受信を行う。第２のカメラ１０２の通信インタフェース３０６であれば、第１のカメラ１０１との間でデータの送受信を行う。

相関検出回路３０７は、第１のカメラ１０１において、一時記憶手段であるシステムメモリ２０７に格納された例えば一時記憶画像データｆ１〜ｆ３とＷＬＡＮモジュール２０４により受信された第１のカメラ１０１からの撮影選択画像データＨとを比較し、その相関性を検出し、相関値を算出するする相関性検出手段としての機能を有する。すなわち、相関検出回路３０７は、画像処理部３０３により生成された複数の相関検出用画像データと、ＷＬＡＮモジュール２０４により受信された第１のカメラ１０１から撮影選択画像データＨとの相関性を検出する。

次に、上記の如く構成された操作端末としての第２のカメラ１０２の動作について図５に示す操作端末側の制御フローチャートに従って説明する。
第２のカメラ１０２は、遠隔撮影モードを開始する。この遠隔撮影モードは、ＴＦＴパネル２０５上にメニューを表示した状態で、ユーザーの操作によって確認をしながら設定スイッチ２０８を操作して、ネットワーク上の機器、ここでは第１のカメラ１０１を選択することにより設定される。
一方、第１のカメラ１０１は、遠隔操作を受け入れる状態に設定する。

第２のカメラ１０２は、遠隔撮影モードを開始すると、先ず、ステップＳ１０１において、レリーズボタン２０９が半押し（１ｓｔレリーズ）の状態になるのを待つ。なお、第２のカメラ１０２は、遠隔撮影モード中、常に、第１のカメラ１０１からのライブビュー画像データＦ１を受信し、このライブビュー画像データＦ１の画像をＴＦＴパネル２０５に表示する。すなわち、第２のカメラ１０２のＷＬＡＮモジュール２０４は、アンテナ２０４ａを通して第１のカメラ１０１から送信されたライブビュー画像データＦ１を順次受信する。画像処理部３０３は、ＷＬＡＮモジュール２０４により受信したライブビュー画像データＦ１をＴＦＴパネル２０５における画像の表示に対応した映像フォーマット（ＴＦＴフォーマット）への変換等を行う。ＬＣＤコントローラ３０４は、画像処理部３０３によりＴＦＴフォーマットに変換された映像データを同期信号に合わせてＴＦＴパネル２０５に表示出力する。

レリーズボタン２０９が半押し（１ｓｔレリーズ）の状態になったことを検知すると、第２のカメラ１０２は、ステップＳ１０２に移り、第１のカメラ１０１に対して連続撮影開始指示Ｋのコマンドを発行する。
次に、第２のカメラ１０２は、ステップＳ１０３において、レリーズボタン２０９が全押し（２ｎｄレリーズ）の状態になるのを待つ。レリーズボタン２０９が全押し（２ｎｄレリーズ）されなければ、第２のカメラ１０２は、ステップＳ１０４に移り、半押し（１ｓｔレリーズ）の状態が継続中であるか否かを確認する。この確認の結果、半押し（１ｓｔレリーズ）が継続中であれば、第２のカメラ１０２は、ステップＳ１０３に戻り、レリーズボタン２０９が全押し（２ｎｄレリーズ）の状態になるのを待つ。半押し（１ｓｔレリーズ）が中断されると、第２のカメラ１０２は、ステップＳ１０５に移り、撮影端末としての第１のカメラ１０１に対して連続撮影の停止を指示するコマンドを発行する。

全押し（２ｎｄレリーズ）が押されると、第２のカメラ１０２のＣＰＵ３０２は、ステップＳ１０３からステップＳ１０６に移り、ＴＦＴパネル２０５に表示しているライブビュー画像データＦ１中から全押し（２ｎｄレリーズ）が押された時の画像データを撮影選択画像データＨとして選択する。
次に、第２のカメラ１０２のＷＬＡＮモジュール２０４は、ステップＳ１０７において、撮影選択画像データＨを第１のカメラ１０１に送信する。

次に、第２のカメラ１０２のＷＬＡＮモジュール２０４は、ステップＳ１０８において、第１のカメラ１０１から送られてくる抽出画像データｆ３を受信する。そして、第２のカメラ１０２のメモリカードインタフェース３０８は、抽出画像データｆ３をメモリカード２０５に記録する。

次に、上記の如く構成された撮影端末としての第１のカメラ１０１の動作について図６に示す撮影端末側の制御フローチャートに従って説明する。
第１のカメラ１０１は、ユーザーの設定により遠隔撮影を受け入れる状態に設定される。この設定が完了すると、第１のカメラ１０１は、ステップＳ２０１において、第２のカメラ１０２からのコマンドの受信を待つ。このコマンドが連続撮影開始指示Ｋでなければ、第１のカメラ１０１は、所定の処理を行い、ステップＳ２０１におけるコマンド受信状態に戻る。

コマンドが半押し（１ｓｔレリーズ）に対応する連続撮影開始指示Ｋであれば、第１のカメラ１０１は、ステップＳ２０３において、被写体像の撮影を行う。すなわち、ＣＣＤ２０２は、撮影光学系２０１により結像された被写体像を電気信号に変換する。
第１のカメラ１０１のＣＣＤコントローラ３０１は、ステップＳ２０４において、ＣＣＤ２０２により被写体像を光電変換した電気信号を画像データとして読み出し、この画像データをＳＤＲＡＭコントローラ３０５を経由してシステムメモリ２０７に格納させる。

次に、第１のカメラ１０１は、ステップＳ２０５において、コマンドを受信したか否かを確認する。この確認の結果、コマンドを受信しなければ、第１のカメラ１０１は、ステップＳ２０３に戻り、被写体の撮影を繰り返す。
コマンドを受信すると、第１のカメラ１０１は、ステップＳ２０６に移り、このコマンドが連続撮影停止であれば、ステップＳ２０１のコマンド受信待ちに戻る。

これに対してコマンドが撮影指示であれば、第１のカメラ１０１は、ステップＳ２０７からステップＳ２０８に移り、撮影を停止し、第２のカメラ１０２から撮影選択画像データＨを受信する。
次に、第１のカメラ１０１の相関検出回路３０７は、ステップＳ２０９において、システムメモリ２０７に格納された一時記憶画像データｆ１〜ｆ３とＷＬＡＮモジュール２０４により受信された第１のカメラ１０１からの画像選択画像データＨとを比較し、その相関性を検出し、相関値を算出する。そして、相関検出回路３０７は、撮影選択画像データＨと各一時記憶画像データｆ１〜ｆ３との比較の結果、相関が一番高い画像、例えば一時記憶画像データｆ３を選択する。

次に、第１のカメラ１０１のＷＬＡＮモジュール２０４は、ステップＳ２１０において、選択された一時記憶画像データｆ３を抽出画像データｆ３として第２のカメラ１０２に送信する。この第２のカメラ１０２は、第１のカメラ１０１から受信した抽出画像データｆ３を記録することで一連の遠隔操作での撮影を終える。

次に、本撮影システムにおける画像データの流れについて図７（ａ）（ｂ）乃至図８を参照して説明する。
図７（ａ）（ｂ）は第２のカメラ１０２及び第１のカメラ１０１における各画像データの流れのシーケンスを示すもので、同図（ａ）はライブビュー画像生成時の撮影端末での画像データの流れのシーケンスを示し、同図（ｂ）は撮影時の撮影端末側でのデータの流れを示し、図８は操作端末での画像データの受信の流れのシーケンスを示す。
本撮影システムは、ライブビュー画像を例えば３０ｆｐｓで提供しつつ、連続撮影を例えば１０ｆｐｓで行っている。従って、本撮影システムは、図７（ａ）に示すライブビュー画像生成時のシーケンスを２回実行し、これに対して同図（ｂ）に示す撮影時のシーケンスを１回実行することを１秒間に１０回繰り返す。一方、操作端末側は、図８に示す画像データの受信のシーケンスを１秒間に３０回繰り返す。

先ず、図７（ａ）を参照してライブビュー画像生成時の撮影端末でのデータの流れについて説明する。
第１のカメラ１０１のＣＣＤ２０２により被写体像から画像データが生成される（Ｓ３０１）。
次に、ＣＣＤコントローラ３０１によりＣＣＤ２０２からの画像データの間引き読み出しを行ってデータ量を少なくした画像データを読み出す（Ｓ３０２）。この間引き処理は、ライブビュー画像データＦ１をＴＦＴパネル２０５に表示するときに、高精細である必要がないためである。又、画像データに対する間引き処理に限定するものではなく画素平均読み出し等を行ってもよい。

その後、第１のカメラ１０１の画像処理部３０３により画像データをフォーマット変換、ここではベイヤー配列の画像をＲＧＢの画像データに変換する（Ｓ３０３）。
さらに、第１のカメラ１０１の画像処理部３０３により画像データに対して間引きによる画質劣化を防止するためローパスフィルタ処理を行い（Ｓ３０４）、次に、画像データに対して表示用の画像フォーマットへの変換を行う（Ｓ３０５）。
次に、第１のカメラ１０１のＷＬＡＮモジュール２０４により表示用の画像フォーマットに変換された画像データをアンテナ２０４ａから第２のカメラ１０２に送信する。

ここで、表示用の画像フォーマット変換について説明する。
表示用の画像フォーマットとは、画像データを操作端末としての第２のカメラ１０２におけるＴＦＴパネル２０５に入力するためのデータ形式に変換することである。ＴＦＴパネル２０５が例えば４８０×２４０画素のデジタルＴＦＴの場合、図９に示すように各画素のＲ（赤）Ｇ（緑）Ｂ（青）の各色の成分を間引くことが可能である。この間引き処理は、例えば１画素目においてＧ１、Ｂ１色の成分を間引いてＲ１色の成分を残し、２画素目においてＲ２、Ｂ２色の成分を間引いてＧ２色の成分を残す。以下同様に、ＲＧＢ色のうち２成分を間引いて１成分を残す。この結果、ＷＬＡＮモジュール２０４により送信する画像データのデータ量は、１／３に抑えることができる。操作端末のＴＦＴパネル２０５の情報は、操作端末側で遠隔撮影モードに入り、撮影端末を指定する際に合せてＴＦＴパネル２０５の情報も通知する。

次に、図７（ｂ）を参照してライブビュー映像生成時の撮影端末でのデータの流れについて説明する。
第１のカメラ１０１のＣＣＤ２０２により被写体像から画像データが生成される（Ｓ３１１）。
次に、第１のカメラ１０１のＣＣＤコントローラ３０１によりＣＣＤ２０２からフルサイズの画像データを読み出す（Ｓ３１２）。
次に、第１のカメラ１０１の画像処理部３０３によりＣＣＤ２０２から読み出したフルサイズの画像データをベイヤー配列からＲＧＢへのフォーマット変換を行う（Ｓ３１３）。
次に、第１のカメラ１０１の画像処理部３０３によりフォーマット変換された画像データを記録用として圧縮処理、例えばＪＰＥＧ処理を施して一時記憶画像データを生成する（Ｓ３１５）。
これと共に、第１のカメラ１０１の画像処理部３０３によりフォーマット変換された画像データからライブビュー映像を生成するために、画像処理部３０３により画像データに対して間引き処理を行う（Ｓ３１４）。この間引き処理は、上記間引き処理（Ｓ３０２）と同等の間引き処理である。

次に、第１のカメラ１０１の画像処理部３０３により間引き処理された画像データに対してローパスフィルタによるフィルタ処理を施し（Ｓ３１６）、この後、表示用の画像フォーマットに変換する（Ｓ３１７）。
この表示用の画像データは、ＷＬＡＮモジュール２０４を経由して操作端末としての第２のカメラ１０２に送信される（Ｓ３１８）。
これと共に、表示用の画像データは、上記一時記憶画像データと関連付けられてシステムメモリ２０７に一時記録される（Ｓ３１９）。これは、第２のカメラ１０２からの撮影選択画像データＨを受信した際、例えば記録された一時記憶画像データｆ１〜ｆ３と受信した撮影選択画像データＨとの相関をとり、相関が最も高かった例えば一時記憶画像データｆ３を選択し、この選択した一時記憶画像データｆ３を第２のカメラ１０２に送り返すためである。なお、撮影選択画像データＨは、レリーズボタン２０９が押された時点でのＴＦＴパネル２０５上に表示されている１枚の画像データに対応するシステムメモリ２０７上のデータである。

次に、図８を参照して操作端末での撮影データの受信の流れについて説明する。
第２のカメラ１０２におけるＷＬＡＮモジュール２０４より抽出画像データｆ３を受信し（Ｓ３２１）、この抽出画像データｆ３をＳＤＲＡＭコントローラ３０５に経由してシステムメモリ２０７上に展開する（Ｓ３２２）。
次に、ＬＣＤコントローラ３０４によりシステムメモリ２０７上の抽出画像データｆ３をＳＤＲＡＭコントローラ３０５を経由して読み出し、この抽出画像データｆ３に対してＴＦＴパネル２０５に合わせたガンマ補正を施す（Ｓ３２３）。
このガンマ補正の施された抽出画像データｆ３をＴＦＴパネル２０５に表示する（Ｓ３２４）。

このように上記一実施の形態によれば、撮影端末としての第１のカメラ１０１と、操作端末としての第２のカメラ１０２とを備え、第２のカメラ１０２は、第１のカメラ１０１から送信されたライブビュー画像データＦ１を順次受信し、この受信したライブビュー画像データＦ１の中からレリーズボタン２０９が全押し（２ｎｄレリーズ）された時点で、ＴＦＴパネル２０５に表示されていたライブビュー画像データＦ１を撮影選択画像データＨとして選択し、この選択された撮影選択画像データＨを第１のカメラ１０１に送信し、一方、第１のカメラ１０１は、ＣＣＤ２０２により被写体像の連続撮影を行って取得された画像データを例えば一時記憶画像データｆ１〜ｆ３として一時的に記憶し、かつＣＣＤ２０２の撮影により取得されたライブビュー画像データＦ１を順次第２のカメラ１０２に送信し、第２のカメラ１０２から送信された撮影選択画像データＨを受信すると、当該撮影選択画像データＨと例えば一時記憶画像データｆ１〜ｆ３との相関性を検出し、この相関性に基づいて撮影選択画像データＨに対して相関性が最も高い例えば一時記憶画像データｆ３を抽出画像データとして抽出し、この抽出された抽出画像データｆ３を第２のカメラ１０２に送信する。

これにより、撮影端末としての第１のカメラ１０１の撮影動作を無線ローカルエリアネットワークを介して操作端末としての第２のカメラ１０２により遠隔操作して撮影してもユーザーの意図したタイミングの被写体の画像の画質を高く維持して撮影できる。無線ローカルエリアネットワークを介することにより第１のカメラ１０１と第２のカメラ１０２とのデータ通信の遅延が大きい場合でも、操作端末としての第２のカメラ１０２で確認した撮影タイミングとずれが生じることがなく、シャッターチャンスを外してしまうことを防止できる。

相関検出回路３０７は、撮影端末としての第１のカメラ１０１において、システムメモリ２０７に格納された例えば一時記憶画像データｆ１〜ｆ３とＷＬＡＮモジュール２０４により受信された第１のカメラ１０１からの撮影選択画像データＨとを比較し、その相関性を検出し、ＣＰＵ３０２は、相関検出回路３０７により検出された相関性に基づいて撮影選択画像データＨに対して相関性が最も高い例えば一時記憶画像データｆ３を抽出画像データとして抽出する。これにより、相関用に事前にデータ量の小さい画像データとして一時記憶画像データｆ１〜ｆ３をシステムメモリ２０７に記憶するので、撮影選択画像データＨに対して相関性が最も高い例えば抽出画像データｆ３を抽出する際に、相関演算負荷や通信負荷を抑えることができレスポンスが速くなり、操作性を向上することができる。

第１のカメラ１０１は、撮影した映像をライブビュー画像データＦ１として通信ネットワークを経由し第２のカメラ１０２に送信し、この第２のカメラ１０２は、第１のカメラ１０１からのライブビュー画像データＦ１を受信し、電子ファインダーとしてのＴＦＴパネル２０５にライブビュー画像を表示する。これにより、ユーザーが遠隔地にある被写体を確認できない場合でも、ユーザーは、ライブビュー画像によって被写体の状況を確認しながら最適な撮影タイミングを得ることができる。

又、画像処理部３０３は、撮影端末としての第１のカメラ１０１において、ＣＣＤ２０２の撮影により取得された画像データを第２のカメラ１０２に送信するに適した形式の送信画像データに生成する。これにより、第２のカメラ１０２に送信するに適した表示形式に合わせて送信データ量を削減できる。
ユーザーによりレリーズボタン２０９を半押し（１ｓｔレリーズ）することにより、第１のカメラ１０１は、連続撮影を開始する。これにより、連続撮影を行う期間を制限することができ、消費電力を低減できる。

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
例えば、上記一実施の形態では、カメラ１０１、１０２同士での組み合わせであったが、操作端末は、カメラに限定されるものでなく、例えばパーソナルコンピュータ（ＰＣ）や携帯電話機などであっても良い。
又、レリーズボタン２０９は、別に設けても良いし、例えばパーソナルコンピュータ（ＰＣ）であれば、同ＰＣの液晶ディスプレイ等の表示装置の表示画面上に表示されるウインドウ上に構成してもよい。この場合、半押し（１ｓｔレリーズ）は、ウインドウ上のスイッチにマウスポインタが重なった時で、全押し（２ｎｄレリーズ）は、スイッチが押された時としても良い。

本発明に係る無線通信機能を持つ例えば２つのカメラを用いてネットワークを経由して遠隔操作をする撮影システムの一実施の形態を示す構成図。 同撮影システムにおける遠隔操作による撮影の概略の４つのフェーズを示す図。 同撮影システムの撮影端末と操作端末とに用いる各カメラ内部の概略構成を示す図。 同撮影システムの各カメラにおけるシステムコントローラの内部の詳細な構成図。 同撮影システムにおける操作端末の第２のカメラの制御フローチャート。 同撮影システムにおける撮影端末の第１のカメラの制御フローチャート。 同撮影システムにおける操作端末としての第２のカメラ及び撮影端末としての第１のカメラにおける各画像データの流れのシーケンスを示す図。 同撮影システムにおける操作端末での撮影データの受信の流れのシーケンスを示す図。 同撮影システムにおける画像データの各画素の間引き処理の一例を示す図。

符号の説明

１０１：第１のカメラ、１０２：第２のカメラ、１０３：ルーター、２０１：撮影光学系、２０４ａ：アンテナ、２０９：レリーズボタン、２０５：ＴＦＴパネル、２０８：設定スイッチ、２０９：レリーズボタン、２０４：ＷＬＡＮモジュール、２０３：システムコントローラ、３０２：ＣＰＵ、２０６：メモリカード、２０７：システムメモリ、２０２：ＣＣＤ、２０８：設定スイッチ、２０９：レリーズボタン、３００：システムバス、３０１：ＣＣＤコントローラ、３０２：ＣＰＵ、３０３：画像処理部、３０４：ＬＣＤコントローラ、３０５：ＳＤＲＡＭコントローラ、３０６：通信インタフェース、３０７：相関検出回路、３０８：メモリカードインタフェース。

Claims (7)

1. 被写体像を撮影する撮影装置と、この撮影装置をネットワークを介して操作する操作装置とを有する撮影システムにおいて、
   前記操作装置は、前記撮影装置から送信された画像データを順次受信する画像受信手段と、
   前記画像受信手段により受信した前記画像データの中から任意の画像データを選択画像データとして選択する画像選択手段と、
   前記画像選択手段において選択された前記選択画像データを前記撮影装置に送信する選択画像送信手段と、
   を具備し、
   前記撮影装置は、前記被写体像の連続撮影を行う撮影手段と、
   前記撮影手段の撮影により取得された前記画像データを一時記憶画像データとして一時的に記憶する一時記憶手段と、
   前記撮影手段の撮影により取得された前記画像データを順次前記操作装置に送信する画像送信手段と、
   前記操作装置から送信された前記選択画像データを受信する選択画像受信手段と、
   前記一時記憶手段に記憶されている前記一時記憶画像データと前記選択画像受信手段により受信された前記選択画像データとの相関性を検出する相関性検出手段と、
   前記相関性検出手段により検出された前記相関性に基づいて前記選択画像データに対して前記相関性が最も高い前記一時記憶画像データを抽出画像データとして抽出する画像抽出手段と、
   前記画像抽出手段により抽出された前記抽出画像データを前記操作装置に送信する抽出画像送信手段と、
   を具備することを特徴とする撮影システム。
2. 前記撮影装置は、前記一時記憶手段に記憶されている前記一時記憶画像データに基づいて相関検出用画像データを生成する相関検出画像生成手段を備え、
   前記相関性検出手段は、前記相関検出画像生成手段により生成された複数の前記相関検出用画像データと前記選択画像受信手段により受信された前記選択画像データとの相関性を検出し、
   前記画像抽出手段は、前記複数の前記相関検出用画像データのうち前記選択画像データに対して前記相関性が最も高い前記相関検出用画像データに対応する前記一時記憶画像データを前記抽出画像データとして抽出する、
   ことを特徴とする請求項１記載の撮影システム。
3. 前記操作装置は、前記画像受信手段により受信された前記画像データを順次表示する画像表示手段を備え、
   前記画像選択手段は、前記画像表示手段に表示されている前記画像データの中から任意の画像データを前記選択画像データとして選択する、
   ことを特徴とする請求項１記載の撮影システム。
4. 前記撮影装置は、前記撮影手段の撮影により取得された前記画像データを前記操作装置に送信するに適した形式の送信画像データに生成する送信画像生成手段を備え、
   前記画像送信手段は、前記送信画像生成手段により生成された前記送信画像データを順次前記操作装置に送信する、
   ことを特徴とする請求項１記載の撮影システム。
5. 前記操作装置は、前記撮影装置に対して撮影開始の指示を行う開始指示手段を備え、
   前記撮影装置は、前記操作装置からの前記撮影開始の指示に応答して前記被写体像の連続撮影を開始する、
   ことを特徴とする請求項１記載の撮影システム。
6. 撮影装置をネットワークを介して操作する操作装置において、
   前記撮影装置から送信された画像データを順次受信する画像受信手段と、
   前記画像受信手段により受信した前記画像データの中から任意の画像データを選択画像データとして選択する画像選択手段と、
   前記画像選択手段において選択された前記選択画像データを前記撮影装置に送信する選択画像送信手段と、
   を具備することを特徴とする操作装置。
7. 操作装置からの操作をネットワークを介して受ける撮影装置において、
   被写体像の連続撮影を行う撮影手段と、
   前記撮影手段の撮影により取得された画像データを一時記憶画像データとして一時的に記憶する一時記憶手段と、
   前記撮影手段の撮影により取得された前記画像データを順次前記操作装置に送信する画像送信手段と、
   前記操作装置から送信された前記選択画像データを受信する選択画像受信手段と、
   前記一時記憶手段に記憶されている前記一時記憶画像データと前記選択画像受信手段により受信された前記選択画像データとの相関性を検出する相関性検出手段と、
   前記相関性検出手段により検出された前記相関性に基づいて前記選択画像データに対して前記相関性が最も高い前記一時記憶画像データを抽出画像データとして抽出する画像抽出手段と、
   前記画像抽出手段により抽出された前記抽出画像データを前記操作装置に送信する抽出画像送信手段と、
   を具備することを特徴とする撮影装置。

Images