JP7617833B2 - 通信システム - Google Patents

Description

本発明は、通信システムに関する。

従来、車両に搭載されるドライブレコーダーに、移動体の外部の画像収集装置と通信する機能を備えて、ドライブレコーダーによる撮影画像を画像収集装置に送信するようにしたシステムが提案されている（例えば、特許文献１参照）。このシステムでは、撮影画像を、事故の検出の他に、定点観測、迷子の捜索、火災現場の状況確認等の用途に用いている。

特開２００３－８７６１５号公報

上述した従来技術による場合には、得られる画像がドライブレコーダーに備えられた固定アングルのカメラにより撮影される画像に限定される。そのため、広範囲にわたる撮像画像を収集することが難しいという不都合がある。全方位カメラを用いることも考えられるが、装置コストの上昇、画像処理の複雑化等の不都合が生じる。
本発明はかかる背景に鑑みてなされたものであり、多様なアングルによる周辺の撮影画像を、コストを抑えたシンプルな構成によって取得可能な通信システムを提供することを目的とする。

上記目的を達成するための第１態様として、第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、前記第１撮影デバイス及び前記第２撮影デバイスによる撮影を同期させて行うための同期撮影時点を決定する同期撮影時点決定部と、を備え、前記通信制御部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末に対して、前記同期撮影時点を示す同期撮影時点情報を前記第１通信により送信し、前記同期撮影時点情報に基づいて前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信し、前記画像処理部は、前記同期撮影時点に前記第１撮影デバイスにより撮影された前記第１撮影画像のデータと、前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータとに基づいて、前記所定の画像処理を実行する通信システムが挙げられる。

上記通信システムにおいて、前記画像処理部は、前記所定の画像処理として、前記第１撮影画像のデータと前記第２撮影画像のデータとを関連付けた統合画像データを生成する処理を実行する構成としてもよい。

上記通信システムにおいて、前記通信制御部は、前記統合画像データを、前記第２通信により前記通信装置に送信する構成としてもよい。

上記目的を達成するための第２態様として、移動体において使用され、第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、前記移動通信端末が前記移動体の所定箇所に位置しているか否かを認識する移動通信端末位置認識部と、を備え、前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信し、前記移動通信端末位置認識部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の台数に応じて、前記所定箇所を設定する通信システムが挙げられる。

上記目的を達成するための第３態様として、移動体において使用され、第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、前記移動通信端末が前記移動体の所定箇所に位置しているか否かを認識する移動通信端末位置認識部と、を備え、前記移動通信端末位置認識部は、前記移動通信端末が前記移動体の前記所定箇所に位置していることを認識したときに、前記移動通信端末の姿勢を認識し、前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が所定姿勢で前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する通信システムが挙げられる。

上記通信システムにおいて、前記移動通信端末の性能を認識する移動通信端末性能認識部を備え、前記通信制御部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の性能が所定性能であると、前記移動通信端末性能認識部により認識された場合に、前記第２撮影画像のデータを前記第１通信により前記移動通信端末から受信する構成としてもよい。

上記目的を達成するための第４態様として、第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、を備え、前記通信部は、複数の前記移動通信端末との間の前記第１通信により、複数の前記移動通信端末について前記中継通信を実行し、前記通信制御部は、前記中継通信のための前記第１通信が確立されている複数の前記移動通信端末に備えられた前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信する通信システムが挙げられる。
上記目的を達成するための第５態様として、移動体において使用され、第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、前記移動通信端末が前記移動体の所定箇所に位置しているか否かを、前記移動体に備えられて前記移動体の室内を撮影する室内カメラによる撮影画像から認識する移動通信端末位置認識部と、を備え、前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する通信システムが挙げられる。

上記通信システムを、カメラ又はドライブレコーダーにより構成してもよい。

上記通信システムによれば、多様なアングルによる周辺の撮影画像を、コストを抑えたシンプルな構成によって取得することができる。

図１は、ドライブレコーダーの使用態様の説明図である。 図２は、ドライブレコーダーの構成図である。 図３は、撮影画像の提供処理の第１のフローチャートである。 図４は、撮影画像の提供処理の第２のフローチャートである。

［１．ドライブレコーダーの使用態様］
図１を参照して、本開示の通信システムの構成の一例であるドライブレコーダー１の使用態様について説明する。ドライブレコーダー１は、車両１００に装着して使用され、カメラにより車両１００の周辺や車両１００の車室内を撮影する機能を有している。車両１００は本開示の移動体に相当する。

ドライブレコーダー１は、セルラー（Cellular）通信と、Ｗｉ－Ｆｉ（登録商標）通信を行う機能を有している。ドライブレコーダー１は、各セルの基地局３００との間でセルラー通信を行うことにより、或いは道路近傍のＷｉ－Ｆｉスポットに設置されたルーター３１０との間でＷｉ－Ｆｉ通信を行うことにより、広域ネットワーク５００を介して外部通信装置（本開示の通信装置に相当する）との間で通信行う。図１では、外部通信装置として、画像管理サーバー５１０と情報提供サーバー５２０を例示している。

さらに、ドライブレコーダー１は、車両１００に乗車している利用者Ｕ１，Ｕ２により使用される移動通信端末５１，５２との間でＷｉ－Ｆｉ通信を確立して、車内Ｗｉ－Ｆｉのネットワーク環境を実現するＷｉ－Ｆｉルーターの機能を有している。移動通信端末５１，５２は、Ｗｉ－Ｆｉ通信機能を有する、スマートフォン、携帯電話、タブレット端末、携帯ゲーム機等である。移動通信端末５１，５２にはカメラ５１ａ，５２ａがそれぞれ備えられている。

ドライブレコーダー１は、Ｗｉ－Ｆｉルーターとして機能することにより、車内Ｗｉ－Ｆｉのネットワーク及び広域ネットワーク５００を介して、移動通信端末５１，５２と、画像管理サーバー５１０、情報提供サーバー５２０等の外部通信装置との間の通信を可能とする。利用者Ｕ１，Ｕ２は、移動通信端末５１，５２がセルラー通信機能を有していない場合であっても、ドライブレコーダー１により提供される車内Ｗｉ－Ｆｉの環境を利用して、例えば、情報提供サーバー５２０との間で通信を行って情報を取得することができる。

また、ドライブレコーダー１の車内Ｗｉ－Ｆｉのネットワーク環境により、車両１００の付近の車外の移動通信端末５３，５４，５５との間で通信することも可能である。図１では、歩道に佇む利用者Ｕ３が使用している移動通信端末５３、及び対向車両１１０に乗車している利用者Ｕ４，Ｕ５が使用している移動通信端末５４，５５と、ドライブレコーダー１との間で、車内Ｗｉ－Ｆｉによる無線通信が確立された状況を例示している。移動通信端末５３～５５には、カメラ５３ａ～５５ａがそれぞれ備えられている。

ドライブレコーダー１は、カメラによる撮影画像を、広域ネットワーク５００を介して画像管理サーバー５１０に送信する。画像管理サーバー５１０は、ドライブレコーダー１から受信した撮影画像を用いて、事故の解析、定点観測、道路設備の点検等の処理を行う。

ここで、ドライブレコーダー１と移動通信端末５１～５５との間の無線通信は、本開示の第１通信に相当し、ドライブレコーダー１と画像管理サーバー５１０、情報提供サーバー５２０等の外部通信装置との間の無線通信は、本開示の第２通信に相当する。第１通信と第２通信により、移動通信端末５１～５５と外部通信装置との間の通信を中継する中継通信が実行される。移動通信端末５１～５５にそれぞれ備えられたカメラ５１ａ～５５ａは、本開示の第２撮影デバイスに相当する。

［２．ドライブレコーダーの構成］
図２を参照して、ドライブレコーダー１の構成について説明する。ドライブレコーダー１は、プロセッサ１０、メモリ２０、ＮＡＤ（Network Access Device）３０、アンテナ３１、フロントカメラ３２、リアカメラ３３、車内カメラ３４、ＧＮＳＳ（Global Navigation Satellite System）センサ３５、加速度センサ３６、スイッチ３７、及びディスプレイ３８を備えている。フロントカメラ３２、リアカメラ３３、車内カメラ３４は、本開示の第１撮影デバイスに相当する。

ＮＡＤ３０は、セルラー方式の通信モジュールとＷｉ－Ｆｉ方式の通信モジュールを統合したチップ（chip）である。アンテナ３１は、セルラー通信とＷｉ－Ｆｉ通信に対応した兼用アンテナである。ＮＡＤ３０とアンテナ３１により、本開示の通信部が構成される。

フロントカメラ３２は、車両１００の前方周辺を撮影して、撮影画像をプロセッサ１０に出力する。リアカメラ３３は、車両１００の後方周辺を撮影して、撮影画像をプロセッサ１０に出力する。車内カメラ３４は、車両１００の車室内を撮影して、撮影画像をプロセッサに出力する。なお、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４の全てではなく、例えば、フロントカメラ３２のみを備える構成であってもよい。

ＧＮＳＳセンサ３５は、測位衛星からの電波を受信してドライブレコーダー１の現在位置（緯度、経度）を検出し、位置検出信号をプロセッサ１０に出力する。加速度センサ３６は、ドライブレコーダー１に生じる加速度を検出し、加速度検出信号をプロセッサ１０に出力する。加速度センサ３６は、例えば、直交３軸方向の加速度を検出する。スイッチ３７は、利用者Ｕ１，Ｕ２による操作に応じた操作信号をプロセッサ１０に出力する。ディスプレイ３８は、プロセッサ１０からの制御入力に応じて、ドライブレコーダー１の動作状況等を表示する。

プロセッサ１０は、メモリ２０に保存されたドライブレコーダー１の制御用プログラム２１を読み込んで実行することにより、撮影制御部１１、通信制御部１２、画像処理部１４、同期撮影時点決定部１５、移動通信端末位置認識部１７、計時部１８、及び速度認識部１９として機能する。

撮影制御部１１は、所定の撮影タイミングで、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４の少なくともいずれかによる撮影を行って、撮影した画像（第１撮影画像）のデータを、メモリ２０の撮影画像エリア２２に保存する。撮影タイミングとしては、例えば、以下（１）～（３）のタイミングが設定されている。
（１）車両１００が事故に遭遇した時。
撮影制御部１１は、車両１００が事故に遭遇したことを、加速度センサ３６による所定閾値以上のレベルの加速度の検出によって認識する。なお、車両１００に装着されたエアバッグ等に備えられている衝撃センサによる衝撃検出信号に基づいて、車両１００が事故に遭遇したことを認識するようにしてもよい。

（２）車両１００が定点を走行する時。
撮影制御部１１は、ＧＮＳＳセンサ３５により検出されるドライブレコーダー１の現在位置から、車両１００が予め設定された定点を走行していることを認識する。定点としては、例えば、交通渋滞が発生し易い地点、メンテナンスの対象である道路設備（道路標識、電柱等）が所在する地点、観光スポット等が設定される。

（３）車両１００が撮影要請地点を走行する時。
撮影制御部１１は、画像管理サーバー５１０から送信される撮影要請地点の情報を受信することによって撮影要請地点を認識し、ＧＮＳＳセンサ３５により検出されるドライブレコーダー１の現在位置から、車両１００が撮影要請地点を走行していることを認識する。撮影要請地点としては、例えば、他車両による事故の発生現場、火災発生現場、迷子の発生現場等が設定される。

通信制御部１２は、ＮＡＤ３０による車内Ｗｉ－Ｆｉ通信と広域ネットワーク５００を介した外部通信装置との通信の制御を行う。通信制御部１２は、車内Ｗｉ－Ｆｉの情報データと撮影画像のデータとを併せたデータをパケット化し、パケット通信により広域ネットワーク５００を介して外部通信装置との間の通信を行う。この処理により、パケットにより送信される撮像画像等の情報データに付加される制御用データのオーバーヘッド（overhead）分が減縮（shrink）されて通信量が減少するため、利用者Ｕ１，Ｕ２が負担する通信コストを低減することができる。

通信制御部１２は、移動通信端末５１，５２により撮影された画像（第２撮影画像）のデータを、第１通信により移動通信端末５１，５２から受信する。通信制御部１２が第２撮影画像のデータを取得する処理については、後述する。画像処理部１４は、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４により撮影された画像（第１撮影画像）のデータと、通信制御部１２が受信した第２撮影画像のデータが関連付けて記録された統合画像データを生成する。画像処理部１４が、統合画像データを生成する処理は、本開示の所定の画像処理に相当する。

同期撮影時点決定部１５は、ドライブレコーダー１におけるフロントカメラ３２、リアカメラ３３、及び車内カメラ３４による撮影時点と、移動通信端末５１，５２におけるカメラ５１ａ，５２ａによる撮影時点とを同期させて実行するための同期撮影時点を決定する。通信制御部１２は、画像処理部１４により生成された統合画像データを、ＮＡＤ３０により、広域ネットワーク５００を介して画像管理サーバー５１０に送信する。

移動通信端末位置認識部１７は、車内カメラ３４により撮影される車両１００の車室内の画像から、車室内で使用されている移動通信端末５１、５２が、所定箇所に位置しているか否かを判定する。所定箇所は、例えば、移動通信端末用のホルダの装着箇所（座席のヘッドレストのネック部等）である。図１では、移動通信端末５２が所定箇所に位置している状況を例示している。

計時部１８は、現在の日時を計時する処理を行う。撮影制御部１１は、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４による撮影画像に、計時部１８により計時される撮影時点の日時の情報を付加した第１撮影画像のデータを、メモリ２０の撮影画像エリア２２に保存する。速度認識部１９は、車両１００に備えられた車速センサによる速度検出信号Ｖｃａｒを受信することによって、車両１００の走行速度（移動速度）を認識する。ドライブレコーダー１は、車両１００に備えられたＥＣＵ（Electronic Control Unit）との間で、有線或いは無線通信を行うことにより、速度検出信号Ｖｃａｒを受信する。速度認識部１９は、撮影画像に対して所定の画像処理を行うことによって車両１００の走行速度（移動速度）を認識してもよい。

［３．撮影画像の提供処理］
図３～図４に示したフローチャートに従って、ドライブレコーダー１により実行される撮影画像の提供処理について説明する。

図３のステップＳ１で、撮影制御部１１は、上記（１）～（３）のいずれかの撮影タイミングになったときに、ステップＳ２に処理を進める。ステップＳ２で、撮影制御部１１は、ＮＡＤ３０との間で車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末があるか否かを判断する。そして、撮影制御部１１は、車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末があるときはステップＳ３に処理を進め、車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末がないときにはステップＳ２０に処理を進める。

ステップＳ２０で、撮影制御部１１は、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４のうちの少なくともいずれかによる撮影を行い、撮影した第１撮影画像のデータをメモリ２０の撮影画像エリア２２に保存する。続くステップＳ２１で、通信制御部１２は、第１撮影画像のデータを、ＮＡＤ３０により画像管理サーバー５１０に送信し、図４のステップＳ１１に処理を進める。この場合は、ドライブレコーダー１により撮影された第１撮影画像のデータのみが、画像管理サーバー５１０に送信される。

また、ステップＳ３で、移動通信端末位置認識部１７は、車内カメラ３４の撮影画像から移動通信端末の画像部分を抽出することにより、車両１００の車室内における移動通信端末の位置を認識する。図１の例では、車両１００の車室内で使用されている移動通信端末５１，５２の位置が認識される。次のステップＳ４で、移動通信端末位置認識部１７は、移動通信端末の位置が、上述した所定箇所であるか否かを判定する。

図１の例では、移動通信端末５２が所定箇所に位置していると判定される。そして、移動通信端末位置認識部１７は、移動通信端末の位置が所定箇所であるときはステップＳ５に処理を進め、移動通信端末の位置が所定箇所でないときにはステップＳ２０に処理を進める。ステップＳ５で、同期撮影時点決定部１５は、ステップＳ１で認識された撮影タイミングに基づいて、ドライブレコーダー１と移動通信端末による撮影を同期させて行うための同期撮影時点を決定する。続くステップＳ６で、通信制御部１２は、同期撮影時点を通知する同期撮影時点通知情報を、ＮＡＤ３０による車内Ｗｉ－Ｆｉ通信によって、移動通信端末５２に送信する。

移動通信端末５２は、ドライブレコーダー１から送信された同期撮影時点通知情報を受信したときに、同期撮影時点通知情報から同期撮影時点を認識し、同期撮影時点になった時にカメラ５２ａによる撮影を行う。そして、移動通信端末５２は、撮影した第２撮影画像のデータを、ＮＡＤ３０による車内Ｗｉ－Ｆｉ通信によりドライブレコーダー１に送信する。なお、ドライブレコーダー１及び移動通信端末５２による撮影は、同期撮影時点の前後にわたる期間における動画撮影或いは連続画像の撮影であってもよい。

図３のフローチャートに戻り、通信制御部１２と撮影制御部１１は、ステップＳ７、Ｓ８による処理とステップＳ３０、Ｓ３１による処理を、並行して実行する。通信制御部１２は、ステップＳ７で移動通信端末５２から第２撮影画像のデータを受信したときに、ステップＳ８に処理を進めて、第２撮影画像のデータをメモリ２０の撮影画像エリア２２に保存し、図４のステップＳ９に処理を進める。

また、撮影制御部１１は、ステップＳ３０で同期撮影時点になったときにステップＳ３１に処理を進め、フロントカメラ３２、リアカメラ３３、及び車内カメラ３４のうちの少なくともいずれか一つによる撮影を行う。そして、撮影制御部１１は、撮影した第１撮影画像のデータをメモリ２０の撮影画像エリア２２に保存して、図４のステップＳ９に処理を進める。

ステップＳ９で、画像処理部１４は、撮影制御部１１により撮影画像エリア２２に保存された第１撮影画像のデータ及び第２撮影画像のデータを関連付けて記録した統合画像データを生成する。続くステップＳ１０で、通信制御部１２は、画像処理部１４により生成された統合画像データを、通信制御部１２及びＮＡＤ３０により、広域ネットワーク５００を介して画像管理サーバー５１０に送信する。

統合画像データには、同じタイミング（同期撮影時点、同期撮影時点の前後にわたる期間）で、ドライブレコーダー１のフロントカメラ３２、リアカメラ３３、又は車内カメラ３４により撮影された第１撮影画像のデータと、移動通信端末５２のカメラ５２ａにより撮影された第２撮影画像のデータとが含まれる。

そのため、画像管理サーバー５１０は、統合画像データにより、同じタイミングで撮影された多様なアングルによる車両１００の周辺又は車両１００の車室内の撮影画像を取得することができる。そして、画像管理サーバー５１０は、第１撮影画像のデータ及び第２撮影画像のデータを解析することにより、車両１００で発生した事故等についてのより詳細な情報を得ることができる。

［４．他の実施形態］
上記実施形態では、ドライブレコーダー１が装着される移動体として四輪の車両１００を例示したが、ドライブレコーダー１が装着される移動体は、二輪車両、飛行体、船舶等であってもよい。

上記実施形態では、広域ネットワーク５００へのアクセスをセルラー方式又はＷｉ－Ｆｉ通信により行ったが、他の通信方式により行ってもよい。また、車両１００の利用者Ｕ１，Ｕ２により使用される移動通信端末５１，５２とドライブレコーダー１との通信を車内Ｗｉ－Ｆｉ（本開示の第２通信ネットワークに相当する）により行ったが、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の他の通信仕様により行ってもよい。

上記実施形態では、本開示の通信システムをドライブレコーダー１により構成した例を示したが、本開示の通信システムを、カメラを備えた通信端末（スマートフォン、携帯電話、タブレット端末、通信機能付きのカメラ等）によって構成してもよい。

上記実施形態では、図３に示したフローチャートにより、通信制御部１２は、車両１００の所定箇所に位置している移動通信端末（図１の例では移動通信端末５２）に限定して、同期撮影時点通知情報を送信して移動通信端末で撮影された第２撮影画像のデータを取得した。他の構成として、所定箇所に位置していることの判断を行わずに、車両１００で使用されている移動通信端末（図１の例では、移動通信端末５１，５２）を対象として、同期撮影時点通知情報を送信して移動通信端末で撮影された第２撮影画像のデータを取得するようにしてもよい。

また、移動通信端末位置認識部１７が、ドライブレコーダー１との間で車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末の台数に応じて、移動通信端末の位置を認識する所定箇所を設定するようにしてもよい。例えば、中継通信のための第１通信が確立されている移動通信端末が１台であるときは、車両１の後方を撮影可能な箇所に所定箇所を設定し、移動通信端末が２台であるときは、車両１の右後方を撮影可能な箇所と車両１の左後方を撮影可能な箇所に所定箇所を設定し、移動通信端末が３台であるときは、車両１の右後方を撮影可能な箇所、車両１の後方中央を撮影可能な箇所、及び車両１の左後方を撮影可能な箇所に所定箇所を設定することにより、車両１の周囲の撮影範囲を拡大することができる。

さらに、移動通信端末位置認識部１７は、移動通信端末が車両１の前記所定箇所に位置していることを認識したときに、移動通信端末の姿勢を認識し、通信制御部１２は、移動通信端末位置認識部１７により、移動通信端末が所定姿勢で所定箇所に位置していることが認識されている場合に、第２撮影画像のデータを車内Ｗｉ－Ｆｉ通信により受信するようにしてもよい。

上記実施形態において、移動通信端末の性能を認識する移動通信端末性能認識部を備え、通信制御部１２は、ＮＡＤ３０との間で、車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末の性能が所定性能であると、移動通信端末性能認識部により認識された場合に、第２撮影画像のデータを車内Ｗｉ－Ｆｉ通信により移動通信端末から受信するようにしてもよい。

上記実施形態では、同期撮影時点決定部１５を備えて、ドライブレコーダー１における撮影と移動通信端末５１，５２における撮影を同期させて行ったが、同期撮影時点決定部１５を省略して、移動通信端末５１，５２により任意のタイミングで撮影された第２撮影画像のデータを取得するようにしてもよい。

或いは、車両１００で使用されている移動通信端末に限定せずに、ＮＡＤ３０との間で、車内Ｗｉ－Ｆｉ通信が確立されている移動通信端末（図１の例では、移動通信端末５１～５５）を対象として、同期撮影時点通知情報を通知して、各移動通信端末で撮影された第２撮影画像データを取得するようにしてもよい。

上記実施形態では、ドライブレコーダー１と移動通信端末５１～５５とが、無線による通信を行う構成を示したが、図１に示したように、移動通信端末５１，５２が車両１００の車室内で使用される場合は、移動通信端末５１，５２とドライブレコーダー１を通信ケーブルで接続して、有線による通信を行うようにしてもよい。

上記実施形態では、画像処理部１４は、第１撮影画像データと第２撮影画像データに基づく所定の画像処理として、第１撮影画像のデータと第２撮影画像のデータとを関連付けた統合画像データを生成する処理を実行した。第１撮影画像データと第２撮影画像データに基づく他の画像処理として、例えば、車両１の周辺の存在する対象物の認識、対象物との接触リスクの判断等の処理を実行してもよい。

なお、図２は、本願発明の理解を容易にするために、ドライブレコーダー１の構成を、主な処理内容により区分して示した概略図であり、ドライブレコーダー１の構成を、他の区分によって構成してもよい。また、各構成要素の処理は、１つのハードウェアユニットにより実行されてもよいし、複数のハードウェアユニットにより実行されてもよい。また、図３～図４に示したフローチャートによる各構成要素の処理は、１つのプログラムにより実行されてもよいし、複数のプログラムにより実行されてもよい。

［４．上記実施形態によりサポートされる構成］
上記実施形態は、以下の構成をサポートする。
（構成１）第１撮影デバイスと、移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、を備える通信システム。
構成１の通信システムによれば、通信システムの第１撮影デバイスにより撮影された第１撮影画像のデータと共に、移動通信端末の第２撮影デバイスにより撮影された多様なアングルでの第２撮影画像のデータを、コストを抑えた簡易な構成によって取得することができる。

（構成２）前記第１撮影デバイス及び前記第２撮影デバイスによる撮影を同期させて行うための同期撮影時点を決定する同期撮影時点決定部を備え、前記通信制御部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末に対して、前記同期撮影時点を示す同期撮影時点情報を前記第１通信により送信し、前記同期撮影時点情報に基づいて前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信し、前記画像処理部は、前記同期撮影時点に前記第１撮影デバイスにより撮影された前記第１撮影画像のデータと、前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータとに基づいて、前記所定の画像処理を実行する構成１に記載の通信システム。
構成２の通信システムによれば、同一の時点において通信システムの第１撮影デバイスにより撮影された第１撮影画像のデータ及び移動通信端末の第２撮影デバイスにより撮影された第２撮影画像のデータを用いる画像処理により、対象物の認識、対象物との接触リスクの判断等を行うことができる。

（構成３）前記画像処理部は、前記所定の画像処理として、前記第１撮影画像のデータと前記第２撮影画像のデータとを関連付けた統合画像データを生成する処理を実行する構成１又は構成２に記載の通信システム。
構成３の通信システムによれば、同一の時点において通信システムの第１撮影デバイス撮影された第１撮影画像のデータ及び移動通信端末の第２撮影デバイスで撮影された第２撮影画像データが、関連付けて含まれる統合画像データを取得することができる。

（構成４）前記通信制御部は、前記統合画像データを、前記第２通信により前記通信装置に送信する構成３に記載の通信システム。
構成４の通信システムによれば、移動通信端末の第２撮影デバイスにより撮影された第２撮影画像のデータを含む統合画像データを、通信装置に提供することができる。

（構成５）移動体において使用され、前記移動通信端末が前記移動体の所定箇所に位置しているか否かを認識する移動通信端末位置認識部を備え、前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する構成１から構成４のうちいずれか一つの構成に記載の通信システム。
構成５の通信システムによれば、移動体の内部或いは移動体の付近の画像を、移動体の内部或いは移動体の付近で使用されている移動通信端末の第２撮影デバイスにより撮影して取得することができる。

（構成６）前記移動通信端末位置認識部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の台数に応じて、前記所定箇所を設定する構成５に記載の通信システム。
構成６の通信システムによれば、中継通信のための第１通信が確立されている移動通信端末の台数に応じて、移動通信端末の第２撮影デバイスによりカバーする撮影範囲に応じた所定箇所を設定することができる。

（構成７）前記移動通信端末位置認識部は、前記移動通信端末が前記移動体の前記所定箇所に位置していることを認識したときに、前記移動通信端末の姿勢を認識し、前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が所定姿勢で前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する構成５又は構成６に記載の通信システム。
構成７の通信システムによれば、移動通信端末の姿勢を認識することにより、移動通信端末の第２撮影デバイスによる撮影範囲、撮影方向をより詳細に指定して、第２撮影デバイスにより撮影した第２撮影画像のデータを取得することができる。

（構成８）前記移動通信端末の性能を認識する移動通信端末性能認識部を備え、前記通信制御部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の性能が所定性能であると、前記移動通信端末性能認識部により認識された場合に、前記第２撮影画像のデータを前記第１通信により前記移動通信端末から受信する構成１から構成７のうちいずれか一つの構成に記載の通信システム。
構成８の通信システムによれば、移動通信端末の通信性能、移動通信端末に備えられた第２撮影デバイスの性能等が所定レベル以上である場合に限定して、第２撮影デバイスでされた第２撮影画像のデータを、移動通信端末から受信することができる。

（構成９）前記通信部は、複数の前記移動通信端末との間の前記第１通信により、複数の前記移動通信端末について前記中継通信を実行し、前記通信制御部は、前記中継通信のための前記第１通信が確立されている複数の前記移動通信端末に備えられた前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信する構成１から構成８のうちいずれか一つの構成に記載の通信システム。
構成９の通信システムによれば、複数の移動通信端末の第２撮影デバイスにより撮影された第２撮影画像のデータを受信することにより、広範囲の撮影画像のデータを収集することができる。

（構成１０）カメラ又はドライブレコーダーにより構成される構成１から構成９のうちいずれか一つの構成に記載の通信システム。
構成１０の通信システムによれば、構成１から構成９の通信システムを、カメラ又はドライブレコーダーの機能として実現することができる。

１…ドライブレコーダー、１０…プロセッサ、１１…撮影制御部、１２…通信制御部、１４…画像処理部、１５…同期撮影時点決定部、１７…移動通信端末位置認識部、１８…計時部、１９…速度認識部、２０…メモリ、２１…制御用プログラム、２２…撮影画像エリア、３０…ＮＡＤ、３１…アンテナ、３２…フロントカメラ、３３…リアカメラ、３４…車内カメラ、３５…ＧＮＳＳ、３６…加速度センサ、３７…スイッチ、３８…ディスプレイ、５１～５５…移動通信端末、５１ａ～５５ａ…カメラ、１００…車両（移動体）、１１０…他車両、３００…セルラー通信の基地局、３１０…Ｗｉ－Ｆｉスポットのルーター、５００…広域ネットワーク、５１０…画像管理サーバー、５２０…情報提供サーバー、Ｕ１～Ｕ５…利用者。

Claims (9)

1. 第１撮影デバイスと、
   移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、
   前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、
   前記第１撮影デバイス及び前記第２撮影デバイスによる撮影を同期させて行うための同期撮影時点を決定する同期撮影時点決定部と、
   を備え、
   前記通信制御部は、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に対して、前記同期撮影時点を示す同期撮影時点情報を前記第１通信により送信し、
   前記同期撮影時点情報に基づいて前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信し、
   前記画像処理部は、前記同期撮影時点に前記第１撮影デバイスにより撮影された前記第１撮影画像のデータと、前記同期撮影時点に前記第２撮影デバイスにより撮影された前記第２撮影画像のデータとに基づいて、前記所定の画像処理を実行する
   通信システム。
2. 移動体において使用され、
   第１撮影デバイスと、
   移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、
   前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、
   前記移動通信端末が前記移動体の所定箇所に位置しているか否かを認識する移動通信端末位置認識部と、
   を備え、
   前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信し、
   前記移動通信端末位置認識部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の台数に応じて、前記所定箇所を設定する
   通信システム。
3. 移動体において使用され、
   第１撮影デバイスと、
   移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、
   前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、
   前記移動通信端末が前記移動体の所定箇所に位置しているか否かを認識する移動通信端末位置認識部と、
   を備え、
   前記移動通信端末位置認識部は、前記移動通信端末が前記移動体の前記所定箇所に位置していることを認識したときに、前記移動通信端末の姿勢を認識し、
   前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が所定姿勢で前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する
   通信システム。
4. 第１撮影デバイスと、
   移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、
   前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、
   を備え、
   前記通信部は、複数の前記移動通信端末との間の前記第１通信により、複数の前記移動通信端末について前記中継通信を実行し、
   前記通信制御部は、前記中継通信のための前記第１通信が確立されている複数の前記移動通信端末に備えられた前記第２撮影デバイスにより撮影された前記第２撮影画像のデータを、前記第１通信により受信する
   通信システム。
5. 移動体において使用され、
   第１撮影デバイスと、
   移動通信端末との間の第１通信、及び前記移動通信端末以外の通信装置との間の第２通信を実行することにより、前記移動通信端末と前記通信装置との間の通信を中継する中継通信を実行する通信部と、
   前記中継通信のための前記第１通信が確立されている前記移動通信端末に備えられた、第２撮影デバイスにより撮影された第２撮影画像のデータを、前記第１通信により前記移動通信端末から受信する通信制御部と、
   前記第１撮影デバイスにより撮影された第１撮影画像のデータと、前記第２撮影画像のデータと、に基づいた所定の画像処理を実行する画像処理部と、
   前記移動通信端末が前記移動体の所定箇所に位置しているか否かを、前記移動体に備えられて前記移動体の室内を撮影する室内カメラによる撮影画像から認識する移動通信端末位置認識部と、
   を備え、
   前記通信制御部は、前記移動通信端末位置認識部により、前記移動通信端末が前記所定箇所に位置していることが認識されている場合に、前記第２撮影画像のデータを前記第１通信により受信する
   通信システム。
6. 前記画像処理部は、前記所定の画像処理として、前記第１撮影画像のデータと前記第２撮影画像のデータとを関連付けた統合画像データを生成する処理を実行する
   請求項１から請求項５のうちいずれか１項に記載の通信システム。
7. 前記通信制御部は、前記統合画像データを、前記第２通信により前記通信装置に送信する
   請求項６に記載の通信システム。
8. 前記移動通信端末の性能を認識する移動通信端末性能認識部を備え、
   前記通信制御部は、前記中継通信のための前記第１通信が確立されている前記移動通信端末の性能が所定性能であると、前記移動通信端末性能認識部により認識された場合に、前記第２撮影画像のデータを前記第１通信により前記移動通信端末から受信する
   請求項１から請求項７のうちいずれか１項に記載の通信システム。
9. カメラ又はドライブレコーダーにより構成される
   請求項１から請求項８のうちいずれか１項に記載の通信システム。

Images