JP7742382B2 - 中継装置、中継方法、中継プログラム及び中継システム - Google Patents

Description

本発明は、中継装置、中継方法、中継プログラム及び中継システムに関する。

近年、映像を撮影するためのカメラ等の撮影装置と、撮影した映像データを分析するためのコンピュータシステムとが融合したＡＩ（Artificial Intelligence）カメラの利用が増えている。ＡＩカメラは、深層学習ベースのＡＩ等の高速計算処理をするＧＰＵと無線や有線の通信モジュールを搭載する。このようなＡＩカメラを利用することで、映像データからの特徴検出やアノテーションなどの処理をＡＩカメラ側において行うことができ、業務の効率化等が期待できる。

ＡＩカメラの構成の１つとして、映像解析処理をネットワークのエッジにあたるコンピュータが行う構成がある。こうした構成を採用したＡＩカメラには、映像データをＡＩ処理したうえでネットワークを経由してアプリケーションが動作するサーバ等へ伝送するＥＡＢ（Edge Artificial－Intelligence Box）を備えたものが存在する。

このようなＡＩカメラでは、利用者のネットワーク環境に接続された撮影装置から映像データをＥＡＢが取得し、ＥＡＢ内でＡＩ処理した結果がインターネット経由でサーバ等に送られる。ただし、利用者毎に撮影装置やネットワーク環境が異なるため、撮影装置の情報や生成される映像の情報に基づいてＥＡＢとカメラと間の通信を最適なネットワーク環境で行うことが望ましい。

なお、映像データの配信技術として、撮影装置が同一の映像信号から生成した低画質データを管理サーバに記録し且つ高画質データを撮影装置の記録装置等に記録し、ユーザ操作に応じて低画質データと高画質データとを切り替えて配信する技術が提案されている（例えば、特許文献１参照）。

特開２０１６－５８９９４号公報

しかしながら、撮影装置毎に解像度等の画質や通信環境が異なり、適切なネットワーク環境を撮影装置毎に選択することは、利用者の指示に応じて通信経路を切り替える手法では作業負担が大きく、容易に実現することは困難である。また、高品質のデータにまで対応できるように通信経路を選んだ場合、低品質のデータを送信する撮影装置ではネットワーク資源の無駄が発生してしまう。逆に、ネットワーク環境を維持するために低品質のデータに対応した通信経路を選んだ場合、高品質のデータを送信する撮影装置が送信するには負荷が高くなり通信自体が困難となるおそれがある。このように従来の中継技術では、ネットワーク資源の無駄の発生やネットワーク負荷の増大のおそれがあり、通信の効率化を図ることは困難であった。

開示の技術は、上記に鑑みてなされたものであって、通信を効率化する中継装置、中継方法、中継プログラム及中継システムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明の中継装置は以下の各部を有する。第１経路選択部は、撮影装置との間の複数の通信経路の中から前記撮影装置の情報を基に第１通信経路を選択する。第１通信部は、前記第１経路選択部により選択された前記第１通信経路を用いて撮影装置から映像データを取得する。処理部は、前記第１通信部により取得された前記映像データを用いて第１処理を実行する。第２通信部は、前記処理部により前記第１処理された前記映像データをデータ処理装置へ第２通信経路を用いて送信する。

本発明によれば、通信を効率化することができる。

図１は、実施形態に係る中継システムのシステム構成図である。 図２は、顧客ＬＡＮを介したＥＡＢの撮影装置との接続の一例を示す図である。 図３は、ＥＡＢの撮影装置との直接接続の一例を示す図である。 図４は、実施形態に係るＥＡＢのブロック図である。 図５は、通信経路選択の一例を示す図である。 図６は、解像度の設定変更を伴う通信経路選択の一例を示す図である。 図７は、映像解析サーバとの接続に応じたＥＡＢの通信設定を示す図である。 図８は、実施形態に係るＥＡＢによる通信経路の決定処理のフローチャートである。 図９は、コンピュータのハードウェア構成図である。

以下に、本願の開示する中継装置、中継方法、中継プログラム及中継システムの実施形態を図面に基づいて詳細に説明する。なお、以下の実施形態により本願の開示する中継装置、中継方法、中継プログラム及中継システムが限定されるものではない。

（実施形態）
（はじめに）
顧客のネットワーク環境に接続されたカメラから映像を取得し、デバイス内で解析した結果をインターネット経由で通信することが行われる。顧客のネットワーク環境は既に構築及び運用されており、新規で映像解析データを加えることへの影響が懸念される。そこで、中継装置を用いて複数同時通信を異なる通信種別で行うことになった。しかしながら、撮影装置毎に解像度が異なるため、中継装置と撮影装置と間の通信を自動的に最適なネットワーク環境で行うことが難しい。

そこで、実施形態に係る中継装置は、通信するデータ量及び通信先等の撮影装置から取得できる情報を考慮して通信経路の優先度付けや場合分けを行い、ユーザ操作不要で使用する通信経路を決定する。以下に、実施形態に係る中継装置の詳細について説明する。

（システム構成）
図１は、実施形態に係る中継システムのシステム構成図である。中継システム１００は、中継装置であるＥＡＢ１、顧客ＬＡＮ（Local Area Network）２、クラウド上の映像解析サーバ３及び端末装置４を有する。

顧客ＬＡＮ２には、撮影装置であるＩＰ（Internet Protocol）カメラ２１～２３、顧客端末装置２０１及びハブ２０２等が配置される。また、顧客ＬＡＮ２には、ＥＡＢ１が接続される。

ＩＰカメラ２１～２３は、顧客ＬＡＮ２を介してＥＡＢ１に接続される。ＩＰカメラ２１～２３は、複数の通信経路でＥＡＢ１に接続される。ＩＰカメラ２１～２３は、ＥＡＢ１との接続にハブ２０２を介してもよい。例えば、ＩＰカメラ２１～２３は、それぞれ、イーサネット（登録商標）等による有線接続、Ｗｉ－Ｆｉによる無線接続又はプライベート５Ｇによる無線接続等を用いてＥＡＢ１と通信することができる。ただし、これらの通信経路は一例であり、データを転送することができる規格に準拠した通信経路であれば、他の通信経路を用いることもできる。

ＩＰカメラ２１～２３は、それぞれ撮影及びデータ転送のための仕様が予め決められている。例えば、ＩＰカメラ２１～２３は、使用可能な、解像度、画像サイズ、フレームレート（ｆｐｓ：Frame Per Second）及び映像データのコーデックが予め決められている。ここで、ＩＰカメラ２１～２３のそれぞれは、各設定について複数の種類が使用可能であってもよい。例えば、ＩＰカメラ２１は、複数の解像度が使用可能である場合もある。

ＩＰカメラ２１～２３は、管理者により撮影及びデータ転送に用いる設定が予め指定される。ＩＰカメラ２１～２３は、メーカー名や機種名の他に、それぞれの撮影装置２０が使用可能な、解像度、画像サイズ、フレームレート及びコーデック等が登録された撮影装置情報を保持する。

ＩＰカメラ２１～２３は、それぞれが、指定された設定にしたがい映像を撮影する。また、ＩＰカメラ２１～２３は、ＥＡＢ１から解像度の設定変更の指示を受けた場合、指定された解像度に設定を変更して撮影を行う。そして、ＩＰカメラ２１～２３は、撮影した映像の映像データを、ＥＡＢ１から指定された通信経路を用いてＥＡＢ１へ送信する。

なお、ここでは撮影装置としてＩＰカメラ２１～２３を例に説明したが、撮影装置は、映像を撮影する装置であれば他の装置であってもよい。

顧客端末装置２０１は、ハブ２０２等を介してＩＰカメラ２１～２３に接続可能である。ＩＰカメラ２１～２３の管理者は、顧客端末装置２０１を用いてＩＰカメラ２１～２３の設定を行うことができる。

ＥＡＢ１は、顧客ＬＡＮ２を介してＩＰカメラ２１～２３と接続される。図２は、顧客ＬＡＮ２を介したＥＡＢの撮影装置との接続の一例を示す図である。例えば、ＥＡＢ１は、図２に示すように、モバイルデータ通信インタフェース１０１、有線通信インタフェース１０２及びＷｉ－Ｆｉ通信インタフェース１０３を有する。

ＥＡＢ１は、モバイルデータ通信インタフェース１０１、有線通信インタフェース１０２又はＷｉ－Ｆｉ通信インタフェース１０３のいずれかもしくは複数を用いて顧客ＬＡＮ２を介してＩＰカメラ２１～２３と通信可能である。例えば、図２では、ＥＡＢ１は、Ｗｉ－Ｆｉ通信インタフェース１０３を用いて顧客ＬＡＮ２に接続される。この場合、ＥＡＢ１は、Ｗｉ－Ｆｉ通信による通信経路を用いてＩＰカメラ２１～２３と通信可能である。

また、図２では、１つの経路で接続される状態を示したが、ＥＡＢ１は、モバイルデータ通信インタフェース１０１、有線通信インタフェース１０２又はＷｉ－Ｆｉ通信インタフェース１０３のうちの複数のインタフェースで顧客ＬＡＮ２に接続されてもよい。その場合、ＥＡＢ１は、接続された経路の中から通信経路を選択してＩＰカメラ２１～２３と通信することが可能である。

図３は、ＥＡＢの撮影装置との直接接続の一例を示す図である。例えば、ＥＡＢ１は、図３に示すように、ＩＰカメラ２１と直接ネットワークで接続されてもよい。図３では、ＥＡＢ１は、有線通信インタフェース１０２を用いてＩＰカメラ２１と接続される。ただし、ＥＡＢ１は、ＩＰカメラ２１のネットワーク機能に応じて他のインタフェースを用いた通信経路でＩＰカメラ２１に接続しても良く、また、複数の通信経路で接続されてもよい。

図１に戻って説明を続ける。ＥＡＢ１は、ＩＰカメラ２１～２３それぞれとの間を接続する複数の通信経路の中から、ＩＰカメラ２１～２３のそれぞれが生成する映像の解像度にしたがって、ＩＰカメラ２１～２３毎に映像データの送受信に用いる最適な通信経路の種類を特定する。そして、ＥＡＢ１は、特定した種類の通信経路を、映像データの送信に使用する通信経路としてＩＰカメラ２１～２３のそれぞれに通知する。また、特定した種類の通信経路が使用できない場合、ＥＡＢ１は、より低い解像度に対応した使用可能な通信経路を使用する通信経路として決定する。そして、ＥＡＢ１は、使用を決定した通信経路で映像データを送信するための設定の変更をＩＰカメラ２１～２３に指示するとともに、映像データの送信に使用する通信経路を通知する。

また、ＥＡＢ１は、ＩＰカメラ２１～２３から送信されたそれぞれの映像データに対して、指定されたＡＩアプリケーションを用いてＡＩ処理を実行する。ここで、ＥＡＢ１は、それぞれのデータを処理するＡＩアプリケーションとして同じＡＩアプリケーションを用いることもできるし、異なるアプリケーションを用いることもできる。

また、ＥＡＢ１は、指定された優先度にしたがって、クラウド上の映像解析サーバ３との間を接続する複数の通信経路の中から映像データ及びＡＩ処理の結果の送信に使用する通信経路を決定する。そして、ＥＡＢ１は、ＡＩ処理の結果及び映像データを、決定した通信経路を用いて映像解析サーバ３へ送信する。ＥＡＢ１については、後で詳細に説明する。

映像解析サーバ３は、クラウド上に配置された装置である。映像解析サーバ３は、ＥＡＢ１とインターネットを経由して接続される。映像解析サーバ３は、ＡＩ処理の結果と映像データとをＥＡＢ１から受信する。そして、映像解析サーバ３は、例えば、ＡＩ処理の結果を視覚化することで付加価値を映像データに加える処理を行う。その後、映像解析サーバ３は、処理を施した映像データを端末装置４へ送信する。この映像解析サーバ３が、「データ処理装置」の一例にあたり、映像解析サーバ３による映像データ及びＡＩ処理の結果を用いた処理が「第２処理」の一例にあたる。

端末装置４は、ＩＰカメラ２１～２３で撮影された映像を用いて各種制御等を行う装置である。例えば、端末装置４は、ＩＰカメラ２１～２３で撮影された映像を用いて、スマートリテール、スマートビルディング、スマートシティ又はスマートファクトリ等を実現するための制御処理を実行する。

（ＥＡＢの構成）
図４は、実施形態に係るＥＡＢのブロック図である。次に、図４を参照して、本実施形態に係るＥＡＢ１の詳細について説明する。ここでは、ＩＰカメラ２１～２３等の映像を生成するための各装置を区別せずに、撮影装置２０として説明する。ＥＡＢ１は、図２に示すように、第１通信部１１、ＡＩ処理部１２、第２通信部１３、第１経路選択部１４及び第２経路選択部１５を有する。

第１通信部１１は、１つ又は複数の撮影装置２０それぞれと複数の通信経路により接続される。第１通信部１１と各撮影装置２０との間の複数の通信経路が、「第１の複数の通信経路」の一例にあたる。例えば、第１通信部１１は、イーサネット通信による有線接続のための通信経路、Ｗｉ－Ｆｉ通信による無線接続のための通信経路及びプライベート５Ｇでの通信による無線接続のための通信経路等を有する。ただし、第１通信部１１と各撮影装置２０との間で使用可能な通信経路は同じでなくてもよい。

第１通信部１１は、撮影装置２０により生成される映像データの画質の情報等を含む撮影装置情報を受信する。例えば、第１通信部１１は、顧客ＬＡＮ２へのＥＡＢ１の接続時に、使用可能な通信経路のいずれかを用いて顧客ＬＡＮ２に接続された各撮影装置２０か解像度等の設定の情報が登録された撮影装置情報を取得する。

そして、第１通信部１１は、撮影装置情報を第１経路選択部１４へ出力する。その後、第１通信部１１は、映像データの送信において撮影装置２０に使用させる通信経路の情報を第１経路選択部１４から受信して撮影装置２０へ送信する。

また、第１通信部１１は、第１経路選択部１４から解像度の設定変更の指示の入力を受けた場合、その解像度の設定変更の指示を対象とされた撮影装置２０へ送信して、撮影装置２０の解像度の設定を変更させる。そして、第１通信部１１は、映像データの送信において撮影装置２０に使用させる通信経路の情報として、変更させた解像度に応じた通信経路の情報を第１経路選択部１４から受信して撮影装置２０へ送信する。

その後、第１通信部１１は、第１経路選択部１４により指定された通信経路を介して、映像データを撮影装置２０から受信する。そして、第１通信部１１は、受信した映像データをＡＩ処理部１２へ出力する。

第１経路選択部１４は、撮影装置２０毎の撮影装置情報の入力を第１通信部１１から受ける。撮影装置情報には、メーカー名や機種名の他に、それぞれの撮影装置２０が使用可能な、解像度、画像サイズ、フレームレート及びコーデック等の画質を表す情報が登録される。第１経路選択部１４は、各撮影装置２０について以下の経路選択処理を行う。いずれの撮影装置２０に対する経路選択処理も同様に行われるので、以下では、１つの撮影装置２０を例に経路選択処理について説明する。

第１経路選択部１４は、撮影装置２０解像度を撮影装置情報から取得する。ここで、第１経路選択部１４は、解像度毎に使用する通信経路の種類の情報を保持する。例えば、第１経路選択部１４は、解像度を高さに応じて高中低の３つの区分に分割して、区分毎に使用する通信経路の種類の情報を保持する。具体的には、第１経路選択部１４は、高の区分の解像度に対して有線通信による通信経路を用い、中の区分の解像度に対してはプライベート５Ｇの通信による通信経路を用い、低の区分の解像度に対してはＷｉ－Ｆｉ通信による通信経路を用いる等の情報を保持する。ただし、この解像度の分け方は３つの段階に限らず、２段階でも４段階以上でもよく、また、解像度毎に対応する通信経路の種類が決定されてもよい。

第１経路選択部１４は、撮影装置情報から取得した撮影装置２０の解像度に応じた通信経路の種類を特定する。次に、第１経路選択部１４は、特定した種類の通信経路による撮影装置２０との間の通信が可能か否かを判定する。例えば、特定した種類の通信経路が撮影装置２０との間に存在しない場合や、存在しても障害の発生により使用が困難な場合等に、第１経路選択部１４は、特定した種類の通信経路による撮影装置２０との間の通信ができないと判定する。

通信可能であれば、特定した種類の通信経路をその撮影装置２０からの映像データの送受信に使用する通信経路として決定する。その後、第１経路選択部１４は、映像データの送信において撮影装置２０に使用させる通信経路の情報を、第１通信部１１を介して撮影装置２０に通知する。

図５は、通信経路選択の一例を示す図である。例えば、ＥＡＢ１が、ＩＰカメラ２１～２３のそれぞれと有線通信による通信経路２１１、Ｗｉ－Ｆｉ通信による通信経路２１２及びプライベート５Ｇの通信による通信経路２１３で接続されている場合で説明する。また、第１経路選択部１４は、解像度を高中低の３区分に分けて、解像度が高い区分から順に通信経路２１１、２１３、２１２を使用する通信経路とする場合で説明する。

第１経路選択部１４は、ＩＰカメラ２１の撮影装置情報から、ＩＰカメラ２１が高の区分に含まれる解像度を用いることを確認する。そして、第１経路選択部１４は、高の区分に対応する有線通信による通信経路２１１を、ＩＰカメラ２１との間の映像データの送受信における適切な通信経路として特定する。また、第１経路選択部１４は、ＩＰカメラ２２の撮影装置情報から、ＩＰカメラ２２が中の区分に含まれる解像度を用いることを確認する。そして、第１経路選択部１４は、中の区分に対応するプライベート５Ｇの通信による通信経路２１３を、ＩＰカメラ２２との間の映像データの送受信における適切な通信経路として特定する。また、第１経路選択部１４は、ＩＰカメラ２３の撮影装置情報から、ＩＰカメラ２３が低の区分に含まれる解像度を用いることを確認する。そして、第１経路選択部１４は、低の区分に対応するＷｉ－Ｆｉ通信による通信経路２１２を、ＩＰカメラ２３との間の映像データの送受信における適切な通信経路として特定する。そして、いずれの種類の通信経路もＩＰカメラ２１～２３との間で通信可能であることから、第１経路選択部１４は、それぞれの種類の通信経路を使用する通信経路として決定する。これにより、第１通信部１１は、図５に示すように、ＩＰカメラ２１～２３との間で、それぞれの解像度に応じた通信経路を用いて通信を行う。

図４に戻って説明を続ける。一方、特定した種類の通信経路では撮影装置２０と接続されていないもしくは障害が発生しており不通である等、特定した種類の通信経路で通信できない場合、第１経路選択部１４は、撮影装置２０との間でより低い解像度に対応する通信経路での通信が可能か否かを判定する。具体的には、第１経路選択部１４は、より低い解像度に対応した通信経路により撮影装置２０との間で通信可能か、及び、その解像度に撮影装置２０が対応しているか否かを判定する。

より低い解像度に対応する通信経路が使用可能な場合、第１経路選択部１４は、使用可能な通信経路に対応する解像度のうち撮影装置２０が使用可能な解像度の中でなるべく高い解像度の通信経路を使用する通信経路として決定する。この通信経路は、ＥＡＢ１が撮影装置２０との間で使用可能な通信経路に対応する解像度のうち、撮影装置２０が使用可能な解像度であってその中でなるべく高い解像度に対応する通信経路である。次に、第１経路選択部１４は、決定した通信経路に対応する解像度のうち、撮影装置２０が使用可能なるべく高い解像度への設定変更の指示を、第１通信部１１を介して撮影装置２０へ送信する。その後、第１経路選択部１４は、映像データの送信において撮影装置２０に使用させる通信経路の情報を、第１通信部１１を介して撮影装置２０に通知する。

図６は、解像度の設定変更を伴う通信経路選択の一例を示す図である。例えば、ＥＡＢ１が、ＩＰカメラ２１～２３のそれぞれとＷｉ－Ｆｉ通信による通信経路２１２で接続されており、且つ、障害などにより有線通信による通信経路２１１及びプライベート５Ｇの通信による通信経路２１３が使用できない場合で説明する。ここでも、第１経路選択部１４は、解像度を高中低の３区分に分けて、解像度が高い区分から順に通信経路２１１、２１３、２１２を使用する通信経路とする。

この場合も、第１経路選択部１４は、ＩＰカメラ２１の撮影装置情報から、ＩＰカメラ２１が高の区分に含まれる解像度を用いることを確認する。そして、第１経路選択部１４は、高の区分に対応する通信経路２１１が使用可能かを判定する。この場合、第１経路選択部１４は、通信経路２１１は使用できず、Ｗｉ－Ｆｉ通信による通信経路２１２が使用可能と判定する。そして、第１経路選択部１４は、ＩＰカメラ２１との間の映像データの送受信に、低の区分に対応するＷｉ－Ｆｉを用いる通信経路２１２を使用することを決定する。その後、第１経路選択部１４は、通信経路２１２で使用可能な解像度のうち、ＩＰカメラ２１が使用可能であり且つなるべく高い解像度への設定の変更をＩＰカメラ２１に指示する。また、第１経路選択部１４は、ＩＰカメラ２２の撮影装置情報から、ＩＰカメラ２２が中の区分に含まれる解像度を用いることを確認する。そして、第１経路選択部１４は、中の区分に対応する通信経路２１３が使用可能かを判定する。この場合、第１経路選択部１４は、通信経路２１３は使用できず、Ｗｉ－Ｆｉ通信による通信経路２１２が使用可能と判定する。そして、第１経路選択部１４は、ＩＰカメラ２２との間の映像データの送受信に、低の区分に対応するＷｉ－Ｆｉ通信による通信経路２１２を使用することを決定する。その後、第１経路選択部１４は、通信経路２１２で使用可能な解像度のうち、ＩＰカメラ２２が使用可能であり且つなるべく高い解像度への設定の変更をＩＰカメラ２２に指示する。また、第１経路選択部１４は、ＩＰカメラ２３の撮影装置情報から、ＩＰカメラ２３が低の区分に含まれる解像度を用いることを確認する。この場合、低の区分に対応するＷｉ－Ｆｉを用いた通信経路２１１が使用可能であるので、第１経路選択部１４は、ＩＰカメラ２３との間の映像データの送受信に通信経路２１１を使用することを決定する。そして、第１経路選択部１４は、図５に示すように、ＩＰカメラ２１～２３との間で、いずれとも通信経路２１２を用いて通信を行う。

例えば、ＩＰカメラ２１の解像度に応じた通信経路２１１が「第１通信経路」の一例にあたり、ＩＰカメラ２１とＥＡＢ１との間で第１通信経路による通信ができないことが、「第１通信経路の選択が困難な場合」の一例にあたる。さらに、ＩＰカメラ２１の解像度に適した通信経路２１１以外の、第１経路選択部１４により選択された通信経路２１２が「第３通信経路」の一例にあたる。すなわち、第１経路選択部１４は、ＩＰカメラ２１の情報に基づいた第１通信経路である通信経路２１１の選択が困難な場合、撮影装置２０との間の通信経路の中からＩＰカメラ２１の解像度に適した通信経路２１１以外の第３通信経路である通信経路２１２を選択して、第３通信経路で映像データを送信するようにＩＰカメラ２１の設定を変更する。

ここで、本実施例では、解像度の区分と種類の異なる通信経路２１１～２１３とを１対１で対応させて、第１経路選択部１４は、解像度に対応する通信経路を選択した。また、第１経路選択部１４は、映像データの画質を良くするために、使用可能な通信経路のうちなるべく高い解像度を用いることができるように撮影装置２０の設定を変更した。ただし、解像度に対する通信経路の選択及び撮影装置２０の解像度の設定変更の方法はこれに限らない。

例えば、解像度の区分と通信経路２１１～２１３とを以下のように対応させることもできる。有線通信による通信経路２１１は、高中低の全ての区分の解像度の映像データを送信できる。また、プライベート５Ｇの通信による通信経路２１２は、中低の２つの区分の解像度の映像データを送信できる。これらに対して、Ｗｉ－Ｆｉ通信による通信経路２１３は、送信可能な映像データの解像度は低の区分に限られる。この場合、第１経路選択部１４は、以下のように、撮影装置２０が映像データの送信に使用する通信経路を決定してもよい。

例えば、撮影装置２０の解像度が低の区分に含まれており、通信経路２１１～２１３の全てが使用可能であり、且つ、有線通信による通信経路２１１のネットワークリソースが通信経路２１２及び２１３に比べて多い場合、第１経路選択部１４は、ネットワークリソースを有効に使用するために有線通信による通信経路２１１撮影装置２０の映像データの送信に使用してもよい。この場合、撮影装置２０の解像度及びネットワークリソースに基づく通信経路２１１の選択が「撮影装置の情報を基に第１通信経路を選択する」の一例にあたる。

その場合で且つＥＡＢ１に複数台の解像度の区分が低の撮影装置２０が接続されており、通信経路２１１～２１３の全てが使用可能である場合、全ての撮影装置２０を有線通信による通信経路２１１に接続すると、ネットワークに負荷がかかるおそれがある。そこで、第１経路選択部１４は、通信経路２１１の通信速度が閾値以下になった場合、通信速度が閾値内に収まるように、何台かの撮影装置２０の映像データの送信にプライベート５Ｇの通信による通信経路２１２を使用するように変更してもよい。また、通信経路２１２の通信速度が閾値以下になった場合には、第１経路選択部１４は、同様に、通信速度が閾値内に収まるように、何台かの撮影装置２０の映像データの送信にＷｉ－Ｆｉ通信による通信経路２１３を使用するように変更してもよい。

また、撮影装置２０の解像度が高の区分に含まれている場合も同様であり、第１経路選択部１４は、通信経路２１１の通信速度が閾値以下になった場合、通信速度が閾値内に収まるように何台かの撮影装置２０の映像データの送信にプライベート５Ｇの通信による通信経路２１２を使用するように変更してもよい。この場合、第１経路選択部１４は、プライベート５Ｇの通信による通信経路２１２を使用するために、中の区分の解像度への設定の変更を対象の撮影装置２０に指示する。

ここでの通信速度が閾値以下になった場合が、「第１通信経路の選択が困難な場合」の一例にあたる。そして、通信経路２１１に代えて選択された通信経路２１２が、「第３通信経路」の一例にあたる。

また、本実施形態では、第１経路選択部１４は、撮影装置２０が生成する映像データのデータ量を規定する解像度に応じて通信経路を決定した。ただし、通信経路を決定するためのデータ量を規定するための基準はこれに限らず、送信するデータ量が把握できる情報であれば他の情報を用いることもできる。例えば、画像サイズ、フレームレート（ＦＰＳ）、ビットレート又はコーデック等の映像の画質を表す他の情報でも、データ量が規定される。そこで、第１経路選択部１４は、映像の画質を示すそれらの情報を撮影装置情報から取得して、使用する通信経路を決定してもよい。

ここで、第１経路選択部１４は、撮影装置情報に登録された撮影装置２０のメーカー名や機種名からこれらの情報を特定してもよい。また、第１経路選択部１４は、これらの情報のうちのいくつかを組み合わせて通信経路の判定に用いてもよい。

さらに、第１経路選択部１４は、撮影装置２０との間の無線通信における電波強度を取得して、電波強度が基準値以下の無線通信は使用しない等、通信経路の選択に利用してもよい。他にも、第１経路選択部１４は、映像データ毎にＡＩ処理部１２においてＡＩ処理に使用される、撮影装置２０に対応したＡＩアプリケーションの種類を通信経路の選択に使用してもよい。

例えば、データが少し落ちることを許容できるＡＩアプリケーションで処理される映像データを受信する場合、第１経路選択部１４は、転送可能なデータ量が少ない通信経路を選択することもできる。すなわち、第１経路選択部１４は、ＡＩアプリケーションが最低限の性能を維持するために必要な映像品質を基準として、通信経路を選択することもできる。

このように、第１経路選択部１４は、映像の画質を示す情報、電波強度及びＡＩアプリケーションの種類等の様々な撮影装置２０の情報を基に、撮影装置２０との間の映像データの送信に使用する通信経路を決定することができる。また、ここでは、第１経路選択部１４は、予め決められた対応関係に基づいて取得した情報に対応する通信経路を選択したが、これに限らず例えばＡＩを用いて通信経路を決定してもよい。この第１経路選択部１４により選択された第１通信部１１と撮影装置２０との間において映像データの送信に使用する通信経路が、「第１通信経路」の一例にあたる。

図４に戻って説明を続ける。ＡＩ処理部１２は、複数の撮影装置２０のそれぞれから送信された映像データの入力を第１通信部１１から受ける。ＡＩ処理部１２は、複数のＡＩアプリケーションを有する。例えば、あるＡＩアプリケーションは人の顔を検出するアプリケーションであり、他のＡＩアプリケーションは自動車を検出するアプリケーションであるといった具合に、各ＡＩアプリケーションは実行するＡＩ処理がそれぞれ異なってもよい。

ＡＩ処理部１２は、取得した各映像データについて、指定されたＡＩアプリケーションを用いてＡＩ処理を実行する。ＡＩ処理部１２は、使用するＡＩアプリケーションの指定として、撮影装置２０毎に予め決められた情報を保持しても良いし、映像データに付加された情報から使用するアプリケーションの指定を取得してもよい。そして、ＡＩ処理部１２は、ＡＩ処理の結果を映像データとともに第２通信部１３へ出力する。このＡＩ処理部１２が、「処理部」の一例にあたり、ＡＩ処理部１２による映像データに対するＡＩ処理が「第１処理」の一例にあたる。

第２経路選択部１５は、第２通信部１３と映像解析サーバ３とを接続する複数の通信経路について、それぞれの優先順位の指定の入力を図示しない入力部から受ける。この第２通信部１３と映像解析サーバ３とを接続する複数の通信経路が、「第２の複数の通信経路」の一例にあたる。そして、第２経路選択部１５は、使用可能な通信経路のうち優先度が最も高い通信経路を映像解析サーバ３との通信で使用する通信経路と決定する。この第２経路選択部１５により選択された第２通信部１３と映像解析サーバ３との間で映像データ及びＡＩ処理の結果を送信に使用する通信経路が、「第２通信経路」の一例にあたる。

例えば、ＥＡＢ１が、図５に示すように、イーサネットを用いた有線接続による通信経路３０１、５Ｇ通信による通信経路３０２、ＬＴＥ（Long Term Evolution）通信による通信経路３０３及びＷｉ－Ｆｉによる通信経路３０４を有する場合で説明する。第２経路選択部１５は、例えば、通信経路３０１、通信経路３０２、通信経路３０３、通信経路３０４の順で優先順位が低くなるように指定を受ける。その場合、第２経路選択部１５は、使用できる通信経路の中で最も優先順位が高い有線接続による通信経路３０１を、映像解析サーバ３との間の通信で使用する通信経路として決定する。これにより、ＥＡＢ１は、有線接続の通信経路３０１を用いて映像解析サーバ３と通信を行う。

図４に戻って説明を続ける。第２経路選択部１５は、通信に使用すると決定した通信経路を用いて映像解析サーバ３との間の通信を行うことを第２通信部１３に指示する。そして、第２経路選択部１５は、第２通信部１３の通信設定において、映像解析サーバ３との通信で使用すると決定した通信経路をオンに設定して、他の通信経路をオフに設定する。ただし、第１通信部１１と第２通信部１３とで同じ通信インタフェースを用いて通信を行う場合、第２経路選択部１５は、第１通信部１１が使用する通信経路についてはオンの設定を維持する。

図７は、映像解析サーバとの接続に応じたＥＡＢの通信設定を示す図である。ここでは、ＥＡＢ１は、通信インタフェースとして、モバイルデータ通信インタフェース１０１、有線通信インタフェース１０２及びＷｉ－Ｆｉ通信インタフェース１０３を有する場合で説明する。また、ＥＡＢ１と顧客ＬＡＮ２との間の通信には有線通信インタフェース１０２が用いられているものとする。

接続状態１１１は、ＥＡＢ１と映像解析サーバ３とがモバイルデータ通信で通信を行う状態を示す。この場合、第２経路選択部１５は、モバイルデータ通信インタフェース１０１による通信の設定をオンにして、有線通信インタフェース１０２による通信の設定をオンのまま残し、Ｗｉ－Ｆｉ通信インタフェース１０３による通信の設定をオフにする。

接続状態１１２は、ＥＡＢ１と映像解析サーバ３とがＷｉ－Ｆｉ通信で通信を行う状態を示す。この場合、第２経路選択部１５は、モバイルデータ通信インタフェース１０１による通信の設定をオフにして、有線通信インタフェース１０２による通信の設定をオンのまま残し、Ｗｉ－Ｆｉ通信インタフェース１０３による通信の設定をオンにする。

接続状態１１２は、ＥＡＢ１と映像解析サーバ３とが有線通信で通信を行う状態を示す。この場合、第２経路選択部１５は、有線通信インタフェース１０２による通信の設定をオンのままとして、有線通信インタフェース１０２及びＷｉ－Ｆｉ通信インタフェース１０３による通信の設定をオフにする。

図４に戻って説明を続ける。第２通信部１３は、映像解析サーバ３と１つ又は複数の通信経路により接続される。例えば、第２通信部１３は、イーサネット通信による有線接続による通信経路、５Ｇ通信を用いた無線接続のための通信経路、ＬＴＥ通信を用いた無線通信による通信経路及びＷｉ－Ｆｉを用いた無線接続による通信経路等を有することができる。

第２通信部１３は、映像解析サーバ３との間の通信に用いる通信経路の指定を第２経路選択部１５から受ける。そして、第２通信部１３は、第２経路選択部１５から指定された通信経路を用いて、映像データ及びＡＩ処理の結果を映像解析サーバ３へ送信する。この際、第２通信部１３は、各映像データ及びＡＩ処理の結果を同じ通信経路を用いてまとめて映像解析サーバ３へ送信することができる。

（中継処理）
図８は、実施形態に係るＥＡＢによる通信経路の決定処理のフローチャートである。次に、図８を参照して、本実施形態に係るＥＡＢ１による通信経路の決定処理の流を説明する。

第１経路選択部１４は、顧客ＬＡＮ２に接続された撮影装置２０それぞれの撮影装置情報を取得する（ステップＳ１）。

次に、第１経路選択部１４は、撮影装置２０を１台選択する（ステップＳ２）。

次に、第１経路選択部１４は、取得した撮影装置情報に基づき選択した撮影装置２０との間の映像データの送受信に好適な通信経路を特定する（ステップＳ３）。

次に、第１経路選択部１４は、特定した通信経路が撮影装置２０との間を結ぶ通信経路として存在しており、映像データの送受信に使用する通信経路として使用可能か否かを判定する（ステップＳ４）。

使用する通信経路として使用可能な場合（ステップＳ４：肯定）、第１経路選択部１４は、特定した通信経路を使用する通信経路として決定する（ステップＳ５）。その後、通信経路の決定処理は、ステップＳ８へ進む。

これに対して、使用する通信経路として使用困難な場合（ステップＳ４：否定）、第１経路選択部１４は、選択した撮影装置２０との間の使用可能な通信経路に対応する解像度のうちその撮影装置２０が使用可能な解像度の中でなるべく高い解像度を抽出する。そして、第１経路選択部１４は、使用可能な通信経路のうち抽出した解像度に対応する通信経路を使用する通信経路として決定する（ステップＳ６）。

そして、第１経路選択部１４は、決定した通信経路に対応する解像度に設定を変更する指示を第１通信部１１を介して撮影装置２０に通知して、撮影装置２０の設定を変更する（ステップＳ７）。その後、通信経路の決定処理は、ステップＳ８へ進む。

その後、第１経路選択部１４は、決定した使用する通信経路を撮影装置２０に通知する（ステップＳ８）。

次に、第１経路選択部１４は、顧客ＬＡＮ２に接続された全ての撮影装置２０について、通信経路の決定が完了したか否かを判定する（ステップＳ９）。通信経路を決定していない撮影装置２０が残っている場合（ステップＳ９：否定）、通信経路の決定処理は、ステップＳ２へ戻る。

これに対して、全ての撮影装置２０について通信経路の決定が完了した場合（ステップＳ９：肯定）、第１経路選択部１４は、撮影装置２０との間の通信経路の設定を完了する。次に、第２経路選択部１５は、映像解析サーバ３との間で映像データ及びＡＩ処理の結果の送受信に使用する通信経路の優先度を入力部から取得する（ステップＳ１０）。

その後、第２経路選択部１５は、優先度にしたがい映像解析サーバ３との間で使用する通信経路を決定する。そして、第２経路選択部１５は、決定した通信経路を用いて映像解析サーバ３との間で映像データの送受信が行われるように、第２通信部１３の通信設定を行う（ステップＳ１１）。

第１通信部１１は、決定した各撮影装置２０との間の通信経路を介して映像データを各撮影装置２０から受信する（ステップＳ１２）。

ＡＩ処理部１２は、第１通信部１１が受信した映像データに対してＡＩ処理を実施する（ステップＳ１３）。

第２通信部１３は、決定した映像解析サーバ３との間の通信経路を介して、各撮影装置２０から受信した映像データ及びそれぞれのＡＩ処理の結果を映像解析サーバ３へ送信する（ステップＳ１３）。

（効果）
以上に説明したように、本実施形態に係るＥＡＢ１は撮影装置２０が生成する映像データの例えば解像度等の画質により決まるデータ量に基づいて使用する通信経路の種類を決定する。これにより、撮影装置２０毎に最適な通信経路を選ぶことができ、自動的にネットワーク資源の無駄の発生やネットワーク負荷の増大を抑えて、通信の効率化を図ることが可能となる。

また、本実施形態に係るＥＡＢ１は、送られる映像データのデータ量から得られる最適な通信経路が使用できない場合に、映像データのデータ量を抑えるように撮影装置２０の設定を変更し、次善の通信経路としてデータ量を抑えた通信経路の中から好適な通信経路を選択する。これにより、最適と考えられる通信経路が使用できない場合にも、なるべくネットワーク資源の無駄の発生やネットワーク負荷の増大を抑えて、通信の効率化を図ることが可能となる。

すなわち、実施形態に係る中継装置であるＥＡＢ１は、撮影装置２０との間の第１の複数の通信経路の中から撮影装置２０の情報を基に第１通信経路を選択する第１経路選択部１４と、第１経路選択部１４により選択された第１通信経路を用いて撮影装置２０から映像データを取得する第１通信部１１と、第１通信部１１により取得された映像データを用いて第１処理を実行するＡＩ処理部１２と、ＡＩ処理部１２により第１処理された映像データをデータ処理装置へ第２通信経路を用いて送信する第２通信部１３とを有する。

これにより、ＥＡＢ１は、最適な通信経路を自動的に選択して撮影装置２０から映像データを受信することができ、自動的にネットワーク資源の無駄の発生やネットワーク負荷の増大を抑えて、通信の効率化を図ることができる。

実施形態に係る中継装置であるＥＡＢ１において、第１経路選択部１４は、撮影装置２０の情報に含まれる映像データのデータ量を規定する情報を基に、第１通信経路を選択する。

これにより、ＥＡＢ１は、データ量に応じた適切な通信経路を選択することができ、確実に通信の効率化を図ることができる。

実施形態に係る中継装置であるＥＡＢ１において、第１経路選択部１４は、映像データのデータ量を規定する情報として画質を表す情報を基に、第１通信経路を選択する。

これにより、ＥＡＢ１は、画質を基準としてデータ量に応じた適切な通信経路を選択することができ、より確実に通信の効率化を図ることができる。

施形態に係る中継装置であるＥＡＢ１は、データ処理装置である映像解析サーバ３との間の第２の複数の通信経路のそれぞれの優先順位を基に第２通信経路を選択する第２経路選択部１５をさらに備え、第２通信部１３は、第２経路選択部１５により選択された第２通信経路を用いて前記映像データを送信する。

これにより、ＥＡＢ１は、最適な通信経路を自動的に選択して映像解析サーバ３に対して映像データ及びＡＩ処理の結果を送信することができ、自動的にネットワーク資源の無駄の発生やネットワーク負荷の増大を抑えて、通信の効率化を図ることができる。

（プログラム）
また、上記実施形態において説明したＥＡＢ１が実行する処理をコンピュータが実行可能な言語で記述したプログラムを作成することもできる。この場合、コンピュータがプログラムを実行することにより、上記実施形態と同様の効果を得ることができる。さらに、かかるプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータに読み込ませて実行することにより上記実施形態と同様の処理を実現してもよい。

図９は、コンピュータのハードウェア構成図である。ＥＡＢ１は、例えば、図９に示すコンピュータ９０により実現される。コンピュータ９０は、例えば、図９に示すように、プロセッサ９１、メモリ９２、ハードディスク９３及び通信インタフェース９４を有する。

プロセッサ９１は、ハードディスク９３に格納されたプログラムに基づいて動作し、各部の制御を行う。メモリ９２は、例えば、コンピュータ９０の起動時にプロセッサ９１によって実行されるブートプログラム等を格納する。ハードディスク９３は、プロセッサ９１によって実行されるプログラム、及び、係るプログラムによって使用されるデータ等を格納する。

通信インタフェース９４は、通信網ＮＷ（Network）を介して他の機器からデータを受信してプロセッサ９１へ送り、プロセッサ９１が生成したデータを、通信網ＮＷを介して他の機器へ送信する。通信インタフェース９４は、図４に例示した第１通信部１１及び第２通信部１３の機能を実現する。

プロセッサ９１は、ハードディスク９３に格納された各種プログラムを読み出してメモリ９２に展開して実行することにより、図４に例示したＡＩ処理部１２、第１経路選択部１４及び第２経路選択部１５の機能を実現する。プロセッサ９１は、ハードディスク９３からプログラムを読み取って実行するが、他の例として、他の装置から、通信網ＮＷを介してこれらのプログラムを取得してもよい。

（その他）
様々な実施形態を、図面を参照して、本明細書で詳細に説明したが、これらの複数の実施形態は例であり、本発明をこれらの複数の実施形態に限定することを意図するものではない。本明細書に記載された特徴は、当業者の知識に基づく様々な変形や改良を含む、様々な方法によって実現され得る。

また、上述した「部（module、-er接尾辞、-or接尾辞）」は、ユニット、手段、回路、ステップなどに読み替えることができる。例えば、通信部（communication module）、処理部（processing module）および選択部（selecting module）は、それぞれ、通信ユニット、制御ユニットおよび記憶ユニットに読み替えることができる。

１ ＥＡＢ
２ 顧客ＬＡＮ
３ 映像解析サーバ
４ 端末装置
１１ 第１通信部
１２ ＡＩ処理部
１３ 第２通信部
１４ 第１経路選択部
１５ 第２経路選択部
２０ 撮影装置
２１～２３ ＩＰカメラ
１００ 中継システム
２０１ 顧客端末装置
２０２ ハブ

Claims (9)

1. 複数の撮影装置それぞれについて、撮影装置との間の複数の通信経路の中から前記撮影装置の情報を基に第１通信経路を選択し、前記第１通信経路として同じ特定の通信経路を選択した撮影装置が複数あり、前記特定の通信経路の通信速度が閾値以下になった場合に、前記特定の通信経路が選択された撮影装置の少なくとも１つ以上について前記特定の通信経路よりも転送レートが低い通信経路を前記第１通信経路として選択しなおす第１経路選択部と、
   前記第１経路選択部により選択された前記第１通信経路を用いて撮影装置から映像データを取得する第１通信部と、
   前記第１通信部により取得された前記映像データを用いて第１処理を実行する処理部と、
   前記処理部により前記第１処理された前記映像データをデータ処理装置へ第２通信経路を用いて送信する第２通信部と
   を備えたことを特徴とする中継装置。
2. 前記第１経路選択部は、前記撮影装置の情報に含まれる前記映像データのデータ量を規定する情報を基に、前記第１通信経路を選択することを特徴とする請求項１に記載の中継装置。
3. 前記第１経路選択部は、前記映像データのデータ量を規定する情報として画質を表す情報を基に、前記第１通信経路を選択することを特徴とする請求項２に記載の中継装置。
4. 前記データ処理装置との間の複数の通信経路のそれぞれの優先順位を基に前記第２通信経路を選択する第２経路選択部をさらに備え、
   前記第２通信部は、前記第２経路選択部により選択された前記第２通信経路を用いて前記映像データを送信する
   ことを特徴とする請求項１に記載の中継装置。
5. 前記第１経路選択部は、各前記第１通信経路を選択するために用いられた前記撮影装置の情報の設定変更の指示をそれぞれの前記撮影装置に対して送信することを特徴とする請求項１に記載の中継装置。
6. 前記第１経路選択部は、前記撮影装置の情報に基づいた前記複数の通信経路の中からの前記第１通信経路の選択が困難な場合、前記複数の通信経路の中から前記撮影装置の情報に基づく前記第１通信経路以外の第３通信経路を選択して、前記第３通信経路で映像データを送信するように前記撮影装置の設定を変更し、
   前記第１通信部は、前記第１経路選択部により選択された前記第３通信経路を用いて撮影装置から映像データを取得する
   ことを特徴とする請求項１に記載の中継装置。
7. 中継装置が、
   複数の撮影装置それぞれについて、撮影装置との間の複数の通信経路の中から前記撮影装置の情報を基に第１通信経路を選択し、前記第１通信経路として同じ特定の通信経路を選択した撮影装置が複数あり、前記特定の通信経路の通信速度が閾値以下になった場合に、前記特定の通信経路が選択された撮影装置の少なくとも１つ以上について前記特定の通信経路よりも転送レートが低い通信経路を前記第１通信経路として選択しなおす第１経路選択工程と、
   前記第１経路選択工程により選択された前記第１通信経路を用いて撮影装置から映像データを取得する第１通信工程と、
   前記第１通信工程により取得された前記映像データを用いて第１処理を実行する処理工程と、
   前記処理工程により前記第１処理された前記映像データをデータ処理装置へ第２通信経路を用いて送信する第２通信工程と
   を含む処理を実行することを特徴とする中継方法。
8. 複数の撮影装置それぞれについて、撮影装置との間の複数の通信経路の中から前記撮影装置の情報を基に第１通信経路を選択し、前記第１通信経路として同じ特定の通信経路を選択した撮影装置が複数あり、前記特定の通信経路の通信速度が閾値以下になった場合に、前記特定の通信経路が選択された撮影装置の少なくとも１つ以上について前記特定の通信経路よりも転送レートが低い通信経路を前記第１通信経路として選択しなおす第１経路選択ステップと、
   前記第１経路選択ステップにより選択された前記第１通信経路を用いて撮影装置から映像データを取得する第１通信ステップと、
   前記第１通信ステップにより取得された前記映像データを用いて第１処理する処理ステップと、
   前記処理ステップにより前記第１処理された前記映像データをデータ処理装置へ第２通信経路を用いて送信する第２通信ステップと
   をコンピュータに実行させることを特徴とする中継プログラム。
9. 複数の撮影装置、中継装置及びデータ処理装置を有する中継システムであって、
   前記複数の撮影装置は、それぞれが前記中継装置と複数の通信経路で接続され、
   前記中継装置は、
   前記複数の撮影装置それぞれについて、前記複数の通信経路の中から前記撮影装置の情報を基に第１通信経路を選択し、前記第１通信経路として同じ特定の通信経路を選択した撮影装置が複数あり、前記特定の通信経路の通信速度が閾値以下になった場合に、前記特定の通信経路が選択された撮影装置の少なくとも１つ以上について前記特定の通信経路よりも転送レートが低い通信経路を前記第１通信経路として選択しなおす第１経路選択部と、
   前記第１経路選択部により選択された前記第１通信経路を用いて撮影装置から映像データを取得する第１通信部と、
   前記第１通信部により取得された前記映像データを用いて第１処理する処理部と、
   前記処理部により前記第１処理された前記映像データを前記データ処理装置へ第２通信経路を用いて送信する第２通信部とを備え
   前記データ処理装置は、前記第１処理された前記映像データを基に第２処理を実行する ことを特徴とする中継システム。