WO2008023606A1

WO2008023606A1 - Relay device and relay method

Info

Publication number: WO2008023606A1
Application number: PCT/JP2007/065845
Authority: WO
Inventors: Ming Qiang Xu; Daisaku Komiya
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 2006-08-23
Filing date: 2007-08-14
Publication date: 2008-02-28
Anticipated expiration: 2009-02-23
Also published as: JP4904114B2; EP2056206A1; US20100232343A1; EP2056206A4; CN101506782B; JP2008052404A; CN101506782A; US8532014B2

Description

明細書

中継装置および中継方法

技術分野

[0001] 本発明は、中継装置に係り、特に中継先の切り替えを行う中継装置に関する。

背景技術

[0002] 近年、いつでもどこでもアクセスが可能なュビキタスネットワーク環境の整備が進んできている。具体的には、光ファイバなどのブロードバンドネットワークや、アドホックネットワークなどの無線ネットワークが普及してきている。また、ネットワークに接続できる情報家電などのデバイスも普及してきてレ、る。

このような状況下において、ュビキタスネットワークの重要技術として、次の 3つの技術が提案されている。すなわち、ネットワークシームレス（ターミナルモビリティとも呼ぶ )、デバイスシームレス（セッションモビリティとも呼ぶ）およびコンテンツシームレス（メディア適合とも呼ぶ）の 3技術である。

[0003] ネットワークシームレスは、端末が異なるネットワーク間で移動する際に、アクセスするネットワークの切替えをシームレスに実現するための技術である。デバイスシームレスは、異なる端末間において、サービスやセッションの切替えをシームレスに実現するための技術である。コンテンツシームレスは、異なるメディア（異なるフォーマット、異なるメディアパラメータを含む）への切替えをシームレスに実現するための技術である

[0004] 従来のセッションモビリティおよびコンテンツシームレスに関する技術について、図面を参照しながら説明する。

まず、コンテンツシームレスを伴うセッションモビリティに関する技術を説明する（例えば、、 IETF Internet-Draft Session Initiation Protocol (SIP) Session Mobility draft_shacham_sipping_session_mobility_01.txtを参照；以下「IETF Intemet_Draft」という）。

図 1は、コンテンツシームレスを伴う従来のセッションモビリティを説明するための図である。図 1において、切替元端末 500は、メディアサーバ 502から、映像配信サービスに係るデータを受信している。そして、切替元端末 500は、切替先端末 501に対し、例えば SIP(Session Initial Protocol) Refer505を用いて、切替えの指示を行う切替先端末 501は、切替元端末 500から切替えの指示を受けると、例えば SIP In vite504を用いて、メディアサーバ 502との間でセッションを確立する。 SIP Invite 5 04のボディ（Body)には、切替先端末 501が処理可能な画像解像度が指定される。メディアサーバ 502は、切替先端末 501から SIP Invite504を受信すると、切替先端末 501との間でセッションを確立する。ここで、確立するセッションは、 SIP Invite 504のボディに指定された解像度が設定されたセッションである。

メディアサーバ 502は、 SIP Invite504のボディに指定された解像度を有する映像配信サービスに係るデータを切替先端末 501へ送信する。その後、メディアサーノ 502は、例えば SIP Bye503を用いて、切替元端末 500とのセッションを切断する。このようにして、メディアサーバ 502は、切替先端末 501の能力に応じて映像データの画像解像度を変更しつつ、切替元端末 500から切替先端末 501にセッションを切り替える。

次に、特開 2004— 248165号公報に記載されたメディア中継方法を例として、中継サーバを利用したセッションモビリティに関する技術を説明する。

図 2は、中継サーバを利用した従来のセッションモビリティを説明するための図である。図 2に示すシステムは、通信先端末 600、切替元端末 601、切替先端末 602および中継装置 603を有する。中継装置（中継サーノ 603は、通信先端末 600と切替元端末 601との接続を、通信先端末 600と切替先端末 602との接続に切り替える。そして、中継装置 603は、通信先端末 600から配信されるメディアデータ（例えば、映像データ）を切替先端末 602へ転送する。この処理手順を図 3に示す。

図 3に示すように、中継装置 603は、通信先端末 600からメディアデータを受信し（ S600)、そのメディアデータを切替元端末 601に転送する（S601)。

次に、切替元端末 601は、中継装置 603に対し、現在利用中のサービスのセッションを切り替えるセッション切替指示を行う（S602)。セッション切替指示としては、例えば、セッションの識別子および切替先端末 602の識別子情報が通知される。そして、中継装置 603は、セッション切替指示によって切替先の端末として指示された切替先端末 602宛てに、通信先端末 600からのメディアデータを送信する（S60 3)。

発明の開示

発明が解決しょうとする課題

[0006] しかしながら、 IETF Internet-Draftに記載の切替先端末 501は、メディアサーバ 50 2から、指定された解像度をもつ動画像データを受信するものの、そのデータを切替先端末 501のデータ受信バッファに一旦バッファリングしたのち、そのデータを出力する。従って、データの出力遅延が生じやすい。

特開 2004— 248165号公報に記載されたメディア中継方法も、セッションの切り替えが行われるものの、中継装置から転送されたメディアデータを切替先端末のデータ受信バッファに一旦バッファリングしたのち、そのデータを出力する。従って、データの出力遅延が生じやすい。特に、映像ストリーミングの場合、その出力遅延が顕著に生じる。

そこで、本発明は、このような状況に鑑みなされたもので、端末間の切替え時において、切替え先の端末の処理能力に応じたデータ出力を切替え先の端末に円滑に実行させる中継装置を提供する。

課題を解決するための手段

[0007] 上記課題を解決するため、本発明は、データ配信装置から送信されるメディアデータを中継装置を介さずに受信中の受信端末との間で接続を行う通信部と、前記受信端末及び前記受信端末とは異なる他の通信端末に関するメディアデータの処理能力を示す情報を格納するデータ記憶部と、前記データ記憶部に格納された処理能力を示す情報に応じたメディアデータの送信要求を前記データ配信装置に行う制御部と、前記データ配信装置から送信された前記メディアデータを受信する受信部と、前記受信部に受信された前記メディアデータを保存するバッファと、前記受信端末から端末切替の指示を受け付けるシグナリング部と、前記指示を受け付けた後、前記バッファに保存された前記他の通信端末の処理能力に応じた前記メディアデータを前記他の通信端末へ転送する転送部とを含む。 [0008] 以下に説明するように、本発明には他の態様が存在する。したがって、この発明の開示は、本発明の一部の提供を意図しており、ここで記述され請求される発明の範囲を制限することは意図していない。

図面の簡単な説明

[0009] [図 1]コンテンツシームレスを伴う従来のセッションモビリティを説明するための図 [図 2]中継サーバを利用した従来のセッションモビリティを説明するための図

[図 3]中継装置を含む従来のシステムの処理手順を示す図

[図 4]第 1の実施の形態における中継装置を含む全体のシステム構成例を示す図 [図 5]第 1の実施の形態における携帯電話の構成例を示す図

[図 6]第 1の実施の形態における中継装置の構成例を示す図

[図 7]第 1の実施の形態における中継装置の情報蓄積部のメディア処理能力テープルの構成例を示す図

[図 8]メディアデータの構成例を示す図

[図 9]品質レベルに対して伝送されるべきデータ例を示す図

[図 10]第 1の実施の形態における中継装置を含むシステム全体の切替処理を示すシ一ケンス図

[図 11]第 1の実施の形態における中継装置の切替処理を示すフローチャート

[図 12]第 2の実施の形態における中継装置を含む全体のシステム構成例を示す図

[図 13]第 2の実施の形態における中継装置の切替処理を示すフローチャート発明を実施するための最良の形態

[0010] 以下に、本発明の詳細な説明を述べる。以下に説明する実施の形態は本発明の単なる例であることが理解され、本発明が様々な態様に変形することができる。従つて、以下に開示する特定の構成および機能は、請求の範囲を限定するものではない

〇

[0011] 以下、本発明の実施の形態について図面を参照しながら説明する。

(第 1の実施の形態）

図 4は、第 1の実施の形態における中継装置を含む全体のシステム構成例を示す図である。図 4に示すように、メディアサーバ（データ配信装置） 10は、インターネット 1およびセルラーネットワーク (携帯電話網） 2を介して、携帯電話 (受信端末） 20に接続されるように構成されている。

さらに、メディアサーバ 10は、インターネット 1および WLAN(Wireless LAN)3を介して、中継装置 40に接続されるように構成されている。中継装置 40は、携帯電話 20 やテレビ装置（通信端末） 30に接続できるように構成されている。中継装置 40としては、例えば、ホームサーバを用いることができる。

[0012] なお、本実施の形態では、通信網として、例えば、インターネット；!、セルラーネットワーク 2および WLAN3が挙げている力 S、本発明に適用可能な通信網は上記した例に限定されない。例えば、 WLAN3の代わりに、 PAN (Personal Area Network)やアドホックネットワークを用いることができる。

また、本実施の形態では、中継装置 40として、ホームサーバを用いているが、中継装置 40はホームサーバに限定されない。例えば、中継装置 40として、パーソナルコンピュータ、双方向テレビ、ゲーム機などの情報端末を適用してもよい。

さらに、本実施の形態では、中継装置 40に接続された通信端末としてテレビ装置 3 0を例示している力 S、通信端末はテレビ装置に限定されない。例えば、通信端末として、情報家電、ゲーム機、パソコンなどを用いてもよい。

[0013] 図 5は、携帯電話 20の構成例を示す図である。

図 5に示すように、携帯電話 20は、操作ボタン (入力部） 201、ディスプレイ (表示部 ) 202、外部インタフェース（外部 IF) 203、処理部 204およびシグナリング部 205を含んでいる。さらに、携帯電話 20は、メディア受信部 206、メディアバッファ 207、デコーダ 208、通信制御部 209および NWインタフェース 210を含んでいる。

外部インターフェース 203は、操作ボタン 201およびディスプレイ 202との間で情報をやり取りする機能を有する。

処理部 204は、携帯電話 20全体の動作を制御する。

シグナリング部 205は、メディアサーバ 10または中継装置 40とのネゴシエーション（ negotiation)を行つ。

[0014] メディア受信部 206は、メディアサーバ 10から配信されたメディアデータ（例えば、映像データ）を受信する。

メディアバッファ 207は、メディア受信部 206に受信されたメディアデータを一時的に保存する。メディアバッファ 207は、一定量のメディアデータを保存することにより、ネットワークの揺らぎ（ジッター）を吸収する。

デコーダ 208は、メディアバッファ 207に保存されたメディアデータをデコードする。通信制御部 209は、通信プロトコルに従った制御を行う。ここでいう通信プロトコルは、例えば、 OSKOpen Systems Interconnection)参照モデノレのトランスポート層およびネットワーク層に相当する。

NW (Network)インタフェース 210は、セルラーネットワーク 2および WLAN3の双方と接続する機能と、無線電波の強度を検知する機能を有する。 NWインタフェース 210としては、例えば、無線ネットワークカードが該当する。

[0015] 図 6は、中継装置 40の構成例を示す図である。

図 6に示すように、中継装置 40は、メディア制御部（制御部） 401、シグナリング部 4 02、情報蓄積部（データ記憶部) 403およびメディア受信部（受信部) 404を含んでいる。さらに、中継装置 40は、メディアバッファ (バッファ) 405、メディア送信部（転送部） 406、通信制御部 407および NWインタフェース（通信部） 408を含んで!/、る。メディア制御部 401は、情報蓄積部 403に記憶された処理能力を示す情報に応じたメディアデータの送信要求をメディアサーバ 10に行う。なお、情報蓄積部 403については、後述する。また、メディア制御部 401は、メディア送信部 406に対して、中継装置 40に接続された通信端末 (例えば、テレビ装置 30)へのメディアデータの転送を指示する。ここで、メディア制御部 401は、通信端末 (テレビ装置 30)のメディアに関する処理能力（以下、メディア処理能力ともいう）に応じたメディアデータの転送を fe小 ^る。

[0016] シグナリング部 402は、メディアサーバ 10、携帯電話 20またはテレビ装置 30とのネコンエーシヨン (negotiation)を行つ。

[0017] 情報蓄積部 403は、メディア処理能力を示す情報を蓄積する。メディア処理能力の一例は、特定の符号化形式に対応しているか否かを示す情報である。所定の動画符号化形式の場合、メディア処理能力としては、端末が処理することができる解像度、フレームレート（時間）、 SN比 (Signal to Noise Ratio)等がある力本実施の形態では、メディア処理能力として、解像度を中心に説明する。

情報蓄積部 403は、図 7に示すメディア処理能力テーブルを格納する。図 7に示すメディア処理能力テーブルは、デバイス 3011、解像度 3012およびレベル 3013の情報を有している。

デバイス 3011は、携帯電話 20などのデバイスを識別するためのデバイス識別情報 (デバイス ID)を示す情報である。メディア処理能力テーブルに情報が記憶されるデバイスは、例えば、中継装置 40と同じ WLAN3に属するデバイスである。

解像度 3012は、デバイスの最大処理能力である解像度を示す情報である。

レベル 3013は、デバイスの解像度のレベルを示す情報である。本実施の形態では、レべノレ 3013は、解像度の値に応じて、例えば、あら力、じめ 3つのレベル（高、中、低 )に分けられている。

[0018] メディア受信部 404は、メディアサーバ 10からメディアデータを受信する。

メディアバッファ 405は、メディア受信部 404に受信されたメディアデータを一時的に保存する。メディアバッファ 405は、一定量のメディアデータを保存することにより、ネットワークの揺らぎ（ジッター）を吸収する。

メディア送信部 406は、メディアバッファ 405に保持されたメディアデータを送信する。具体的には、メディア送信部 406は、メディア制御部 401に転送を指示された通信端末 (例えば、テレビ装置 30)の処理能力に対応するメディアデータをメディアバッファ 405から取得する。そして、メディア送信部 406は、取得したメディアデータを、その通信端末 (例えば、テレビ装置 30)へ送信する。

通信制御部 407は、通信プロトコルに従った制御を行う。ここでいう通信プロトコルは、例えば、 OSKOpen Systems Interconnection)参照モデノレのトランスポート層およびネットワーク層に相当する。

NW (Network)インタフェース 408は、無線電波の強度を検知する機能を有する。

NWインタフェース 408としては、例えば、無線ネットワークカードが該当する。

[0019] 次に、メディアサーバ 10から送信されるメディアデータの構成例について説明する図 8は、メディアデータの構成例を示す図である。本実施の形態のメディアデータとしては、例えば、 MPEG-4のスケーラブルストリーム（映像ストリーム）が用いられる。この映像ストリームは、例えば、複数の階層に分割して伝送される。

図 8に示すように、メディアデータは、基本レイヤ 101、拡張レイヤ 102およびプラス (+ )拡張レイヤ 103の 3階層に分割されている。図 8では、説明上、分割された各データに 0〜21の番号を付与している。

[0020] 基本レイヤ 101は、あらかじめ設定された基本的な品質（例えば、 100kbpsの符号化データ速度、画像サイズ)を確保するレイヤである。この基本レイヤ 101は、必ず送信される。

拡張レイヤ 102およびプラス拡張レイヤ 103は、基本レイヤ 101の品質を補うためのレイヤである。これらの拡張レイヤ 102、 103は、送信先の端末の性能などに応じて、その一部または全部が任意に符号化される。

具体的には、基本レイヤ 101のデータは、例えば、 MPEG— 4 simple profile または MPEG— 4 advanced simple profile を用いて符号化される。図 8では、符号 0、 4が付与されたデータが基本レイヤ 101に属する。

[0021] 拡張レイヤ 102は、例えば、 SN比を向上させるための SN比拡張レイヤとして用いる。拡張レイヤ 102のデータは、例えば、 MPEG -4 FGS(Fine Granular Scalabili ty)を用いて符号化される。 MPEG— 4 FGSは、 ISO/IEC14496— 2Amenedm ent 4 Streaming Video Profileに規疋れ飞いる。

図 8では、符号;!〜 3、 5〜7および 9〜； 12が付与されたデータが拡張レイヤ 102に属する。拡張レイヤ 102は、さらに以下の階層に分けられる。符号 1、 9、 10、 5が付与されたデータは拡張レイヤ 102の第 1階層、符号 2、 11、 6が付与されたデータは第 2階層、符号 3、 12、 7が付与されたデータは第 3階層である。

[0022] プラス拡張レイヤ 103は、例えば、解像度を向上させるための解像度拡張レイヤとして用いる。プラス拡張レイヤ 103のデータも、例えば、 MPEG— 4 FGS(Fine Gra nular Scalability)を用いて符号化される。

図 8では、符号 13〜21が付与されたデータがプラス拡張レイヤ 103に属する。ブラス拡張レイヤ 103も、さらに以下の階層に分けられる。符号 13、 19、 16が付与されたデータはプラス拡張レイヤ 103の第 1階層、符号 14、 20、 17が付与されたデータは第 2階層、符号 15、 21、 18が付与されたデータは第 3階層である。

[0023] そして、基本レイヤ 101に属するデータ（符号 0、 4)は、 I—VOPフレーム 104、または P— VOPフレーム 106に分類される。また、拡張レイヤ 102に属するデータ（符号 1 〜3、 5〜7および 9〜12)およびプラス拡張レイヤ 103に属するデータ（符号 13〜21 )は、それぞれ、 I—VOPフレーム 104、 FGSTフレーム 105および P—VOPフレーム 106に分類される。なお、 VOPは、 Video Object Planeの略である。

I— VOPフレーム 104は、フレーム内符号化のイントラ（I)フレームである。 FGSTフレーム 105は、時間拡張のフレームである。この時間拡張により、フレームレートが向上することとなる。

P—VOPフレーム 106は、片方向予測のインター（P)フレームである。

[0024] 次に、メディアサーバ 10から伝送されるデータの例について、図 9を参照しながら説明する。

図 9は、品質レベルに対して伝送されるべきデータの例を示す図である。図 9に示すデータの例では、品質 3014とそのレべノレ 3013とメディアサーノ 10力、ら伝送されるデータの対応付けが示されている。品質 3014は、フレームレート、解像度および画質（SN)の 3種類がある。レベル 3013は、低、中および高の 3つのレベルがある。なお、図 9の品質 3014とそのレベル 3013と伝送データの対応付けは、例えば、品質レベルテーブルとして、メディアサーバ 10に保持されている。

[0025] フレームレートのレべノレは、 I— VOPフレーム、 P— VOPフレームおよび FGSTフレームの 3つの組み合わせによって、低、中、高に変化する。例えば、 I— VOPフレームのみの場合は、低レベルのフレームレートを示す。

解像度のレベルは、基本レイヤ、 FGSレイヤおよび FGS +レイヤの 3つの組み合わせによって、低、中、高に変化する。例えば、基本レイヤのみの場合は、低レベルの解像度を示す。

画質のレベルは、基本レイヤ、 FGSレイヤ、および FGS +レイヤの各階層の組み合わせによって、低、中、高に変化する。例えば、基本レイヤ、 FGSレイヤの 1階層、および FGS +レイヤの 1階層のみの場合は、低レベルの画質を示す。品質 3014と、そのレベル 3013を指定することによって、伝送されるデータが決定する。品質については、フレームレート、解像度および画質（SN)のいずれか一つを指定してもよいし、すべてを指定してもよい。すべてを指定した場合には、それぞれの共通項となるデータが伝送されることになる。たとえば、フレームレートが低レベル（符号 0、；!〜 3、 13〜； 15)、解像度が低レベル (符号 0、 4)、画質（SN)が低レベル (符号 0、 4、符号 1、 9、 10、 5、符号 13、 19、 16)が指定された場合には、共通項となる符号 0が付与されたデータのみが伝送される。

[0026] 次に、中継装置 40において、メディアサーバ 10のデータの送信先を携帯電話 20 力、らテレビ装置 30に切り替える場合の切替処理について、図 10を参照しながら説明する。

図 10は、中継装置 10を含むシステム全体の切替処理を示すシーケンス図である。ここでは、メディアサーバ 10の送信先力携帯電話 20からテレビ装置 30に切り替わるので、携帯電話 20を切替元端末 20といい、テレビ装置 30を切替先端末 30という。まず、切替元端末 20は、ユーザによる操作ボタン 201の操作により、セルラーネットワーク 2およびインターネット 1を介して、メディアサーバ 10へアクセスし、切替元端末 20とメディアサーバ 10間でセッションを開設する。そして、切替元端末 20は、メディァサーバ 10から、基本レイヤ（ベースレイヤ）のメディアデータを受信する（ステップ S 100)。つまり、このときのメディアデータの 3種類の品質は、例えば、すべて低レベルであるとする（図 9参照）。

[0027] 具体的には、切替元端末 20のメディア受信部 206は、メディアサーバ 10から、 NW インタフェース 210および通信制御部 209を介して、メディアデータを受信する。そして、メディアバッファ 207が、メディア受信部 206に受信されたメディアデータを一時的に保存する。デコーダ 208が、メディアバッファ 207からメディアデータを取得して復号する。そして、処理部 204が、デコーダ 208に復号されたメディアデータを外部インタフェース 203を介してディスプレイ 202に再生する。

なお、切替元端末 20は、後記ステップ S107で接続中止指示を行うまでの間、メディァサーバ 10からのメディアデータを受信し続ける。

[0028] その後、切替元端末 20 (NWインターフェース 210)力中継装置 40の周辺に移動する。すると、切替元端末 20は、中継装置 40との接続を行う（ステップ S 101)。具体的には、切替元端末 20の NWインタフェース 210は、 WLAN3から発信される無線電波の強度を検知する。そして、 NWインタフェース 210は、上記検知した強度が一定値を越えた場合に、 WLAN3へ接続する。この際、 NWインタフェース 210は、セルラーネットワーク 2との接続は保った状態にある。切替元端末 20は、 WLAN3に接続することにより、中継装置 40と通信可能となる。

[0029] 次に、切替元端末 20 (シダナリング部 205)は、中継装置 40に対し、例えば、セルラーネットワーク 2から WLAN3へアクセス NWを切り替える切替指示を行う（ステップ S 102)。具体的には、切替元端末 20のシグナリング部 205は、切替元端末 20のデバイス IDおよび品質レベル (例えば、解像度が低レベルであることを示す情報）を、通信制御部 209および NWインタフェース 210を介して、中継装置 40に送信する。上記切替指示を受けた中継装置 40は、その切替指示に関する切替情報を、 WLA N3およびインターネット 1を介して、メディアサーバ 10に送信する（ステップ S103)。なお、このとき送信される切替情報には、上記切替元端末 20のデバイス IDおよび品質レベルのほか、中継装置 40と WLAN3を介して接続して!/、る他のデバイス（切替元端末 20以外のデバイス）の品質レベルが含まれる。従って、切替情報には、切替先端末 30の品質レベル (例えば解像度が高レベルであることを示す情報）、上記他のデバイスのレベルとして含まれる。

なお、ステップ S103における切替情報の送信は、例えば、 SIPプロトコルの Invite メソッドを用いて行われる。

[0030] 次に、メディアサーバ 10は、中継装置 40から送信された切替情報 (ステップ S103) を受けて、中継装置 40との間でセッションを確立した後、上記切替情報に含まれていた最大の品質レベル (例えば解像度が高レベル）のメディアデータを、インターネット 1および WLAN3を介して、中継装置 40に送信する（ステップ S 104)。

[0031] 中継装置 40は、メディアサーバ 10からのメディアデータを受信し、そのメディアデータの受信制御を行う（ステップ S105)。具体的には、中継装置 40は、メディアサーノ 10から受信したメディアデータのうち、切替元端末 20の品質レベルに応じたメディァデータを抽出する。そして、中継装置 40は、上記受信制御により抽出したメディアデータ、すなわち切替元端末 20の品質レベルに応じたメディアデータを切替元端末 20に中継する（ステップ S 106)。

[0032] 次に、切替元端末 20 (シグナリング部 205)は、ステップ S100で開設した切替元端末 20とメディアサーバ 10間のセッションの切断指示を、セルラーネットワーク 2およびインターネット 1を介して、メディアサーバ 10に行う（ステップ S 107)。具体的には、切替元端末 20のシグナリング部 205は、切替元端末 20のデバイス IDを含む情報をメディアサーバ 10に送信する。この切断指示の送信は、例えば、 SIPプロトコルの BYE メソッドを用いて行われる。これにより、切替元端末 20とメディアサーバ 10との間の接続が中止される。以上で、切替元端末 20は、セルラーネットワーク 2から WLAN3へのアクセス NWの切替えは完了する。切替元端末 20は、中継装置 40経由で、メディァサーバ 10からメディアデータを受信する。

[0033] 次に、切替元端末 20は、切替先端末 30との間でサービス発見処理を行う（ステツプ S108)。サービス発見処理は、例えば、 UPnP (Universal Plag and Play)の SSDP (Simple Service Discovery Protocol)を用いて行われる。この SSDPが用いられた場合、切替元端末 20は、ある種類のサービスを示すメッセージを WLAN3内に送信する。そして、このメッセージを受信した切替先端末 30は、当該サービスが切替先端末 30の提供可能なサービスと一致した場合に、切替先端末 30の URLを切替元端末 20に返答する。このようにして、切替先端末 30は、切替先端末 30が WLA N3内に存在すること（デバイス IDなど）を切替元端末 20に通知する。

本実施の形態の切替元端末 20は、 SSDPにより、例えばメディアデータの再生サ一ビスを行う切替先端末 30の存在を確認する。

[0034] 次に、切替元端末 20は、切替先端末 30への端末切替指示を中継装置 40に行う ( ステップ S 109)。このとき、切替元端末 20は、サービス発見処理により取得した切替先端末 30のデバイス IDを含む切替指示を中継装置 40に送信する。

なお、切替先端末 30が、 WLAN3を介して中継装置 40に接続された他のデバイス (切替元端末 20以外のデバイス）の中で、最大の品質レベルを有する端末でなかつた場合には、ステップ S109後、中継装置 40は、上記切替指示された切替先端末 30 の処理能力をもつ品質レベルのメディアデータの送信要求を、メディアサーバ 10に行う。そして、メディアサーバ 10が、当該送信要求された処理能力に対応する品質レベルのメディアデータのみを中継装置 40に送信するようにしてもよい。これにより、メディアサーバ 10は、最大の品質レベルのメディアデータではなぐ切替指示にて指定された切替先端末 30の処理能力に合ったメディアデータを送信すればよ!/、ので、メディアデータ送信の負荷を軽減できる。

[0035] 中継装置 40は、切替元端末 20からのアクセス NWの切替指示を受けて、ステップ S 104で受信し始めたメディアデータを切替先端末 30へ送信する（ステップ S 110)。具体的には、中継装置 40は、上記切替指示された切替先端末 30のデバイス IDに対応する品質レベルのメディアデータを抽出する。そして、中継装置 40は、抽出したメディアデータを切替先端末 30へ送信する。また、中継装置 40は、切替元端末 20 へのメディアデータの送信を終了する。これにより、メディアサーバ 10のメディアデータの送信先が、携帯電話 20からテレビ装置 30に切り替わり、端末切替が完了する。

[0036] なお、図 10に示すフローにおいて、ステップ S 10；!〜 S110の順序は、本発明の主旨を逸脱しない限り、変更してもよい。

例えば、サービス発見処理のステップ S 108は、ステップ S 106 (メディアデータの中継処理）と、ステップ S107 (切断指示処理）との間にしてもよい。

[0037] また、図 10に示すフローのステップ S104において、メディアサーバ 10は、中継装置 40からの切替情報に含まれていた最大の品質レベルのメディアデータを送信する場合について説明した力これに限られない。例えば、メディアサーバ 10は、上記切替情報に含まれている品質レベルにかかわらず、あらかじめ設定されている最大の品質レベル（図 9)のメディアデータを送信してもよい。

[0038] 次に、図 10に示す中継装置 40の切替処理について詳述する。

図 11は、中継装置 40の切替処理を示すフローチャートである。

ステップ S200において、中継装置 40 (シグナリング部 402)は、切替元端末 20のメディア処理能力（切替元端末 20のデバイス IDを含む）を取得して蓄積する。中継装置 40は、切替元端末 20が WLAN3の通信範囲内に進入し、切替元端末 20から中継装置 40に対して接続処理（図 10の S 101)を行ったタイミングで、切替元端末のメディア処理能力を取得する。

具体的には、中継装置 40 (シグナリング部 402)は、切替元端末 20から、 NWインタフェース 408および通信制御部 407を介して、上記メディア処理能力（例えば、 352 X 288の解像度）を取得する。そして、メディア制御部 401は、シグナリング部 402により取得されたメディア処理能力を情報蓄積部 403に蓄積する。メディア制御部 401 は、上記メディア処理能力を蓄積する場合、あらかじめ設定された 3つのレベルから、当該メディア処理能力に該当するレベルを選定する。そして、メディア制御部 401は、切替元端末 20のデバイス ID、上記取得したメディア処理能力および上記選定したレベルを、メディア処理能力テーブル（図 7参照）に蓄積する。

なお、中継装置 40は、切替元端末 20以外の端末との間においても、その端末との接続時に上記デバイス ID、メディア処理能力およびレベルをメディア処理能力テーブルに蓄積する（図 7参照）。

[0039] ステップ S201において、中継装置 40 (シグナリング部 402)は、アクセス NWの切替指示を受け付ける（図 10の S102に対応する処理)。

具体的には、中継装置 40 (シグナリング部 402)は、切替元端末 20から、 NWインタフェース 408および通信制御部 407を介して、上記切替指示を示すメッセージ (切替元端末 20のデバイス IDおよび品質レベルを含む）を受け付ける。

[0040] ステップ S202において、中継装置 40 (メディア制御部 401)は、情報蓄積部 403のメディア処理能力テーブル（図 7)を参照して、切替元端末 20のメディア処理能力力他の接続端末 (本実施の形態では切替先端末 30)のメディア処理能力より高いかどうかを判断する。

そして、上記判断の結果、切替元端末 20のメディア処理能力が切替先端末 30より高くないと判断された場合（ステップ S202の No)、中継装置 40はステップ S203の処理を行う。他方、切替元端末 20のメディア処理能力が切替先端末 30より高いと判断された場合（ステップ S202の Yes)、中継装置 40はステップ S205の処理を行う。

[0041] ステップ S203において、中継装置 40 (メディア制御部 401)は、メディアサーバ 10 に対して、切替元端末 20より高いメディア処理能力を有する他の接続端末のメディア処理能力に対応する品質レベル (例えば、テレビ装置 30の解像度の高レベル）のメディアデータを送信するように要求する（図 10の S103に相当する処理)。

具体的には、中継装置 40 (メディア制御部 401)は、メディア能力処理テーブル（図 7)から、他の接続端末のメディア処理能力として品質とそのレベルを読み出す。そして、中継装置 40 (メディア制御部 401)は、品質とそのレベルによって規定されるメディァ処理能力を含むメッセージ (切替情報）を、シグナリング部 402、通信制御部 402 および NWインタフェース 408を介して、メディアサーバ 10に送信する。

[0042] 次に、ステップ S204において、中継装置 40は、メディアサーバ 10から、上記送信要求した拡張レイヤのメディアデータを受信して蓄積する（図 10の S 105に相当する処理)。

具体的には、メディアサーバ 10は、中継装置 40から送信要求されたメディア処理能力（例えば、解像度が高レベルを示す情報）に対応する品質レベルのメディアデータ（図 9参照）を中継装置 40に送信する。

そして、中継装置 40 (メディア受信部 404)は、メディアサーバ 10から送信されたメディアデータを、 NWインタフェース 408および通信制御部 407を介して受信する。中継装置 40 (メディアバッファ 405)は、メディア受信部 404で受信したメディアデータを一時的に保存する。

[0043] その後、中継装置 40のメディア送信部 406は、メディア制御部 401からの切替元端末 20のメディア処理能力のレベル（S200で取得.蓄積されたもの）の指示を受けて、メディアバッファ 405から、その品質レベルのメディアデータを抽出する。そして、中継装置 40のメディア送信部 406は、そのメディアデータを、通信制御部 407および N Wインタフェース 408を介して、切替元端末 20に送信する（図 10の S106に相当する処理)。

[0044] ステップ S205において、中継装置 40 (シグナリング部 402)は、切替先端末 30への切替指示を受け付ける（図 10の S 109に対応する処理)。

具体的には、中継装置 40 (シグナリング部 402)は、切替元端末 20から、 NWインタフェース 408および通信制御部 407を介して、上記切替指示を示すメッセージ (切替先端末 30のデバイス IDを含む）を受け付ける。

[0045] ステップ S206において、中継装置 40 (メディア送信部 406)は、ステップ S205で切替指示された切替先端末 30ヘメディアデータを、通信制御部 407および NWインタフェース 408を介して送信する（図 10の S110に相当する処理）。

具体的には、中継装置 40のメディア送信部 406は、メディア制御部 401からの切替先端末 30のメディア処理能力のレベルの指示を受けて、メディアバッファ 405から、その品質レベルのメディアデータを抽出する。そして、中継装置 40のメディア送信部 406は、そのメディアデータを、通信制御部 407および NWインタフェース 408を介して、切替先端末 30に送信する（図 10の S 110に相当する処理)。

[0046] 以上説明したように、中継装置 40は、切替元端末 20から切替先端末 30への切替時に、切替先端末 30の処理能力に応じたメディアデータを切替先端末 30に転送する。従って、切替元端末 20と切替先端末 30との処理能力が異なる場合にも、切替先端末 30の処理能力に応じたセッションを接続し直すことなぐ切替元端末 20に対して送信しているメディアデータを用いて、スムーズに切替えを行える。すなわち、切替先として選択される端末のメディア処理能力に依存せずに端末を切替えることができる。しかも、中継装置 40が転送するメディアデータは、中継装置 40内のメディアバッファ 405に保存されていたデータである。従って、切替先端末 30では、切替先端末 3 0内のデータ受信バッファにバッファリングすることなぐただちに再生することができるので、出力遅延が小さい。

[0047] (第 2の実施の形態）

第 2の実施の形態の中継装置は、接続中の複数の端末の中から所望の端末への接続に切り替える点力、第 1の実施の形態と異なる。

図 12は、本発明の第 2の実施の形態における中継装置を含む全体のシステム構成例を示す図である。なお、第 1の実施の形態と同一の構成には、第 1の実施の形態と同一の符号 (用語を含む）を用いて重複説明を適宜省略する。

図 12に示すように、中継装置 40は、 WLAN3を介してテレビ装置 30、 PDA30A およびノートパソコン 30Bに接続されている。つまり、第 2の実施の形態では、 3台の切替先端末の候補がある。中継装置 40を含むシステム全体のその他の構成は、第 1 の実施の形態のシステム（図 4参照）と同様である。

[0048] 図 13は、第 2の実施の形態の中継装置 40の切替処理を示すフローチャートである。図 13の切替処理は、第 1の実施の形態におけるフローの 2つのステップ S202、 S2 03に代えて、 2つのステップ S202A、 S203Aを含む点力第 1の実施の形態と異なる。以下では、上記 2つのステップ S201A、 S202Aを中心に説明する。

なお、図 7に示すメディア処理能力テーブルは、テレビ装置 30、 PDA30Aおよびノートパソコン 30Bの各々の解像度 3012およびレベル 3013の情報を有する。これは、次のような取得 ·蓄積処理が行われるからである（ステップ 200参照）。すなわち、テレビ装置 30、 PDA30Aおよびノートパソコン 30Bの各々の端末が、中継装置 40と接続する場合 (WLAN3へ接続する場合）、中継装置 40が、各々の端末から、自己のデバイス IDおよびメディア処理能力（例えば、実装するディスプレイの解像度の値)を取得する。次に、中継装置 40は、取得したメディア処理能力に該当するレベル (例えば、高レベルなど）を選定する。そして、中継装置 40は、上記メディア処理能力のレベルを、取得したデバイス IDごとに、メディア処理能力テーブル（図 7)に蓄積する。ステップ S202Aにおいて、中継装置 40 (メディア制御部 401)は、情報蓄積部 403 のメディア処理能力テーブル（図 7)を参照して、切替元端末 20のメディア処理能力よりも高い他の接続端末が存在するかどうかを判断する（図 10の S102に対応する処理)。

具体的には、中継装置 40 (メディア制御部 401)は、メディア処理能力テーブル（図 7)を参照して、テレビ装置 30、 PDA30Aおよびノートパソコン 30Bの中に、切替元端末 20のメディア処理能力（例えば、低レベルの解像度）よりも高い処理能力を有する端末が存在するかどうかを判断する。

そして、上記判断の結果、切替元端末 20よりメディア処理能力の高い端末が存在しないと判断された場合 (ステップ S202Aの No)、図 11の場合と同様に、中継装置 4 0は、ステップ S205の処理を行う。

他方、切替元端末 20よりメディア処理能力の高い端末が存在すると判断された場合（ステップ S202Aの Yes)、中継装置 40は、ステップ S203Aの処理を行う。

本実施の形態の中継装置 40 (メディア制御部 401)は、例えば、テレビ装置 30および PDA30Aが切替元端末 20のメディア処理能力よりも高い処理能力を有する端末であると判断し（ステップ S202Aの Yes)、ステップ S203Aに進む。 [0050] ステップ S203Aにおいて、中継装置 40 (メディア制御部 401)は、ステップ S202A で切替元端末 20よりメディア処理能力が高いと判断された接続端末 (例えば、テレビ装置 30、 PDA30A)の中から、最大のメディア処理能力に対応する品質レベル (例えば、テレビ装置 30の解像度が高レベル）のメディアデータ（図 9参照）をメディアサーバ 10に送信要求する（図 10の S103に相当する処理)。

具体的には、中継装置 40 (メディア制御部 401)は、上記メディア処理能力のレべルをメディア能力処理テーブル（図 7)から読み出す。そして、中継装置 40 (メディア制御部 401)は、メディア処理能力と上記読み出したレベルを含むメッセージ (切替情報）を、シグナリング部 402、通信制御部 402および NWインタフェース 408を介して、メディアサーバ 10に送信する。これにより、その後、中継装置 40は、図 11の場合と同様に、ステップ S204〜S206に進み、切替先端末へメディアデータを送信する。

[0051] すなわち、まず、ステップ S204において、中継装置 40は、メディアサーバ 10から、最大のメディア処理能力に対応する品質レベル (例えば、テレビ装置 30が有する高レベルの解像度）のメディアデータを受信して蓄積する。次に、ステップ S205において、中継装置 40は、切替元端末 20から、テレビ装置 30、 PDA30Aおよびノートパソコン 30Bのうちの所望の端末 (例えば、テレビ装置 30)への切替指示を受け付ける。この切替指示の方法は次のとおりである。まず、例えば、切替元端末 20 (ディスプレィ 202)において、所望の端末を選択するための選択メニュー画面（テレビ装置 30、 PDA30Aおよびノートパソコン 30Bを含む）を表示する。そして、切替元端末 20 (デイスプレイ 202)において、操作ボタン 201により、その選択メニュー画面の中から所望の端末を選択する。

[0052] そして、ステップ S206において、中継装置 40は、上記切替指示された端末、すなわち切替先端末 (例えば、テレビ装置 30)に対応する品質レベル (例えば、解像度が高レベル)のメディアデータを、切替先端末 (例えば、テレビ装置 30)へ送信する。なお、ステップ S205において、切替指示された端末が、最大のメディア能力を有しない場合、中継装置 40は、その端末に対応したレイヤのメディアデータをメディアサーバ 10に送信要求してもよい。

[0053] 以上説明したように、中継装置 40は、処理能力の異なる複数の端末のうち、最大の処理能力に対応したメディアデータをメディアサーバ 10に送信要求しておき（ステツプ S203A参照）、ステップ S205で切替指示された端末に切り替えて、その切替先端末に対応するメディアデータを切替先端末に送信する。

このため、複数の端末が、切替先端末の候補として存在していたとしても、中継装置 40は、端末の切替前に、最大の処理能力に対応するメディアデータを保存しておくこと力 Sできる。したがって、中継装置 40は、端末の処理能力のレベルにかかわらず、どの端末に切り替えたとしても、その端末に対応するメディアデータをメディアバッファ 405に保存済みのデータから取得して送信することができる。従って、切替元端末 20と切替先端末 30との処理能力が異なる場合にも、切替先端末 30の処理能力に応じたセッションを接続し直すことなぐ切替元端末 20に対して送信しているメディアデータを用いて、スムーズに切替えを行える。

また、切替先端末 30においては、中継装置 40から送信されたメディアデータをただちに再生することができ、出力遅延が小さくなる。

[0054] 以上に現時点で考えられる本発明の好適な実施の形態を説明した力本実施の形態に対して多様な変形が可能なことが理解され、そして、本発明の真実の精神と範囲内にあるそのようなすべての変形を添付の請求の範囲が含むことが意図されてい産業上の利用可能性

[0055] 本発明の中継装置は、異なる端末間で、サーバからのメディアデータをシームレスに切り替えるときに有用である。

Claims

請求の範囲

[1] データ配信装置から送信されるメディアデータを中継装置を介さずに受信中の受信端末との間で接続を行う通信部と、

前記受信端末及び前記受信端末とは異なる他の通信端末に関するメディアデータの処理能力を示す情報を格納するデータ記憶部と、

前記データ記憶部に格納された処理能力を示す情報に応じたメディアデータの送信要求を前記データ配信装置に行う制御部と、

前記データ配信装置から送信された前記メディアデータを受信する受信部と、前記受信部に受信された前記メディアデータを保存するバッファと、

前記受信端末力端末切替の指示を受け付けるシグナリング部と、

前記指示を受け付けた後、前記バッファに保存された前記他の通信端末の処理能力に応じた前記メディアデータを前記他の通信端末へ転送する転送部と、

を含む中継装置。

[2] 前記データ記憶部は、前記処理能力を示す情報として、前記受信端末または前記通信端末の処理能力の高さに応じて異なる複数のレベルを記憶しており、

前記制御部は、前記メディアデータの送信要求を行う場合、前記受信端末の前記処理能力のレベルと同等または高いレベルに対応する当該メディアデータの送信要求を行う、

請求項 1に記載の中継装置。

[3] 前記制御部は、最大の処理能力のレベルに対応する前記メディアデータの送信要求を行う、請求項 2に記載の中継装置。

[4] 前記メディアデータのデータ構成は、前記処理能力に対応する複数の階層を有する、請求項 1ないし請求項 3のいずれかに記載の中継装置。

[5] 前記処理能力は、フレームレート、 SN比または解像度のいずれかである、請求項 1 なレ、し請求項 4の!/、ずれかに記載の中継装置。

[6] データ配信装置から送信されるメディアデータを通信端末に送信する中継装置であってゝ

前記データ配信装置から送信されるメディアデータを前記中継装置を介しないで受信している第 1の通信端末からの接続要求を受けて、前記第 1の通信端末を接続する接続処理部と、

前記中継装置にあらかじめ接続された通信端末の処理能力を示す情報と前記第 1 の通信端末の処理能力を示す情報とを格納するデータ記憶部と、

前記データ記憶部に記憶された通信端末の処理能力と前記第 1の通信端末の処理能力のうちの最大の処理能力以上の所定の処理能力に対応したメディアデータを前記データ配信装置力受信してバッファに記憶するメディアデータ受信部と、前記バッファに記憶されたメディアデータから前記第 1の通信端末の処理能力に対応したメディアデータを読み出し、読み出したメディアデータを前記第 1の通信端末に送信するメディアデータ送信部と、

メディアデータの受信端末を、前記第 1の通信端末から前記中継装置に接続された第 2の通信端末に切り替える指示を受信する切替指示受信部と、

を備え、

前記メディアデータ送信部は、前記切替えの指示を受けて、前記バッファに記憶されたメディアデータから前記第 2の通信端末の処理能力に対応したメディアデータを読み出し、読み出したメディアデータを前記第 2の通信端末に送信する中継装置。データ配信装置からのメディアデータの中継処理をコンピュータによって行う中継方法であって、

前記コンピュータは、

前記メディアデータを前記コンピュータを介さずに受信中の受信端末との接続を行前記接続を行った前記受信端末を含む通信端末に関するメディアデータの処理能力をデータ記憶部に格納するステップと、

前記データ記憶部に格納された前記処理能力に応じたメディアデータの送信要求を前記データ配信装置に行うステップと、

前記データ配信装置から送信された前記メディアデータを受信するステップと、前記受信した前記メディアデータを保存するステップと、

前記受信端末力端末切替の指示を受け付けるステップと、前記受信端末とは異なる他の前記通信端末の前記処理能力を前記データ記憶部から取得し、当該取得した処理能力に応じた前記メディアデータを前記バッファから取得して、当該通信端末へ転送するステップと、

を含む中継方法。

データ配信装置力中継装置を介しないで第 1の通信端末が受信しているメディアデータを、中継装置に接続された第 2の通信端末にて受信するように切り替える受信端末の切替方法であって、

前記中継装置が、前記第 1の通信端末からの接続要求を受信するステップと、前記中継装置と前記第 1の通信端末とを接続するステップと、

前記中継装置が、前記第 1の通信端末の処理能力を、前記中継装置にあらかじめ接続された通信端末の処理能力を示す情報を記憶したデータ記憶部に格納するス前記中継装置が、前記データ記憶部に記憶された通信端末と前記第 1の通信端末の処理能力のうちの最大の処理能力以上の所定の処理能力に対応したメディアデータを前記データ配信装置から受信してバッファに記憶するステップと、

前記中継装置が、前記バッファに記憶されたメディアデータから前記第 1の通信端末の処理能力に対応したメディアデータを読み出し、読み出したメディアデータを前記第 1の通信端末に送信するステップと、

前記中継装置が、メディアデータの受信端末を、前記第 1の通信端末から前記第 2 の通信端末に切り替える指示を受信するステップと、

前記中継装置が、前記切替えの指示を受けて、前記バッファに記憶されたメディアデータから前記第 2の通信端末の処理能力に対応したメディアデータを読み出し、読み出したメディアデータを前記第 2の通信端末に送信するステップと、

を備えた受信端末の切替方法。