JP7647708B2 - 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム - Google Patents

Description

本開示は、情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラムに関する。

講師の画像と生徒の画像とを表示して教育を行うシステムが知られている（例えば、特許文献１参照）。

特開２０２１－１１０７８２号公報

生徒は、講師の画像を手本として練習するときに、講師の姿勢又は動きと生徒自身の姿勢又は動きとの差分を認識することによって、効率的に練習し得る。練習効率の向上が求められる。

かかる事情に鑑みてなされた本開示の目的は、生徒の練習効率の向上にある。

本開示の一実施形態に係る情報処理装置は、インタフェースと、制御部とを備える。前記インタフェースは、第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得する。前記制御部は、前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成する。前記制御部は、表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させるとともに、前記差分情報を前記第２ユーザに通知する。

本開示の一実施形態に係る情報処理システムは、前記情報処理装置を、第１情報処理装置及び第２情報処理装置のそれぞれとして備える。前記第１情報処理装置は、第１インタフェースと、第１制御部とを備える。前記第１インタフェースは、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得する。前記第１制御部は、前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成して前記第２情報処理装置に出力する。前記第２情報処理装置は、前記第１ユーザの画像と前記差分情報とを取得し、前記第１ユーザの画像を表示するとともに前記差分情報を前記第２ユーザに通知する第２インタフェースを備える。

本開示の一実施形態に係る情報処理方法は、第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得することと、前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成することと、表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させることと、前記差分情報を前記第２ユーザに通知することとを含む。

本開示の一実施形態に係る情報処理プログラムは、情報処理装置に、第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得することと、前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成することと、表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させることと、前記差分情報を前記第２ユーザに通知することとを含む動作を実行させる。

本開示の一実施形態に係る情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラムによれば、生徒の練習効率が向上し得る。

一実施形態に係る情報処理システムの構成例を示すブロック図である。 デプス画像に含まれる複数のウィンドウの例を示す図である。 第１ユーザ情報の表示例を示す図である。 第２ユーザ情報の表示例を示す図である。 一実施形態に係る情報処理方法の手順例を示すフローチャートである。 １台の第１情報処理装置に複数台の第２情報処理装置が接続する情報処理システムの構成例を示すブロック図である。 第３情報処理装置を更に備える情報処理システムの構成例を示すブロック図である。

（情報処理システム１の構成例）
図１に示されるように、一実施形態に係る情報処理システム１は、第１情報処理装置１０と、第２情報処理装置２０とを備える。第１情報処理装置１０又は第２情報処理装置２０は、区別される必要が無い場合、単に情報処理装置とも称される。情報処理システム１は、講師が示す手本となる動作を見ながら、生徒がその動作を真似することによって学習できるサービスを提供できるとする。学習の対象は、例えばダンス、書道、又は料理等を含んでよい。本実施形態に係る情報処理システム１は、ダンスのレッスンを提供するために用いられるとする。第１情報処理装置１０は、ダンスの手本を見せる講師によって使用されるとする。第２情報処理装置２０は、ダンスの手本を見ながらダンスを学習する生徒によって使用されるとする。情報処理システム１のユーザのうち、第１情報処理装置１０を使用する講師は、第１ユーザとも称される。第２情報処理装置２０を使用する生徒は、第２ユーザとも称される。

情報処理システム１が備える第１情報処理装置１０及び第２情報処理装置２０の数は、それぞれ１つに限られず、２つ以上であってよい。第１情報処理装置１０又は第２情報処理装置２０は、ノートＰＣ（Personal Computer）、デスクトップＰＣ、又はタブレットＰＣ等のＰＣを含んで構成されてよい。第１情報処理装置１０又は第２情報処理装置２０は、ユーザが所持するスマートフォン又はタブレット等の携帯端末を含んで構成されてもよい。第１情報処理装置１０又は第２情報処理装置２０は、これらの例に限られず、種々の機器を含んで構成されてよい。

第１情報処理装置１０と第２情報処理装置２０とは、ネットワークを介して互いに有線又は無線で通信可能に接続されてよい。第１情報処理装置１０と第２情報処理装置２０とは、ネットワークを介さない有線又は無線の通信によって互いに通信可能に接続されてもよい。

第１情報処理装置１０は、制御部１１と、記憶部１２と、インタフェース１３とを備える。第２情報処理装置２０は、制御部２１と、記憶部２２と、インタフェース２３とを備える。制御部１１は、第１制御部とも称される。制御部２１は、第２制御部とも称される。インタフェース１３は、第１インタフェースとも称される。インタフェース２３は、第２インタフェースとも称される。

制御部１１は、第１情報処理装置１０の少なくとも１つの構成部を制御する。制御部２１は、第２情報処理装置２０の少なくとも１つの構成部を制御する。制御部１１及び２１は、同一又は類似に構成されてよい。制御部１１又は２１は、１つ以上のプロセッサを含んで構成されてよい。本実施形態において「プロセッサ」は、汎用のプロセッサ、特定の処理に特化した専用のプロセッサ等であるが、これらに限られない。制御部１１又は２１は、１つ以上の専用回路を含んで構成されてもよい。専用回路は、例えば、ＦＰＧＡ（Field-Programmable Gate Array）又はＡＳＩＣ（Application Specific Integrated Circuit）を含んでよい。制御部１１又は２１は、プロセッサの代わりに専用回路を含んで構成されてもよいし、プロセッサとともに専用回路を含んで構成されてもよい。

記憶部１２は、第１情報処理装置１０の動作に用いられる任意の情報を格納する。記憶部２２は、第２情報処理装置２０の動作に用いられる任意の情報を格納する。記憶部１２又は２２は、同一又は類似に構成されてよい。記憶部１２又は２２は、システムプログラム、又はアプリケーションプログラム等を格納してもよい。記憶部１２又は２２は、例えば半導体メモリ、磁気メモリ、又は光メモリ等を含んで構成されてよいが、これらに限られず他の種々のメモリを含んで構成されてもよい。記憶部１２又は２２は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部１２又は２２は、磁気ディスク等の電磁記憶媒体を含んで構成されてもよい。記憶部１２又は２２は、非一時的なコンピュータ読み取り可能な媒体を含んで構成されてもよい。記憶部１２は、制御部１１に含まれてもよい。記憶部２２は、制御部２１に含まれてもよい。

インタフェース１３は、第１情報処理装置１０において、制御部１１から情報又はデータ等を出力したり、制御部１１に情報又はデータ等を入力したりする。インタフェース２３は、第２情報処理装置２０において、制御部２１から情報又はデータ等を出力したり、制御部２１に情報又はデータ等を入力したりする。インタフェース１３は、ネットワークを介して、又は、ネットワークを介さずに、第２情報処理装置２０のインタフェース２３と通信可能に構成される通信モジュールを含んでよい。インタフェース２３は、ネットワークを介して、又は、ネットワークを介さずに、第１情報処理装置１０のインタフェース１３と通信可能に構成される通信モジュールを含んでよい。通信モジュールは、例えば４Ｇ（4th Generation）又は５Ｇ（5th Generation）等の移動体通信規格に対応してよい。通信モジュールは、ＬＡＮ（Local Area Network）等の通信規格に対応してもよい。通信モジュールは、有線又は無線の通信規格に対応してもよい。通信モジュールは、これらに限られず、種々の通信規格に対応してよい。インタフェース１３又は２３は、外部の通信モジュールに接続可能に構成されてもよい。

ネットワークは、インターネット、少なくとも１つのＷＡＮ（Wide Area Network）、少なくとも１つのＭＡＮ（Metropolitan Area Network）、又はこれらの任意の組合せを含んで構成されてよい。ネットワークは、少なくとも１つの無線ネットワーク、少なくとも１つの光ネットワーク、又はこれらの任意の組合せを含んで構成されてもよい。無線ネットワークは、例えば、アドホックネットワーク、セルラーネットワーク、無線ＬＡＮ（Local Area Network）、衛星通信ネットワーク、又は地上マイクロ波ネットワークを含んで構成されてよい。

インタフェース１３又は２３は、ＵＳＢ（Universal Serial Bus）又はBluetooth（登録商標）等の規格に対応するように構成されてもよい。

インタフェース１３又は２３は、ユーザから情報又はデータ等の入力を受け付ける入力デバイスを含んで構成されてよい。入力デバイスは、例えば、タッチパネル若しくはタッチセンサ、又はマウス等のポインティングデバイスを含んで構成されてよい。入力デバイスは、物理キーを含んで構成されてもよい。入力デバイスは、マイク等の音声入力デバイスを含んで構成されてもよい。インタフェース１３又は２３は、外部の入力デバイスに接続可能に構成されてもよい。

インタフェース１３又は２３は、ユーザに対して情報又はデータ等を出力する出力デバイスを含んで構成されてよい。出力デバイスは、例えば、画像又は文字若しくは図形等の視覚情報を出力する表示デバイスを含んでよい。表示デバイスは、例えば、ＬＣＤ（Liquid Crystal Display）、有機ＥＬ（Electro-Luminescence）ディスプレイ若しくは無機ＥＬディスプレイ、又は、ＰＤＰ（Plasma Display Panel）等を含んで構成されてよい。表示デバイスは、これらのディスプレイに限られず、他の種々の方式のディスプレイを含んで構成されてよい。表示デバイスは、ＬＥＤ（Light Emitting Diode）又はＬＤ（Laser Diode）等の発光デバイスを含んで構成されてよい。表示デバイスは、他の種々のデバイスを含んで構成されてよい。出力デバイスは、例えば、音声等の聴覚情報を出力するスピーカ等の音声出力デバイスを含んでよい。出力デバイスは、例えば振動等の触覚情報を出力するバイブレータ等の振動デバイスを含んでよい。出力デバイスは、これらの例に限られず、他の種々のデバイスを含んでよい。インタフェース１３又は２３は、外部の出力デバイスに接続可能に構成されてもよい。出力デバイスは、例えばリストバンド等のように、第１ユーザ又は第２ユーザが装着可能に構成されてよい。出力デバイスは、例えば書道で用いる筆、又は、料理で用いる包丁若しくはまな板等のように、第１ユーザ又は第２ユーザが動作の練習の際に使用する道具として構成されてよい。

第１情報処理装置１０は、必須ではないが撮影部１４を更に備える。第２情報処理装置２０は、必須ではないが撮影部２４を更に備える。撮影部１４又は２４は、ＲＧＢ画像を撮影するカメラ等の撮影デバイスを含んでよい。撮影部１４又は２４は、デプス画像を取得するデプスセンサ又はステレオカメラ等の測距デバイスを含んでよい。第１情報処理装置１０又は第２情報処理装置２０は、外部の撮影デバイス又は測距デバイスから、インタフェース１３又は２３を介して、画像又は測距データ（デプスデータ）を取得してもよい。撮影部１４又は２４の撮影デバイス又は測距デバイスの機能は、インタフェース１３又は２３の機能に含まれてもよい。

（情報処理システム１の動作例）
本実施形態に係る情報処理システム１において、第１情報処理装置１０は、第１ユーザが実演するダンスの手本を、撮影部１４によって撮影する。撮影部１４は、第１ユーザの姿勢を静止画として撮影してよい。撮影部１４は、第１ユーザの動きを動画として撮影してよい。第１情報処理装置１０は、撮影部１４によって撮影した画像を第２情報処理装置２０に出力する。第２情報処理装置２０は、第１情報処理装置１０から取得した画像を第２ユーザが見て学習できるように、第１情報処理装置１０から取得した画像をインタフェース２３の表示デバイスで表示する。

＜第１情報処理装置１０で撮影した画像の第２情報処理装置２０における表示＞
情報処理システム１は、第１情報処理装置１０で第１ユーザのＲＧＢ画像とデプス画像とを撮影し、第２情報処理装置２０でＲＧＢ画像とデプス画像とに基づいて第１ユーザの立体的な画像を表示してよい。以下、立体的な画像を表示するための具体的な動作が説明される。

第１情報処理装置１０の撮影部１４は、第１ユーザの身体の少なくとも一部のＲＧＢ画像を撮影するとともに、第１ユーザの身体の少なくとも一部の部位までの距離を測定する。撮影部１４は、図２に示されるように、計測範囲ＭＲの中に位置する第１ユーザの身体の少なくとも一部に含まれる各部までの距離を測定し、計測範囲ＭＲの中における第１ユーザのデプス画像を生成する。デプス画像は、計測範囲ＭＲ内に設定された、複数のウィンドウＷ１，・・・，Ｗｎを含むとする。複数のウィンドウＷ１，・・・，Ｗｎは、撮影部１４から離れる方向であるデプス方向Ｚに並んでいる。すなわち、複数のウィンドウＷ１，・・・，Ｗｎは、それぞれ異なるデプスに位置する。

第１ユーザの身体の各部までの距離は、各ウィンドウが位置するデプスに対応づけられる。デプス画像に含まれる各ウィンドウは、第１ユーザの身体の部位のうち、各ウィンドウに対応するデプスに位置する部位のデータを表す。デプス画像は、各ウィンドウに対応するデプスに位置する部位のデータの集合として、第１ユーザの身体の少なくとも一部の部位の立体データを表す。ウィンドウの枚数（ｎ）は、２以上の任意の整数であり、例えば３０等の値に設定され得る。

第１情報処理装置１０の制御部１１は、デプス画像に含まれる複数のウィンドウＷ１，・・・，Ｗｎの中から、第１ユーザの身体の少なくとも一部の部位の位置に対応するウィンドウＷｊを特定する。制御部１１は、ウィンドウＷｊを識別するウィンドウ識別子を第２情報処理装置２０に送信する。第２情報処理装置２０の制御部２１は、ウィンドウ識別子を第１情報処理装置１０から受信すると、複数のウィンドウＷ１，・・・，Ｗｎの中から、受信したウィンドウ識別子に対応するウィンドウＷｊを特定する。

第１情報処理装置１０の制御部１１は、デプス画像の各ピクセルについて、計測された距離をウィンドウＷｊ内の相対距離に換算し、得られた換算値をピクセルデータとして第２情報処理装置２０に送信する。第２情報処理装置２０の制御部２１は、デプス画像の各ピクセルについて、ピクセルデータを第１情報処理装置１０から受信し、受信したピクセルデータで示されるウィンドウＷｊ内の相対距離を、計測された距離に換算することで、デプス画像を復元する。制御部２１は、復元したデプス画像とＲＧＢ画像のピクセルデータとを合成してインタフェース２３の表示デバイスで表示する。

デプス画像は、以上述べてきたようにウィンドウの集合として構成されてもよいが、これに限られず、第１ユーザの身体の各部までの距離を各画素に割り当てた１枚の距離マップとして表されてもよい。デプス画像は、種々の態様で生成されてよい。

第１ユーザを撮影したＲＧＢ画像、及び、第１ユーザのデプス画像は、第１ユーザに関する情報に含まれるとする。第１ユーザに関する情報は、第１ユーザ情報とも称される。第１情報処理装置１０は、第１ユーザ情報を、インタフェース１３によって第２情報処理装置２０に出力する。

第２情報処理装置２０の制御部２１は、第１情報処理装置１０から取得した第１ユーザ情報に基づいて、第１ユーザが実演するダンスの手本の画像をインタフェース２３の表示デバイスに表示させる。インタフェース２３の表示デバイスは、第１ユーザが実演するダンスの手本の画像を、ＲＧＢ画像とデプス画像とを合成した立体的な画像として表示してもよいし、ＲＧＢ画像だけで表示してもよい。制御部２１は、ＲＧＢ画像の各画素と、各画素に対応するデプス情報とに基づいて立体的な画像を生成してよい。制御部２１は、デプス画像に基づいて第１ユーザのポリゴンを生成し、ＲＧＢ画像をポリゴンにレンダリングすることによって立体的な画像を生成してもよい。

第２情報処理装置２０は、ダンスの手本の画像を見てダンスを練習する第２ユーザを、撮影部２４によって撮影する。撮影部２４は、第２ユーザの姿勢を静止画として撮影してよい。撮影部２４は、第２ユーザの動きを動画として撮影してよい。また、撮影部２４は、第２ユーザの身体の少なくとも一部の部位までの距離を測定し、第２ユーザのデプス画像として生成する。第２ユーザを撮影したＲＧＢ画像、及び、第２ユーザのデプス画像は、第２ユーザに関する情報に含まれるとする。第２ユーザに関する情報は、第２ユーザ情報とも称される。第２情報処理装置２０は、第２ユーザ情報を、インタフェース２３によって第１情報処理装置１０に出力する。第１情報処理装置１０は、インタフェース１３の表示デバイスによって第２ユーザの画像を表示してもよい。

＜第１ユーザ情報と第２ユーザ情報との差分の抽出＞
情報処理システム１は、第１ユーザ情報と第２ユーザ情報との差分を抽出して、第１ユーザ又は第２ユーザに通知する。第１ユーザ情報と第２ユーザ情報との差分の抽出及び差分の通知は、第１情報処理装置１０の制御部１１によって実行されてもよいし、第２情報処理装置２０の制御部２１によって実行されてもよい。以下、第１情報処理装置１０の制御部１１が第１ユーザ情報と第２ユーザ情報との差分を抽出して通知する動作例が説明される。

第１情報処理装置１０の制御部１１は、撮影部１４で撮影した第１ユーザの画像を解析し、第１ユーザの骨格情報を抽出してよい。図３Ａに示されるように、制御部１１は、例えば、第１ユーザＵ１の右腕の肩の関節に対応するジョイントＵ１１の位置、肘の関節に対応するジョイントＵ１２の位置、又は、手先に対応するジョイントＵ１３の位置を検出してよい。制御部１１は、ジョイントＵ１１とＵ１２とを結ぶボーンＵ１４、又は、ジョイントＵ１２とＵ１３とを結ぶボーンＵ１５を検出してよい。第１情報処理装置１０は、第１ユーザの骨格情報を、インタフェース１３によって第２情報処理装置２０に出力してよい。第１ユーザの骨格情報は、第１ユーザ情報に含まれてよい。

制御部１１は、第２情報処理装置２０から取得した第２ユーザの画像を解析し、第２ユーザの骨格情報を抽出してよい。図３Ｂに示されるように、制御部１１は、例えば、第２ユーザＵ２の右腕の肩の関節に対応するジョイントＵ２１の位置、肘の関節に対応するジョイントＵ２２の位置、又は、手先に対応するジョイントＵ２３の位置を検出してよい。制御部１１は、ジョイントＵ２１とＵ２２とを結ぶボーンＵ２４、又は、ジョイントＵ２２とＵ２３とを結ぶボーンＵ２５を検出してよい。第２情報処理装置２０の制御部２１が第２ユーザの骨格情報を抽出し、第１情報処理装置１０に出力してもよい。

制御部１１は、第１ユーザ又は第２ユーザの動作の種類に基づいて、抽出する骨格情報を設定してよい。制御部１１は、第１ユーザ又は第２ユーザがダンスの動作を行う場合、第１ユーザ又は第２ユーザの全身の骨格情報を抽出してよい。制御部１１は、第１ユーザ又は第２ユーザが書道又は料理の動作を行う場合、第１ユーザ又は第２ユーザの上半身の骨格情報を抽出してよい。制御部１１は、骨格情報を抽出する対象となる身体の部位を第１ユーザが指定する入力を、第１情報処理装置１０の入力デバイスで受け付けてよい。

制御部１１は、第１ユーザの骨格情報と第２ユーザの骨格情報とを比較し、第１ユーザが実演するダンスの見本に対する、第２ユーザの姿勢又は動きの違いを検出する。制御部１１は、例えば、図３Ａの第１ユーザＵ１のボーンＵ１４又はＵ１５と、図３Ｂの第２ユーザＵ２のボーンＵ２４又はＵ２５との差分を検出してよい。制御部１１は、差分を表す値として、ボーンの方向を表す角度の差を算出してもよいし、ボーンの位置を表す座標の差又はボーンの位置がずれている距離を算出してもよい。制御部１１は、デプス方向を考慮した３次元座標でボーンの位置を表してもよいし、デプス方向を無視した２次元座標でボーンの位置を表してもよい。

制御部１１は、図３Ａの第１ユーザＵ１のジョイントＵ１１、Ｕ１２又はＵ１３の位置と、図３Ｂの第２ユーザＵ２のジョイントＵ２１、Ｕ２２又はＵ２３の位置との差分を検出してもよい。制御部１１は、差分を表す値として、ジョイントの位置を表す座標の差又はジョイントの位置がずれている距離を算出してよい。制御部１１は、デプス方向を考慮した３次元座標でジョイントの位置を表してもよいし、デプス方向を無視した２次元座標でジョイントの位置を表してもよい。

制御部１１は、第１ユーザの体格と第２ユーザの体格との差を考慮して、差分を検出してよい。制御部１１は、例えば、第１ユーザと第２ユーザとで少なくとも一部のボーンの方向を比較することによって、体格差による影響を低減してよい。制御部１１は、例えば、第１ユーザと第２ユーザとで互いに対応する身体の少なくとも一部の部位のバランスを比較することによって、体格差による影響を低減してよい。

制御部１１は、第１ユーザの画像と第２ユーザの画像との乖離の大きさを数値として表す乖離度を、第１ユーザの姿勢又は動きと第２ユーザの姿勢又は動きとの差分として算出してもよい。差分が大きいほど乖離度が大きい値で算出されるとする。制御部１１は、第２ユーザの身体の少なくとも一部の部位について乖離度を算出してもよい。制御部１１は、第１ユーザ及び第２ユーザそれぞれの画像の乖離度を算出することによって、違いを検出してもよい。制御部１１は、例えば、図３Ａの第１ユーザＵ１の左手の先端の画像を第１ユーザの姿勢の注目点Ｕ１６として解析してよい。また、制御部１１は、図３Ｂの第２ユーザＵ２の左手の先端の画像を第２ユーザの姿勢の注目点Ｕ２６として解析してよい。制御部１１は、注目点Ｕ１６及びＵ２６に対応する画像の解析結果に基づいて、第１ユーザと第２ユーザとの間の姿勢の差分として画像の乖離度を算出してもよい。

制御部１１は、第１ユーザ及び第２ユーザの画像が動画である場合、動画の少なくとも一部のフレームにおいて、第１ユーザ及び第２ユーザの骨格情報を抽出して差分を検出してよい。制御部１１は、動画の少なくとも一部のフレームにおいて、第１ユーザ及び第２ユーザそれぞれの姿勢の注目点を解析して差分を検出してよい。

制御部１１は、第１ユーザの動画のフレームと第２ユーザの動画のフレームとを同期させて比較することによって差分を検出してよい。例えば、制御部１１は、同一の時刻に対応するフレームに写っている第１ユーザの姿勢と第２ユーザの姿勢との差分を、第１ユーザの動きに対する第２ユーザの動きの違いとして検出してよい。また、例えば、制御部１１は、ある時刻に対応するフレームに写っている第１ユーザの姿勢と、異なる時刻に対応するフレームに写っている第２ユーザの姿勢とを比較してもよい。制御部１１は、ある時刻に対応するフレームに写っている第１ユーザの姿勢に対して、異なる時刻に対応するフレームに写っている第２ユーザの姿勢が一致する場合に、第２ユーザの動きのタイミングが第１ユーザの動きに対してずれていることを検出してもよい。

制御部１１は、第１ユーザの動画の複数のフレームのそれぞれと、第２ユーザの動画の複数のフレームのそれぞれとを比較することによって、第１ユーザの動作スピードと第２ユーザの動作スピードとの差分を検出してもよい。

制御部１１は、第１ユーザ及び第２ユーザの身体のどの部位を比較対象とするかを、第１ユーザが指定する入力を受け付けてよい。比較対象とする部位は、比較対象部位とも称される。制御部１１は、第１情報処理装置１０の表示デバイスに第１ユーザ又は第２ユーザの画像を表示し、第１ユーザが比較対象部位を指定する入力を、第１情報処理装置１０の入力デバイスで受け付けてよい。制御部１１は、第１情報処理装置１０の表示デバイスに第１ユーザ又は第２ユーザの骨格情報を表示し、第１ユーザが比較対象部位としてボーン又はジョイントを指定する入力を、第１情報処理装置１０の入力デバイスで受け付けてよい。

制御部１１は、第１ユーザと第２ユーザとで比較する対象とする姿勢又は動きのバランスを、第１ユーザが指定する入力を受け付けてもよい。

制御部１１は、第１ユーザ及び第２ユーザの動画に含まれる複数のフレームのうち、どのフレームを比較対象とするかを、第１ユーザが指定する入力を受け付けてよい。比較対象とするフレームは、比較対象フレームとも称される。制御部１１は、第１情報処理装置１０の表示デバイスに第１ユーザ又は第２ユーザの動画をフレーム毎に表示し、第１ユーザが比較対象フレームを指定する入力を、第１情報処理装置１０の入力デバイスで受け付けてよい。

制御部１１は、第１ユーザ及び第２ユーザの動画のどの期間を比較対象とするかを、第１ユーザが指定する入力を受け付けてもよい。比較対象とする期間は、比較対象期間とも称される。制御部１１は、第１情報処理装置１０の表示デバイスに第１ユーザ又は第２ユーザの動画を表示し、第１ユーザが比較対象期間の開始と終了とを指定する入力を、第１情報処理装置１０の入力デバイスで受け付けてよい。比較対象期間は、動画の１フレームだけを含んでもよい。つまり、比較対象期間は、比較対象フレームを含んでよい。

制御部１１は、比較対象部位、又は、比較対象期間の開始及び終了を、第１ユーザ又は第２ユーザの画像に基づいて自動的に決定してもよい。

以上述べてきたように、制御部１１は、第１ユーザ及び第２ユーザそれぞれの画像に基づいて、第１ユーザの姿勢又は動きに対する、第２ユーザの姿勢又は動きの差分を検出してよい。差分は、第２ユーザの身体の少なくとも一部の部位について算出され得る。差分は、ボーン又はジョイントの位置ずれ量として算出され得る。差分は、ボーンの方向ずれ量として算出され得る。差分は、動きのタイミングがずれた時間差として算出され得る。差分は、動きのスピードの差として算出され得る。

＜差分情報の通知＞
第１情報処理装置１０の制御部１１は、第１ユーザの姿勢又は動きに対する、第２ユーザの姿勢又は動きの差分を検出し、検出した差分に関する情報を第２情報処理装置２０に出力する。差分に関する情報は、差分情報とも称される。

第２情報処理装置２０の制御部２１は、インタフェース２３の表示デバイスに第２ユーザの画像を表示させつつ、差分情報を第２ユーザに通知する。例えば、制御部２１は、第１ユーザの姿勢又は動きとの差分が大きいことを示す情報を第２ユーザの画像に重畳した画像を生成し、表示デバイスに表示させてよい。制御部２１は、差分が大きい部分を強調するマーカ画像を第２ユーザの画像に重畳してよい。

制御部２１は、第２ユーザの画像を表示デバイスに表示させつつ、第２ユーザの姿勢又は動きと第１ユーザの姿勢又は動きとの差分が大きくなったタイミングで、インタフェース２３の出力デバイスによって第２ユーザに差分が大きくなったことを通知してもよい。つまり、制御部２１は、表示デバイスにおける第２ユーザの画像の表示と、第２ユーザに対する差分情報の通知とを同期させてよい。制御部２１は、出力デバイスによる通知として、例えば、差分が大きくなったタイミングで音声を出力してもよいし、第２ユーザに与える振動を出力してもよい。制御部２１は、第１ユーザの画像を表示デバイスに表示させつつ、第２ユーザに差分情報を通知してもよい。

制御部２１は、差分を表す値が比較閾値以上になったときに差分が大きくなったと判定してよい。比較閾値は適宜定められ得る。比較閾値は第１ユーザによる指定に基づいて設定されてもよい。比較閾値は、差分が大きいと第１ユーザによって指摘された第２ユーザの姿勢又は動きに基づいて設定されてもよい。

第２ユーザは、通知された差分情報を確認することによって、ダンスの手本となる第１ユーザの姿勢又は動きと、第２ユーザ自身の姿勢又は動きとの差分が大きくなったことを認識し得る。第２ユーザは、ダンスの手本と自分自身との差分が大きくなった姿勢又は動作を認識することによって、自分自身の姿勢又は動きをダンスの手本に近づけるように練習できる。つまり、本実施形態に係る情報処理システム１によれば、第２ユーザである生徒の練習効率が向上し得る。

差分情報は、第１ユーザに対して通知されてもよい。具体的に、第１情報処理装置１０の制御部１１は、第１ユーザの画像を表示デバイスに表示させつつ、差分情報を第１ユーザに通知してよい。制御部１１は、第２ユーザの画像を表示デバイスに表示させつつ、第１ユーザに差分情報を通知してもよい。

＜情報処理方法の手順例＞
以上述べてきたように、本実施形態に係る情報処理システム１において、第１情報処理装置１０及び第２情報処理装置２０は、第１ユーザの手本を見て練習する第２ユーザに対して、第２ユーザの姿勢又は動きの差分情報を通知する。第１情報処理装置１０の制御部１１、及び、第２情報処理装置２０の制御部２１は、例えば図４に例示されるフローチャートの手順を含む情報処理方法を実行してよい。情報処理方法は、制御部１１及び２１に実行させる情報処理プログラムとして実現されてもよい。情報処理プログラムは、非一時的なコンピュータ読み取り可能媒体に格納されてよい。

第１情報処理装置１０の制御部１１は、第１ユーザ情報の取得を開始する（ステップＳ１１）。第２情報処理装置２０の制御部２１は、第２ユーザ情報の取得を開始する（ステップＳ２１）。制御部１１と制御部２１とは、情報の取得の開始を同期させてよい。具体的に、制御部１１は、第１ユーザ情報の取得を開始するときに、制御部２１に対して情報の取得の開始を通知してよい。制御部２１は、制御部１１からの通知に応じて第２ユーザ情報の取得を開始してよい。

制御部１１は、取得した第１ユーザ情報を解析し、記憶部１２に格納する（ステップＳ１２）。制御部２１は、取得した第２ユーザ情報を解析し、記憶部２２に格納する（ステップＳ２２）。

制御部１１は、第１ユーザ情報の取得を終了する（ステップＳ１３）。制御部２１は、第２ユーザ情報の取得を終了する（ステップＳ２３）。制御部１１と制御部２１とは、情報の取得の終了を同期させてよい。具体的に、制御部１１は、第１ユーザ情報の取得を終了するときに、制御部２１に対して情報の取得の終了を通知してよい。制御部２１は、制御部１１からの通知に応じて第２ユーザ情報の取得を終了してよい。

制御部２１は、第２ユーザ情報を第１情報処理装置１０に出力する（ステップＳ２４）。制御部１１は、第２情報処理装置２０から第２ユーザ情報を取得する（ステップＳ１４）。制御部１１は、第１ユーザ情報と第２ユーザ情報との比較に基づいて差分情報を生成し、生成した差分情報を第２情報処理装置２０に出力する（ステップＳ１５）。制御部２１は、第１情報処理装置１０から差分情報を取得する（ステップＳ２５）。

制御部２１は、第２ユーザの画像を表示しつつ、差分情報を第２ユーザに通知する（ステップＳ２６）。制御部２１は、ステップＳ２６の手順の実行後、図４のフローチャートの手順の実行を終了する。制御部１１は、ステップＳ１５の手順の実行後、図４のフローチャートの手順の実行を終了する。制御部１１は、ステップＳ１５の手順の実行後、第１ユーザの画像を表示しつつ、差分情報を第１ユーザに通知してもよい。

＜小括＞
以上述べてきたように本実施形態に係る情報処理システム１、第１情報処理装置１０及び第２情報処理装置２０によれば、第２ユーザは、第１ユーザが示す手本となる姿勢又は動きと第２ユーザ自身の姿勢又は動きとの差分を認識しやすくなる。第２ユーザは、手本との差分を認識することによって、差分を小さくするように練習できる。その結果、第２ユーザの練習効率が向上し得る。

（他の実施形態）
以下、他の実施形態に係る情報処理システム１の構成例が説明される。

＜複数の第２情報処理装置２０を備える構成＞
情報処理システム１は、図５に示されるように、１台の第１情報処理装置１０と、複数の第２情報処理装置２０とを備えてよい。各第２情報処理装置２０は、それぞれ異なる第２ユーザによって使用され、それぞれ異なる第２ユーザ情報を取得する。第１情報処理装置１０は、各第２情報処理装置２０と通信可能に接続される。第１情報処理装置１０と各第２情報処理装置２０とは、ネットワークを介して互いに有線又は無線で通信可能に接続されてよい。第１情報処理装置１０と各第２情報処理装置２０とは、ネットワークを介さない有線又は無線の通信によって互いに通信可能に接続されてもよい。

第１情報処理装置１０の制御部１１は、撮影部１４で第１ユーザ情報を取得するとともに、各第２情報処理装置２０から、各第２情報処理装置２０を使用する第２ユーザの、それぞれ異なる第２ユーザ情報を取得する。制御部１１は、第１ユーザ情報と、各第２ユーザ情報との差分情報を生成する。つまり、制御部１１は、異なる第２ユーザ毎に差分情報を生成する。

制御部１１は、各第２ユーザについて生成した差分情報に基づいて、第２ユーザを複数のグループに分類してよい。例えば、制御部１１は、第１ユーザの特定の姿勢又は動きに対する、第２ユーザの姿勢又は動きの差分が同一又は類似である第２ユーザを、特定の姿勢又は動きを間違えるグループとして分類してよい。制御部１１は、第１ユーザの特定の姿勢又は動きに対する差分が所定値よりも大きくなる第２ユーザを、特定の姿勢又は動きを間違えるグループとして分類してもよい。所定値は、骨格情報に含まれるジョイント又はボーンの位置又は向きの差分の閾値として設定されてよい。所定値は、第１ユーザの画像と第２ユーザの画像との乖離度の閾値として設定されてもよい。

制御部１１は、特定のタイミング又は期間における姿勢又は動きの差分が同一又は類似となる第２ユーザを、特定のタイミング又は期間における姿勢又は動きを間違えるグループとして分類してよい。制御部１１は、特定のタイミング又は期間における姿勢又は動きの差分が所定値よりも大きくなる第２ユーザを、特定のタイミング又は期間における姿勢又は動きを間違えるグループとして分類してもよい。

特定のタイミング又は特定の期間の開始及び終了は、第１ユーザによって指定されてよい。制御部１１は、例えば、第１ユーザがインタフェース１３の入力デバイスによって入力した情報に基づいて、特定のタイミング又は特定の期間の開始及び終了を設定してよい。制御部１１は、例えば、第１ユーザが合図の動作をしたタイミングを、特定のタイミング又は特定の期間の開始及び終了として設定してよい。合図の動作は、例えば第１ユーザの特定のジェスチャを含んでよいし、第１ユーザが片目をつむる等の特定の表情を含んでもよい。

特定のタイミング又は特定の期間の開始及び終了は、例えばダンスの動作で用いる楽曲の中の区切りとなるタイミング又は楽曲の開始及び終了等に合わせて設定されてよい。特定のタイミング又は特定の期間の開始及び終了は、例えば書道で書く文字に含まれる重要なポイント又は一画毎の開始及び終了等に合わせて設定されてよい。特定のタイミング又は特定の期間の開始及び終了は、例えば料理の工程に含まれる各作業の重要なポイント又は作業の区切り等に合わせて設定されてよい。

第１情報処理装置１０は、同じグループに分類された複数の第２ユーザが使用する複数の第２情報処理装置２０と通信してよい。同じグループに分類された第２ユーザは、姿勢又は動きの差分が同一又は類似である。つまり、同じグループに分類された第２ユーザは、同一又は類似の間違いをしている。そこで、第１情報処理装置１０を使用する第１ユーザは、同じグループに分類された第２ユーザが使用する第２情報処理装置２０と通信して、間違っている姿勢又は動作を重点的に指導できる。その結果、第２ユーザの練習効率が向上し得る。

同じグループに分類された複数の第２ユーザが使用する複数の第２情報処理装置２０同士が通信してもよい。同じグループに分類された第２ユーザは、姿勢又は動きの間違いを互いに指摘してよい。その結果、第２ユーザの練習効率が向上し得る。

制御部１１は、第２ユーザを、特定の姿勢又は動きを間違えるグループと、特定の姿勢又は動きを間違えないグループとに分類してもよい。特定の姿勢又は動きを間違えるグループに分類された第２ユーザが使用する第２情報処理装置２０は、特定の姿勢又は動きを間違えないグループに分類された第２ユーザが使用する第２情報処理装置２０と通信してもよい。この場合、特定の姿勢又は動きを間違えない第２ユーザが、特定の姿勢又は動きを間違える第２ユーザに対して指導できる。第２ユーザ同士で指導できることによって、第１ユーザの負担が低減され得る。また、第２ユーザが第１ユーザを待たずに練習できる。その結果、第２ユーザの練習効率が向上し得る。

＜第３情報処理装置３０を備える構成例＞
情報処理システム１は、図６に示されるように、第３情報処理装置３０を更に備えてよい。第３情報処理装置３０は、ホストサーバとして機能してよい。この場合、第１情報処理装置１０は、第１ユーザによって使用されるクライアントサーバ（端末装置）として機能してよい。第２情報処理装置２０は、第２ユーザによって使用されるクライアントサーバ（端末装置）として機能してよい。第３情報処理装置３０は、ホストサーバとして、クライアントサーバから第１ユーザ情報及び第２ユーザ情報を取得して差分情報を生成し、第１ユーザ及び第２ユーザそれぞれのクライアントサーバに差分情報を出力してよい。

情報処理システム１は、第１情報処理装置１０又は第２情報処理装置２０の一方をホストサーバとして機能させ、他方をクライアントサーバとして機能させてもよい。

本開示に係る実施形態について、諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び改変を行うことが可能であることに注意されたい。したがって、これらの変形及び改変は本開示の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。

以下、本開示の実施形態の一部が例示される。しかしながら、本開示の実施形態は、これらに限定されない点に留意されたい。
［付記１］
第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得するインタフェースと、
前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成する制御部と
を備え、
前記制御部は、表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させるとともに、前記差分情報を前記第２ユーザに通知する、情報処理装置。
［付記２］
前記インタフェースは、前記第１ユーザ及び前記第２ユーザの姿勢又は動きに関する情報として、前記第１ユーザ及び前記第２ユーザのボーン又はジョイントを含む骨格情報を取得し、
前記制御部は、前記第１ユーザの骨格情報と前記第２ユーザの骨格情報との比較に基づいて前記差分情報を生成する、［付記１］に記載の情報処理装置。
［付記３］
前記インタフェースは、前記骨格情報のうち比較対象とする部分を指定する情報を取得し、
前記制御部は、前記骨格情報のうち比較対象とする部分に基づいて前記差分情報を生成する、［付記２］に記載の情報処理装置。
［付記４］
前記インタフェースは、前記骨格情報のうち比較対象とする部分を指定する情報として、前記骨格情報に含まれるボーン若しくはジョイントを指定する情報、又は、前記第１ユーザの画像において前記第１ユーザの身体の少なくとも一部を指定する情報を取得する、［付記３］に記載の情報処理装置。
［付記５］
前記インタフェースは、
前記第１ユーザの画像として、複数のフレームを含む動画を取得し、
前記骨格情報として、前記骨格情報に含まれるボーン又はジョイントの動きを前記動画に対応づける情報を取得し、
前記骨格情報のうち比較対象とする部分を指定する情報として、前記動画のフレームを指定する情報を取得し、
前記制御部は、指定されたフレームに対応づけられる骨格情報の比較に基づいて前記差分情報を生成する、［付記３］又は［付記４］に記載の情報処理装置。
［付記６］
前記制御部は、前記骨格情報に含まれるボーン又はジョイントの向きの比較に基づいて前記差分情報を生成する、［付記２］から［付記５］までのいずれか１つに記載の情報処理装置。
［付記７］
前記制御部は、前記差分情報を前記第２ユーザの画像に重畳した画像を前記表示デバイスに表示させることによって前記差分情報を前記第２ユーザに通知する、［付記１］から［付記６］までのいずれか１つに記載の情報処理装置。
［付記８］
前記制御部は、前記表示デバイスにおける前記第２ユーザの画像の表示と、前記第２ユーザに対する前記差分情報の通知とを同期させる、［付記７］に記載の情報処理装置。
［付記９］
前記インタフェースは、複数の前記第２ユーザのそれぞれの姿勢又は動きに関する情報を取得し、
前記制御部は、前記複数の第２ユーザのそれぞれについて前記差分情報を生成し、前記複数の第２ユーザのそれぞれの差分情報に基づいて前記複数の第２ユーザをグループに分類する、［付記１］から［付記８］までのいずれか１つに記載の情報処理装置。
［付記１０］
前記制御部は、前記複数の第２ユーザのうち、比較対象部位の姿勢又は動きの差分を表す値が比較閾値以上となっているユーザを同じグループに分類する、［付記９］に記載の情報処理装置。
［付記１１］
前記制御部は、前記複数の第２ユーザのうち、比較対象期間内の姿勢又は動きの差分を表す値が比較閾値以上となっているユーザを同じグループに分類する、［付記９］又は［付記１０］に記載の情報処理装置。
［付記１２］
前記インタフェースは、前記比較対象期間を指定する情報を取得する、［付記１１］に記載の情報処理装置。
［付記１３］
前記制御部は、前記第１ユーザの画像に基づいて前記比較対象期間の開始又は終了を設定する、［付記１１］に記載の情報処理装置。
［付記１４］
前記制御部は、前記複数の第２ユーザのうち同じグループに分類したユーザの画像を各ユーザの表示デバイスに互いに表示させる、［付記１０］から［付記１３］までのいずれか１つに記載の情報処理装置。
［付記１５］
前記制御部は、前記複数の第２ユーザのうち同じグループに分類したユーザの画像を前記第１ユーザの表示デバイスに表示させる、［付記１０］から［付記１４］までのいずれか１つに記載の情報処理装置。
［付記１６］
［付記１］から［付記１５］までのいずれか１つに記載の情報処理装置を、第１情報処理装置及び第２情報処理装置のそれぞれとして備え、
前記第１情報処理装置は、
前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得する第１インタフェースと、
前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成して前記第２情報処理装置に出力する第１制御部と
を備え、
前記第２情報処理装置は、前記第１ユーザの画像と前記差分情報とを取得し、前記第１ユーザの画像を表示するとともに前記差分情報を前記第２ユーザに通知する第２インタフェースを備える、
情報処理システム。
［付記１７］
第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得することと、
前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成することと、
表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させることと、
前記差分情報を前記第２ユーザに通知することと
を含む情報処理方法。
［付記１８］
情報処理装置に、
第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、第２ユーザの姿勢又は動きに関する情報とを取得することと、
前記第１ユーザの姿勢又は動きと前記第２ユーザの姿勢又は動きとの間の差分に関する差分情報を生成することと、
表示デバイスに前記第１ユーザ又は前記第２ユーザの画像を表示させることと、
前記差分情報を前記第２ユーザに通知することと
を含む動作を実行させる情報処理プログラム。

１ 情報処理システム
１０ 第１情報処理装置（１１：制御部、１２：記憶部、１３：インタフェース、１４：撮影部）
２０ 第２情報処理装置（２１：制御部、２２：記憶部、２３：インタフェース、２４：撮影部）
３０ 第３情報処理装置（３１：制御部、３２：記憶部、３３：インタフェース）
４０ ネットワーク
Ｕ１、Ｕ２ 第１ユーザ、第２ユーザ
Ｕ１１、Ｕ１２、Ｕ１３、Ｕ２１、Ｕ２２、２３ ジョイント
Ｕ１４、Ｕ１５、Ｕ２４、Ｕ２５ ボーン
Ｕ１６、Ｕ２６ 注目点
ＭＲ 計測範囲
Ｗ１、Ｗ２、Ｗｎ ウィンドウ

Claims (18)

1. 第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、複数の第２ユーザのそれぞれの画像と、前記複数の第２ユーザのそれぞれの姿勢又は動きに関する情報とを取得するインタフェースと、
   特定のタイミング又は特定の期間における前記第１ユーザの姿勢又は動きと前記複数の第２ユーザのそれぞれの姿勢又は動きとの間の差分に関する差分情報を生成し、前記特定のタイミング又は前記特定の期間における前記複数の第２ユーザのそれぞれの差分情報に基づいて前記複数の第２ユーザをグループに分類する制御部と
   を備え、
   前記制御部は、表示デバイスに前記第１ユーザ又は前記複数の第２ユーザのそれぞれの画像を表示させるとともに、前記差分情報を前記複数の第２ユーザのそれぞれに通知する、情報処理装置。
2. 前記インタフェースは、前記第１ユーザから、前記特定のタイミング、又は、前記特定の期間の開始及び終了の入力を受け付け、
   前記制御部は、前記第１ユーザの入力に応じて、前記特定のタイミング、又は、前記特定の期間の開始及び終了を設定する、請求項１に記載の情報処理装置。
3. 前記インタフェースは、前記第１ユーザ及び前記複数の第２ユーザのそれぞれの姿勢又は動きに関する情報として、前記第１ユーザ及び前記複数の第２ユーザのそれぞれのボーン又はジョイントを含む骨格情報を取得し、
   前記制御部は、前記第１ユーザの骨格情報と前記複数の第２ユーザのそれぞれの骨格情報との比較に基づいて前記差分情報を生成する、請求項１に記載の情報処理装置。
4. 前記インタフェースは、前記骨格情報のうち比較対象とする部分を指定する情報を取得し、
   前記制御部は、前記骨格情報のうち比較対象とする部分に基づいて前記差分情報を生成する、請求項３に記載の情報処理装置。
5. 前記インタフェースは、前記骨格情報のうち比較対象とする部分を指定する情報として、前記骨格情報に含まれるボーン若しくはジョイントを指定する情報、又は、前記第１ユーザの画像において前記第１ユーザの身体の少なくとも一部を指定する情報を取得する、請求項４に記載の情報処理装置。
6. 前記インタフェースは、
   前記第１ユーザの画像として、複数のフレームを含む動画を取得し、
   前記骨格情報として、前記骨格情報に含まれるボーン又はジョイントの動きを前記動画に対応づける情報を取得し、
   前記骨格情報のうち比較対象とする部分を指定する情報として、前記動画のフレームを指定する情報を取得し、
   前記制御部は、指定されたフレームに対応づけられる骨格情報の比較に基づいて前記差分情報を生成する、請求項４に記載の情報処理装置。
7. 前記制御部は、前記骨格情報に含まれるボーン又はジョイントの向きの比較に基づいて前記差分情報を生成する、請求項３に記載の情報処理装置。
8. 前記制御部は、前記差分情報を前記複数の第２ユーザのそれぞれの画像に重畳した画像を前記表示デバイスに表示させることによって前記差分情報を前記複数の第２ユーザのそれぞれに通知する、請求項１に記載の情報処理装置。
9. 前記制御部は、前記表示デバイスにおける前記複数の第２ユーザのそれぞれの画像の表示と、前記複数の第２ユーザのそれぞれに対する前記差分情報の通知とを同期させる、請求項８に記載の情報処理装置。
10. 前記制御部は、前記複数の第２ユーザのうち、比較対象部位の姿勢又は動きの差分を表す値が比較閾値以上となっているユーザを同じグループに分類する、請求項１に記載の情報処理装置。
11. 前記制御部は、前記複数の第２ユーザのうち、比較対象期間内の姿勢又は動きの差分を表す値が比較閾値以上となっているユーザを同じグループに分類する、請求項１に記載の情報処理装置。
12. 前記インタフェースは、前記比較対象期間を指定する情報を取得する、請求項１１に記載の情報処理装置。
13. 前記制御部は、前記第１ユーザの画像に基づいて前記比較対象期間の開始又は終了を設定する、請求項１１に記載の情報処理装置。
14. 前記制御部は、前記複数の第２ユーザのうち同じグループに分類したユーザの画像を各ユーザの表示デバイスに互いに表示させる、請求項１０に記載の情報処理装置。
15. 前記制御部は、前記複数の第２ユーザのうち同じグループに分類したユーザの画像を前記第１ユーザの表示デバイスに表示させる、請求項１０に記載の情報処理装置。
16. 請求項１から１５までのいずれか一項に記載の情報処理装置を、第１情報処理装置及び複数の第２情報処理装置のそれぞれとして備え、
    前記第１情報処理装置は、
    前記第１ユーザの姿勢又は動きに関する情報と、前記複数の第２ユーザのそれぞれの画像と、前記複数の第２ユーザの姿勢又は動きに関する情報とを取得する第１インタフェースと、
    特定のタイミング又は特定の期間における前記第１ユーザの姿勢又は動きと前記複数の第２ユーザのそれぞれの姿勢又は動きとの間の差分に関する差分情報を生成して前記複数の第２情報処理装置のそれぞれに出力する第１制御部と
    を備え、
    前記複数の第２情報処理装置のそれぞれは、前記第１ユーザの画像と前記差分情報とを取得し、前記第１ユーザの画像を表示するとともに前記差分情報を前記複数の第２ユーザのそれぞれに通知する第２インタフェースを備える、
    情報処理システム。
17. 第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、複数の第２ユーザのそれぞれの画像と、前記複数の第２ユーザのそれぞれの姿勢又は動きに関する情報とを取得することと、
    特定のタイミング又は特定の期間における前記第１ユーザの姿勢又は動きと前記複数の第２ユーザのそれぞれの姿勢又は動きとの間の差分に関する差分情報を生成し、前記特定のタイミング又は前記特定の期間における前記複数の第２ユーザのそれぞれの差分情報に基づいて前記複数の第２ユーザをグループに分類することと、
    表示デバイスに前記第１ユーザ又は前記複数の第２ユーザのそれぞれの画像を表示させることと、
    前記差分情報を前記複数の第２ユーザのそれぞれに通知することと
    を含む情報処理方法。
18. 情報処理装置に、
    第１ユーザの画像と、前記第１ユーザの姿勢又は動きに関する情報と、複数の第２ユーザのそれぞれの画像と、前記複数の第２ユーザのそれぞれの姿勢又は動きに関する情報とを取得することと、
    特定のタイミング又は特定の期間における前記第１ユーザの姿勢又は動きと前記複数の第２ユーザのそれぞれの姿勢又は動きとの間の差分に関する差分情報を生成し、前記特定のタイミング又は前記特定の期間における前記複数の第２ユーザのそれぞれの差分情報に基づいて前記複数の第２ユーザをグループに分類することと、
    表示デバイスに前記第１ユーザ又は前記複数の第２ユーザのそれぞれの画像を表示させることと、
    前記差分情報を前記複数の第２ユーザのそれぞれに通知することと
    を含む動作を実行させる情報処理プログラム。

Images