JP2019109751A - 情報処理装置、システム、情報処理装置の制御方法、及び、プログラム - Google Patents

Abstract

【課題】顧客が商品を選択した順序と、商品の選択に要した時間等の情報を提供可能な技術を提供可能にする情報処理装置、システム、情報処理装置の制御方法、及びプログラムを提供する。【解決手段】システム１０における情報処理装置２００であって、店舗内に配置された撮像装置１００Ａ、１００Ｂから提供された情報に基づき、店舗に来店した顧客の店舗内での動線情報を生成する動線情報生成手段と、顧客が店舗において購入した商品に関連する購入商品情報を取得する取得手段と、購入商品情報に基づき、前記動線情報と購入した商品とを顧客に関連づけて購入情報を生成する購入情報生成手段と、購入情報に基づき、購入した商品の選択に要した時間及び購入した商品を選択した順序との関連において、顧客または商品に関する情報を表示するための表示用情報を生成する表示用情報生成手段と、を備える。【選択図】図１

Description

本発明は情報処理装置、システム、情報処理装置の制御方法、及び、プログラムに関する。

近年、ネットワークカメラは、店舗内の監視・防犯用途はもちろんのこと、ネットワークカメラから得られる画像の解析を活用したセキュリティ用途以外のアプリケーションにも広がりを見せている。例えば、小売店のレジ前にネットワークカメラを設置しておき、ネットワークカメラから得られる映像から、顧客の特徴（顔、年齢、性別など）を抽出し、その顧客の特徴とレジでの購入情報を関連付けてマーケティング分析に活用するシステムが登場しつつある。また、そのほかのアプリケーションではカメラの画像から特定の人物を追跡して店舗内におけるその人物の動きを追跡し動線として記録、店舗内のレイアウト改善に役立てるなどの応用例を開示している。

これらをさらに応用し、特許文献１では、店舗内における顧客の行動から、マーケティングに役立つデータを収集する顧客行動記録装置と方法を開示している。この技術は、施設内を移動する人物を撮像する施設内カメラとレジにおける購入記録を紐つけるシステムを開示している。これにより店内における顧客の行動と購入情報を紐つけることができ、店内のレイアウト変更やマーケティングに利用することができる。

また、特許文献２においては監視カメラとレジとは別にレジに人物特徴取得用のカメラを設置していることを特徴としている。これにより顧客の個人的特徴、例えば、年齢や性別といった詳細な顧客データを分析することが可能になりさらに詳細なマーケティングが可能となる。

このように、ネットワークカメラは従来の監視・防犯用途の範囲を超え、そこからいかに有益な情報を抽出できるかが重要な点になりつつある。

特開２００６−３５０７０１号公報 特開２０１０−１１３６９２号公報

上記抽出する情報として、顧客がどのような順で商品を選択したか、また、商品を選択する際にどれだけの時間をかけたかといった情報を抽出できれば、顧客の来店目的や、商品の購入動機を推定することが可能となるため非常に有益である。

そこで、本発明は、顧客が商品を選択した順序や、商品の選択に要した時間等の情報を提供可能な技術を提供可能にすることを目的とする。

上記課題を解決するための発明は、情報処理装置であって、
店舗内に配置された撮像装置から提供された情報に基づき、前記店舗に来店した顧客の店舗内での動線情報を生成する動線情報生成手段と、
前記顧客が前記店舗において購入した商品に関連する購入商品情報を取得する取得手段と、
前記購入商品情報に基づき、前記動線情報と前記購入した商品とを前記顧客に関連づけて購入情報を生成する購入情報生成手段と、
前記購入情報に基づき、前記購入した商品の選択に要した時間、及び、前記購入した商品を選択した順序との関連において、顧客または商品に関する情報を表示するための表示用情報を生成する表示用情報生成手段と
を備え、
前記動線情報は、前記店舗内における複数の商品設置場所のそれぞれにおける前記顧客の滞在時間と、前記顧客が前記店舗内で前記商品設置場所を経由した順序の情報を含み、
前記表示用情報生成手段は、前記購入情報における前記購入した商品と当該商品が設置された前記商品設置場所との関連づけに従い、前記複数の商品設置場所のそれぞれにおける前記顧客の滞在時間に基づき前記購入した商品の選択に要した時間を決定し、前記商品設置場所を経由した前記順序に基づき前記購入した商品を選択した順序を決定することを特徴とする。

本発明によれば、顧客が商品を選択した順序や、商品の選択に要した時間等の情報を提供可能な技術を提供することができる。

発明の実施形態に対応するシステムの構成例を示した図。 発明の実施形態が適用可能な店舗の一例を示す図、及び、発明の実施形態に対応する情報処理装置２００のハードウェア構成例を示す図。 発明の実施形態に対応する、システム１０における情報処理装置２００が実行する処理の一例を示すフローチャート。 発明の実施形態に対応する購入情報のデータ構成の一例を示す図。 発明の実施形態に対応する情報表示装置５００に表示される画面の一例を示す図。 発明の実施形態に対応する情報表示装置５００に表示される画面の他の一例を示す図。

図１は、発明の実施形態に対応するシステム１０の構成例を示す図である。当該システム１０は、ネットワークカメラ１００Ａ／１００Ｂ、情報処理装置２００、データベース装置３００、ＰＯＳ（Point Of Sales）レジ端末４００、情報表示装置５００、広告表示装置６００がネットワーク回線であるＬＡＮ７００によって相互接続されて構成されている。図１に示したシステム１０の構成要素は、あくまで一例であって、これら以外の構成要素が更に追加されても良い。以下、各構成要素について説明する。

まず、ネットワークカメラ１００は、撮像センサ部１０１、現像処理部１０２、符号化部１０３、画像処理部１０４、ＬＡＮインタフェース（Ｉ／Ｆ）部１０５を含むように構成することができる。本実施形態では、２種類のネットワークカメラを使用することができる。第１のネットワークカメラ１００Ａは、店内を移動する顧客の動線を追跡する動線追跡カメラであって、顧客の店舗内での移動や動作といった行動を表す追跡情報を生成する。第２のネットワークカメラ１００Ｂは、店舗に来店した人物に関する情報を抽出するための画像を撮像する人物特定用カメラである。以下、２種類のネットワークカメラを用いた実施形態を説明するが、必ずしも２種類を用いなくてもよく、第１のネットワークカメラで撮像した画像から人物の情報を抽出してもよい。

以下、第１のネットワークカメラ１００Ａの各構成要素には参照番号に「Ａ」を付け、第２のネットワークカメラ１００Ｂの各構成要素には参照番号に「Ｂ」を付ける。

撮像センサ部１０１Ａ／１０１Ｂは、撮像面に結像された光像を光電変換してアナログ画像信号を出力するＣＭＯＳ等の撮像素子、及び、アナログ画像信号をデジタル画像信号に変換するＡ／Ｄ変換器を含んで構成される。現像処理部１０２Ａ／１０２Ｂは、撮像センサ部１０１Ａ／１０１Ｂから出力されたデジタル画像信号に対して、所定の現像処理を実行する。現像処理には、例えば、ディベイヤ処理、ホワイトバランス処理、階調変換処理、エッジ強調補正処理、キズ補正、ノイズ除去、拡大縮小処理、YCbCr形式への色変換などの処理を含むことができる。

符号化部１０３Ａ／１０３Ｂは、現像処理部１０２Ａ／１０２Ｂが出力したデジタル画像信号を圧縮・符号化して、情報処理装置２００に提供する配信用の画像データを生成する。生成される画像データには、ネットワークカメラ１００Ａ／１０１Ｂの識別情報（カメラＩＤ）、設置場所の情報（位置情報）、撮影時刻情報等が含まれる。符号化部１０３Ａ／１０３Ｂは画像データ生成時にフレームレートの設定も行う。ここで、配信用の画像圧縮方式は、例えば、H.264、H.265、MJPEGまたはJPEGなどの規格に基づくことができる。さらに、mp4やavi形式などを含む任意の形式の画像データを生成しても良い。

画像処理部１０４Ａ／１０４Ｂは、現像処理部１０２Ａ／１０２Ｂから出力されたデジタル画像についてそれぞれ対応する画像処理を行う。第１のネットワークカメラ１００Ａにおける画像処理部１０４Ａは、画像認識処理を行って追跡情報を生成する。ここでの画像認識処理によれば、パターン認識・メディア理解として知られる技術を用いて、デジタル画像から被写体である顧客の移動や動作を認識し追跡することができる。具体的には、背景差分、テンプレートマッチング，相関法，特徴追跡法等を用いた種々の公知の画像認識処理手法を用いることができる。画像処理部１０４Ａは、検出した人物のデジタル画像における位置及び大きさを示す情報を追跡情報に含める。

なお、顧客を人物として画像認識することのみによらず、顧客の付属物であるショッピングカートやバスケットを画像認識することによって追跡情報を作成してもよい。様々な人物像に比べて形状が定まっているショッピングカートやバスケットであれば画像認識が容易だからである。さらに、ショッピングカートやバスケットに１次元バーコード、２次元バーコード等のタグを備えておくことにより、画像処理部１０４Ａでの処理を簡便かつ確実なものとすることができ、複数の追跡対象の混同を防ぐことができる。また、追跡情報が検出された顧客の画像データを含む場合、当該画像データは、符号化部１０３で行うのと同様に圧縮符号化処理が施され、例えば静止画の場合にはＪＰＥＧ画像データが含まれる。

このようにして、追跡情報は、検出した顧客のデジタル画像における位置及び大きさの情報とともに、当該人物を撮影した第１のネットワークカメラ１００ＡのカメラＩＤ、及び撮影時刻情報等を含むように生成され、第１のネットワークカメラ１００Ａから情報処理装置２００に送信される。

第２のネットワークカメラ１００Ｂにおける画像処理部１０４Ｂは、デジタル画像を解析して、被写体となっている顧客の人物特徴を示す情報を生成する。人物特徴とは、たとえば、顧客を一定のカテゴリに分類するための属性を含むことができ、具体的には性別や年齢層などがあげられる。画像処理部１０４Ｂは、被写体の外見的特徴に基づいて、性別や年齢層を判定することができる。

また、さらに詳細に顧客個人を特定してもよい。その場合、例えば、画像検索用に、予め各顧客の顔画像等を顧客情報データベース３１０に登録しておくことができる。ネットワークカメラ１００Ｂは情報処理装置２００を介して顧客情報データベース３１０に登録されている顔画像のうち、デジタル画像から抽出した顔画像と一致する画像を検索し、対応する顧客を特定しても良い。顧客情報データベース３１０において顧客が特定できた場合には、顧客の人物特徴を示す情報を当該顧客の識別情報とすることができる。

デジタル画像の解析結果として取得した人物特徴の情報は、解析対象となった画像データと共に情報処理装置２００に送信する。その際、当該画像データは、符号化部１０３で行うのと同様に圧縮符号化処理が施され、例えば静止画の場合にはＪＰＥＧ画像データが含まれる。検出された人物情報及び撮像画像内におけるその座標情報は、当該人物を撮影したネットワークカメラ１００ＢのカメラＩＤ、位置情報、及び撮影時刻情報等と共に、情報処理装置２００に提供される。ネットワークカメラ１００Ｂが生成し、情報処理装置に提供するこの情報を「人物特徴情報」という。

ここで、画像処理部１０４Ａ／１０４Ｂは、ネットワークカメラ１００Ａ／１００Ｂが備えている構成以外に、外部装置、例えば情報処理装置２００が備えていても良い。その場合、画像処理部１０４Ａ／１０４Ｂが実行する機能の一部または全部を情報処理装置２００が実行し、残りの機能をネットワークカメラ１００Ａ／１００Ｂで実行してもよい。

ＬＡＮ Ｉ／Ｆ部１０５Ａ／１０５Ｂは、符号化部１０３Ａ／１０３Ｂから出力された画像データや、画像処理部１０４Ａ／１０４Ｂが生成した追跡情報や人物特徴情報を、ＬＡＮ７００を介して情報処理装置２００に送信するための通信インタフェースである。ＬＡＮ Ｉ／Ｆ部１０５Ａ／１０５Ｂは、例えば、ＮＦＳやＣＩＦＳなどのネットワークファイルシステム、または、ＵＤＰやＴＣＰなどのネットワーク通信プロトコルを使用して、通信相手との間でデータのやり取りの調整を行う。

次に、情報処理装置２００の構成について説明する。情報処理装置２００は、ＬＡＮ インタフェース（Ｉ／Ｆ）部２０１、復号部２０２、動線情報生成部２０３、データベース管理部２０４、購入情報生成部２０５、表示用情報生成部２０６、広告表示制御部２０７を含み、相互にシステムバス２０８で接続されるように構成することができる。

ＬＡＮ Ｉ／Ｆ部２０１は、ＬＡＮ７００を介してネットワークカメラ１００Ａ／１００Ｂや情報表示装置５００等と通信する。復号部２０２はネットワークカメラ１００からＬＡＮ７００を介して取得した画像データや、追跡情報や人物特徴情報に含まれる画像データを、伸張し復号してデジタル画像信号を復元する。復号されたデジタル画像信号はデータベース管理部２０４を介して画像情報データベース３４０に保存される。ここで、情報処理装置２００が画像処理部１０４Ａ／１０４Ｂを有するような実施形態では、画像処理部１０４Ａ／１０４Ｂがシステムバス２０８と接続されるように設けることができる。画像処理部１０４Ａ／１０４Ｂは、復号部２０２が復号した画像データから人物の特徴情報を抽出し、また、人物の追跡情報を生成する。

動線情報生成部２０３は、複数台の第１のネットワークカメラ１００Ａから受信した追跡情報および当該カメラ１００Ａの物理的な設置位置、高さ、および向きに関するに基づいて、顧客が店舗に入店してから退店するまでの店舗内の動線を表す動線情報を生成する。ネットワークカメラ１００Ａの物理的な設置位置、高さ、および向きに関する情報は後述の店舗情報に含まれている。生成した動線情報は購入情報生成部２０５に提供する。データベース管理部２０４は、データベース装置３００のデータベース３１０から３４０のそれぞれの登録情報を管理する。例えば、各データベースの登録情報を更新し、各データベースから登録情報を抽出し、必要に応じて各処理部に提供するといった処理を行う。

購入情報生成部２０５は、動線情報生成部２０３が生成した動線情報、第２のネットワークカメラ１００Ｂから受信した人物特徴情報、ＰＯＳレジ端末４００から受信した購入商品情報に基づき、店舗に来店した顧客毎の購入情報を生成する。生成した購入情報は購入情報データベース３２０に蓄積しておき、表示用情報生成部２０６が情報表示装置５００に提供する表示用情報を生成する際に参照される。

表示用情報生成部２０６は、購入情報生成部２０５が生成し、購入情報データベース３２０に格納された購入情報に基づき、情報表示装置５００に提供する表示用情報を生成する。当該表示用情報を用いた情報表示装置５００における表示の一例は、図５及び図６を参照して後述する。広告表示制御部２０７は、店舗内の所定位置に配置された広告表示装置６００における広告表示を制御する。

データベース装置３００は、情報処理装置２００が本実施形態に対応する処理を実行するに際して参照する情報が登録されたデータベースであって、顧客情報データベース３１０、購入情報データベース３２０、店舗情報データベース３３０、画像情報データベース３４０等を含むことができる。データベース装置３００は情報処理装置２００に接続される構成となっているが、ネットワークインターフェースを備え、ＬＡＮ７００上に接続されていてもよい。その場合、情報処理装置２００とデータベース装置３００との通信は、ＬＡＮ Ｉ／Ｆ部２０１を介して行われる。

顧客情報データベース３１０は、本システム１０が適用される店舗に会員登録している顧客の情報を登録しているデータベースである。当該顧客情報データベース３１０には、例えば、顧客を識別するための顧客識別情報（ＩＤ）、会員番号（顧客ＩＤと同じでもよい）、氏名、顧客の性別、年齢の他、住所、電話番号、電子メールアドレス、職業などの任意の個人情報が含まれる。また、画像認識により当該顧客を認識可能とする場合には、顧客の顔画像データが登録されていてもよい。また、顧客ＩＤは、会員カードに記録されている情報であって、ＰＯＳレジ端末４００において会員カードから読み取ることができる。読み取られた会員情報は情報処理装置２００に提供され、顧客情報データベース３１０において会員情報を特定するために用いられる。

購入情報データベース３２０には、一回の来店における購入実績を店舗への入店から退店までの動線情報と関連づけた購入情報を顧客毎に登録するデータベースである。当該データベースの登録内容は、図４を参照して後述する。店舗情報データベース３３０は、本システム１０が適用される店舗に関する店舗情報が登録される。店舗情報には、店舗内のレイアウトに関する情報、例えば、店舗内でネットワークカメラ１００Ａによる撮影対象となる領域の情報、商品棚の配置に関する情報、各商品棚に陳列されている商品に関する情報、ネットワークカメラ１００Ａの配置位置の情報等が含まれる。ネットワークカメラ１００Ａの配置位置の情報とは、具体的には、ネットワークカメラ１００Ａの物理的な設置位置、高さ、および向きに関する情報である。店舗情報は、特に、各ネットワークカメラ１００Ａで撮影された画像から検出された人物の画像内での位置を、店舗内のレイアウトにおける物理的位置に変換するための情報を含む。画像情報データベース３４０には、ネットワークカメラ１００Ａや１００Ｂで撮影された画像が保存される。

ＰＯＳレジ端末４００は、店舗内で購入する商品を会計するための情報処理装置であって、商品のバーコード情報を読み取って顧客が購入した商品を一意に特定することができる。購入商品情報は、会計を行った時刻情報とともに情報処理装置２００に送信される。顧客が店舗の会員の場合、ＰＯＳレジ端末４００は、提示された会員カードから顧客ＩＤを読み取って、情報処理装置２００に送信する。これにより、情報処理装置２００は、顧客情報データベース３１０において顧客情報を特定することが可能となる。なお、会員カードは、あくまで一例であって、個人を一意に特定可能な識別情報を取得することが可能なカードであれば他の種類のカードであってもよい。その場合には、当該識別情報が顧客ＩＤとして顧客情報データベース３１０に登録される。

情報表示装置５００は、情報処理装置２００から送信された情報を表示する装置であって、例えばパーソナルコンピュータ（PC）やタブレット端末、スマートフォン端末等により実現することができる。情報表示装置５００は、ＬＡＮ７００との接続を有線、無線のうち、いずれにおいて行ってもよい。無線は、例えばIEEE802.11の無線LANの規格に従うことができる。情報表示装置５００は、表示対象の項目を指定するための入力操作を受け付けることができ、受付けた入力操作に基づく項目の情報を情報処理装置２００に送信する。情報処理装置２００は、当該項目の情報に基づいて、表示用の情報を生成し、情報表示装置５００に提供する。

広告表示装置６００は、情報処理装置２００の広告表示制御部２０７による制御に基づき、店舗内の所定の商品等に関する広告を表示するための表示端末であり、例えばパーソナルコンピュータ（PC）やタブレット端末等により実現することができる。

図１に示すシステム１０構成において、ネットワークカメラ１００Ａ／１００Ｂの台数は１台以上の任意の数とすることができ、台数に限定はない。情報処理装置２００、データベース装置３００及び情報表示装置５００は、単一の装置により実現される場合だけでなく、それぞれ複数の装置が協働して各機能を実現してもよい。

本実施形態のシステム１０は、例えば、図２（Ａ）に示すような所定の店舗２０に対して適用することができる。店舗２０内には、商品設置場所として複数の商品棚２１が配置されており、それぞれの棚には商品が設置されている。当該商品の種類は問わない。また、商品は販売対象の商品に限られるものではなく、例えばレンタル商品であっても良い。どこの棚にどの商品が配列されているのかは、店舗情報データベース３３０内に予めテーブル化されている。店舗２０内は、棚と棚との間には空間が設けられているので、その空間を顧客が行きかうことができるようになっている。

顧客の挙動は一台以上の動線追跡カメラ１００Ａにより追跡することができる。動線追跡カメラ１００Ａは店舗２０内の一部、あるいはすべての範囲において顧客の様子を撮影可能に設置されている。動線追跡カメラ１００Ａが複数台設置されている場合には、複数台で店舗２０内の全域の画像を撮影することができればよい。

レジカウンターにはＰＯＳレジ端末４００が設置されている。顧客が商品を購入する場合には、レジカウンターにおいて精算を行うが、その際の様子は、人物特定用カメラ１００Ｂにより撮影され、人物特定処理が行われる。これにより買い物をした顧客と購入した商品とを関連づけることができる。人物特定用カメラ１００Ｂは、店舗２０の入口に設置されていても良く、入店した人物を撮影して、顧客の性別や年齢層などを特定する人物特定処理を行うことができる。このように、カメラ１００Ｂは、顧客の人物特徴を取得することが目的であるため、顧客が必ず通り、かつ人物特徴を取得するのに十分な品質の画像が撮像可能な箇所に設置されることが望ましい。

図２（Ａ）では、システム１０を適用する施設を商品を販売する店舗２０として示しているが、商品設置場所は商品棚である必要はない。その代わりに、例えば、商品をディスプレイするためのショーウィンドゥあるいは広告やデジタルサイネージなどのディスプレイスペースであってもよい。また、入店した顧客に対する販売促進のためのものであってもよい。また、ＰＯＳレジ端末４００は一台に限らず複数台あってもよい。

次に、本実施形態に対応するシステム１０を構成する情報処理装置２００の概略構成を説明する。図２（B）は、情報処理装置２００のハードウェア構成の一例を示すブロック図である。上述した情報処理装置としてのデータベース装置３００、ＰＯＳレジ端末４００、情報表示装置５００及び広告表示装置６００も、同様或いは同等のハードウェア構成として構成しても良い。

図２（Ｂ）において、ＣＰＵ２１０は、ハードディスク装置（以下、ＨＤと呼ぶ）２１５に格納されているアプリケーションプログラム、オペレーティングシステム（ＯＳ）や制御プログラム等を実行し、ＲＡＭ２１２にプログラムの実行に必要な情報、ファイル等を一時的に格納する制御を行う。また、ネットワークカメラ１００から提供され、ＲＡＭ２１２に記憶された検出人物情報、及び、データベース装置３００から取得した情報に基づき本実施形態に対応する処理を実行する。さらには、インタフェース（Ｉ／Ｆ）２１８を介した外部の情報表示装置５００とのデータ送受信を制御する。なお、後述する図３における処理もＣＰＵ２１０が対応する処理プログラムを実行することにより装置全体を制御して実現される。

ＲＯＭ２１１は、内部に基本Ｉ／Ｏプログラムの他、所定の処理を実行するアプリケーションプログラム等の各種データを記憶する。ＲＡＭ２１２は各種データを一時記憶し、ＣＰＵ２１０の主メモリ、ワークエリア等として機能する。また、ネットワークカメラ１００Ａ／１００Ｂやデータベース装置３００から受信した情報を一時的に記憶する。

外部記憶ドライブ２１３は、記録媒体へのアクセスを実現するための外部記憶ドライブであり、メディア（記録媒体）２１４に記憶されたプログラム等を本コンピュータシステムにロードすることができる。尚、メディア２１４は、例えば、フロッピー（登録商標）ディスク（ＦＤ）、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＰＣカード、ＤＶＤ、Ｂｌｕ−ｒａｙ（登録商標）、ＩＣメモリカード、ＭＯ、メモリスティック等を利用することができる。

外部記憶装置２１５は、本実施形態では大容量メモリとして機能するＨＤ（ハードディスク）を用いている。ＨＤ２１５には、アプリケーションプログラム、ＯＳ、制御プログラム、関連プログラム等が格納される。なお、ハードディスクの代わりに、フラッシュ（登録商標）メモリ等の不揮発性記憶装置を用いても良い。

指示入力装置２１６は、キーボードやポインティングデバイス（マウス等）、タッチパネル等がこれに相当する。なお、ＰＯＳレジ端末４００として構成する場合には、指示入力装置２１６にはバーコードリーダーを含むことができる。出力装置２１７は、指示入力装置２１６から入力されたコマンドや、それに対する情報処理装置２００の応答出力等を出力する。出力装置２１７にはディスプレイ、スピーカ、ヘッドフォン端子等を含むことができる。システムバス２１９は、情報処理装置２００内のデータの流れを司る。

インタフェース（以下、Ｉ／Ｆという）２１８は、外部装置とのデータのやり取りを仲介する役割を果たす。具体的に、Ｉ／Ｆ２１８は、無線通信モジュールを含むことができ、当該モジュールはアンテナシステム、ＲＦ送受信器、１つ以上の増幅器、同調器、１つ以上の発振器、デジタル信号プロセッサ、ＣＯＤＥＣチップセット、加入者識別モジュールカード、メモリなどを含む、周知の回路機構を含むことができる。また、有線接続のための有線通信モジュールを含むことができる。有線通信モジュールは１つ以上の外部ポートを介して他のデバイスとの通信を可能とする。また、データを処理する様々なソフトウェアコンポーネントを含むことができる。外部ポートは、イーサネット、ＵＳＢやＩＥＥＥ１３９４等を介して、直接的に、又はネットワークを介して間接的に他のデバイスと結合する。尚、以上の各装置と同等の機能を実現するソフトウェアにより、ハードウェア装置の代替として構成することもできる。

本実施形態に対応する処理を実行するために対応するプログラムを動作させる度に、既にプログラムがインストールされているＨＤ２１５からＲＡＭ２１２にロードするようにしてもよい。また、本実施形態に係るプログラムをＲＯＭ２１１に記録しておき、これをメモリマップの一部をなすように構成し、直接ＣＰＵ２１０で実行することも可能である。さらに、メディア２１４から対応プログラム及び関連データを直接ＲＡＭ２１２にロードして実行させることもできる。

次にシステム１０を利用して、ネットワークカメラ１００Ａ、１００Ｂ、ＰＯＳレジ端末４００から得られた情報に基づき購入情報を生成し、当該購入情報に基づき情報表示装置５００のための表示用情報を生成する処理の詳細について図３のフローチャートを参照して説明する。該フローチャートに対応する処理は、例えば、購入情報生成部２０５、或いは、表示用情報生成部２０６として機能する１以上のプロセッサが対応するプログラム（ＲＯＭ等に格納）を実行することにより実現できる。

まず、Ｓ３０１において、情報処理装置２００は、複数の動線追跡カメラ１００Ａから追跡情報を取得する。また、店舗情報データベース３３０から店舗情報を取得する。本実施形態では、複数の動線追跡カメラ１００Ａにより店舗２０全体をカバーしているので動線追跡カメラ１００Ａ単体では、撮影範囲が限定されており、店舗２０内での顧客の全ての移動を追跡できるわけではない。そこで、続くＳ３０２において動線情報生成部２０３は、各動線追跡カメラ１００Ａから取得した追跡情報を合成し、また、店舗情報を参照することにより顧客毎の入店から退店までの動線情報を生成する。複数のカメラを用いた施設内の顧客の動線情報を取得する方法は公知の技術を用いることができるので、ここでは詳細については説明を省略する。このとき、レジに滞在した時刻の情報を合わせて生成しておく。動線情報生成部２０３は生成した動線情報を購入情報生成部２０５に提供する。

次に、Ｓ３０３において、購入情報生成部２０５は人物特定用カメラ１００Ｂから人物特徴情報を取得する。このとき購入情報生成部２０５は、人物特徴情報に顔等の画像データが含まれる場合には、当該画像に基づき人物の性別、年齢層等の人物情報を改めて判定し、人物特徴情報に含まれる人物の特徴情報を修正してもよい。

続くＳ３０４において、購入情報生成部２０５はＰＯＳレジ端末４００から購入商品情報を取得する。当該購入商品情報には、顧客が購入した商品名、レジで会計を行った時刻（商品の購入時刻に相当する）等が含まれる。また、顧客が店舗の会員カードを持参していた場合に、当該会員カードから取得した顧客を特定するための情報（例えば、顧客ＩＤ）を含めることもできる。

続くＳ３０５では、購入情報生成部２０５は、Ｓ３０２における動線情報、Ｓ３０３における人物特徴情報、Ｓ３０４における購入商品情報を来店した顧客毎に関連づけて、顧客毎の購入情報を生成する。具体的に、動線情報に基づけば、顧客がレジで会計をしていた時間帯が特定できるので、商品の購入時刻がその時間帯に合致する顧客の動線情報を、当該時間帯に含まれる購入商品情報と関連づけることができる。また、人物特徴情報についても、当該人物特徴情報を生成するために用いた撮像画像を人物特定用カメラ１００Ｂで撮像した時刻に基づいて、購入商品情報及び動線情報と関連づけることができる。但し、購入商品情報に会員情報が含まれている場合には、人物特徴情報よりもより詳細な顧客情報を利用することができるので、人物特徴情報を関連づけなくてもよい。生成した購入情報は、購入情報データベース３２０に格納される。

Ｓ３０１からＳ３０５までの処理に基づく購入情報の生成は来店した全ての顧客について行われ、生成された購入情報が購入情報データベース３２０に蓄積される。購入情報のデータ構造については図４を参照して後述する。

続くＳ３０６では、表示用情報生成部２０６が、情報表示装置５００において画面表示する際の表示条件を、情報表示装置５００から受信する。表示条件の指定或いは切替えについては、情報表示装置５００を操作するユーザから操作入力を受付けることができる。受付けた操作内容に基づく表示条件は情報表示装置５００から情報処理装置２００に送信される。表示条件には、商品、表示対象期間、顧客の属性等の情報が含まれる。これらは任意に組み合わせて表示条件とすることができる。詳細は、図５及び図６を参照して説明する。

続くＳ３０７では、Ｓ３０７において受信した表示条件に従って、表示用情報生成部２０６が購入情報データベース３２０から購入情報を抽出し、表示条件に対応した表示用情報を生成する。続く、Ｓ３０８では、Ｓ３０７で表示用情報生成部２０６が生成した表示用情報を、ＬＡＮ Ｉ／Ｆ部２０１を介して情報表示装置５００に送信する。

次に、図４を参照して、顧客毎の購入情報のデータ構造の一例を説明する。図４に示すように、購入情報には、来店日の情報、入店時刻、退店時刻、性別、年齢（年齢層）、顧客ＩＤといった情報が含まれる。このほかに、当該顧客の氏名、住所、電子メールアドレス、職業、趣味・嗜好等の属性情報が含まれていてもよい。動線情報における顧客が店内を移動した経路及び商品棚２１の前で立ち止まった時間に基づいて、どの順序で商品棚２１に立ち寄り（経由し、或いは、訪問し）、どのくらいの時間そこに滞在したか、またその商品棚２１に陳列されているいずれの商品を購入したかの情報が含まれる。

このように、購入情報によれば、顧客がどの商品棚２１にどれだけの時間滞在したかが分かる。この滞在時間は商品を選択するために要した時間と相関することが期待できるため、これを商品選択時間の指標とする。最終的にレジで会計され、購入された商品を、該当商品が陳列されている商品棚２１と結びつけることで、商品の購入順序と商品の選択時間とを同時に記録することができる。

上記では、個々の動線追跡カメラ１００Ａで生成された動線情報から、情報処理装置２００が顧客毎の店舗２０全体における動線情報を生成する場合について説明した。これ以外にも他の発明の実施形態において、カメラ側では動線情報の生成は行わず、情報処理装置２００側で個々の動線追跡カメラ１００Ａからの撮影画像に基づきカメラ毎の動線情報を生成し、これらを統合して入退動線情報を生成しても良い。

また、図４に示した例は、商品の購入が可能な店舗における例であるが、商品を販売しない展示会会場、或いは、展示会場内の展示ブースにおいては、購入商品の情報は登録されない。しかし、そのような場合であっても、ブース内の特定箇所に立ち寄った順序やその滞在時間を同時に記録することができる。
まず、図５（Ａ）は特定の顧客について、当該顧客が購入した実績のある商品について、購入に要する時間を、当該商品を選択した順序と関連づけて表示した画面の一例である。このような表示を行うための表示用情報は、情報表示装置５００において表示条件として特定の顧客ＩＤが選択された場合に生成される。

表示条件として特定の顧客ＩＤと、表示対象期間が指定されると、当該顧客ＩＤが割り当てられた購入情報のうち、表示対象期間に属する購入情報が購入情報データベース３２０から取得される。そして、当該顧客による購入時期が表示対象期間内に属する商品が特定され、当該商品を購入した順序及び、選択時間が個々に特定され、表示用情報が生成される。

図５（Ａ）のような表示形態によれば、特定の顧客に関してその購入傾向を観察することができる。画面の左側には顧客を特定するための情報が表示され、そこには、例えば、顧客ＩＤ、性別、年代（年齢層）、表示対象期間、購入実績のある商品情報が含まれる。これ以外にも、顧客の氏名などを表示してもよい。

画面右側には、商品毎の購入順序及び選択時間を示す散布図（プロット）が表示される。散布図の縦軸は当該顧客が入店からレジ会計を行い出店するまでの時系列（店舗内における滞在時間の先後）に対応し、当該商品棚２１における商品の選択順序（商品選択順序、或いは、商品購入順序の先後）を示す。入店から出店するまでの時間は、顧客やその時々の状況に応じてさまざまに変化するが、このグラフでは入店から出店までの滞在時間に基づいて正規化して表示する。横軸は当該商品を選択（購入）するために経過した時間（商品選択時間の長短）を示す。そして、その結果購入された商品が該当の点にプロットされる。

発明の実施形態では、各顧客について取得した購入情報を蓄積しておき、顧客毎の購入意識の傾向を観察することができる。図５（Ａ）では、表示対象期間に属する過去の購入情報に基づき購入結果を重ねてプロットしているので、同じ商品が何度もプロットされる。図５（Ａ）に示すような表示結果に従えば、当該顧客に関する商品購入傾向を読み取ることができる。ここではその一例として、商品選択順序の先後と、滞在時間（選択時間）の長短とに基づいてプロットを四分割して考える。

プロット内の左上のエリア５０１は顧客が来店して早い順番で購入し、かつ商品選択にも時間をかけていない商品である。このような商品は顧客にとって、来店時にすでにその商品の購入を決定していたと判断される。言い換えると、顧客はこの商品を目的に来店したといえる。このような、顧客にとって来店目的になるような訴求力の強い商品のことを以下ではカテゴリＩの商品と呼ぶ。

プロット内の右上のエリア５０２は顧客が来店して早い時間で購入しているが、その商品選択には時間がかかっている。このような商品は顧客にとって、来店時には具体的な商品購入を決定していなかったが、その商品の種類に関しては購入を想定していたことを示している。このような、顧客にとって特定の定番商品はないものの、来店目的になりえる商品をカテゴリＩＩの商品と呼ぶ。

プロット内の左下のエリア５０３は顧客が来店して遅い順番で購入している。これは、顧客は購入に関して特に来店時に意欲的ではなかったが、選択時間が短いことから顧客にとっては選択の余地の少ない定番商品であるといえる。このように強い購入動機はないものの、商品選択において選択の余地が少ないものを以下ではカテゴリＩＩＩの商品と呼ぶ。

最後にプロット内の右下のエリア５０４は顧客が来店して遅い順番で購入しかつ選択に時間をかけている商品であることから、顧客にとっては購入に意欲的ではなく、かつその商品を購入する必要性は高くない商品であるといえる。以下ではこれをカテゴリＩＶの商品と呼ぶ。

このように、顧客の商品の選択順とその商品を選ぶのに要した選択時間をプロットすることでより詳細な商品に対する購入意識の傾向、さらには来店目的を知ることができる。

たとえば図５（Ａ）の例でいえば、商品Ａというものはこの顧客にとって定番であり、来店して早い時間に選択していることから購入意欲の高い商品であることがうかがえる。一方で商品Ｂおよび商品Ｂ'は来店時間が経過してから最後の方で選択している。これはその商品の購入意欲が高くないが購入する必要性は高いとみなされている商品である。選択時間が長く、商品Ｂと商品Ｂ'が混ざっているということは、特に商品にこだわりがなくその都度状況（気分など）に応じて選択されていることを示す。

図５（Ａ）は、顧客毎の購入意識の傾向を示していたが、顧客単位ではなく、顧客の人物属性、例えば、年齢層、性別といった顧客の属性によって分類することもできる。このような分類によれば、一定の客層の購入意識の傾向を観察することが可能となる。そこで、図５（Ｂ）では、特定の商品について、特定の属性を有する顧客が購入に要する時間を、当該商品を選択した順序と関連づけて表示する画面の一例を示す。

表示条件として商品名（或いは商品識別情報）と、表示対象期間、表示すべき顧客属性が指定されると、指定された商品名の商品の購入実績のある顧客の購入情報のうち、表示対象期間に属し、かつ、指定された顧客属性を満たす購入情報が購入情報データベース３２０から取得される。そして、当該商品について、商品を購入した順序及び、選択時間が個々に特定され、表示用情報が生成される。

図５（Ｂ）のような表示形態によれば、商品毎に、所定の属性を有する顧客の購入傾向を観察することができる。画面の左側には商品を特定するための情報が表示され、そこには、例えば、商品名や商品識別情報、商品が陳列されている商品棚２１の情報が含まれる。また、表示対象期間が示され、当該期間内の購入実績に基づいた表示が行われる。

さらに、表示される顧客の属性を示す情報が表示される。図５（Ｂ）の場合、１０代歳男性、２０代歳男性、３０代歳男性が示されている。図５（Ｂ）で示した属性の例はあくまで一例であって、指定される表示条件に従い他の年齢層を含めることもできるし、女性を含めることもできる。また、男性、女性両方を対象とすることもできる。或いは、性別は問わずに年代のみを含めることもできる。また、年齢層をより細分化することもできる。例えば、１０歳毎の属性で表示した後に２０代が更に選択された場合、５歳毎、１歳毎というように段階的に細分化して表示を行うようにしても良い。さらには、年齢、性別以外の属性に基づいて表示を行うことができる。例えば、職業、居住地域等に基づく表示を行ってもよい。

画面右側には、顧客の属性毎に、当該商品を購入のために選択した順序、及び、当該商品を選択するのに要した時間（商品棚２１の前に滞在した時間）を示す散布図が表示される。散布図の縦軸は、当該商品を購入した顧客が入店からレジ会計を行い出店するまでの時系列（店舗内における滞在時間の先後）に対応し、当該商品棚２１における商品の選択順序（商品選択順序、或いは、商品購入順序の先後）を示す。図５（Ａ）と同様、この時間は顧客によって異なるため、入店時と出店時までの滞在時間に基づいて正規化している。横軸は当該商品を選択するのに経過した時間（商品選択時間の長短）、商品棚２１の前に滞在した時間（滞在時間の長短）を示す。

図５（Ｂ）においても、図５（Ａ）におけるカテゴリ分類が有効である。図５（Ｂ）に示した商品の場合、前述のカテゴリＩ、すなわち多くの顧客が比較的入店後早い時期にほとんど選択をせずに購入している商品とみなすことができる。換言すると、少なくともこの属性（男性）に関してはこの商品を目的に来店している人が多く、特に１０代から３０代の顧客にその傾向が顕著であることがわかる。これはこの商品は１０から３０代向けのターゲット商品として適切であることがわかる。また、これを目的に来店する顧客が多いことからも非常に訴求力が強い商品として、売り場面積を拡大し目立つ場所への設置に好適である。このように商品がどのカテゴリに所属するかを判別することが可能となり、商品の入荷や配置換えの参照とすることができる。

さらに、商品、表示対象期間、属性についての表示条件を任意の組み合わせにおいて指定し、カテゴリＩに属する割合が他のカテゴリに属する割合よりも一定以上高いもののみを表示することもできる。例えば、直近１週間の期間において、男性２０代でカテゴリＩに属する割合の高い商品を表示することができる。このような表示結果からは、２０代の男性に訴求力のある商品を容易に判定することができる。また、直近１週間の期間において、商品Ａを購入した顧客のうちカテゴリＩに属する顧客属性を表示することができる。このような表示結果からは、商品Ａがどのような属性を有する顧客に対して訴求力を有するのかを容易に判定することができる。

上記においては、特定の顧客、或いは、特定の商品について散布図を含む表示情報を生成していたが、これら以外にも例えば、商品自体が陳列されている商品棚２１について表示情報を生成することもできる。

次に、図６（Ａ）は、特定の商品棚２１について、当該商品棚２１に配置された商品の選択に要する時間を、当該商品棚２１を訪れた順番と関連づけて表示する画面の一例を示す。なお、図６（Ａ）では、商品棚２１で立ち止まったものの商品を選択しなかった場合を含めて表示している。

表示条件として商品棚２１を特定する情報（商品棚のＩＤ、或いは、番号等）と、表示対象期間が指定されると、指定された商品棚２１に立ち寄った実績のある顧客の購入情報のうち、表示対象期間に属する購入情報が購入情報データベース３２０から取得される。そして、当該顧客が表示対象期間内に、当該商品棚２１に立ち寄った順序、及び、立ち寄った時間、商品棚２１に陳列されているいずれかの商品を購入した場合には当該商品が個々に特定され、表示用情報が生成される。

図６（Ａ）のような表示形態によれば、商品棚２１毎に、店舗２０を訪問した顧客がどの順序でその商品棚２１に立ち寄り（経由し、或いは、訪問し）、そこで商品を実際に選択しているかどうか、また、当該商品棚２１にどの程度滞在しているのかといった傾向を観察することができる。画面の左側には商品棚２１を特定するための情報が表示され、そこには、例えば、商品棚２１の識別情報、当該商品棚２１にある商品のうち購入実績のある商品の情報（商品名や商品識別情報）が含まれる。また、当該商品棚２１から商品が選択されなかった場合の滞在時間を示すために「購入なし」を示す情報も含まれる。さらに、表示対象期間が示され、当該期間内の購入実績に基づいた表示が行われる。また、表示条件に応じて、商品棚２１を切り替えたり、商品棚２１に陳列されている商品のうち、特定の商品のみを選択して表示したりするようにしてもよい。或いは、「購入なし」の場合のみを選択することもできる。

画面右側には、商品棚毎に、当該商品棚２１に立ち寄った（経由した、訪問した）順序、及び、当該商品棚２１に滞在した時間（当該商品棚の商品を選択するのに要した時間）を示す散布図が表示される。散布図の縦軸は、当該商品を購入した顧客が入店からレジ会計を行い出店するまでの時系列（店舗内における滞在時間の先後）に対応し、各商品棚２１を経由した順序（商品棚２１の経由順序の先後）、或いは、当該商品棚２１の商品の選択順序（商品選択順序の先後）を示す。図５と同様、この時間は顧客によって異なるため、入店時と出店時までの滞在時間に基づいて正規化している。横軸は商品棚２１の前に滞在した時間（滞在時間の長短）、或いは、当該商品棚２１の商品を選択するのに経過した時間（商品選択時間の長短）を示す。

図６（Ａ）では、商品棚Ａ−１に陳列された商品を例にとっている。図６（Ａ）の表示結果に従えば、全体的な傾向として商品棚Ａ−１に陳列されている商品はカテゴリＩもしくはカテゴリＩＩに近い商品が多いが、すべての商品が同じ傾向ではない。商品ＡはカテゴリＩの中でも特にその傾向が強い。また、商品Ａ'はそれほど大きな傾向が見えていない。このことから商品Ａはこの商品を目的に来店する顧客が多いことを示し、商品替えの際に商品Ａの位置をさらに目立つ場所に変えることが推奨される。この商品棚Ａ−１は比較的早くに顧客が訪れることが多いために店内の中でも入店しやすい位置に配置することが望まれる。このように商品の購入傾向から商品配列に関する知見を得ることが可能である。

また、図６（Ａ）の表示形態では、商品棚２１に立ち寄るだけの顧客と、実際に商品を購入している顧客とを同時に表示することができる。このような表示形態において、仮に当該商品棚２１は商品を購入する客よりもただ立ち寄るだけの顧客の方が多い場合、そこに陳列する商品の内容を見直すことの示唆を得ることができる。

本実施形態では、発明の適用対象を商品を販売する店舗２０を例としているので、店舗２０内の商品設置場所である商品棚２１ごとに図６（Ａ）のような陳列されている商品の傾向を観察することが可能となる。これに対して、発明の適用対象を商品を販売しない展示会会場、或いは、展示会場内の展示ブースとした場合には、商品そのものを購入することはできないので、展示商品毎の傾向を示すことはできない。しかし、ブースの特定箇所に立ち寄った場合に、立ち寄った順序や滞在時間を表示するソリューションとして有用である。

上述の図６（Ａ）のような画面表示によれば、ある商品棚２１について商品毎にカテゴリ属性を判定することができるが、当該カテゴリ属性を商品単位ではなく、商品棚単位に判定することも可能である。図６（Ａ）に示した例では、商品棚Ａ−１は、カテゴリＩに属する商品が多いので、このような商品棚２１についてはカテゴリＩと判別することができる。他の商品棚２１についても、その商品棚２１に属している商品数が最も多いカテゴリを商品棚２１の属性とすることができる。

このようにして全ての商品棚２１についてカテゴリ属性を判定し、商品棚２１の位置にカテゴリ属性を表示した画面表示の一例を図６（Ｂ）に示す。図６（Ｂ）では、店内すべての棚をカテゴリＩ〜ＩＶのいずれかのカテゴリに分類して表示している。このような表示結果を参照することで、カテゴリＩの棚は顧客が来店時の目的としている商品が多いため、これを目立つように、かつ店内に分散させることで顧客の動線を形成するための示唆を得ることが可能となる。カテゴリＩＩの棚も、顧客が来店時に早く訪れるが、その位置で滞留する傾向にあるため、棚の前のスペースを多めにとる必要があるとの示唆を得ることが可能となる。カテゴリＩＩＩの棚は生活必需品系であり、人が滞留する時間は短いので設置場所の自由度は高い。一方で、カテゴリＩＶの棚は、その棚に陳列されている商品を目的に顧客が来店しているとは言い難いが、人が滞留しやすい傾向があるため、設置場所を配慮する必要がある。また、売り上げ自体が少なければカテゴリＩＩＩもカテゴリＩＶも商品配列を見直すための候補となりうる。

以上のように本実施形態では、同じ商品を購入した履歴に関してもその順番と、それを選択（購入を決断）するのに要した時間との相関を図示化することができる。これにより、店舗２０内における商品の位置付けを図示化することができる。

また、売り上げと相関を取ることも可能であり、さらには購入に至らない商品に関しても統計を取ることができるため、より緻密な広告販売戦略をとることができる。例えば、店舗２０を訪問する動機付けになり得るカテゴリＩ商品の近傍に広告表示装置６００を配置し、広告表示制御部２０７が、顧客が店舗２０を訪問した際には購入する可能性が高いカテゴリＩＩＩ商品の広告を広告表示装置６００に表示させる。これにより、カテゴリＩ商品を購入するために店舗２０を訪問した顧客に対して、カテゴリＩＩＩの商品の存在を思い出させて、購買意欲を刺激することができる。或いは、カテゴリＩの商品の商品棚２１では滞在時間が短いため、立ち寄る順番が早く、かつ、滞在時間の長いカテゴリＩＩの商品棚２１の近傍に広告表示装置６００を配置して、カテゴリＩＩＩの商品の広告を提供しても良い。また、これらの棚と滞留時間のデータを用いて、店内における商品の棚替えをした際の顧客の動線・滞留シミュレーションも実施することが可能であり、より最適化した店内構造のデータ取得に役立つ。本件で示した実施例はいくまで一例であり、その表示手法と相関を取るデータ及び利用方法は様々な形態をとることが可能である。

以上の発明の実施形態によれば、顧客がどのような順で商品を選択したかのみならず、商品の選択にどれだけの時間をかけたかの情報を提供することが可能となる。これにより、顧客が購入した商品が、どのような動機を持って選択されたかを知ることができる。例えば、他の購入商品に先だって短い選択時間で直ちに選択されたような商品で、同様のパターンで繰り返し購入されている商品は、顧客が当該商品を購入することを目的で来店する商品と言える。また、同様に短い選択時間で選択したような商品は、選択順序が仮に後であったとしても、顧客にとっては必需品で、ついでがあれば購入する種類の商品と推測することができる。一方、選択に時間がかかり、順番も後ろの商品であって、購入頻度の高くない商品は、顧客がそのときにたまたま購入した商品であって、当該商品の購入はユーザの来店の目的にはなりにくい商品といえる。上記は顧客単位だけでなく、複数の顧客について特定の属性毎に傾向を分析することにより、ある属性に共通する傾向を観察することも可能となる。

さらには、商品棚２１での滞在時間は商品を購入した場合には商品の選択時間とみなすことができる一方で、商品の購入がなかった場合には、滞在時間が長いにもかかわらず、商品の購入には到らなかったと推定することができる。これにより、選択の末購入に至らなかった商品あるいは商品種目を把握することも可能となる。

このように、本実施形態によれば、店舗２０内の商品がどのような動機で購入されているのか、或いは、商品がどのような顧客にとってどのような性質を有する商品であるのかを把握することが可能となる。さらに、売り上げが少ない商品に関しても、そもそもそれらが興味を持たれているかそうでないのかを知ることができるため、店内の商品替えやレイアウト変更時におけるマーケット情報となる。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０：システム、１００：ネットワークカメラ、２００：情報処理装置、３００：データベース装置、４００：ＰＯＳレジ端末、５００：情報表示装置、６００：広告表示装置、７００：ＬＡＮ

Claims (15)

1. 情報処理装置であって、
   店舗内に配置された撮像装置から提供された情報に基づき、前記店舗に来店した顧客の店舗内での動線情報を生成する動線情報生成手段と、
   前記顧客が前記店舗において購入した商品に関連する購入商品情報を取得する取得手段と、
   前記購入商品情報に基づき、前記動線情報と前記購入した商品とを前記顧客に関連づけて購入情報を生成する購入情報生成手段と、
   前記購入情報に基づき、前記購入した商品の選択に要した時間、及び、前記購入した商品を選択した順序との関連において、顧客または商品に関する情報を表示するための表示用情報を生成する表示用情報生成手段と
   を備え、
   前記動線情報は、前記店舗内における複数の商品設置場所のそれぞれにおける前記顧客の滞在時間と、前記顧客が前記店舗内で前記商品設置場所を経由した順序の情報を含み、
   前記表示用情報生成手段は、前記購入情報における前記購入した商品と当該商品が設置された前記商品設置場所との関連づけに従い、前記複数の商品設置場所のそれぞれにおける前記顧客の滞在時間に基づき前記購入した商品の選択に要した時間を決定し、前記商品設置場所を経由した前記順序に基づき前記購入した商品を選択した順序を決定する、
   ことを特徴とする情報処理装置。
2. 前記表示用情報生成手段は、前記表示用情報に、前記購入した商品の選択に要した時間に関連する軸と、前記商品を選択した順序又は前記商品設置場所を経由した順序に関連する軸とに基づく散布図を含めることを特徴とする請求項１に記載の情報処理装置。
3. 前記購入情報生成手段は、前記購入情報を、前記店舗内に配置された撮像装置により撮影された前記顧客の画像から判定された当該顧客の属性と更に関連づけ、
   前記属性は、性別及び年齢層を少なくとも含むことを特徴とする請求項１または２に記載の情報処理装置。
4. 前記購入商品情報が、商品を購入した前記顧客を識別する識別情報を含む場合に、
   前記購入情報生成手段は、前記購入情報を、前記識別情報から特定される顧客の属性と更に関連づけ、
   前記属性は、前記顧客の識別情報、性別及び年齢を少なくとも含むことを特徴とする請求項１または２に記載の情報処理装置。
5. 前記表示用情報生成手段は、前記表示用情報を、特定の顧客について生成された複数の購入情報から、該特定の顧客が過去に購入した商品について、当該購入した商品の選択に要した時間、及び、当該商品を選択した順序を表示するための情報として生成することを特徴とする請求項４に記載の情報処理装置。
6. 前記表示用情報生成手段は、前記表示用情報を、特定の商品を購入した顧客について生成された複数の購入情報から、該特定の商品について、当該商品の選択に要した時間、及び、当該商品を選択した順序を表示するための情報として生成することを特徴とする請求項３または４に記載の情報処理装置。
7. 前記表示用情報生成手段は、前記特定の商品を購入した顧客のうち、所定の属性を有する顧客について生成された複数の購入情報に基づいて前記表示用情報を生成することを特徴とする請求項６に記載の情報処理装置。
8. 前記表示用情報生成手段は、前記表示用情報を、特定の商品設置場所を訪れた顧客について生成された複数の購入情報から、該特定の商品設置場所について、当該商品設置場所に配置された商品の選択に要した時間、及び、当該商品設置場所を訪れた順番を表示するための情報として生成することを特徴とする請求項１から４のいずれか１項に記載の情報処理装置。
9. 前記表示用情報生成手段は、前記表示用情報を、前記特定の商品設置場所を訪れた顧客が前記特定の商品設置場所に配置された商品を購入しなかった場合の前記顧客の前記商品設置場所における滞在時間を、前記商品設置場所に配置された商品の選択に要した時間と共に表示するための情報として生成することを特徴とする請求項８に記載の情報処理装置。
10. 前記表示用情報を生成するための条件を取得する取得手段を更に備え、
    前記表示用情報生成手段は、前記条件に含まれる、商品、顧客、前記商品の購入時期の少なくともいずれかに関する指定に基づいて、前記表示用情報を生成することを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。
11. 表示用情報生成手段は、前記店舗内の複数の商品設置場所のそれぞれを、各商品設置場所を訪れた顧客について生成された複数の購入情報に基づき、前記滞在時間の長短と、前記順序の先後とに基づいて複数のカテゴリに分類し、前記商品設置場所のそれぞれについて分類されたカテゴリを表示するための情報を、前記表示用情報として更に生成することを特徴とする請求項１から１０のいずれか１項に記載の情報処理装置。
12. 前記店舗内に設置された広告表示装置における広告表示を制御する広告表示制御手段を更に備え、
    前記広告表示装置は、前記複数のカテゴリのうち、前記順序が先のカテゴリが割り当てられた商品設置場所の近傍に設置され、
    前記広告表示制御手段は、前記順序が後のカテゴリが割り当てられた商品設置場所にある商品の広告を表示するように前記広告表示装置を制御することを特徴とする請求項１１に記載の情報処理装置。
13. 請求項１から１２のいずれか１項に記載の情報処理装置と、
    店舗内を撮像して画像を生成し、前記画像に含まれる前記店舗に来店した顧客の前記店舗内での動きを追跡して生成した情報を前記情報処理装置に提供する撮像装置と、
    前記情報処理装置が生成した表示用情報を表示する表示装置と
    を備えるシステム。
14. 情報処理装置の制御方法であって、
    動線情報生成手段が、店舗内に配置された撮像装置から提供された情報に基づき、前記店舗に来店した顧客の店舗内での動線情報を生成する工程と、
    取得手段が、前記顧客が前記店舗において購入した商品に関連する購入商品情報を取得する工程と、
    購入情報生成手段が、前記購入商品情報に基づき、前記動線情報と前記購入した商品とを前記顧客に関連づけて購入情報を生成する工程と、
    表示用情報生成手段が、前記購入情報に基づき、前記購入した商品の選択に要した時間、及び、前記購入した商品を選択した順序との関連において、顧客または商品に関する情報を表示するための表示用情報を生成する工程と
    を含み、
    前記動線情報は、前記店舗内における複数の商品設置場所のそれぞれにおける前記顧客の滞在時間と、前記顧客が前記店舗内で前記商品設置場所を経由した順序の情報を含み、
    前記表示用情報を生成する工程では、前記購入情報における前記購入した商品と当該商品が設置された前記商品設置場所との関連づけに従い、前記複数の商品設置場所のそれぞれにおける前記顧客の滞在時間に基づき前記購入した商品の選択に要した時間が決定され、前記商品設置場所を経由した前記順序に基づき前記購入した商品を選択した順序が決定される、ことを特徴とする情報処理装置の制御方法。
15. コンピュータを請求項１から１２のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images