JP7669195B2 - 販売データ処理システムおよびプログラム - Google Patents

Description

本発明の実施形態は、販売データ処理システムおよびプログラムに関する。

例えば、顧客が自身で売り場を巡って購入する商品を陳列場所から運ぶ小売店などの店舗では、目的の商品を発見できなかった顧客が店員に訊ねる、というようなことがある。このようなことは、例えば店舗が広い場合に起きがちである。さらに、訊ねようにも店員が見当たらないこともある。このような場合、顧客は不満を感じる。したがって、こういった事例は顧客満足度を低下させる原因となる。

ここで、特許文献１には、受付を行う装置で顧客の顔画像を撮像し、顔画像に基づいて顧客の感情を分析して、応対者の端末に送信する技術が開示されている。顧客の不満を検知できれば、不満を感じている顧客の元に店員が駆けつけてサポートすることが可能になる。しかしながら従来の技術では、店内を移動中の顧客の感情を認識することはできない。

なお、上記は一例であって、営業形態によらず、店員のサポートが欲しい状態が継続するほど顧客の満足度は低下する。

本発明が解決しようとする課題は、小売店の売り場を移動する顧客が店員のサポートを要する状態になったときに、その状態を店員に知らせ、サポート可能にすることである。

実施形態の販売データ処理システムは、移動端末が取得する情報で特定される商品の情報を販売データとして登録する登録部と、前記登録部による処理と並行して、前記移動端末が取得する情報により当該移動端末の操作者の状態を認識する状態認識部と、前記状態認識部が認識した前記操作者の状態に基づいて、店員によるサポートを要するか判断する判断部と、前記サポートを要すると前記判断部が判断すると、店員が操作する店員端末に対して前記操作者のサポートを依頼する情報を出力する依頼出力部と、を備え、前記移動端末は、当該移動端末の操作者に向けて情報を表示する表示部または前記移動端末に対する操作を受け付ける操作部が面する側を撮像するカメラを備え、前記状態認識部は、前記カメラから取得する撮像画像に基づいて、前記操作者の状態を推定する。

図１は、実施形態における販売データ処理システムの構成の一例を示す図である。 図２は、カートＰＯＳの外観の一例を示す図である。 図３は、移動端末のハードウェア構成の一例を示す図である。 図４は、移動端末の機能構成の一例を示す図である。 図５は、サーバのハードウェア構成の一例を示す図である。 図６は、サーバの機能構成の一例を示す図である。 図７は、店員端末のハードウェア構成の一例を示す図である。 図８は、店員端末の機能構成の一例を示す図である。 図９は、販売データ処理システムの各構成の処理の流れの一例を概略的に示す図である。

実施形態について図面を用いて説明する。図１は、実施形態における販売データ処理システムの構成の一例を示す図である。販売データ処理システムは、サーバ１００、移動端末２００、店員端末３００を含んで構成されている。

移動端末２００は、店内を移動する顧客が使用する端末装置である。移動端末２００は、商品を識別可能なコードをサーバ１００に送信し、サーバ１００から商品情報を受信する。また、移動端末２００は、顧客の顔画像や音声をサーバ１００に送信する。

サーバ１００は、店舗サーバ或いは店舗端末等とも呼ばれるものであって、例えば店舗のバックヤード等に設置されたＰＣ（Personal Computer）である。サーバ１００は、複数の店舗を束ねる本部に属する本部サーバと専用回線等のネットワークを介して接続されており、本部サーバと各種データの送受信が可能である。

サーバ１００は、移動端末２００から受信したコードに基づいて特定される商品の情報（商品情報）を、移動端末２００に送信する。商品情報は、例えば、価格や名称である。また、サーバ１００は、移動端末２００から受信した顔画像や音声に基づいて顧客の状態を認識する。顧客が、店員のサポートを必要とする状態であれば、サーバ１００は店員端末３００にサポートを依頼することを示す情報を送信する。

店員端末３００は、店員が使用する端末装置であって、例えばスマートフォンである。店員端末３００は、サーバ１００から顧客のサポートを依頼する情報を受信すると、表示デバイスへの表示やスピーカーで音声を発することにより、サポート依頼を店員に報知する。

図２は、カートＰＯＳ５００の外観の一例を示す図である。カートＰＯＳ５００は、店内で顧客が購入する商品を運搬する際に用いるショッピングカート５１０に、移動端末２００と、スキャナ５２０と、バッテリー５３０とが取り付けられたものである。

ショッピングカート５１０は、収納部５１１と、キャスタ部５１２と、ハンドル部５１３とを備える。収納部５１１は、上面が開口した籠状の容器であって、客が購入する商品を収納する。キャスタ部５１２は、収納部５１１を支える脚の下部に備えられた複数の車輪であって、キャスタ部５１２によりショッピングカート５１０は前後左右に移動可能である。ハンドル部５１３は、客がショッピングカート５１０を移動させる際に把持する部分である。

スキャナ５２０は、商品に照明光を照射するＬＥＤ（Light Emitting Diode）と、商品に付されたコードシンボルで反射した光を受光するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の受光素子と、受光素子が受光した光で描かれるコードシンボルをデコードするデコーダ（いずれも非図示）等を内蔵する。また、スキャナ５２０の一面には、ＬＥＤからの光を出射し、コードシンボルを読み取らせるための読取窓が設けられている。

客は、購入する商品を収納部５１１に収納する際に、当該商品に付されたコードシンボルを読取窓に翳して、スキャナ５２０にコードシンボルを読み取らせる。スキャナ５２０は、商品に付されたバーコードや二次元コード等のコードシンボルを読み取る。すなわち、コードシンボル（画像）をデコードすることにより、商品を一意に特定する商品コードを取得し、これらを移動端末２００に出力する。

なお、カートＰＯＳ５００は、スキャナ５２０の代わりに、客が自ら把持して、商品に付されたコードシンボルに近接させることによって、当該コードシンボルを読み取るハンドスキャナを備えてもよい。

移動端末２００は、スキャナ５２０から入力される商品コードに基づいて識別（一意に特定）される商品の情報（商品情報）を、販売データとして登録する。商品の特定は、移動端末２００から商品コードを入力されたサーバ１００が行う。サーバ１００は、商品コードに対応する商品情報すなわち価格や名称（商品名）等を、移動端末２００に出力する。

バッテリー５３０は、移動端末２００やスキャナ５２０に、電力を供給（給電）する。バッテリー５３０は、重量物であるため、できるだけ下方、例えば、収納部５１１の下方等に設置される。なお、バッテリー５３０は、例えばリチウムイオン電池、ニッケル水素電池等の充電可能な電池（二次電池）である。

図３は、移動端末２００のハードウェア構成の一例を示す図である。移動端末２００は、ＣＰＵ（Central Processing Unit）２１１、ＲＯＭ（Read Only Memory）２１２、ＲＡＭ（Random Access Memory）２１３、通信Ｉ／Ｆ（Interface）２１４、表示部２１５、操作部２１６、近距離通信Ｉ／Ｆ２１７、カメラ２１８、マイク２１９、記憶部２２０等を備えている。

表示部２１５は、例えば、ＬＣＤ（Liquid Crystal Display）などの表示デバイスであって、移動端末２００の操作者（顧客）に向けて情報を表示する。操作部２１６は、例えば、表示部２１５の表示面に重ねて設けられたタッチパネル等であって、移動端末２００に対する入力操作を受け付け、操作に基づく情報を出力する。

通信Ｉ／Ｆ２１４は、外部装置との通信を可能にするもので、サーバ１００等との通信を仲介する。近距離通信Ｉ／Ｆ２１７は、スキャナ５２０との間で、ＮＦＣ（Near Field communication）や、Ｂｌｕｅｔｏｏｔｈ（登録商標）等による非接触通信（近距離無線通信）を行う。ＣＰＵ２１１は、近距離通信Ｉ／Ｆ２１７を介して、スキャナ５２０を制御し、スキャナ５２０が出力する商品コードを取得する。

カメラ２１８は、ＣＣＤやＣＭＯＳ等の受光素子を備え、受光素子が受光した光を電気信号に変換して出力する。カメラ２１８は、移動端末２００の外装筐体に設けられ、表示部２１５や操作部２１６が面する側を、撮像する。表示部２１５は、移動端末２００の操作者（顧客）が見るものであるので、顧客の顔に面している。つまり、カメラ２１８が出力する撮像画像は、顧客が移動端末２００を見ているとき、顧客の顔画像を含む。なお、カメラ２１８の撮像画像は、表示部２１５に表示しなくてよい。マイク２１９は、移動端末２００の外の音を集音し、入力される音声を電気信号に変換して出力する。

記憶部２２０は、プログラムや各種ファイルを記憶する。記憶部２２０は記憶装置であればよく、例えばＳＳＤ（Solid State Drive）である。記憶部２２０に記憶されているプログラムは、移動端末２００の起動時に、その全部または一部がＣＰＵ２１１により実行される。記憶部２２０が記憶するプログラムの一つが、ＰＯＳアプリ２２１である。ＰＯＳアプリ２２１は、移動端末２００をＰＯＳ（Point Of Sales）端末として機能させるアプリケーションソフトウェアである。

ＲＯＭ２１２は、ＣＰＵ２１１が実行する各種プログラムや各種データを記憶する。ＲＡＭ２１３は、ＣＰＵ２１１が実行するプログラムの展開や各種値の一時的な記憶に用いられる。ＣＰＵ２１１は、ＲＯＭ２１２や記憶部２２０に記憶されているプログラムを実行することにより、制御部２１０として機能する。ＣＰＵ２１１がＰＯＳアプリ２２１を実行することにより、制御部２１０が次に説明する各種機能部（図４参照）として機能する。

図４は、移動端末２００の機能構成の一例を示す図である。制御部２１０は、撮像部２０１、読取部２０２、登録部２０３等を備える。

撮像部２０１は、カメラ２１８を制御してカメラ２１８が出力する撮像画像を取得し、サーバ１００に送信する。読取部２０２は、スキャナ５２０を制御してスキャナ５２０が出力する商品コードを取得し、サーバ１００に送信する。登録部２０３は、販売データ登録を行う。すなわち登録部２０３は、サーバ１００から入力された商品情報を、販売データとして記憶部２２０に記憶させる。商品情報は、サーバ１００から受信する情報であって、移動端末２００が取得した商品コードで一意に特定される情報である。

次に、サーバ１００について説明する。図５は、サーバ１００のハードウェア構成の一例を示す図である。サーバ１００は、ＣＰＵ１１１、ＲＯＭ１１２、ＲＡＭ１１３、通信Ｉ／Ｆ１１４、記憶部１２０等を備えている。通信Ｉ／Ｆ１１４は、外部装置との通信を可能にするもので、移動端末２００や店員端末３００等との通信を仲介する。

記憶部１２０は、プログラムや各種ファイルを記憶する。記憶部１２０は記憶装置であればよく、例えばＨＤＤ(Hard Disc Drive）やＳＳＤである。記憶部１２０に記憶されているプログラムは、サーバ１００の起動時に、その全部または一部がＣＰＵ１１１により実行される。記憶部１２０が記憶するファイルの一つが、商品マスタ１２１である。商品マスタ１２１は、商品を識別（一意に特定）可能な識別コードである商品コードに関連付けて、価格や名称（商品名）等の商品情報を記憶している。

ＲＯＭ１１２は、ＣＰＵ１１１が実行する各種プログラムや各種データを記憶する。ＲＡＭ１１３は、ＣＰＵ１１１が実行するプログラムの展開や各種値の一時的な記憶に用いられる。ＣＰＵ１１１は、ＲＯＭ１１２や記憶部１２０に記憶されているプログラムを実行することにより、制御部１１０として機能する。制御部１１０は、次に説明する各種機能部（図６参照）を備える。

図６は、サーバ１００の機能構成の一例を示す図である。制御部１１０は、商品識別部１０１、状態認識部１０２、判断部１０３、依頼出力部１０４等を備える。

商品識別部１０１は、移動端末２００から入力される商品コードをキーに商品マスタ１２１から価格や商品名を取得し、それらを移動端末２００へ出力する。
なお、本実施形態では、スキャナ５２０がコードシンボルを読み取って出力する商品コードに基づいて商品を識別しているが、実施にあたってはこれに限らず、例えば一般物体認識（オブジェクト認識）技術を用い、外観の特徴量に基づいて商品を特定するのであっても構わない。

状態認識部１０２は、移動端末２００が取得する情報により、移動端末２００の操作者の状態を認識する。より具体的には、状態認識部１０２は、カメラ２１８が出力する画像情報に含まれる操作者の表情から、操作者の感情を推定する。また、状態認識部１０２は、マイク２１９が出力する音声情報から、操作者の状態を認識する。この処理は、登録部２０３による処理と並行して行われる。

カメラ２１８が出力する画像情報やマイク２１９が出力する音声情報は、移動端末２００が取得する情報の例である。移動端末２００は、これらの画像情報や音声情報を取得すると、サーバ１００に出力する。移動端末２００からサーバ１００に画像情報や音声情報が入力されると、入力された情報に基づいて、状態認識部１０２が、移動端末２００の操作者の状態を認識する。操作者の状態は、例えば、不満や怒りなどの感情や、商品が見つからず探し回っているような事態である。

移動端末２００からサーバ１００に画像情報が入力されると、状態認識部１０２は、画像情報に含まれる顔画像を抽出し、顔画像を分析して、表情から感情を推定する。この分析処理には、既存の技術を用いて構わない。また、移動端末２００からサーバ１００に音声情報が入力されると、状態認識部１０２は、音声情報に含まれる言葉を抽出する。

判断部１０３は、状態認識部１０２が認識した操作者の状態に基づいて、店員によるサポートを要するか判断する。例えば、状態認識部１０２が、操作者が不満や怒りを感じていたり、或いは困っていたりすると判断した場合、店員によるサポートを要すると判断する。

より具体的には、移動端末２００から取得した情報が画像情報の場合、当該画像情報に含まれている顔画像から推定された感情が、例えば、不満、怒り、当惑などに関連するものであると、判断部１０３は、店員のサポートを要すると判断する。また、移動端末２００から取得した情報が音声情報の場合、当該音声情報に含まれている言葉の中に、不満や怒りに関連する言葉や、例えば「どこだろう」「見つからない」等のような言葉があると、判断部１０３は、店員のサポートを要すると判断する。

依頼出力部１０４は、サポートを要すると判断部１０３が判断すると、店員が操作する店員端末３００に対して、操作者のサポートを依頼する情報を出力する。また、依頼出力部１０４は、サポートを依頼する情報に、操作者を特定可能な情報を含める。操作者を特定可能な情報としては、例えば、顔画像などがある。

さらに、依頼出力部１０４は、サポートを依頼する情報に、移動端末２００の位置を示す情報を含める。移動端末２００の位置を示す情報としては、例えば、店内マップ上に移動端末２００の現在値を示す画像を表示させるための情報や、或いは、移動端末２００の付近の売り場の名称などである。

なお、例えば店舗がその広さや造りから店内のいずれの場所からでも見通し可能であるような場合には、移動端末２００の位置を示す情報を含めなくともこと足りる。

次に、店員端末３００について説明する。図７は、店員端末３００のハードウェア構成の一例を示す図である。店員端末３００は、ＣＰＵ３１１、ＲＯＭ３１２、ＲＡＭ３１３、通信Ｉ／Ｆ３１４、表示部３１５、操作部３１６、記憶部３２０等を備えている。

表示部３１５は、例えば、ＬＣＤなどの表示デバイスであって、店員端末３００の操作者（店員）に向けて情報を表示する。操作部３１６は、例えば、表示部３１５の表示面に重ねて設けられたタッチパネル等であって、店員端末３００に対する入力操作を受け付け、操作に基づく情報を出力する。通信Ｉ／Ｆ３１４は、外部装置との通信を可能にするもので、サーバ１００等との通信を仲介する。

記憶部３２０は、プログラムや各種ファイルを記憶する。記憶部３２０は記憶装置であればよく、例えばＳＳＤである。記憶部３２０に記憶されているプログラムは、店員端末３００の起動時に、その全部または一部がＣＰＵ３１１により実行される。

ＲＯＭ３１２は、ＣＰＵ３１１が実行する各種プログラムや各種データを記憶する。ＲＡＭ３１３は、ＣＰＵ３１１が実行するプログラムの展開や各種値の一時的な記憶に用いられる。ＣＰＵ３１１は、ＲＯＭ３１２や記憶部３２０に記憶されているプログラムを実行することにより、制御部３１０として機能する。制御部３１０は、次に説明する各種機能部（図８参照）を備える。

図８は、店員端末３００の機能構成の一例を示す図である。制御部３１０は、受信部３０１、報知部３０２等を備える。

受信部３０１は、サーバ１００から、各種情報の入力を受ける。報知部３０２は、受信部３０１が操作者のサポートを依頼する情報を受信した場合に、これを表示部３１５に表示させる等して店員に報知する。
なお、店員端末３００が、スピーカー等を備えているのであれば、報知部３０２は、表示部３１５での報知に伴い、スピーカーによって音声を発するなどすると、店員端末３００を所持する店員がサポート依頼に気付きやすくなる。

このような構成の販売データ処理システムにおいて、移動端末２００は入店した顧客によるＰＯＳアプリ２２１起動に伴いカメラ２１８による撮像を開始し、サーバ１００はカメラ２１８が出力する撮像画像を分析して客の状態を認識し、サポートを要する場合は店員端末３００にサポート依頼を出力する。この一連の処理の流れについて、図９を参照してより詳細に説明する。図９は、販売データ処理システムの各構成の処理の流れの一例を概略的に示す図である。

まず、入店した顧客が、移動端末２００の使用を開始すると、移動端末２００ではＰＯＳアプリ２２１が起動され、顧客にログインを求める。顧客は、会員ＩＤを入力する等して、ログインを行う（ステップＳ１１）。会員ＩＤの入力は、会員証に表示されたバーコードや二次元コード等のコードシンボルをスキャナ５２０に読み取らせる等により入力してもよいし、操作部２１６を用いた手入力により行ってもよい。

ログインの後、移動端末２００は、表示部２１５に、販売データとして登録された商品の情報を一覧表示する画面（商品登録画面）を表示する。この画面はスキャナ５２０によるコードシンボルの読み取り開始を指示するボタンを含んでいる。当該ボタンが操作部２１６を介して操作を受けると、スキャナ５２０は照射および撮像を開始する。

上述のような販売データ処理と並行して、移動端末２００は、カメラ２１８による撮像を行い（ステップＳ１２）、撮像画像をサーバ１００に送信する。なお、カメラ２１８による撮像画像は、表示部２１５に表示させる必要はない。撮像は、移動端末２００で会計処理が行われるまで続けられる（ステップＳ１３のＮｏ）。操作部２１６が操作者（顧客）から会計を行う旨の操作を受けると（ステップＳ１３のＹｅｓ）移動端末２００は撮像を終了して本処理を終了する。

サーバ１００は、移動端末２００から撮像画像が入力されると、これを分析し（ステップＳ２１）、顧客の状態を認識する（ステップＳ２２）。次にサーバ１００は、顧客の状態から、店員による顧客のサポートの要否を判断する（ステップＳ２３）。ステップＳ２３においてサポートが不要と判断された場合、サーバ１００は本処理を終了する。
また、ステップＳ２３において、サポートが必要と判断された場合、サーバ１００は、サポート依頼を行う（ステップＳ２４）。

店員端末３００は、サーバ１００からサポート依頼が入力されるとこれを受信し（ステップＳ３１）、表示部３１５に表示させて（ステップＳ３２）、本処理を終了する。

このように、本実施形態の販売データ処理システムによれば、顧客が購入する商品の登録に用いる移動端末２００によって、顧客の表情や言葉を収集して顧客の状態を認識し、必要に応じて店員端末３００を介して店員にサポートを依頼する。このようにすることにより、小売店の売り場を移動する顧客が店員のサポートを要する状態になったときに、その状態を店員に知らせ、サポート可能にすることができる。

移動端末２００は、店内を移動する顧客とともに移動するものであり、また、顧客が移動端末２００の表示内容を見たり操作したりするとき、カメラ２１８により顧客の表情を捉えることができる。よって、例えば、ハンドル部５１３を掴んでカートＰＯＳ５００を押して歩く顧客が、目的の商品を見つけられない等で困ると、その表情をカメラ２１８が捉え、状態認識部１０２が顧客の表情を分析することで、顧客の困っている状態を認識し、店員によるサポートにつなげることができる。

さらに、マイク２１９で顧客の発する言葉を捉えることにより、顧客の言葉に困っている等の様子をうかがわせる表現が含まれていれば、これを認識し、店員によるサポートにつなげることができる。

なお、本実施形態では、顧客の状態の認識に用いる情報として、顔画像や音声を、移動端末２００から取得するが、実施にあたっては、顔画像や音声以外の情報から、顧客の状態を認識するようにしても構わない。

また、本実施形態では、移動端末２００がタブレット端末である例を説明したが、実施にあたっては、移動端末２００は、例えば、スマートフォンなどの携帯端末であってもよい。また、携帯端末としてのスマートフォンは、店内貸与のものでもよいし、顧客が所持するものであってもよい。

また、本実施形態では、移動端末２００がショッピングカート５１０に備え付けのタブレット端末である例を説明したが、実施にあたっては、移動端末２００は、例えば、顧客が所持するスマートフォン等の顧客端末であってもよく、この場合には、例えば、ショッピングカート５１０に、顧客端末を保持するホルダーを設ける等すると好適である。なお、この場合、顧客端末は、インストールされた所定のアプリケーションソフトウェア（実施形態におけるＰＯＳアプリ２２１に相当）を起動することで、本実施形態の移動端末として機能する。また、スマートフォンが移動端末として使用される場合、下記のように、スマートフォンがスキャナ５２０の働きをも行うことができる。

顧客が所持するスマートフォンを移動端末として使用する場合についてより詳しく述べる。近年のスマートフォンは、表示デバイスがある側とその背面側との両面にカメラを備えているものが少なくなく、そのようなスマートフォンは、両面を撮像可能である。そういったスマートフォンが移動端末として使用される場合、ホルダーは、表示デバイスの背面側のカメラを収納部５１１側に向けて、スマートフォンを保持する。このような使用形態において、顧客は、商品を収納部５１１に入れる際に、背面側のカメラ（背面カメラ）で商品を撮像する。また、表示デバイス側のカメラ（正面カメラ）は、顧客を撮像する。このように、スマートフォンを、上記実施形態のタブレット端末である移動端末２００およびスキャナ５２０に代えて使用することができる。

また、客が所持するスマートフォンを移動端末として使用する場合、移動端末であるスマートフォンは、ステップＳ１１のログインに代えて、入店処理を行う。入店処理は、例えば、次のようなものである。まず、顧客は、入店時にＰＯＳアプリ２２１を起動（実行）する。次に、顧客は、ＰＯＳアプリ２２１の指示に従い、店舗の入口等に表示された二次元コードをカメラに読み取らせるなどすることで、店内システムへ無線接続するためのアクセスコードを取得する。以上の入店処理を経ると、ＰＯＳアプリ２２１は、商品登録処理を開始する。

入店処理後、ＰＯＳアプリ２２１は、背面カメラによる商品登録処理と、それと並行して、正面カメラによる顧客の顔画像の撮像を行う。なお、このとき、表示デバイス（表示部２１５に相当）は、商品登録画面を表示している。

さらに、本実施形態では、移動端末２００から顧客の顔画像を含む撮像画像をサーバ１００に送信し、サーバ１００にて顧客の状態を認識する処理を行っているが、実施にあたってはこれに限らない。つまり、例えば、本実施形態の状態認識部１０２や判断部１０３、依頼出力部１０４に相当する機能部を、移動端末２００が備えていてもよい。

また、本実施形態では、サーバ１００は、例えば店舗のバックヤード等に設置されたＰＣであるとして説明したが、実施にあたってはこれに限らない。例えば、サーバ１００は、クラウド環境にある仮想サーバであっても構わない。この場合の仮想サーバは、例えば、本部に属する本部サーバ内に、店舗毎、或いは適宜構成されたグループ毎に構築される。またこの場合、移動端末２００および店員端末３００は、仮想サーバと通信する。

本実施形態の販売データ処理システムは、ＣＰＵなどの制御装置と、ＲＯＭやＲＡＭなどの記憶装置と、ＨＤＤ、ＣＤドライブ装置などの外部記憶装置と、ディスプレイ装置などの表示装置と、キーボードやマウスなどの入力装置を備えており、通常のコンピュータを利用したハードウェア構成となっている。

また、本実施形態の販売データ処理システムで実行されるプログラムは、ＲＯＭ等の記憶装置に予め組み込まれて提供される。

本実施形態の販売データ処理システムで実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

さらに、本実施形態の販売データ処理システムで実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の販売データ処理システムで実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

本実施形態の販売データ処理システムで実行されるプログラムは、上述した各部（商品識別部１０１、状態認識部１０２、判断部１０３、依頼出力部１０４、撮像部２０１、読取部２０２、登録部２０３、受信部３０１、報知部３０２等）を含むモジュール構成となっている。ＣＰＵ（プロセッサ）は、上記記憶装置からプログラムを読み出して実行することにより、上記各部を主記憶装置上にロードする。これにより、商品識別部１０１、状態認識部１０２、判断部１０３、依頼出力部１０４、撮像部２０１、読取部２０２、登録部２０３、受信部３０１、報知部３０２が、主記憶装置上に生成される。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１００…サーバ、
１０１…商品識別部、１０２…状態認識部、１０３…判断部、１０４…依頼出力部、
１１０…制御部、
１１１…ＣＰＵ、１１２…ＲＯＭ、１１３…ＲＡＭ、１１４…通信Ｉ／Ｆ、
１２０…記憶部、１２１…商品マスタ、
２００…移動端末、
２０１…撮像部、２０２…読取部、２０３…登録部、
２１０…制御部、
２１１…ＣＰＵ、２１２…ＲＯＭ、２１３…ＲＡＭ、２１４…通信Ｉ／Ｆ、
２１５…表示部、２１６…操作部、２１７…近距離通信Ｉ／Ｆ、
２１８…カメラ、２１９…マイク、
２２０…記憶部、２２１…ＰＯＳアプリ、
３００…店員端末、
３０１…受信部、３０２…報知部、
３１０…制御部、
３１１…ＣＰＵ、３１２…ＲＯＭ、３１３…ＲＡＭ、３１４…通信Ｉ／Ｆ、
３１５…表示部、３１６…操作部、
３２０…記憶部、
５００…カートＰＯＳ、
５１０…ショッピングカート、
５１１…収納部、５１２…キャスタ部、５１３…ハンドル部、
５２０…スキャナ、
５３０…バッテリー。

特開２０１８－０３６７１２号公報

Claims (6)

1. 移動端末が取得する情報で特定される商品の情報を販売データとして登録する登録部と、
   前記登録部による処理と並行して、前記移動端末が取得する情報により当該移動端末の操作者の状態を認識する状態認識部と、
   前記状態認識部が認識した前記操作者の状態に基づいて、店員によるサポートを要するか判断する判断部と、
   前記サポートを要すると前記判断部が判断すると、店員が操作する店員端末に対して前記操作者のサポートを依頼する情報を出力する依頼出力部と、
   を備え、
   前記移動端末は、当該移動端末の操作者に向けて情報を表示する表示部または前記移動端末に対する操作を受け付ける操作部が面する側を撮像するカメラを備え、
   前記状態認識部は、前記カメラから取得する撮像画像に基づいて、前記操作者の状態を推定する
   販売データ処理システム。
2. 移動端末が取得する情報で特定される商品の情報を販売データとして登録する登録部と、
   前記登録部による処理と並行して、前記移動端末が取得する情報により当該移動端末の操作者の状態を認識する状態認識部と、
   前記状態認識部が認識した前記操作者の状態に基づいて、店員によるサポートを要するか判断する判断部と、
   前記サポートを要すると前記判断部が判断すると、店員が操作する店員端末に対して前記操作者のサポートを依頼する情報を出力する依頼出力部と、
   を備え、
   前記移動端末は、当該移動端末の操作者に向けて情報を表示する表示部または前記移動端末に対する操作を受け付ける操作部が面する側を撮像するカメラを備え、
   前記状態認識部は、前記カメラが出力する画像情報に含まれる前記操作者の表情から、前記操作者の感情を推定する
   販売データ処理システム。
3. 移動端末が取得する情報で特定される商品の情報を販売データとして登録する登録部と、
   前記登録部による処理と並行して、前記移動端末が取得する情報により当該移動端末の操作者の状態を認識する状態認識部と、
   前記状態認識部が認識した前記操作者の状態に基づいて、店員によるサポートを要するか判断する判断部と、
   前記サポートを要すると前記判断部が判断すると、店員が操作する店員端末に対して前記操作者のサポートを依頼する情報を出力する依頼出力部と、
   を備え、
   前記移動端末は、マイクを備え、
   前記状態認識部は、前記マイクが出力する音声情報から、前記操作者の状態を認識する
   販売データ処理システム。
4. 前記依頼出力部は、前記サポートを依頼する情報に、前記操作者を特定可能な情報を含める
   請求項１～３のいずれか１つに記載の販売データ処理システム。
5. 前記依頼出力部は、前記サポートを依頼する情報に、前記移動端末の位置を示す情報を含める
   請求項１～４のいずれか１つに記載の販売データ処理システム。
6. 販売データ処理システムのコンピュータに、
   移動端末が取得する情報で特定される商品の情報を販売データとして登録する登録機能と、
   前記登録機能による処理と並行して、前記移動端末が取得する情報により当該移動端末の操作者の状態を認識する状態認識機能と、
   前記状態認識機能が認識した前記操作者の状態に基づいて、店員によるサポートを要するか判断する判断機能と、
   前記サポートを要すると前記判断機能が判断すると、店員が操作する店員端末に対して前記操作者のサポートを依頼する情報を出力する依頼出力機能と、
   を実現させ、
   前記状態認識機能は、前記移動端末の操作者に向けて情報を表示する表示部または前記移動端末に対する操作を受け付ける操作部が面する側を撮像するカメラから取得する撮像画像に基づいて、前記操作者の状態を推定する
   ためのプログラム。

Images