JP7620975B2 - オーダーシステム及びプログラム - Google Patents

Description

特許法第３０条第２項適用 ・ＥＧＧＳ’Ｎ ＴＨＩＮＧＳ ＪＡＰＡＮ株式会社 ＥＧＧＳ’Ｎ ＴＨＩＮＧＳ Ｃｏｆｆｅｅ 御殿場プレミアム・アウトレット店 令和３年２月３日

本発明は、音声入力可能なオーダーシステム及びプログラムに関するものである。

従来、券売機などのオーダーシステムにおいて、画面にタッチする代わりに、音声認識機能を用いて商品を登録することが行われている。

特開２００８－０１５９７４号公報

しかし従来、音声認識機能を有する券売機などが、音声による操作をしていないにもかかわらず、誤作動してしまうなどの課題があった。

本発明は上述の点に鑑みてなされたものでありその目的は、音声認識による適正な運用を図ることができるオーダーシステム及びプログラムを提供することにある。

本発明は、音声を入力する音声入力手段と、前記音声入力手段で入力された音声を識別する音声識別手段と、前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、タッチ操作によって商品登録を行うタッチ登録手段と、前記音声登録手段と前記タッチ登録手段の一方を有効とする切替手段と、前記切替手段による切替え処理が行われる前に登録された登録情報を削除する削除手段と、を備えることを特徴とするオーダーシステムにある。

オーダーシステム１００に用いる券売機１の一例を示す斜視図である。 券売機１のシステム構成の一例を示す図である。 オーダーシステム１００の一例を示す図である。 商品ファイルの一例を示す図である。 券売機１が実行する発券処理の一例を示す動作フロー図である。 手動入力指示画面Ｇ１を示す図である。 手動入力用商品登録画面Ｇ２を示す図である。 音声入力指示画面Ｇ３を示す図である。 音声入力用商品登録画面Ｇ４を示す図である。 図１０（ａ）は手動入力用商品登録画面Ｇ２の商品覧Ｇ２１中の最も上の列の部分を拡大して示す図、図１０（ｂ）は音声入力用商品登録画面Ｇ４の商品覧Ｇ４１中の最も上の列の部分を拡大して示す図である。 タイムテーブルＴＴを示す図である。

以下、本発明の実施形態を、図面を参照して詳細に説明する。
図１は本発明の一実施形態にかかるオーダーシステム１００に用いる券売機（注文受付装置、販売機、商品販売データ処理装置）１の一例を示す斜視図である。また図３は、複数台の券売機１を用いて構成されたオーダーシステム１００の一例を示す図である。なお、１台の券売機１のみでオーダーシステムを構成する場合もある。券売機１は、例えば飲食店において客が商品（調理メニュー）に対応する食券を購入するために設置されるものであり、図３に示すように、１つの店舗（飲食店）Ｓ１，Ｓ２に１台（または複数台）設置される場合の他、複数の店舗（飲食店）Ｓ３－１～５に対して１台（または複数台）設置される場合がある。また券売機１に対して、顧客（店員でも良い）の所持する携帯端末Ｓ６によって操作可能とする場合もある。また各券売機１を通信回線Ｓ７で接続し、各券売機１で生じる入出力データを、券売機管理装置（例えばクラウド）Ｓ４によって管理（マスタ管理、売上集計など）してもよい。また例えば、複数（単数でも良い）の店舗Ｓ１，Ｓ２，Ｓ３－１～５用のメンバーズカードを発行し、当該メンバーズカードによって各券売機１での精算が行えるように構成してもよい。メンバーズカードの管理は、例えば、前記通信回線Ｓ７に会員管理用サーバＳ５を接続し、当該会員管理用サーバＳ５によって行っても良い。

次に、券売機１について説明する。本実施形態にかかる券売機１は、画面にタッチすることで入力できると同時に、音声入力可能な券売機１である。即ち図１に示すように、券売機１は、その正面上部には表示操作手段となるタッチパネル１１が設置されている。タッチパネル１１には客が商品購入をはじめとする所定の操作を行うための各種画面（商品選択画面など）が表示される。客はタッチパネル１１に表示されている商品の絵やボタン等を指でタッチ（押下）したり、当該タッチパネル１１に表示されている商品の絵を参考にして発声（発音）したりすることで、所望の商品の食券を購入することができる。即ち、タッチパネル１１は、表示手段であると同時に操作手段であり、また発券する商品を選択する選択手段でもある。

券売機１の正面のタッチパネル１１の側部（向かって左側の辺に沿う位置）の下部には、下記する紙片（媒体、以下「食券」という）を発行する発行口３１が設けられている。発行口３１の上部には、非現金決済処理部２１が設置されている。非現金決済処理部２１は、現金以外の決済処理全般（電子マネー決済やクレジット決済など）を行うものであり、カード処理部２３とモバイル端末処理部２５とを有している。カード処理部２３は、ＩＣカードを挿入して決済処理を行うＩＣカード挿入部２３ａと、非接触カードをかざして決済処理を行う非接触カード読取部２３ｂと、磁気カードを挿入して決済処理を行う磁気カード挿入部２３ｃとを有している。モバイル端末処理部２５は、図示しない携帯端末（媒体）のタッチパネルに表示した二次元コードを読み込んで決済処理などを行うものである。

また券売機１の正面のタッチパネル１１の下部には、マイクロフォン２７が設置され、その下部には、紙幣投入口１３、紙幣排出口１５、硬貨投入口１７、硬貨排出口１９等が設けられている。マイクロフォン２７は、音声を入力する入力手段であり、入力した音声によって商品の選択などの各種操作を行うものである。紙幣投入口１３は入金に際して紙幣が投入され、紙幣排出口１５からはお釣りや返金等の払い出し金の内の紙幣が排出される。硬貨投入口１７は入金に際して硬貨が投入され、硬貨排出口１９からは払い出し金の内の硬貨が排出される。

なお、マイクロフォン２７の設置位置は、この例に限られず、例えば券売機１の正面中央付近（点線で示す２７Ａの位置など）に設置しても良く、また券売機１の上部の位置（点線で示す２７Ｂの位置など）に設置しても良い。正面中央付近にマイクロフォン２７Ａを設置した場合は、券売機１の正面側以外の方向からの音が入力されにくくなるので、正面に位置する操作者の音声を効果的に入力することができる。また券売機１の上部の位置（操作者の頭に対向する位置）にマイクロフォン２７Ｂを設置した場合は、操作者の口の近くにマイクロフォン２７Ｂが位置するので、操作者の音声を効果的に入力することができる。

図２は券売機１のシステム構成の一例を示す図である。同図に示す券売機１のシステム構成は、ＣＰＵ４１、フラッシュメモリ４３、ＲＡＭ４５、タッチパネル１１、紙幣処理部５１、非現金決済処理部２１、通信部４７、発行部（発行手段）４９、音声処理部５５、硬貨処理部５３を備えている。音声処理部５５には、前記マイクロフォン２７からの音声信号が入力される。

ＣＰＵ４１は券売機１の処理動作全体を制御する制御手段である。ＲＡＭ４５は主記憶装置に該当するものであり、ＣＰＵ４１が演算処理を実行する際の作業領域として用いられる。またＲＡＭ４５においては１回の入金に応じた入金金額、現在の残高などのデータを記憶する一時記憶エリアが設定される。ＲＡＭ４５には商品ファイルが記憶されている。図４はＲＡＭ４５に記憶される商品ファイルの一例を示す図である。同図に示すように、商品ファイルは、各商品の商品コード（商品識別情報）、商品名、価格などの各種商品情報からなっている。

フラッシュメモリ４３は補助記憶装置に該当するものであり、ＣＰＵ４１が実行するプログラムの他、ＣＰＵ４１が演算処理に際して利用する各種の設定データ等が記憶される。なおフラッシュメモリ４３に代えて、例えばハードディスクなどの他の記憶装置を用いても良い。

タッチパネル１１はＣＰＵ４１の制御によって所定の画面を表示する表示手段である。またＣＰＵ４１はタッチパネル１１に対して行われた操作に応じて出力される操作信号に基づき所定の制御処理を実行する。このタッチパネル１１は、発券する商品を選択操作する操作手段（選択手段）、即ち表示操作手段である。通信部４７は外部との通信を実行する送受信手段であり、例えばネットワークや専用回線など（上記通信回線Ｓ７など）を経由して外部装置（券売機管理装置Ｓ４や会員管理サーバＳ５や顧客携帯端末Ｓ６や図示しない厨房端末など）と通信を行う機能を有する。有線、無線を問わない。

発行部４９はタッチパネル１１でのタッチ操作やマイクロフォン２７からの音声入力によって選択された商品の食券の発行を制御し、選択された商品についての必要な情報を食券の用紙に印刷し、印刷した食券を発行口３１に排出する機構部を備えて構成されている。この発行部４９によって発行される食券は、用紙幅方向にパーシャルカット（真中だけ残してその両サイドをカット）して発行される形態となっており、これによって発券された食券の受け皿を不要としている。

紙幣処理部５１は紙幣に関する処理全般を行う。具体的には、紙幣処理部５１は紙幣の鑑定処理として、紙幣投入口１３から投入された紙幣の種別を判定する。また紙幣処理部５１は紙幣投入口１３から投入された紙幣の金種毎に枚数をカウントする。また紙幣処理部５１は釣銭の返却の際に、券売機１内部の紙幣収納庫に格納されている紙幣の内から必要な金種の紙幣を選別して必要枚数を紙幣排出口１５に排出させる。

硬貨処理部５３は硬貨に関する処理全般を行う。具体的には、硬貨処理部５３は紙幣処理部５１と同様、硬貨の鑑定処理、硬貨の金種毎の枚数カウント、券売機１の内部に収納された硬貨の内から必要な金種の硬貨を選別して硬貨排出口１９から排出する等の動作を実行する。

音声処理部５５は、マイクロフォン２７から入力された各種の音情報を解析処理し、音声認識したり、音量認識したりする。

図５は、券売機１が実行する発券処理の一例を示す動作フロー図である。この図に示される処理は、ＣＰＵ４１が例えばフラッシュメモリ４３に記憶されているプログラムを実行することにより実現される。

券売機１は、常時マイクロフォン２７から音情報を入力している（ステップ１－１）。音の中には、人の発声する音声もあれば、自動車、商店街などから生じる騒音など、各種の音が含まれる。

次に、ＣＰＵ４１は、以下の操作を音声操作（音声入力）によって行うか或いはタッチ操作（タッチ入力、手動入力）によって行うかを選択するために現在の状況を取得し（ステップ１－２）、取得した状況データを用いて操作（登録）方法（音声操作か手動操作か）を選択する（ステップ１－３）。ここで現在の状況とは、この例では、タイムテーブルの取得、または周囲の音の取得の何れかである。以下２つの場合を分けて説明する。

〔タイムテーブルを用いる場合〕
タイムテーブルを取得することで、音声操作を行うか或いはタッチ操作を行うかを選択する方法の場合は、ＣＰＵ４１はまず図１１に示すようなタイムテーブルＴＴを例えばフラッシュメモリ４３から入力する（ステップ１－２）。タイムテーブルＴＴは、予め設定しておいた時間帯によって音声操作を行うかタッチ操作を行うかを選択するためのテーブルデータである。

図１１に示す例では、券売機１の周囲の音（雑音、騒音）が小さい時間帯（10:00～11:30、13:30～17:00）の場合は音声操作を選択し、券売機１の周囲の音（雑音、騒音）が大きい時間帯（11:30～13:30、17:00～22:00）の場合はタッチ操作を選択する（ステップ１－３）。このように時間帯を分割するのは、券売機１の周囲の音が小さい場合は音声処理部５５が当該音によって誤動作（誤判断）して音声入力を開始してしまうことが無いからであり、一方券売機１の周囲の音が大きい場合は音声処理部５５が当該音によって誤動作（誤判断）して音声入力を開始してしまう虞があるからである。

この例では、券売機１の周囲の音が大きい場合と小さい場合とで時間帯を分けたが、他の各種基準で時間帯を分けても良い。例えば、子供や高齢者などが多い時間帯はタッチ操作が不慣れであったりするので音声操作を選択し、タッチパネル操作に慣れた客層が多い時間帯はタッチ操作を選択するなどである。

〔周囲の音を用いる場合〕
一方、周囲の音をマイクロフォン２７から取得することで音声操作を行うか或いはタッチ操作を行うかを選択する方法の場合は、マイクロフォン２７から音声処理部５５に音データを入力する。そしてこの音データが予め設定しておいた音のレベルより大きいか小さいかをＣＰＵ４１が判断し、大きい場合は音声処理部５５が当該音によって誤動作（誤判断）して音声入力を開始してしまう虞があるからタッチ操作を選択し、小さい場合は音声処理部５５が当該音によって誤動作（誤判断）して音声入力を開始してしまう虞が無いから音声操作を選択する（ステップ１－３）。

以上のようにして、上記ステップ１－３において選択した操作方法（登録方法）がタッチ操作であった場合は、ステップ１－３の「Ｎ」からステップ１－４に移行し、図６に示すような手動入力指示画面（タッチ入力指示画面）Ｇ１を表示する。

手動入力指示画面Ｇ１には、店舗名称Ｇ１１と複数のメニュー選択ボタンＧ１３と入力モード切替ボタンＧ１５とが表示されている。メニュー選択ボタンＧ１３には、日本語メニュー選択ボタンＧ１３１と英語メニュー選択ボタンＧ１３３とイートインメニュー選択ボタンＧ１３５とテイクアウトメニュー選択ボタンＧ１３７とがある。そしてこの例では、日本語メニュー選択ボタンＧ１３１をタッチしたとすれば（ステップ１－５の「Ｙ」）、例えば図７に示す手動入力用商品登録画面（タッチ入力用商品登録画面）Ｇ２が表示される（ステップ１－６）。

手動入力用商品登録画面Ｇ２には、商品覧Ｇ２１と選択済商品表示欄Ｇ２３と商品群選択欄Ｇ２５と会計ボタンＧ２７と入力モード切替ボタンＧ２９とが表示されている。商品覧Ｇ２１には選択可能な各種商品Ｇ２１１，Ｇ２１１，・・・が表示されており、何れか所望の商品Ｇ２１１の部分を押下（タッチ）することで商品が選択され、当該選択された商品が選択済商品表示欄Ｇ２３に表示される。各商品Ｇ２１１は、商品画像ａ１と名称ａ２と値段ａ３を有している。選択済商品表示欄Ｇ２３には、選択された商品や合計金額が表示される。商品群選択欄Ｇ２５は、商品覧Ｇ２１に表示する商品群を選択するための欄であり、図７ではラーメン群を選択しているのでその商品覧Ｇ２１には商品として各種ラーメンを表示しているが、例えばごはんボタンを押下すれば商品覧Ｇ２１には商品として各種ごはん（定食や丼物など）が表示される。

そして商品覧Ｇ２１中の所望の商品Ｇ２１１の部分を押下することで１又は複数の商品を選択・登録してゆき（ステップ１－７、ステップ１－８の「Ｎ」）、商品の選択・登録が終了すると（ステップ１－８の「Ｙ」）、会計ボタンＧ２７が押下される。これによって、図示しない精算用画面が表示され、精算処理が行われる（ステップ１－９）。この精算処理は、精算用画面に表示された各種ボタン（例えば決済方法選択ボタンなど）を操作し、且つ前記図１に示す券売機１の紙幣投入口１３、硬貨投入口１７、非現金決済処理部２１などを用いて行われる。

精算処理が完了すると、券売機１の発行口３１から食券が発行される（ステップ１－１６）。同時に、券売機１の通信部４７から図示しない厨房端末（キッチンプリンタやキッチンモニタ）に選択・登録された商品の注文情報が送信される（ステップ１－１７）。

一方、上記ステップ１－３において選択した操作方法（登録方法）が音声操作であった場合は、ステップ１－３の「Ｙ」からステップ１－１０に移行し、図８に示すような音声入力指示画面Ｇ３を表示する。

音声入力指示画面Ｇ３には、店舗名称Ｇ３１とメニュー選択用音声入力説明欄Ｇ３３と入力モード切替ボタンＧ３５とが表示されている。メニュー選択用音声入力説明欄Ｇ３３は、複数種類あるメニューの内の何れのメニューを表示させるかを説明する説明欄である。即ちこのメニュー選択用音声入力説明欄Ｇ３３の場合、日本語メニューを表示させる場合は「注文（ちゅうもん）」と発声し、英語メニューを表示させる場合は「order（オーダー）」と発声し、イートインメニューを表示させる場合は「イートイン」と発声し、テイクアウトメニューを表示させる場合は「テイクアウト」と発声すればよいことを説明している。選択して発声する音声は、何れも「開始音声」である。ここで「開始音声」とは、商品登録を開始するための音声であり、当該音声を発声しないと商品登録を行うための商品選択画面に移行できない音声をいう。即ち、メニュー選択用音声入力説明欄Ｇ３３には、選択可能なメニュー（その商品登録画面）に移行できる複数の「開始音声」が説明されている。各「開始音声」中の漢字または英語の部分には、呼び名をひらがなやカタカナで表示し、「開始音声」の読み方を統一している。

そして、この例では、「ちゅうもん」と発声したとすれば（ステップ１－１１の「Ｙ」）、例えば図９に示す音声入力用商品登録画面Ｇ４が表示される（ステップ１－１２）。

音声入力用商品登録画面Ｇ４には、商品覧Ｇ４１と選択済商品表示欄Ｇ４３と商品群選択欄Ｇ４５と会計欄Ｇ４７と入力モード切替ボタンＧ４９とが表示されている。商品覧Ｇ４１には選択可能な各種商品Ｇ４１１，Ｇ４１１，・・・が表示されており、何れか所望の商品Ｇ４１１の名称（又は番号）を発声すれば、これによって商品が選択されたことになり、当該選択された商品が選択済商品表示欄Ｇ４３に表示される。選択済商品表示欄Ｇ４３には、選択された商品や合計金額が表示される。商品群選択欄Ｇ４５は、商品覧Ｇ４１に表示する商品群を選択するための欄であり、図９ではラーメン群を選択しているのでその商品覧Ｇ４１には商品として各種ラーメンを表示しているが、例えば「ごはん」と発声すれば、商品覧Ｇ４１には商品として各種ごはん（定食や丼物など）が表示される。

ここで商品覧Ｇ４１は、前記図７に示す商品覧Ｇ２１と同様に、商品Ｇ４１１の商品画像ａ１と名称ａ２と値段ａ３が表示されているが、その表示態様は異なっている。さらに商品Ｇ４１１には商品毎に異なる番号ａ４が付されている。番号ａ４の代わりにアルファベットなどの他の記号を用いても良い。図１０（ａ）は手動入力用商品登録画面Ｇ２の商品覧Ｇ２１中の最も上の列の部分を拡大して示す図、図１０（ｂ）は音声入力用商品登録画面Ｇ４の商品覧Ｇ４１中の最も上の列の部分を拡大して示す図である。両者に示すように、音声入力用の商品Ｇ４１１の場合は、タッチ入力用の商品Ｇ２１１に比べて、名称ａ２の部分の大きさを大きく、且つ漢字の場合はその呼び名ａ２１を付して表示し、これによって呼び易い（呼び間違えにくい）表示態様（レイアウト）としている。一方、手動入力用の商品Ｇ２１１の場合は、名称ａ２を小さく且つ呼び名を非表示とし、且つ商品画像ａ１を大きく表示することで、タッチ操作し易い表示態様（レイアウト）としている。

このように、手動入力用商品登録画面Ｇ２と音声入力用商品登録画面Ｇ４の表示態様を異ならせることで、音声を用いて商品を登録する場合と、手指を用いて商品を登録する場合の何れの場合においても、商品登録の操作がスムーズに行えるようにしている。

そして商品覧Ｇ４１中の所望の商品Ｇ４１１の呼び名を発声することで、当該音声をマイクロフォン２７から入力して音声処理部５５において何れの商品の名称かを識別・認識し、登録する。このとき図示はしていないが、券売機１にスピーカを設置し、スピーカから登録した商品の呼び名を復唱させても良い。また復唱の代わりに（または復唱と共に）タッチパネル１１に登録した商品の呼び名や名称をポップアップ表示などで表示しても良い。購買したい商品が複数ある場合は、商品Ｇ４１１の呼び名を繰り返して発声し、それぞれを券売機１に識別・認識させ、登録する（ステップ１－１３、１－１４の「Ｎ」）。また必要に応じて、商品群選択欄Ｇ４５中の別の商品群の呼び名を発声して、表示する商品覧Ｇ４１を変更し、変更後の商品Ｇ４１１の呼び名を発声していく。

なお上記説明では、商品Ｇ４１１の名称をそのまま呼び名としてこれを発声したが、商品の名称が長い場合などは、上記番号ａ４を呼び名（「いち」、「に」など）として受け付けさせることも可能である。また番号の代わりに、キャラクターや色彩とその呼び名を表示するようにしても良いなど、さらに種々の変更も可能である。

全ての商品の登録が終了すると（ステップ１－１４の「Ｙ」）、「おかいけい」と発声する。これによって、図示しない精算用画面が表示され、精算処理が行われる（ステップ１－１５）。この精算処理は、精算用画面に表示された各種決済方法を発声し、これによって所望の決済方法を選択し、前記図１に示す券売機１の紙幣投入口１３、硬貨投入口１７、非現金決済処理部２１などを用いて行われる。なお精算処理の他の方法としては、前記手動入力の場合と同様、精算用画面に表示された各種ボタン（例えば決済方法選択ボタンなど）を押下する方法を用いても良い。

精算処理が完了すると、券売機１の発行口３１から食券が発行される（ステップ１－１６）。同時に、券売機１の通信部４７から図示しない厨房端末に選択・登録された商品の注文情報が送信される（ステップ１－１７）。

なお上記実施形態では食券を発行する構成としたが、食券の代わりに、近距離通信などを用いて、予めアプリケーションソフトをダウンロードしておいた顧客の携帯端末（図３に示す顧客携帯端末Ｓ６など）に情報を送信し、当該携帯端末の表示によって商品と交換するように構成しても良い。また食券の代わりに、ページャ端末にデータを送信、または電子タグなどの識別子を商品注文情報と関連付けするなどして当該ページャ端末にて、配膳時に呼び出しを行うように構成しても良い。この場合、券売機ではなく、それ以外の商品販売データ処理装置（注文受付装置）となる。

ところで、上記図６，図７などに示す手動入力指示画面Ｇ１や手動入力用商品登録画面Ｇ２などを用いたタッチ入力（登録）モードによって商品を登録している途中（その開始時や終了時を含む）に、音声入力モードに切り替えて商品登録操作を続行したいと考える場合がある。このような場合は、手動入力指示画面Ｇ１の入力モード切替ボタン（切替手段）Ｇ１５や、手動入力用商品登録画面Ｇ２の入力モード切替ボタン（切替手段）Ｇ２９を押下する。入力モード切替ボタンＧ１５が押下された場合は、図８に示す音声入力指示画面Ｇ３に移行する。入力モード切替ボタンＧ２９が押下された場合は、図９に示す音声入力用商品登録画面Ｇ４又は図８に示す音声入力指示画面Ｇ３に移行する。

一方、上記図８，図９などに示す音声入力指示画面Ｇ３や音声入力用商品登録画面Ｇ４などを用いた音声入力（登録）モードによって商品を登録している途中（その開始時や終了時を含む）に、タッチ入力モードに切り替えて商品登録操作を続行したいと考える場合は、音声入力指示画面Ｇ３の入力モード切替ボタン（切替手段）Ｇ３５や、音声入力用商品登録画面Ｇ４の入力モード切替ボタン（切替手段）Ｇ４９を押下する（または「たっちにゅうりょくもーどへ」などと発声する）。入力モード切替ボタンＧ３５が押下（発声）された場合は、図６に示すタッチ入力指示画面Ｇ１に移行する。入力モード切替ボタンＧ４９が押下（発声）された場合は、図７に示すタッチ入力用商品登録画面Ｇ２又は図６に示すタッチ入力指示画面Ｇ１に移行する。

この例では、図７の手動入力用商品登録画面Ｇ２において入力モード切替ボタンＧ２９が押下された場合、選択済商品表示欄Ｇ２３に示す既に選択・登録されていた商品を削除し、切り替え後の音声入力によって新たに選択される商品のみを登録するように制御している。同様に、図９の音声入力用商品登録画面Ｇ４において入力モード切替ボタンＧ４９が押下された場合、選択済商品表示欄Ｇ４３に示す既に選択・登録されていた商品を削除し、切り替え後のタッチ入力によって新たに選択される商品のみを登録するように制御している。このように制御することで、切り替え前に行われた商品の登録と、切り替え後に行われる商品の登録とを混同して重複登録などが行われることを確実に防止することができる。

なお上記例とは逆に、図７の手動入力用商品登録画面Ｇ２において入力モード切替ボタンＧ２９が押下された場合、選択済商品表示欄Ｇ２３に示す既に選択・登録された商品をそのまま残し、切り替え後の音声入力によって新たに選択される商品を追加して登録するように制御してもよい。同様に、図９の音声入力用商品登録画面Ｇ４において入力モード切替ボタンＧ４９が押下（または発声）された場合、選択済商品表示欄Ｇ４３に示す既に選択・登録された商品をそのまま残し、切り替え後のタッチ入力によって新たに選択される商品を追加して登録するように制御してもよい。このように制御することで、切り替え前に行われた商品の登録作業を無駄にすることなく、効率的な商品の選択・登録を行っていくことができる。

次に、音声入力モードとタッチ入力モードの組み合わせについて説明する。入力モードの組み合わせには、下記のようなものがある。
（１）音声／タッチ入力分離モード
音声入力モードとタッチ入力モードの何れか一方のモードのみによって入力ができるモードの組み合わせである。即ち上記実施形態の図６～図９を用いて説明したように、音声入力モードによって入力できる画面と、タッチ入力モードによって入力できる画面とを完全に分離したモードの組み合わせである。

（２）音声／タッチ入力併存モード
音声入力モードとタッチ入力モードの両者を同時に行えるモードの組み合わせである。即ちこの場合は、同一の画面において、音声入力モードとタッチ入力モードの両者がアクティブで、音声でもタッチでも入力することができるモードの組み合わせである。

（３）タッチ入力優先モード
タッチ入力モードを優先するものである。即ち、通常はタッチ入力モードで対応し、例えば画面上に表示された音声入力モードへの切替えボタン（例えば「音声ＯＮ／ＯＦＦ」ボタン）を押下（ＯＮ）することで音声入力モードに切り替える（またはタッチ入力と音声入力を併用させる）。一連の操作が終了すると元のタッチ入力モードに戻る。一方自動で、例えば券売機１周囲の騒音が小さい場合やタイムテーブルを用いて所定の時間のみに音声入力モードに切り替える（またはタッチ入力と音声入力を併用させる）ように構成することもできる。

また上記券売機１から発券される食券などの券媒体やレシート媒体の記載内容として、当該取引が音声登録／タッチ登録の何れでされたものかを分かるようにその登録方法（入力方法）を文字やマークで印刷し、また同様の内容をシステムの何れの装置においても履歴確認できるように表示可能としておくことが好ましい。一取引において複数の登録モード（入力モード）が採用されていた場合は、商品毎に登録方法（入力方法）を文字やマークで印刷、表示する。さらに、登録種類（入力種類）毎に商品情報を印刷、表示することも出来る。

また、登録履歴（入力履歴）として音声登録（音声入力）とタッチ登録（タッチ入力）について、登録時間帯、混雑状況、商品情報等との関連性に基づき学習し、先のタイムテーブルＴＴの内容を修正・更新しても良い。管理者に対し、提案情報を報知しても良い。

また、音声認識に失敗の後に登録された商品があった場合、その商品の発声を音声認識しづらい可能性があると判断し、その商品の音声に関する認識精度を向上させる、または当該商品の商品名称を発声し易い文言に修正する、または振り仮名等の表示を見易いものにする等、フィードバックを行うことができる。

さらに、音声認識の失敗が一定回数を超えた場合は、タッチ登録（タッチ入力）に切り替える旨を音声報知や画面表示し、音声又はタッチ操作に基づいてモードを切り替えることも出来、また自動的にタッチ登録に切り替えることも出来る。

また、タッチ操作を繰り返し希望商品を探すのに手こずっていると判断した場合は、音声登録（音声入力）に切り替える旨を音声報知や画面表示し、タッチ操作又は音声に基づいてモードを切り替えることも出来、また自動的に音声登録に切り替えることも出来る。

以上説明したように、上記オーダーシステム１００は、音声を入力する音声入力手段（マイクロフォン２７）と、前記音声入力手段で入力された音声を識別する音声識別手段（音声処理部５５）と、前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段（ステップ１－１０～１－１４を実行するＣＰＵ４１など）と、を備えるので、音声認識による商品登録を行う際に、開始音声の入力という条件があったときのみ商品登録が開始可能となる。即ち開始音声を受け付けるまで商品登録を開始しないので、それ以外の周囲の音によって商品登録が開始されるという誤認識・誤作動・誤登録を確実に防止することができる。

また上記オーダーシステム１００は、タッチ操作によって商品登録を行うタッチ登録手段（ステップ１－４～１－８を実行するＣＰＵ４１など）と、前記音声登録手段と前記タッチ登録手段の一方を有効とする切替手段（入力モード切替ボタンＧ１５，Ｇ２９，Ｇ３５，Ｇ４９など）と、前記切替手段による切替え処理が行われる前に登録された登録情報を削除する削除手段（例えば入力モード切替ボタンＧ２９が押下されると、その前にタッチ入力によって行われていた商品登録をキャンセルすることなど）とを備えるので、切り替え前に行われた商品の登録と切り替え後に行われる商品の登録とを混同して重複登録などが行われることを防止できる。

また上記オーダーシステム１００は、前記音声識別手段（音声処理部５５）が前記開始音声であると識別した場合、当該開始音声の種類（例えば「ちゅうもん」、「オーダー」など）に応じて対応する商品登録画面（日本語メニュー表示の商品登録画面や英語メニュー表示の商品登録画面など）を表示する表示手段（タッチパネル１１）を備えるので、利用客にとって最適な商品登録画面を表示することができる。

また上記オーダーシステム１００は、前記音声識別手段（音声処理部５５）が特定することができる商品の呼び名ａ２１を表示する呼び名表示手段（図９に示す呼び名ａ２１を有する音声入力用商品登録画面Ｇ４を表示するタッチパネル１１）を備えるので、商品の呼び名を間違うことなく音声によって正確に入力することができ、音声による商品登録をスムーズに行うことができる。

また上記オーダーシステム１００は、前記音声登録手段の他に、タッチ操作によって商品登録を行うタッチ登録手段（ステップ１－５～１－８を実行するＣＰＵ４１など）と、前記音声登録手段または前記タッチ登録手段の何れを利用するかの状況データ（タイムテーブルＴＴや周囲の音）を取得する状況取得手段（ステップ１－２を実行するＣＰＵ４１など）と、前記状況取得手段の取得結果に基づいて、前記音声登録手段または前記タッチ登録手段の何れを利用するかを決定する登録方法決定手段（ステップ１－３を実行するＣＰＵ４１など）と、を備えるので、タイムテーブルや実際の周囲の音の状況などに応じた商品の登録方法を適用することが可能になる。

また上記オーダーシステム１００は、前記登録方法決定手段の決定に基づいて、商品登録画面の表示態様を異ならせる（例えば商品覧Ｇ２１と商品覧Ｇ４１）ので、音声登録手段を利用して商品を登録する場合と、タッチ登録手段を利用して商品を登録する場合の何れの場合においても、商品登録の操作をスムーズに行うことができる。

また商品を登録する上記オーダーシステム１００として使用するコンピュータは、音声を入力する音声入力手段と、前記音声入力手段で入力された音声を識別する音声識別手段と、前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、して機能させるプログラムを有する。

《実施形態の総括》
［技術分野］
本発明は、音声入力可能なオーダーシステム（販売処理システム、券売機システム）及びプログラムに関するものである。
［背景技術］
従来、券売機などのオーダーシステムにおいて、画面にタッチする代わりに、音声認識機能を用いて商品を登録することが行われている。
音声認識機能を用いた商品登録は、直感的操作が可能であり、また不特定多数の者が触れる画面に触れることを抑制できるので、感染症対策としても有効である。
［先行技術文献］
［特許文献］
［特許文献１］特開２００８－０１５９７４号公報

［発明の概要］
［発明が解決しようとする課題］
しかし従来、利用客が券売機などの操作を開始していない待機時であるにも関わらず、周囲の雑音などに券売機が反応して商品登録開始の誤作動を起こしてしまうという課題があった。
特に券売機は店頭や人通りの多い場所に設置されることが多いため、雑音による商品登録開始の誤作動が生じ易く、これに伴って誤登録も生じ易く、問題となっていた。
本発明は上述の点に鑑みてなされたものでありその目的は、音声認識による適正な運用を図ることができるオーダーシステム及びプログラムを提供することにある。
［課題を解決するための手段］

本発明は、音声を入力する音声入力手段と、前記音声入力手段で入力された音声を識別する音声識別手段と、前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、を備えることを特徴とするオーダーシステムにある。
開始音声とは、商品登録を開始させるための特定の音声であり、例えば「ちゅうもん」、「オーダー」、「イートイン」、「テイクアウト」などの音声を用いる。
音声入力手段は、例えば商品を注文する券売機などの端末やその周辺に設置する。音声識別手段や音声登録手段は、券売機などの端末の他、オーダーシステムを構成するネットワーク上に接続されている他の各種装置（上位機器など）に設置しても良い。
本発明によれば、音声認識による商品登録を行う際に、開始音声の入力という条件があったときのみ商品登録を開始可能としたので、即ち起動音声を受け付けるまで商品登録を開始しないので、雑音などによって商品登録が開始されてしまうという誤認識・誤作動が確実に防止でき、これに伴う誤登録も確実に防止することができる。
また、もし商品登録開始のための条件をタッチ操作にしてしまうと、音声入力の利点、即ち、感染症対策の利点が失われてしまうが、本発明によれば、特別な音声キーワードの入力を条件とすることで、そのような問題も軽減できる。

また本発明は、上記特徴に加え、タッチ操作によって商品登録を行うタッチ登録手段と、前記音声登録手段と前記タッチ登録手段の一方を有効とする切替手段と、前記切替手段による切替え処理が行われる前に登録された登録情報を削除する削除手段と、を備えることを特徴としている。
これによって、切り替え前に行われた商品の登録と切り替え後に行われる商品の登録とが混同されることなく、確実に切り替え後の登録手段によって商品を登録することができる。

また本発明は、上記特徴に加え、前記音声識別手段が特定することができる商品の呼び名を表示する呼び名表示手段を備えることを特徴としている。
商品の音声登録を受け付ける際に必須になるのがその商品の音声としての呼び名であるが、当該呼び名を表示することとした。
これによって商品の呼び名を間違うことなく音声によって正確に入力することができ、音声による商品登録をスムーズに行うことができる。
特に漢字を含む商品名の場合に有効で、漢字の読み間違いによる音声認識のエラーを軽減することができる。
漢字を含む商品名の場合は、ひらがなやカタカナによる読みかな（ふりがな）が、上記「呼び名」に該当する。
また、商品名称が長い場合などは、「いちばん」、「にばん」などの番号を意味する呼び名としても良い。
またキャラクターや色を意味する呼び名としても良い等、種々の呼び名が考えられる。

また本発明は、上記特徴に加え、前記音声識別手段が前記開始音声であると識別した場合、当該開始音声の種類に応じて対応する商品登録画面を表示する表示手段を備えることを特徴としている。
例えば、「ちゅうもん」という開始音声を入力した場合は日本語メニュー表示の商品登録画面を表示し、「オーダー」という開始音声を入力した場合は英語メニュー表示の商品登録画面を表示し、「イートイン」という開始音声を入力した場合はイートインメニュー表示の商品登録画面を表示し、「テイクアウト」という開始音声を入力した場合はテイクアウトメニュー表示の商品登録画面を表示する。
本発明によれば、開始音声の種類に応じて起動する商品登録画面が異なるように制御するので、利用客にとって最適な商品登録画面を表示することができる。

また本発明は、商品を登録するオーダーシステムとして使用するコンピュータを、音声を入力する音声入力手段と、前記音声入力手段で入力された音声を識別する音声識別手段と、前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、して機能させることを特徴とするプログラムにある。

また本発明は、上記特徴に加え、タッチ操作によって商品登録を行うタッチ登録手段と、前記音声登録手段または前記タッチ登録手段の何れを利用するかの状況データを取得する状況取得手段と、前記状況取得手段の取得結果に基づいて、前記音声登録手段または前記タッチ登録手段の何れを利用するかを決定する登録方法決定手段と、を備えることを特徴としている。
状況データとは、予め音声登録手段を利用する時間帯とタッチ登録手段を利用する時間帯とを設定したタイムテーブルデータや、実際の集音データなどをいう。
例えば雑音が少ない時間帯と雑音が多い時間帯とを予め上記タイムテーブルに設定しておいて、雑音が少ない時間帯は音声登録手段を利用し、雑音が多い時間帯はタッチ登録手段を利用するように制御する。
また例えば実際の集音状況から、雑音が少ないと判断された場合は音声登録手段を利用し、雑音が多いと判断された場合はタッチ登録手段を利用するように制御する。
また例えばタッチパネル操作に慣れない客層（子供や高齢者など）が多い時間帯と、タッチパネル操作に慣れた客層が多い時間帯とを予め上記タイムテーブルに設定しておいてタッチパネル操作に慣れない客層が多い時間帯は音声登録手段を利用し、タッチパネル操作に慣れた客層が多い時間帯はタッチ登録手段を利用するように制御する。
本発明によれば、タイムテーブル（タイムスケジュール）や実際の雑音状況などに応じて、音声登録とタッチ登録の優先順位を変更することができる。即ち状況に応じた商品の登録方法を適用することが可能になる。

また本発明は、上記特徴に加え、前記登録方法決定手段の決定に基づいて、商品登録画面の表示態様を異ならせることを特徴としている。
例えば、音声登録手段を利用すると決定された場合は、タッチ登録手段を利用すると決定された場合に比べ、商品登録画面に表示する商品名称やその呼び名（読みがななど）の表示を大きく表示するなどすることで、呼び間違えにくくする。
逆にタッチ登録手段を利用すると決定された場合は、音声登録手段を利用すると決定された場合に比べ、呼び名（読みがななど）の表示を非表示にしたり、商品画像を大きく表示したりなどすることで、タッチ操作し易くする。
本発明によれば、音声登録手段を利用して商品を登録する場合と、タッチ登録手段を利用して商品を登録する場合の何れの場合においても、商品登録の操作をスムーズに行うことができる。

なお、上述のオーダーシステム１００（券売機１、券売機管理装置Ｓ４、会員管理用サーバＳ５、携帯端末Ｓ６など）としての機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムとしてのオーダーシステム１００（券売機１、券売機管理装置Ｓ４、会員管理用サーバＳ５、携帯端末Ｓ６など）に読み込ませ、実行することにより、上記のオーダーシステム１００（券売機１、券売機管理装置Ｓ４、会員管理用サーバＳ５、携帯端末Ｓ６など）としての処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部または外部に設けられた記録媒体も含まれる。配信サーバの記録媒体に記憶されるプログラムのコードは、端末装置で実行可能な形式のプログラムのコードと異なるものでもよい。すなわち、配信サーバからダウンロードされて端末装置で実行可能な形でインストールができるものであれば、配信サーバで記憶される形式は問わない。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に端末装置で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

以上本発明の実施形態を説明したが、本発明は上記実施形態に限定されるものではなく、特許請求の範囲、及び明細書と図面に記載された技術的思想の範囲内において種々の変形が可能である。なお直接明細書及び図面に記載がない何れの構成であっても、本願発明の作用・効果を奏する以上、本願発明の技術的思想の範囲内である。また、上記記載及び各図で示した実施形態は、その目的及び構成等に矛盾がない限り、互いの記載内容を組み合わせることが可能である。また、上記記載及び各図の記載内容は、その一部であっても、それぞれ独立した実施形態になり得るものであり、本発明の実施形態は上記記載及び各図を組み合わせた一つの実施形態に限定されるものではない。

１００…オーダーシステム、１…券売機、Ｓ１，Ｓ２，Ｓ３（Ｓ３－１～５）店舗（飲食店）、Ｓ４…券売機管理装置、Ｓ５…会員管理用サーバ、Ｓ６…携帯端末、Ｓ７…通信回線、１１…タッチパネル、１３…紙幣投入口、１５…紙幣排出口、１７…硬貨投入口、１９…硬貨排出口、２１…非現金決済処理部、２３…カード処理部、２３ａ…ＩＣカード挿入部、２３ｂ…非接触カード読取部、２３ｃ…磁気カード挿入部、２５…モバイル端末処理部、２７，２７Ａ，２７Ｂ …マイクロフォン、３１…発行口、４１…ＣＰＵ、４３…フラッシュメモリ、４５…ＲＡＭ、４７…通信部、４９…発行部（発行手段）、５１…紙幣処理部、５３…硬貨処理部、５５…音声処理部、ＴＴ…タイムテーブル、Ｇ１…手動入力指示画面（タッチ入力指示画面）、Ｇ１１…店舗名称、Ｇ１３…メニュー選択ボタン、Ｇ１３１…日本語メニュー選択ボタン、Ｇ１３３…英語メニュー選択ボタン、Ｇ１３５…イートインメニュー選択ボタン、Ｇ１３７…テイクアウトメニュー選択ボタン、Ｇ１５…入力モード切替ボタン、Ｇ２…手動入力用商品登録画面（タッチ入力用商品登録画面）、Ｇ２１…商品覧、Ｇ２１１…商品、Ｇ２３…選択済商品表示欄、Ｇ２５…商品群選択欄、Ｇ２７…会計ボタン、Ｇ２９…入力モード切替ボタン、Ｇ３…音声入力指示画面、Ｇ３１…店舗名称、Ｇ３３…メニュー選択用音声入力説明欄、Ｇ３５…入力モード切替ボタン、Ｇ４…音声入力用商品登録画面、Ｇ４１…商品覧、Ｇ４１１…商品、ａ１…商品画像、ａ２…名称、ａ２１…呼び名、ａ３…値段、ａ４…番号、Ｇ４３…選択済商品表示欄、Ｇ４５…商品群選択欄、Ｇ４７…会計欄、Ｇ４９…入力モード切替ボタン。

Claims (4)

1. 音声を入力する音声入力手段と、
   前記音声入力手段で入力された音声を識別する音声識別手段と、
   前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、
   タッチ操作によって商品登録を行うタッチ登録手段と、
   前記音声登録手段と前記タッチ登録手段の一方を有効とする切替手段と、
   前記切替手段による切替え処理が行われる前に登録された登録情報を削除する削除手段と、
   を備えることを特徴とするオーダーシステム。
2. 音声を入力する音声入力手段と、
   前記音声入力手段で入力された音声を識別する音声識別手段と、
   前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、
   前記音声識別手段が前記開始音声であると識別した場合、当該開始音声の種類に応じて対応する商品登録画面を表示する表示手段と、
   を備えることを特徴とするオーダーシステム。
3. 商品を登録するオーダーシステムとして使用するコンピュータを、
   音声を入力する音声入力手段と、
   前記音声入力手段で入力された音声を識別する音声識別手段と、
   前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、
   タッチ操作によって商品登録を行うタッチ登録手段と、
   前記音声登録手段と前記タッチ登録手段の一方を有効とする切替手段と、
   前記切替手段による切替え処理が行われる前に登録された登録情報を削除する削除手段と、
   して機能させることを特徴とするプログラム。
4. 商品を登録するオーダーシステムとして使用するコンピュータを、
   音声を入力する音声入力手段と、
   前記音声入力手段で入力された音声を識別する音声識別手段と、
   前記音声識別手段が識別した音声情報が商品登録を開始するための開始音声である場合に商品登録を受け付ける音声登録手段と、
   前記音声識別手段が前記開始音声であると識別した場合、当該開始音声の種類に応じて対応する商品登録画面を表示する表示手段と、
   して機能させることを特徴とするプログラム。

Images