JP7686496B2 - システム - Google Patents

システム Download PDF

Info

Publication number
JP7686496B2
JP7686496B2 JP2021129078A JP2021129078A JP7686496B2 JP 7686496 B2 JP7686496 B2 JP 7686496B2 JP 2021129078 A JP2021129078 A JP 2021129078A JP 2021129078 A JP2021129078 A JP 2021129078A JP 7686496 B2 JP7686496 B2 JP 7686496B2
Authority
JP
Japan
Prior art keywords
image
sticker
camera
product
discount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021129078A
Other languages
English (en)
Other versions
JP2023023496A (ja
Inventor
英浩 内藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Tec Corp
Original Assignee
Toshiba Tec Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Tec Corp filed Critical Toshiba Tec Corp
Priority to JP2021129078A priority Critical patent/JP7686496B2/ja
Priority to US17/730,244 priority patent/US12154306B2/en
Publication of JP2023023496A publication Critical patent/JP2023023496A/ja
Application granted granted Critical
Publication of JP7686496B2 publication Critical patent/JP7686496B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/22—Character recognition characterised by the type of writing
    • G06V30/224—Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/10861—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices sensing of data fields affixed to objects or articles, e.g. coded labels
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/1092—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices sensing by means of TV-scanning
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/201—Price look-up processing, e.g. updating
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/202—Interconnection or interaction of plural electronic cash registers [ECR] or to host computer, e.g. network details, transfer of information from host to ECR or from ECR to ECR
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147—Details of sensors, e.g. sensor lenses
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/19—Image acquisition by sensing codes defining pattern positions
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/22—Character recognition characterised by the type of writing
    • G06V30/224—Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • G06V30/2247—Characters composed of bars, e.g. CMC-7
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0054—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0081—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader the reader being a portable scanner or data reader
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated
    • G07G1/14—Systems including one or more distant stations co-operating with a central processing unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06—Recognition of objects for industrial automation
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/42—Document-oriented image-based pattern recognition based on the type of document
    • G06V30/424—Postal images, e.g. labels or addresses on parcels or postal envelopes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Accounting & Taxation (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Vascular Medicine (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Description

本発明の実施形態は、システムに関する。
従来から、カメラを用いて翳された商品を撮像し、撮像した画像をデコードして商品に付されているバーコードや二次元コード等のシンボルを読み取るスキャニング装置が知られている。
ところで、商品を販売する店舗では、商品の値段を値引くことがある。例えば賞味期限が近付いた生鮮品に、値引シールを貼付して当該商品を値引く。当該商品のシンボル付近には、値引きシールが商品に貼付されていることを示すフラグシールが貼付される。
このような値引シールが貼付された商品については、値引シールに印刷された値引額を、機械学習したモデルを用いて認識している。しかしながら、スキャニング装置ではハードウェアパフォーマンスが不足（ＣＰＵの能力不足）しているため処理が難しい。そのため、外部に専用の画像処理用ハードウェア（以降「専用ハードウェア」という）を設けている。専用ハードウェアは、機械学習したモデルを搭載しており、当該モデルを使用して値引シールの値引額（あるいは割引額）を認識する。専用ハードウェアは、高性能なＣＰＵを搭載したハイパフォーマンスの性能を必要とするため高価であり、外部に１台設置されている。
このように、この専用ハードウェアには、複数台のスキャニング装置が接続されるため、スキャニング装置が撮像した画像をすべて専用ハードウェアに出力すると、多くの通信帯域を消費（スキャニング装置と専用ハードウェアが接続された通信回線が混雑）してしまい、画像のスムーズな出入力送信ができなくなることがある。
本発明が解決しようとする課題は、複数台のスキャニング装置を１台の専用ハードウェアに接続しても、多くの通信帯域を消費しないシステムを提供することである。
実施形態のシステムは、商品の登録処理を行う商品販売データ処理装置と、入力された画像を認識する画像認識装置と、前記画像認識装置に接続されたスキャニング装置とを備えるシステムであって、前記スキャニング装置は、商品を撮像するカメラと、前記カメラが撮像した画像から前記画像認識装置に出力する商品に係る画像のデータ量を削減する削減手段と、前記データ量を削減した画像を前記画像認識装置に出力する出力手段と、前記画像認識装置から受信した、前記画像に基づいて前記画像認識装置で認識した前記画像に係る情報を前記商品販売データ処理装置に送信する送信手段と、を備える。
図１は、実施形態に係るシステムの一例を示す図である。 図２は、商品に付されたバーコード、値引シール、フラグシールを示す図である。 図３は、スキャニング装置のハードウェア構成の一例を示すブロック図である。 図４は、専用ハードウェアのハードウェア構成の一例を示すブロック図である。 図５は、スキャニング装置の機能構成の一例を示す機能ブロック図である。 図６は、スキャニング装置の制御処理の一例を示すフローチャートである。 図７は、専用ハードウェアの制御処理の一例を示すフローチャートである。
以下、添付図面を参照して、実施形態に係るスキャニング装置およびプログラムについて説明する。なお、実施形態は、スキャニング装置およびプログラムの一実施形態であって、その構成や機能等は発明を限定するものではない。
図１は、実施形態に係るシステムの一例を示す図である。図１に示すシステム１０は、商品を販売する店舗に設置される。具体的には、システム１０は、顧客が購入する商品を決済する決済部に設けられる。図１に示すように、システム１０は、スキャニング装置１と商品販売データ処理装置であるＰＯＳ（Point of Sales）端末５の組み合わせを複数組備える。スキャニング装置１とＰＯＳ端末５は、例えばＵＳＢ（Universal Serial Bus）ケーブルで相互に接続されている。図１の実施形態では、４組のスキャニング装置１とＰＯＳ端末５が設けられ、すべてのスキャニング装置１とＰＯＳ端末５は、例えばＬＡＮ（Local Area Network）で構成される通信回線７で接続されている。また、システム１０は、専用ハードウェア３（画像認識装置）を備える。専用ハードウェア３は、通信回線７に接続される。
スキャニング装置１は、カメラ１９（図２を参照）を備える。カメラ１９は、ＣＣＤやＣＭＯＳ（Complementary Metal Oxide Semiconductor）で構成された受光センサを有する。スキャニング装置１は、例えば定置型のスキャナあるいはハンディタイプのタッチスキャナである。
カメラ１９は、例えば商品に付されたバーコードや二次元コードで構成されるシンボルを読み取る。カメラ１９は、正面に翳される商品を撮像する。スキャニング装置１は、カメラ１９が撮像した画像にシンボルが含まれている場合に、当該シンボルの画像を切り出す。スキャニング装置１は、予めシンボルの画像を記憶しておき、撮像された画像に記憶しているシンボルの画像が含まれているかをパターンマッチング技術を用いて判断する。シンボルが含まれている場合には、スキャニング装置１は、当該シンボルを切り出す。スキャニング装置１は、切り出したシンボルをデコードし、コード情報を取得する。このコード情報には、商品を特定する商品コード（商品特定情報）に係る情報が含まれる。スキャニング装置１は、あまり高性能なＣＰＵを搭載してないが、この程度の処理であればＣＰＵに過度な負荷をかけることなく処理することができる。
ところで、商品には、シンボルの他に、当該商品の価格を値引く値引シールＬ（図２を参照）が貼付されていることがある。値引シールＬが貼付されている場合、値引シールＬが貼付されていることを示すフラグシールＴ（図２を参照）がシンボルの近傍に貼付される。このフラグシールＴは、例えば二重丸形状（フラグシールＴの特徴である）のシールである。
スキャニング装置１は、パターンマッチング技術を用いてフラグシールＴが貼付されているかを判断する。フラグシールＴが貼付されているかの判断は、カメラ１９によって二重丸の画像が撮像されているか（フラグシールＴの特徴が撮像されているか）を判断することで判断できるため、スキャニング装置１は、搭載しているＣＰＵに過度な負担なく、撮像した画像にフラグシールＴが含まれているかを判断することができる。
スキャニング装置１は、撮像した画像にフラグシールＴが含まれていると判断すると、以降、カメラ１９が撮像する画像を所定時間（例えば１秒間）継続して専用ハードウェア３に出力する。あるいは、スキャニング装置１は、撮像した画像にフラグシールＴが含まれていると判断すると、以降、カメラ１９が撮像する画像を所定枚数（例えば３０枚）継続して専用ハードウェア３に出力する。まだ値引シールＴが撮像されていない場合であってもこの所定時間内または所定枚数内に、値引シールは撮像される。実施形態では、カメラ１９が撮像する画像を所定時間継続して専用ハードウェア３に出力することとする。
専用ハードウェア３は、スキャニング装置１から入力された画像を認識する。専用ハードウェア３は、例えば入力された値引シールＬの画像に基づいて、値引シールＬを認識する。値引シールＬを認識するとは、入力された値引シールＬの画像がいくら値引く値引シールＬであるかを認識することである。
専用ハードウェア３は、多数の値引シールＬの情報を収集したモデルを記憶する。値引シールＬには、値引く金額（例えば「５０円引」「２０％引」「半額」といった値引に係る金額や文字）に係る情報が印刷されている。専用ハードウェア３には、値引シールＬに印刷された多数の値引金額の情報を蓄積したモデルに基づいて、例えば「５０円引」の文字が値引シールに印刷されている場合には、当該値引シールＬは商品の価格を５０円値引くことを示す値引シールであることを学習したモデルが記憶されている。当該モデルは、「２０％引」の文字が値引シールＬに印刷されている場合には、当該値引シールＬは商品の価格を２０％値引くことを示す値引シールであることを学習している。また、「半額」の文字が値引シールＬに印刷されている場合には、当該値引シールＬは商品の価格を半額にすることを示す値引シールであることを学習している。そして専用ハードウェア３は、スキャニング装置１から入力した値引シールＬの画像をモデルに入力することで、モデルは学習した結果に基づいて値引シールＬが値引く金額を認識する。「５０円引」の文字が印刷された値引シールＬの画像が入力された場合には、モデル（すなわち専用ハードウェア３）は、当該値引シールＬは５０円引きの値引シールであることを認識する。「２０％引」の文字が印刷された値引シールＬの画像が入力された場合には、モデルは、当該値引シールＬは商品の価格を２０％値引く値引シールであることを認識する。「半額」の文字が印刷された値引シールＬの画像が入力された場合には、モデルは、当該値引シールＬは商品の金額を半額に値引く値引シールであることを認識する。
専用ハードウェア３は、認識した値引シールＬの画像をデコードする。専用ハードウェア３は、デコードした値引シールＬのコード情報（例えば５０円引きの情報）を、通信回線７を介して、当該値引シールＬの画像を送信したスキャニング装置１に出力する。
スキャニング装置１は、専用ハードウェア３からデコードした値引シールＬのコード情報を入力する。スキャニング装置１は、先にデコードしたシンボルのコード情報と入力した値引シールＬのコード情報を合体させ、例えばコード１２８のコード情報（以降「生成コード情報」という）を生成する。生成コード情報には、読み取ったシンボルのコード情報（商品の商品コードを含む）と値引きシールのコード情報が含まれる。スキャニング装置１は、生成コード情報をＰＯＳ端末５に送信する。なお、カメラ１９が撮像した画像にフラグシールＴの画像が含まれていない場合は、スキャニング装置１は、専用ハードウェア３に画像を出力せず、シンボルをデコードしたコード情報をＰＯＳ端末５に送信する。
ＰＯＳ端末５は、スキャニング装置１から入力したコード情報または生成コード情報に基づいて、当該商品に係る商品登録処理および決済処理（商品の販売に係る顧客との取引）を実行する。商品登録処理とは、コード情報または生成コード情報に含まれる商品コードに基づいて当該商品の商品名や価格等の商品情報を呼び出して表示し、商品情報（商品コード、商品名、商品の価格、値引情報、等）をメモリに記憶する処理を含む。決済処理とは、商品登録処理した商品の商品情報に基づいて、顧客との取引に係る合計金額や釣銭額等の決済情報を算出して表示する処理をいう。決済処理には、決済した商品６０の商品情報や決済情報を印字したレシートを発行する処理を含む。
ここからは、商品に付された値引シールＬとフラグシールＴについて説明する。図２は、バーコード、値引シールＬ、フラグシールＴを示す図である。図２において、商品６０とカメラ１９の撮像エリアとの関係の一例を示す図である。図２において２点鎖線で囲った領域は、カメラ１９が１フレームで撮像できる領域である撮像エリア７０ａ、７０ｂである。図２に示す商品６０には、バーコードラベル６１に加えて、値引シールＬが貼付されている。
バーコードラベル６１には、商品名「豚バラうす切り」や、商品価格「２００円」や、バーコード６２（シンボル）等が表示されている。バーコード６２には、商品６０の販売データをＰＯＳ端末５で商品登録処理するのに必要な商品情報として、商品コード等の情報が組み込まれている。また、バーコード６２の下部には、バーコード６２が組み込んでいる商品コード「２１０１２３４５６７８９０」が数字で表示されている。値引シールＬには、商品６０に関する値引額を示す文字情報「表示価格より５０円引き」が表示されている。
さらに商品６０には、商品６０に値引シールＬが付されていることを示すフラグシールＴが貼付される。フラグシールＴはシンボルを構成する要素の形状とは異なる図形を含んでいる。即ち、バーコード６２は複数のバーで構成されるので、フラグシールＴは、バーとは異なる形状である円や円周、三角形や、バーコード６２のバーとはアスペクト比の異なる四角形等を含んでいる。
フラグシールＴの好適な実施形態としては、２重以上の同心形状を含むことが好ましい。さらに好適な実施形態としては、同心の円周を２重に含む２重円であることが好ましく、それぞれの円周は所定の太さを持った太線によって構成されることが好ましい。
尚、フラグシールＴは、バーコード６２に重ならないように貼られてもよいし、バーコード６２の一部分に重ねられて貼られてもよい。ただし、いずれの場合においても、バーコード６２がデコードできるようにフラグシールＴを貼付するものとする。
図２に示すように、商品６０においてバーコード６２と値引シールＬとが離れて貼付されている場合には、バーコード６２と値引シールＬとはカメラ１９による同一の撮像エリアには納まらない場合がある。そのため、実施形態では、詳細は後述するが、フラグシールＴをデコードした場合に、値引シールＬの画像が確実に撮像されるように、以後所定時間継続してカメラ１９が画像を撮像し、当該画像を専用ハードウェア３に出力する。
ここからは、スキャニング装置１のハードウェアについて説明する。図３は、スキャニング装置１のハードウェア構成の一例を示すブロック図である。図３に示すように、スキャニング装置１は、ＣＰＵ（Central Processing Unit）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、メモリ部１４等を備えている。ＣＰＵ１１は制御主体となる。ＲＯＭ１２は各種プログラムを記憶する。ＲＡＭ１３はプログラムや各種データを展開する。メモリ部１４は各種プログラムを記憶する。ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、メモリ部１４は、互いにバス１５を介して接続されている。ＣＰＵ１１とＲＯＭ１２とＲＡＭ１３が、制御部１００を構成する。すなわち、制御部１００は、ＣＰＵ１１がＲＯＭ１２やメモリ部１４に記憶されＲＡＭ１３に展開された制御プログラムに従って動作することによって、後述するスキャニング装置１の制御処理を実行する。
ＲＡＭ１３は、画像記憶部１３１、デコード記憶部１３２を備えている。画像記憶部１３１は、カメラ１９が撮像した商品の画像を記憶する。デコード記憶部１３２は、画像記憶部１３１に記憶されている画像に含まれるシンボル（例えば図２のバーコード６２）をデコードしたコード情報を記憶する。
メモリ部１４は、電源を切っても記憶情報が保持されるＨＤＤ（Hard Disc Drive）やフラッシュメモリ等の不揮発性メモリで構成され、スキャニング装置１を制御する制御プログラムを記憶する制御プログラム部１４１を有する。
また、制御部１００は、バス１５およびコントローラ１６を介して、操作部１７、表示部１８、カメラ１９と接続している。
操作部１７は、例えばキーボードやタッチパネルであり、スキャニング装置１の操作者が操作する。表示部１８は、例えば液晶表示器であり、スキャニング装置１の操作者に情報を表示する。
また、制御部１００は、バス１５を介して、通信部２０と接続している。通信部２０は、通信回線７を介して専用ハードウェア３に接続され、専用ハードウェア３と情報の送受信を行う。
また、制御部１００は、バス１５を介して、通信部２１と接続している。通信部２０は、ＵＳＢケーブルを介してＰＯＳ端末５に接続され、ＰＯＳ端末５に情報を出力する。
次に、専用ハードウェア３のハードウェアについて説明する。図４は、専用ハードウェア３のハードウェア構成の一例を示すブロック図である。図４に示すように、専用ハードウェア３は、ＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、メモリ部３４等を備えている。ＣＰＵ３１は制御主体となる。ＲＯＭ３２は各種プログラムを記憶する。ＲＡＭ３３はプログラムや各種データを展開する。メモリ部３４は各種プログラムを記憶する。ＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、メモリ部３４は、互いにバス３５を介して接続されている。ＣＰＵ３１とＲＯＭ３２とＲＡＭ３３が、制御部３００を構成する。すなわち、制御部３００は、ＣＰＵ３１がＲＯＭ３２やメモリ部３４に記憶されＲＡＭ３３に展開された制御プログラムに従って動作することによって、後述する専用ハードウェア３の制御処理を実行する。
ＲＡＭ３３は、画像記憶部３３１とデコードデータ部３３２を備えている。画像記憶部３３１は、スキャニング装置１から入力された画像のデータを記憶する。デコードデータ部３３２は、画像記憶部３３１に基づいてデコードしたコード情報（実施形態では、値引シールＬの画像をデコードしたコード情報）を記憶する。
メモリ部３４は、電源を切っても記憶情報が保持されるＨＤＤ（Hard Disc Drive）やフラッシュメモリ等の不揮発性メモリで構成され、専用ハードウェア３を制御する制御プログラムを記憶する制御プログラム部３４１、モデル３４２を記憶する。モデル３４２は、多数種類の値引シールＬに係る画像情報を蓄積し、当該画像情報に基づいて、入力された値引シールＬがいくら（何円）の値引シールであるかを学習させたモデルである。モデルは、入力された値引シールの画像に基づいて一つの推定結果（いくら値引く値引シールであるかの推定結果）をアウトプットする。制御部３００は、画像記憶部３３１に記憶された値引シールＬの画像をモデル３４２に入力することで、当該値引シールＬがいくらの値引シールであるかを認識する。
また、制御部３００は、バス３５およびコントローラ３６を介して、操作部４１、表示部４２と接続している。
操作部４１は、例えばキーボードやタッチパネルであり、専用ハードウェア３の操作者が操作する。表示部４２は、例えば液晶表示器であり、専用ハードウェア３の操作者に情報を表示する。
また、制御部３００は、バス３５を介して、通信部４７と接続している。通信部４７は、通信回線７を介してスキャニング装置１と接続し、情報の送受信を行う。
ここからは、スキャニング装置１の機能構成について説明する。図５は、スキャニング装置１の機能構成の一例を示す機能ブロック図である。図５に示すように、スキャニング装置１の制御部１００は、ＲＯＭ１２やメモリ部１４の制御プログラム部１４１に記憶された制御プログラムに従うことで、削減手段１０１、選択手段１０２、認識手段１０３、出力手段１０４として機能する。
削減手段０１は、カメラ１９が撮像した画像から専用ハードウェア３に出力する画像のデータ量を削減する。
選択手段１０２は、削減手段０１の一例である。選択手段１０２は、カメラ１９が撮像した画像から専用ハードウェア３に出力する画像を選択する。選択手段１０２は、カメラ１９が撮像した画像から専用ハードウェア３出力する画像を選択することで、専用ハードウェア３に出力する画像のデータ量が削減される。
認識手段１０３は、値引シールＬが貼付されたことを示すフラグシールＴを認識する。
選択手段１０２は、フラグシールＴの画像が認識されると、所定時間継続してカメラ１９により撮像された、専用ハードウェア３に出力する画像を選択する。
出力手段１０４は、データ量を削減した画像を専用ハードウェア３に出力する。具体的には、出力手段１０４は、選択手段１０２によって選択された、カメラ１９が撮像した画像から専用ハードウェア３に出力する画像を出力する。さらに具体的には、出力手段１０４は、認識手段１０３がフラグシールＴを認識した場合、所定時間継続してカメラ１９が撮像した画像を専用ハードウェア３に出力する。
ここからは、スキャニング装置１の制御について説明する。図６は、スキャニング装置１の制御処理の一例を示すフローチャートである。図６に示すように、スキャニング装置１の制御部１００は、カメラ１９が画像を撮像したかを判断する（Ｓ１１）。画像を撮像した場合には（Ｓ１１のＹｅｓ）、制御部１００は撮像した画像を画像記憶部１３１に記憶する（Ｓ１２）。次に制御部１００は、画像記憶部１３１に記憶された画像をデコードしコード情報を生成する（Ｓ１３）。そして制御部１００は、生成したコード情報をデコード記憶部１３２に記憶する（Ｓ１４）。
次に選択手段１０２は、デコード記憶部１３２に記憶されたコード情報にバーコード６２（シンボル）のコード情報が含まれているかを判断する（Ｓ１５）。バーコード６２のコード情報が含まれていると判断した場合には（Ｓ１５のＹｅｓ）、認識手段１０３は、デコード記憶部１３２に記憶されたコード情報にフラグシールＴのコード情報が含まれているか(フラグシールＴを認識したか)を判断する（Ｓ１６）。なお、Ｓ１５の処理は選択手段１０２に含まれる。また、Ｓ１５およびＳ１６の処理は削減手段１０１に含まれる。フラグシールＴのコード情報が含まれていると判断した場合には（Ｓ１６のＹｅｓ）、出力手段１０４は、以後所定時間継続して、カメラ１９が撮像した画像を専用ハードウェア３に出力する（Ｓ１７）。出力された画像は、通信回線７を経由して専用ハードウェア３に送られる。
すなわち、認識手段１０３がデコードしたコード情報にフラグシールＴのコード情報が含まれている場合に、選択手段１０２は以降、カメラ１９が所定時間継続して撮像する画像を選択する。そして出力手段１０４は、選択された画像を専用ハードウェア３に出力する。そして制御部１００は、Ｓ１１に戻る。
なお、Ｓ１５において、バーコード６２（シンボル）のコード情報が含まれていないと判断した場合には（Ｓ１５のＮｏ）、制御部１００はＳ１１に戻る。また、Ｓ１６において、フラグシールＴを認識していないと判断した場合には（Ｓ１６のＮｏ）、制御部１００は、Ｓ１４で記憶したバーコード６２のコード情報をＰＯＳ端末５に出力する（Ｓ２３）。
また、Ｓ１１において、カメラ１９が画像を撮像していないと判断した場合には（Ｓ１１のＮｏ）、制御部１００は、専用ハードウェア３からデコードされた画像を入力したかを判断する（Ｓ２１）。詳細は図７で後述するが、専用ハードウェア３からは、値引シールＬの画像をデコードしたコード情報が入力される。専用ハードウェア３からデコードされた画像を入力したと判断した場合には（Ｓ２１のＹｅｓ）、制御部１００は、当該コード情報に含まれる値引情報と、Ｓ１４で記憶したバーコード６２のコード情報を合体した一つの生成コード情報を生成する（Ｓ２２）。そして制御部１００は、生成コード情報をＰＯＳ端末５に出力する（Ｓ２３）。そして制御部１００はＳ１１に戻る。なお、専用ハードウェア３からのデコードされた画像の入力ではないと判断した場合には（Ｓ２１のＮｏ）、制御部１００はＳ１１に戻る。
ここからは、専用ハードウェア３の制御について説明する。図７は、専用ハードウェア３の制御処理の一例を示すフローチャートである。図７に示すように、専用ハードウェア３の制御部３００は、スキャニング装置１からＳ１７の処理による画像を入力したかを判断する（Ｓ３１）。入力するまで待機し（Ｓ３１のＮｏ）スキャニング装置１から画像を入力したと判断した場合には（Ｓ３１のＹｅｓ）、制御部３００は、モデル３４２に当該画像を入力し、モデルからのアウトプットに基づいて値引シールＬを認識する（Ｓ３２）。すなわち、制御部３００は、機械学習されたモデル３４２に基づいて、いくらの値引シールであるかを認識する。
次に制御部３００は、認識した値引シールＬをデコードしコード情報を生成する（Ｓ３３）。そして制御部３００は、生成した値引シールＬに係るコード情報をスキャニング装置１に出力する（Ｓ３４）。出力されたコード情報は、通信回線７を経由してスキャニング装置１に送られる。そして制御部３００は、Ｓ３１に戻る。
このように実施形態のスキャニング装置１は、画像を撮像するカメラ１９と、フラグシールＴを認識する認識手段１０３と、認識手段１０３がフラグシールＴを認識した場合にカメラ１９の画像から画像を専用ハードウェア３に出力する商品に係る画像を選択する選択手段１０２と、選択手段１０２が選択した画像のみを専用ハードウェア３に出力する出力手段１０４と、を備える。
このような実施形態のスキャニング装置１は、選択手段１０２が選択した画像のみを通信回線７を経由して専用ハードウェア３に出力するため、複数台のスキャニング装置１を１台の専用ハードウェア３に接続しても、多くの通信帯域を消費しない。
また、専用ハードウェア３は、選択された画像のみがスキャニング装置１から入力されるため、専用ハードウェア３による処理を少なくすることができるため、専用ハードウェア３の負担が軽減される。
なお、実施形態の変形例として、削減手段１０１は、カメラ１９が撮像した画像から値引シールＬが含まれるように切り出した画像を切り出す処理を行ってもよい。この場合、出力手段１０４は、削減手段１０１が切り出した画像を専用ハードウェア３に出力する。このような変形例においても、スキャニング装置１は、切り出した画像のみを通信回線７を経由して専用ハードウェア３に出力するため、複数台のスキャニング装置１を１台の専用ハードウェア３に接続しても、多くの通信帯域を消費しない。
また、実施形態の第２変形例として、削減手段１０１は、カメラ１９が撮像した画像を圧縮してデータ量を削減する圧縮手段として機能するようにしてもよい。この場合、圧縮手段により圧縮された、データ量が削減された画像が通信回線７を経由して専用ハードウェア３に出力されるため、複数台のスキャニング装置１を１台の専用ハードウェア３に接続しても、多くの通信帯域を消費しない。
以上、本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
例えば実施形態では、１台のスキャニング装置１と１台のＰＯＳ端末５を接続した複数組のセットを通信回線７に接続するようにした。しかしながらこれに限らず、例えば１台のＰＯＳ端末５に複数台のスキャニング装置１を、通信回線７を介して接続するようにしてもよい。この場合、スキャニング装置１はＰＯＳ端末５に内蔵されていてもよい。
なお、実施形態のスキャニング装置１で実行されるプログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（FD）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
また、実施形態のスキャニング装置１で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、実施形態のスキャニング装置１で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
また、実施形態のスキャニング装置１で実行されるプログラムを、それぞれＲＯＭ等に予め組み込んで提供するように構成してもよい。
１ スキャニング装置
３ 専用ハードウェア
５ ＰＯＳ端末
７ 通信回線
１０ システム
１１ ＣＰＵ
１９ カメラ
３１ ＣＰＵ
６１ バーコードラベル
６２ バーコード
７０ａ 撮像エリア
１００ 制御部
１０１ 削減手段
１０２ 選択手段
１０３ 認識手段
１０４ 出力手段
１３１ 画像記憶部
１３２ デコード記憶部
３００ 制御部
３３１ 画像記憶部
３３２ デコードデータ部
３４２ モデル
Ｌ 値引シール
Ｔ フラグシール
特開２０１２－１１３６８９号公報

Claims (7)

  1. 商品の登録処理を行う商品販売データ処理装置と、入力された画像を認識する画像認識装置と、前記画像認識装置に接続されたスキャニング装置とを備えるシステムであって、
    前記スキャニング装置は、
    商品を撮像するカメラと、
    前記カメラが撮像した画像から前記画像認識装置に出力する商品に係る画像のデータ量を削減する削減手段と、
    前記データ量を削減した画像を前記画像認識装置に出力する出力手段と、
    前記画像認識装置から受信した、前記画像に基づいて前記画像認識装置で認識した前記画像に係る情報を前記商品販売データ処理装置に送信する送信手段と、
    を備えたシステム。
  2. 前記カメラが撮像した画像に基づいて、前記商品に値引シールが貼付されたことを示す前記商品に付されたフラグシールを認識する認識手段、をさらに備え、
    前記削減手段は、前記フラグシールの画像が認識されると、以降前記カメラが所定時間継続して撮像して前記値引シールの画像を含む画像を前記画像認識装置に出力する、
    請求項１に記載のシステム。
  3. 前記カメラが撮像した画像に基づいて、前記商品に値引シールが貼付されたことを示す前記商品に付されたフラグシールを認識する認識手段、をさらに備え、
    前記削減手段は、前記フラグシールの画像が認識されると、以降前記カメラが所定枚数継続して撮像して前記値引シールの画像を含む画像を前記画像認識装置に出力する、
    請求項１に記載のシステム。
  4. 前記認識手段は、前記フラグシールの形状的な特徴を認識する、
    請求項２または３に記載のシステム。
  5. 前記送信手段は、前記カメラが撮像した前記商品を特定するコード情報と、前記画像認識装置から受信した、前記画像認識装置が認識した前記値引シールを特定する前記コード情報を合体させて送信する、
    請求項２または３に記載のシステム。
  6. 前記削減手段は、前記カメラが撮像した画像から前記画像認識装置に出力する画像を切り出して出力する、
    請求項１に記載のシステム。
  7. 前記画像認識装置に、前記スキャニング装置が複数接続されている、
    請求項１に記載のシステム。
JP2021129078A 2021-08-05 2021-08-05 システム Active JP7686496B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2021129078A JP7686496B2 (ja) 2021-08-05 2021-08-05 システム
US17/730,244 US12154306B2 (en) 2021-08-05 2022-04-27 Scanning device and method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021129078A JP7686496B2 (ja) 2021-08-05 2021-08-05 システム

Publications (2)

Publication Number Publication Date
JP2023023496A JP2023023496A (ja) 2023-02-16
JP7686496B2 true JP7686496B2 (ja) 2025-06-02

Family

ID=85153033

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021129078A Active JP7686496B2 (ja) 2021-08-05 2021-08-05 システム

Country Status (2)

Country Link
US (1) US12154306B2 (ja)
JP (1) JP7686496B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7828938B2 (ja) * 2023-09-26 2026-03-12 東芝テック株式会社 情報処理装置およびプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004252599A (ja) 2003-02-18 2004-09-09 Seiko Epson Corp イメージリーダシステム、記録媒体、画像読み取り装置並びにｐｏｓ端末の画像処理方法
JP2015095028A (ja) 2013-11-11 2015-05-18 日本電気株式会社 Ｐｏｓ端末装置、ｐｏｓシステム、画像処理方法及びプログラム
JP2017194788A (ja) 2016-04-19 2017-10-26 東芝テック株式会社 貼付物およびコードシンボル読取装置
JP2019185471A (ja) 2018-04-12 2019-10-24 東芝テック株式会社 貼付物、コードシンボル読取装置およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5216595A (en) * 1990-03-20 1993-06-01 Ncr Corporation System and method for integration of lottery terminals into point of sale systems
US7954719B2 (en) * 2000-11-24 2011-06-07 Metrologic Instruments, Inc. Tunnel-type digital imaging-based self-checkout system for use in retail point-of-sale environments
US20070192182A1 (en) * 2006-02-10 2007-08-16 Tovin Monaco Method of delivering coupons using customer data
US8022997B2 (en) * 2007-04-19 2011-09-20 Fuji Xerox Co., Ltd. Information processing device and computer readable recording medium
US8109439B2 (en) * 2008-04-08 2012-02-07 Toshiba Tec Kabushiki Kaisha Commodity registration processing apparatus
JP4976512B2 (ja) * 2010-01-25 2012-07-18 東芝テック株式会社 コード読取装置、販売登録システムおよびプログラム
JP5297506B2 (ja) 2010-11-01 2013-09-25 東芝テック株式会社 コード読取装置およびプログラム
US9721237B2 (en) * 2011-06-24 2017-08-01 Paypal, Inc. Animated two-dimensional barcode checks
US10198648B1 (en) * 2015-04-10 2019-02-05 Digimarc Corporation Decoding 1D-barcodes in digital capture systems
US11257198B1 (en) * 2017-04-28 2022-02-22 Digimarc Corporation Detection of encoded signals and icons

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004252599A (ja) 2003-02-18 2004-09-09 Seiko Epson Corp イメージリーダシステム、記録媒体、画像読み取り装置並びにｐｏｓ端末の画像処理方法
JP2015095028A (ja) 2013-11-11 2015-05-18 日本電気株式会社 Ｐｏｓ端末装置、ｐｏｓシステム、画像処理方法及びプログラム
JP2017194788A (ja) 2016-04-19 2017-10-26 東芝テック株式会社 貼付物およびコードシンボル読取装置
JP2019185471A (ja) 2018-04-12 2019-10-24 東芝テック株式会社 貼付物、コードシンボル読取装置およびプログラム

Also Published As

Publication number Publication date
US20230045294A1 (en) 2023-02-09
US12154306B2 (en) 2024-11-26
JP2023023496A (ja) 2023-02-16

Similar Documents

Publication Publication Date Title
JP4976512B2 (ja) コード読取装置、販売登録システムおよびプログラム
JP5320360B2 (ja) 商品コード読取装置及びプログラム
JP5038456B2 (ja) 販売登録装置、チェックアウトシステムおよびプログラム
JP5149950B2 (ja) 商品情報読取装置及びプログラム
JP2012113689A (ja) コード読取装置およびプログラム
JP2009193531A (ja) データコード読取装置及び商品登録システム
JP5681682B2 (ja) 情報処理装置及びプログラム
JP5379763B2 (ja) コード読取装置およびプログラム
JP7686496B2 (ja) システム
JP2012053697A (ja) コード読取装置およびプログラム
US20110315764A1 (en) Code reading apparatus and code reading method
JP2013175099A (ja) コード読取装置、販売登録装置およびプログラム
WO2006107454A2 (en) Systems and methods for dataform decoding
US20240104614A1 (en) Individual item price management system and method of managing individual item price management system
JP5349444B2 (ja) コード読取装置およびプログラム
JP7706294B2 (ja) 読取装置及びプログラム
JP2013069306A (ja) 商品情報読取装置、商品情報処理装置及びプログラム
JP2012022529A (ja) 商品コード読取装置及びプログラム
JP5386603B2 (ja) コード読取装置、販売登録システムおよびプログラム
JP6311040B2 (ja) 商品販売データ処理装置および商品販売データ処理システム
JP2012079006A (ja) コード読取装置、プログラムおよび商品登録システム
JP7792307B2 (ja) 販売データ処理装置及びプログラム
CN102402678B (zh) 码读取装置及控制方法
JP5377581B2 (ja) 読取装置、商品販売情報処理装置及び制御プログラム
US20220092678A1 (en) Information processing apparatus and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240614

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20250131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20250204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250401

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250521

R150 Certificate of patent or registration of utility model

Ref document number: 7686496

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150