JP6720699B2 - 画像形成装置、情報処理システム、認証方法およびプログラム - Google Patents

画像形成装置、情報処理システム、認証方法およびプログラム Download PDF

Info

Publication number
JP6720699B2
JP6720699B2 JP2016108857A JP2016108857A JP6720699B2 JP 6720699 B2 JP6720699 B2 JP 6720699B2 JP 2016108857 A JP2016108857 A JP 2016108857A JP 2016108857 A JP2016108857 A JP 2016108857A JP 6720699 B2 JP6720699 B2 JP 6720699B2
Authority
JP
Japan
Prior art keywords
user
authentication
image
unit
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016108857A
Other languages
English (en)
Other versions
JP2017215757A (ja
Inventor
慶満 小倉
慶満 小倉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2016108857A priority Critical patent/JP6720699B2/ja
Publication of JP2017215757A publication Critical patent/JP2017215757A/ja
Application granted granted Critical
Publication of JP6720699B2 publication Critical patent/JP6720699B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、画像形成装置、情報処理システム、認証方法およびプログラムに関する。
近年、利用者を認証する認証方法として、パスワードの入力等の操作を不要とするICカードによる無線認証、および利用者の顔画像に基づいて認証を行う顔認証等の認証技術が普及している。特に、顔認証による認証方法は、パスワード入力およびログイン操作等が不要であり、ICカードの盗難によるなりすましを防ぐことができるユーザ認証の方法として様々な機器の認証に利用され普及しつつある。さらに、利用者の顔をカメラで撮像して、その顔を認証することにより個人を特定して画像形成装置のユーザ認証を行う技術が既に知られている。このような、顔認証を利用した技術として、顔認証の対象として利用される髪型の変化または顔の経年変化によって利用者の照合精度が劣化しないようにするために、顔画像の比較判定の結果が略一致である場合に限って今回の顔画像データを記憶手段に更新して記憶させることにより、記憶手段に常に利用者の最新の顔画像データを記憶させ、ログイン中の利用者の適否判定に際して、その時点で抽出された顔画像データと、記憶手段に記憶されている最新の顔画像データとを比較することで、利用者の真贋判定の確度を向上させ、髪型の変化および顔の経年変化による判定ミスを軽減するという技術が開示されている(特許文献1参照)。
しかしながら、特許文献1に開示された技術では、判定の結果が略一致である場合に、類似度が低くても顔画像データをその都度更新できてしまうことがあり、なりすまし等セキュリティ上の問題が起こる可能性がある。また、認証時の比較元として登録する顔画像が、解像度が不十分であったり、実際に機器に搭載されたカメラから撮影される顔画像とは撮影角度が異なるといった理由により、十分な認証精度を保つことができず、正しくユーザ認証を行うことができない場合があるという問題がある。
本発明は、上記に鑑みてなされたものであって、顔画像による認証の精度を向上させることができる画像形成装置、情報処理システム、認証方法およびプログラムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本発明は、画像形成装置であって、登録された利用者を撮像した画像の特徴を示す第1の特徴情報と、登録された利用者が保持する無線端末を識別する第1の識別情報と、を含む利用者情報を記憶する記憶部と、撮像装置を用いて認証対象となる利用者の画像を撮像する撮像部と、第1の特徴情報と、撮像部により撮像された認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、第1の閾値以上であるか否かを判定することによって、利用者の画像に対する第1の認証を行う第1の認証部と、第1の認証部により、類似度が第1の閾値以上であると判定されたことにより認証対象となる利用者の画像に対する第1の認証が許可された場合、認証対象となる利用者の画像の特徴を示す特徴情報を第2の特徴情報として更新し、かつ、第1の認証で使用される第1の閾値を、その第1の閾値よりも高い値の第2の閾値に更新する更新部と、無線端末から、無線端末を識別する第2の識別情報を取得する無線通信部と、第2の識別情報と、利用者情報に含まれる第1の識別情報とが一致する場合、第2の識別情報により識別される無線端末に対する第2の認証を許可する第2の認証部と、第1の認証で許可された画像に含まれる利用者と、第2の認証で許可された無線端末を保持する利用者とが同じ利用者である場合、利用者に対して画像形成装置の利用を許可する許可部と、
を備えたことを特徴とする。
本発明によれば、顔画像による認証の精度を向上させることができる。
図1は、実施形態に係る情報処理システムの構成の一例を示す図である。 図2は、RFIDタグリーダの検知範囲および移動体センサの検知範囲の一例を示す図である。 図3は、実施形態に係る画像形成装置のハードウェア構成の一例を示す図である。 図4は、実施形態に係る画像形成装置のソフトウェア構成の一例を示す図である。 図5は、実施形態に係る画像形成装置の機能構成の一例を示す図である。 図6は、実施形態に係る利用者情報の一例を示す図である。 図7は、実施形態に係る利用者情報の別の一例を示す図である。 図8は、実施形態に係る画像形成装置の無線認証処理の一例を示すフローチャートである。 図9は、実施形態に係る画像形成装置における利用者登録処理の一例を示すシーケンス図である。 図10は、カメラの撮像方向によって顔画像に差異が生じることを説明する図である。 図11は、実施形態に係る画像形成装置の利用者の登録画面の一例を示す図である。 図12は、実施形態に係る画像形成装置の画像認証処理の一例を示すフローチャートである。 図13は、実施形態に係る画像形成装置の画像認証処理において登録フラグに基づいた認証処理の詳細を示すシーケンス図である。 図14は、実施形態に係る画像認証の一例について説明するための図である。 図15は、実施形態に係る画像形成装置の画像認証処理で利用者の特徴情報が更新された後の利用者情報の一例を示す図である。 図16は、実施形態に係る画像形成装置の認証処理の一例を示すフローチャートである。
(システムの構成)
図1は、実施形態に係る情報処理システムの構成の一例を示す図である。図1を参照しながら、本実施形態に係る情報処理システム100の構成について説明する。
図1に示すように、情報処理システム100は、画像形成装置101と、利用者106が所持するRFID(Radio Frequency Identification)タグ105と、を含む。
画像形成装置101は、例えば、MFP(Multifunction Peripheral)、複写機、プリンタ、ファクス装置、またはスキャナ装置等の画像形成装置であり、本発明の「情報処理装置」の一例である。ここで、MFPとは、コピー機能、プリンタ機能、スキャナ機能、およびファクス機能のうち少なくとも2つの機能を有する複合機である。画像形成装置101は、画像を撮像するカメラ102と、所定の範囲(例えば、後述する図2に示す無線検知範囲202)内にあるRFIDタグ105(無線タグの一例)から無線タグID等の特定の情報を受信するRFIDタグリーダ103と、移動体(利用者106等)を検知する移動体センサ104と、を備えている。ここで、RFIDとは、無線タグID等の特定の情報を記憶したRFIDタグ105と、RFIDタグリーダ103との間で、電磁波または電波等を用いた近距離無線通信を行う技術であり、近距離無線通信の一例である。
カメラ102は、例えば、撮像した画像に、画像形成装置101を利用する利用者106が含まれるように設置された撮像装置である。
RFIDタグリーダ103は、例えば、RFIDタグ105がパッシブタグである場合、後述する所定の検知範囲(無線検知範囲202)に電波を放射して、RFIDタグ105から特定の情報を受信する装置である。また、RFIDタグ105は、RFIDタグリーダ103から放射された電波を受信すると、受信した電波を電力として動作し、予め記憶した無線タグID等の特定の情報をRFIDタグリーダ103に送信する。RFIDタグリーダ103は、例えば、使用周波数が920[MHz]帯、送信出力が250[mW]以下の特定小電力規格のもの等が採用できる。なお、検知範囲内に複数のRFIDタグ105が存在する場合、RFIDタグリーダ103は、それぞれのRFIDタグ105から無線タグID等の特定の情報を受信することが可能である。
パッシブタグとは、RFIDタグリーダからの電波をエネルギー源として動作するRFID用のタグであり、電池を内蔵する必要がない。パッシブタグのアンテナは、RFIDタグリーダからの電波の一部を反射し、無線タグID等の情報をこの反射波に乗せて返す。この反射の強度は非常に小さいため、パッシブタグは、自装置の電力で電波を送信するアクティブタグに比べて通信距離が短くなるが、安価で、ほぼ恒久的に動作する。
移動体センサ104は、移動体(利用者106等)を検知する焦電センサ等である。
図2は、RFIDタグリーダの検知範囲および移動体センサの検知範囲の一例を示す図である。図2を参照しながら、RFIDタグリーダ103の検知範囲および移動体センサ104の検知範囲等について説明する。
図2では、画像形成装置101の上面から見たときの、移動体センサ104のセンサ検知範囲201、RFIDタグリーダ103の無線検知範囲202、およびカメラ102の画像認証範囲203が示されている。
図2の例では、画像形成装置101の正面側(図2の紙面視下側)に移動体センサ104が設置されており、画像形成装置101の前面側(図2の紙面視下方向)に、扇形のセンサ検知範囲201が形成されている。移動体センサ104のセンサ検知範囲201は、画像形成装置101から、例えば2[m]程度の範囲をターゲットとしており、このセンサ検知範囲201内に移動体(利用者106等)が入ると、移動体センサ104により移動体の存在が検知され、画像形成装置101は、消費電力が少ない省電力状態から通常状態へ移行し、カメラ102およびRFIDタグリーダ103の動作が開始される。
また、画像形成装置101は、内部に、例えば、パッチアンテナ等のRFIDタグリーダ103を有しており、画像形成装置101の前面側(図2の紙面視下方向)に、扇型の無線検知範囲202が形成されている。RFIDタグリーダ103の無線検知範囲202は、画像形成装置101から、例えば2[m]程度の検知性能を有するものとしても、RFIDタグ105と利用者106とが近接することによる通信機能の劣化により、実際には1[m]程度の検知範囲となる。この無線検知範囲202は、RFIDタグ105から特定の情報(例えば、無線タグID)を受信するために、RFIDタグリーダ103により電波が放射されることによって形成される。そして、RFIDタグ105を持った利用者106が、無線検知範囲202に入ると、RFIDタグ105に記憶された特定の情報が、自動的に画像形成装置101に送信される。
また、図2では、カメラ102によって撮像された撮像画像から顔認証が可能となる撮像範囲である画像認証範囲203が示されている。
本実施形態では、画像形成装置101は、後述するように、RFIDタグ105から受信した無線タグIDと、画像形成装置101の記憶部に予め登録された利用者情報とに基づいて、RFIDタグ105の認証(以下、「無線認証」という場合がある)を行う。また、画像形成装置101は、例えば、カメラ102による撮像画像に含まれる利用者106の顔画像と、後述する画像形成装置101の記憶部に予め登録された利用者の顔の特徴情報(以下、単に「利用者の特徴情報」という場合がある)とに基づいて、利用者106を撮像した撮像画像の認証(以下、「画像認証」という場合がある)を行う。さらに、画像形成装置101は、無線認証および画像認証が許可された場合、無線認証が許可されたRFIDタグ105に対応する利用者を示す情報と、画像認証が許可された撮像画像に写っている利用者を示す情報とに基づいて、利用者106の画像形成装置101に対するログイン認証を行い、ログインを許可する場合、利用者106による画像形成装置101の利用を許可する。例えば、画像形成装置101は、無線認証が許可されたRFIDタグ105の利用者と、画像認証が許可された撮像画像の利用者とが同じ利用者である場合、その利用者の画像形成装置101へのログインを許可する。
このように、画像形成装置101は、RFIDタグ105を用いた無線認証と、カメラ102により撮像された顔画像による画像認証との両方の認証が許可された利用者106のログインを許可する。これによって、本実施形態に係る画像形成装置101によれば、利用者106は、RFIDタグ105を所持しているだけで、画像認証等の撮像された画像による認証方法の認証の精度を向上させることができるようになる。
なお、図1のシステム構成はあくまで一例である。例えば、図1では、情報処理装置の一例として画像形成装置101を示したが、これに限定されるものではなく、情報処理装置は、画像形成装置101と同様の利用者に対する認証機能を有するPC(Personal Computer)、タブレット端末、スマートフォン、ゲーム機、またはテレビ会議装置等であってもよい。
また、カメラ102、RFIDタグリーダ103または移動体センサ104等は、外部に外付けされているものであってもよい。
また、RFIDタグ105は、RFIDのアクティブタグまたはセミアクティブタグ等であってもよい。また、RFIDタグ105は、無線タグの一例である。無線タグは、RFIDとは異なる近距離無線方式(例えば、Bluetooth(登録商標) Low Energy(以下、「BLE」という)、またはNFC(Near Field Communication)等)で通信を行う無線端末であってもよい。
また、無線タグに代えて、画像形成装置101と無線通信によってデータ通信をすることが可能な無線端末(例えば、携帯電話機、スマートフォン、タブレット端末またはウェアラブル端末)を用いるものとしてもよい。この場合、無線端末は、利用者に携帯され、無線端末を識別する端末IDを画像形成装置101に無線送信する。すなわち、無線タグは、利用者に携帯される無線端末の一例であり、無線タグIDは、無線端末を識別する端末IDの一例である。
(ハードウェア構成)
図3は、実施形態に係る画像形成装置のハードウェア構成の一例を示す図である。図3を参照しながら、本実施形態に係る画像形成装置101のハードウェア構成について説明する。
図3に示すように、画像形成装置101は、例えば、コピー機能、スキャナ機能、ファクス機能、およびプリンタ機能等の各種の画像形成機能を実現する本体310と、利用者の操作を受け付ける操作部330と、を備える。ここで、利用者の操作を受け付けるとは、利用者の操作に応じて入力される情報(画面の座標値を示す信号等を含む)を受け付けることを含む概念である。
本体310および操作部330は、専用の通信路350を介して、相互に通信可能に接続されている。通信路350は、例えば、USB(Universal Serial Bus)規格のものを用いることができるが、これに限定されるものではなく、有線か無線かを問わず任意の規格のものであってよい。本体310は、操作部330により受け付けられた操作に応じた動作を行う。また、本体310は、クライアントPC等の外部装置とも通信可能であり、外部装置から受信した指示に応じた動作を行うこともできる。
<本体のハードウェア構成>
図3に示すように、本体310は、CPU(Central Processing Unit)311と、ROM(Read Only Memory)312と、RAM(Random Access Memory)313と、ストレージ314と、通信I/F(Interface)315と、接続I/F316と、エンジン部317と、移動体センサ318と、システムバス319と、を有する。
CPU311は、本体310の動作を統括的に制御する。CPU311は、RAM313をワークエリア(作業領域)としてROM312またはストレージ314等に格納されたプログラムを実行することにより、本体310全体の動作を制御する。例えば、CPU311は、上述したコピー機能、スキャナ機能、ファクス機能、およびプリンタ機能等の各種機能を実現する。
ROM312は、例えば、本体310の起動時に実行されるBIOS(Basic Input/Output System)、および各種の設定等を記憶する不揮発性のメモリである。RAM313は、CPU311のワークエリア等として用いられる揮発性のメモリである。ストレージ314は、例えば、OS(Operating System)、アプリケーションプログラム、および各種データ等を記憶する不揮発性の記憶装置である。ストレージ314は、例えば、HDD(Hard Disk Drive)またはSSD(Solid State Drive)等で構成される。なお、ストレージ314は、図3に示すように、本体310に含まれるものとしたが、これに限定されるものではなく、本体310の外部に設けるものとしてもよい。
通信I/F315は、本体310をネットワーク360に接続し、ネットワーク360に接続された外部装置との通信を行うためのネットワークインターフェースである。接続I/F316は、通信路350を介して、操作部330と通信するためのインターフェースである。
エンジン部317は、コピー機能、スキャナ機能、ファクス機能、およびプリンタ機能等の各種機能を実現させるための、汎用的な情報処理および通信以外の処理を行うハードウェアである。エンジン部317には、例えば、原稿の画像をスキャンして読み取るスキャナ部、用紙等のシート材への印刷を行うプロッタ部、およびファクス通信を行うファクス部等が含まれる。なお、エンジン部317は、印刷済みシート材を仕分けるフィニッシャ、または原稿を自動給送するADF(Auto Document Feeder:自動原稿給送装置)のような特定のオプションが含まれていてもよい。
移動体センサ318は、画像形成装置101の周囲の検知範囲(図2に示すセンサ検知範囲201)内にある移動体(利用者等)を検知するセンサである。移動体センサ318は、例えば、焦電センサ等で構成される。移動体センサ318は、図1に示す移動体センサ104に相当する。
システムバス319は、上述の各構成要素を互いに接続し、アドレス信号、データ信号、および各種制御信号等を伝送する伝送路である。
<操作部のハードウェア構成>
図3に示すように、操作部330は、CPU331と、ROM332と、RAM333と、フラッシュメモリ334と、通信I/F335と、操作パネル336と、接続I/F337と、外部接続I/F338と、近距離無線通信機339と、カメラ340(撮像装置)と、システムバス341と、を有する。
CPU331は、操作部330の動作を統括的に制御する。CPU331は、RAM333をワークエリア(作業領域)としてROM332またはフラッシュメモリ334等に格納されたプログラムを実行することにより、操作部330全体の動作を制御する。例えば、CPU331は、利用者から受け付けた入力に応じた情報(画像)を操作パネル336に表示させる等の各種機能を実現する。
ROM332は、例えば、操作部330の起動時に実行されるBIOS、および各種の設定等を記憶する不揮発性のメモリである。RAM333は、CPU331のワークエリア等として用いられる揮発性のメモリである。フラッシュメモリ334は、例えば、OS、アプリケーションプログラム、および各種データ等を記憶する不揮発性の記憶装置である。
通信I/F335は、操作部330をネットワーク360に接続し、ネットワーク360に接続された外部装置との通信を行うためのネットワークインターフェースである。
操作パネル336は、利用者の操作に応じた各種の入力を受け付けると共に、各種の情報(例えば、受け付けた操作に応じた情報、画像形成装置101の動作状況を示す情報、および設定情報等)を表示する、入力機能および表示機能を有する装置である。操作パネル336は、例えば、タッチパネル機能を搭載した液晶表示装置(LCD:Liquid Crystal Display)で構成される。なお、操作パネル336は、液晶表示装置に限定されるものではなく、例えば、タッチパネル機能が搭載された有機EL(Electro−Luminescence)の表示装置で構成されていてもよい。また、操作パネル336は、タッチパネル機能に加えてまたはこれに代えて、ハードウェアキー等の操作部、またはランプ等の表示部を設けることもできる。
接続I/F337は、通信路350を介して、本体310と通信するためのインターフェースである。外部接続I/F338は、外部装置を接続するための、例えば、USB等のインターフェースである。
近距離無線通信機339は、近距離無線通信により、所定の範囲(例えば、図2に示す無線検知範囲202)内の無線タグと通信を行うための近距離無線装置である。近距離無線通信機339は、例えば、図1に示すRFIDタグリーダ103等を含み、放射した電波に対して応答を返すRFIDタグ105等から、特定の情報を受信する。なお、近距離無線通信機339は、上述したBLEまたはNFC等の近距離無線通信を行う近距離無線装置であってもよい。
カメラ340は、所定の撮像範囲(例えば、図2に示す画像認証範囲203)内の画像を撮像する撮像装置である。カメラ340は、図1に示すカメラ102に相当する。
システムバス341は、上述の各構成要素を互いに接続し、アドレス信号、データ信号、および各種制御信号等を伝送する伝送路である。
(ソフトウェア構成)
図4は、実施形態に係る画像形成装置のソフトウェア構成の一例を示す図である。図4を参照しながら、本実施形態に係る画像形成装置101のソフトウェア構成について説明する。
図4に示すように、画像形成装置101の本体310は、アプリ層411と、サービス層412と、OS層413と、を含む。アプリ層411、サービス層412、およびOS層413の実体は、ROM312またはストレージ314等に格納されている各種ソフトウェアである。CPU311が、これらのソフトウェア(プログラム)を実行することにより、本体310の各種の機能が提供される。
アプリ層411は、ハードウェア資源を動作させて所定の機能を提供するためのアプリケーションソフトウェア(以下、単に「アプリ」という場合がある)である。アプリとしては、例えば、コピー機能を提供するためのコピーアプリ、スキャナ機能を提供するためのスキャナアプリ、ファクス機能を提供するためのファクスアプリ、プリンタ機能を提供するためのプリンタアプリなどが挙げられる。
サービス層412は、アプリ層411とOS層413との間に介在し、アプリ層411のアプリに対し、本体310が備えるハードウェア資源を利用するためのインターフェースを提供するソフトウェアである。具体的には、サービス層412は、ハードウェア資源に対する動作要求を受け付け、動作要求の調停を行う機能を提供する。サービス層412が受け付ける動作要求としては、スキャナによる読み取りおよびプロッタによる印刷等の要求が挙げられる。なお、サービス層412によるインターフェースの機能は、本体310のアプリ層411だけではなく、操作部330のアプリ層431に対しても提供される。すなわち、操作部330のアプリ層431も、本体310のサービス層412のインターフェース機能を介して、本体310のハードウェア資源(例えば、エンジン部317)を利用した機能を実現することができる。
OS層413は、本体310が備えるハードウェアを制御する基本機能を提供するための基本ソフトウェア(オペレーティングシステム)である。サービス層412は、各種アプリからのハードウェア資源の利用要求を、OS層413が解釈可能なコマンドに変換してOS層413に渡す。そして、OS層413によりコマンドが実行されることにより、ハードウェア資源は、アプリの要求に従った動作を行う。
図4に示すように、画像形成装置101の操作部330は、アプリ層431と、サービス層432と、OS層433と、を含む。操作部330が含むアプリ層431、サービス層432、およびOS層433も、階層構造については本体310側と同様である。ただし、アプリ層431のアプリにより提供される機能や、サービス層432が受け付け可能な動作要求の種類は、本体310側とは異なる。
アプリ層431のアプリは、操作部330が備えるハードウェア資源を動作させて所定の機能を提供するためのソフトウェアであってもよいが、主として本体310が備える機能に関する操作および表示を行うためのUI(User Interface)の機能を提供する。また、アプリ層431のアプリは、操作部330が備える近距離無線通信機339、および、カメラ340等を用いた認証機能を提供する。
なお、本実施形態では、機能の独立性を保つために、本体310側のOS層413のソフトウェアと、操作部330側のOS層433のソフトウェアとが互いに異なる。つまり、本体310および操作部330は、別々のオペレーティングシステムにより互いに独立して動作する。例えば、本体310側のOS層413のソフトウェアとしてLinux(登録商標)を用い、操作部330側のOS層433のソフトウェアとしてAndroid(登録商標)を用いることも可能である。
以上のように、本実施形態の画像形成装置101において、本体310および操作部330は、別々のオペレーティングシステムで動作するため、本体310と操作部330との間の通信は、共通の装置内のプロセス間通信ではなく、異なる装置間の通信として行われる。操作部330が受け付けた情報(利用者からの操作指示内容)を本体310へ送信する動作(コマンド通信)、および、本体310が操作部330へ情報を送信する動作等がこれに該当する。ここでは、操作部330が本体310へコマンド通信を行うことにより、本体310の機能を使用することができる。また、本体310から操作部330に送信する情報には、例えば、本体310における動作の実行状況、および本体310側で設定された内容等が含まれる。また、本実施形態では、操作部330に対する電力供給は、本体310から通信路350を経由して行われているので、操作部330の電源制御を、本体310の電源制御とは別に(独立して)行うことができる。
(機能構成)
図5は、実施形態に係る画像形成装置の機能構成の一例を示す図である。図5を参照しながら、本実施形態に係る画像形成装置101の機能構成について説明する。
<本体の機能構成>
図5に示すように、画像形成装置101の本体310は、移動体検知部501(検知部)と、電力状態制御部502と、画像形成部503と、記憶部504と、通信部505と、を有する。
移動体検知部501は、移動体センサ318を用いて、画像形成装置101の周囲の検知範囲内にある移動体(図1の例では、利用者106)を検知する機能部である。移動体検知部501は、例えば、図3に示すCPU311で動作するプログラムによって実現される。移動体検知部501は、検知範囲内で移動体を検知した場合、その検知情報を、電力状態制御部502に通知する。
電力状態制御部502は、本体310および操作部330の電力状態を制御する機能部である。電力状態制御部502は、例えば、図3に示すCPU311で動作するプログラムによって実現される。電力状態制御部502は、予め設定された時間を超えて、画像形成装置101の利用がない場合、画像形成装置101を、画像形成処理が可能な通常状態よりも消費電力が少ない省電力状態へ移行させる。省電力状態では、例えば、操作部330の一部の機能、ならびに、本体310のエンジン部317の機能等を停止させること等により、消費電力を低減させることができる。また、電力状態制御部502は、画像形成装置101が省電力状態中に、移動体検知部501から、移動体を検知した検知情報を受け取ると、本体310を、省電力状態から通常の動作が可能な通常状態へ復帰させる。また、電力状態制御部502は、通信路350を介して、操作部330に復帰命令を通知することにより、操作部330を、省電力状態から通常状態へ復帰させる。
画像形成部503は、画像形成装置101が備える各種の画像形成機能(例えば、プリンタ機能、コピー機能、スキャナ機能、およびファクス機能等)を実行する機能部である。画像形成部503は、例えば、図3に示すエンジン部317、および図3に示すCPU311で動作するプログラム等によって実現される。
記憶部504は、予め登録された画像形成装置101の利用者を示す情報を含む利用者情報A等の様々な情報を記憶する機能部である。記憶部504は、例えば、図3に示すストレージ314、および図3に示すCPU311で動作するプログラム等によって実現される。
通信部505は、操作部330と通信を行う機能部である。通信部505は、例えば、図3に示す接続I/F316、および図3に示すCPU311で動作するプログラム等によって実現される。
なお、図5に示す本体310の移動体検知部501、電力状態制御部502、画像形成部503、記憶部504および通信部505は、機能を概念的に示したものであって、このような構成に限定されるものではない。例えば、図5に示す本体310で独立した機能部として図示した複数の機能部を、1つの機能部として構成してもよい。一方、図5に示す本体310で1つの機能部が有する機能を複数に分割し、複数の機能部として構成するものとしてもよい。
また、本体310の移動体検知部501、電力状態制御部502および画像形成部503の一部または全部は、ソフトウェアであるプログラムではなく、FPGA(Field−Programmable Gate Array)またはASIC(Application Specific Integrated Circuit)等のハードウェア回路によって実現されてもよい。
<操作部の機能構成>
図5に示すように、画像形成装置101の操作部330は、無線通信部511と、無線認証部512(第2の認証部)と、撮像部513と、特徴情報抽出部514(抽出部)と、画像認証部515(第1の認証部)と、許可部516と、利用者情報管理部517と、記憶部518と、通信部519と、登録部520と、更新部521と、入力部522と、表示制御部523と、表示部524と、を有する。
無線通信部511は、近距離無線通信機339を用いた近距離無線通信により、所定の範囲内の無線タグから特定の情報を受信する機能部である。無線通信部511は、移動体検知部501から人を検知した検知情報を受信すると、無線タグから特定の情報を受信するために電波を放射する。無線通信部511は、例えば、図3に示す近距離無線通信機339、および図3に示すCPU331で動作するプログラムによって実現される。無線通信部511は、例えば、図2に示す無線検知範囲202内にあるRFIDタグ105から、無線タグID等の特定の情報(第2の識別情報)を受信する。なお、無線検知範囲202内に複数のRFIDタグ105が存在する場合、無線通信部511は、それぞれのRFIDタグ105から無線タグID等の特定の情報を受信することが可能である。
無線認証部512は、無線通信部511が受信した特定の情報と、予め登録された利用者情報とに基づいて、特定の情報を送信した無線タグを認証する機能部である。無線認証部512は、例えば、図3に示すCPU331で動作するプログラムによって実現される。無線認証部512は、無線通信部511が受信したRFIDタグ105の無線タグIDと、予め登録された利用者情報(例えば、後述する利用者情報aまたは利用者情報A)とに基づいて、RFIDタグ105の認証(無線認証)(第2の認証)を行う。無線認証部512は、無線通信部511が受信したRFIDタグ105の無線タグIDが予め登録された利用者情報に含まれる場合、RFIDタグ105の認証を許可する。また、無線認証部512は、認証を許可したRFIDタグ105の利用者を示す情報を、許可部516に出力する。なお、無線認証部512は、認証を許可したRFIDタグ105の利用者を示す情報を保持するため、記憶部518に出力して記憶させるものとしてもよい。また、無線認証部512は、無線通信部511により複数のRFIDタグ105からそれぞれ無線タグIDを受信した場合、複数の無線タグIDについて順次、無線認証を行い、無線認証の結果を保持しておくものとすればよい。
撮像部513は、カメラ340を用いて画像を撮像する機能部である。撮像部513は、例えば、図3に示すCPU331で動作するプログラムによって実現される。撮像部513は、画像形成装置101の前方の画像をカメラ340に撮像させることにより、画像形成装置101の正面にいる利用者106の撮像画像を取得する。
特徴情報抽出部514は、撮像部513により撮像された画像(撮像画像)から顔画像を検出し、顔画像の特徴情報(利用者の特徴情報の一例)を抽出する機能部である。特徴情報抽出部514は、例えば、図3に示すCPU331で動作するプログラムによって実現される。なお、顔画像の特徴情報には、例えば、顔の輪郭、目、鼻、あご、およびほお骨等の各パーツの形状および相対位置等の情報が含まれる。また、特徴情報抽出部514により抽出された特徴情報は、含まれる特徴量が、後述する記憶部518に記憶された利用者情報aに含まれる利用者の特徴情報における特徴量と同一の方法で算出され、その利用者の特徴情報と同一の形式で表される。また、上述のような特徴情報抽出部514による撮像画像における顔画像の検出方法として、公知のHaar−like特徴に基づく顔検出方法等が適用できる。
画像認証部515は、撮像部513により撮像された画像(撮像画像)と、予め登録された利用者情報とに基づいて、利用者を撮像した撮像画像を認証する機能部である。画像認証部515は、例えば、図3に示すCPU331で動作するプログラムによって実現される。画像認証部515は、撮像部513により撮像された画像から特徴情報抽出部514により抽出された利用者の顔画像の特徴情報と、予め登録された利用者情報(例えば、後述する利用者情報aおよび利用者情報A等)とに基づいて、利用者を撮像した撮像画像の画像認証(第1の認証)を行う。具体的には、画像認証部515は、抽出された利用者の顔画像の特徴情報(利用者の特徴情報)と、後述する記憶部518に記憶された利用者情報a、または記憶部504に記憶された利用者情報A(以下、単に「利用者情報」という場合がある)に含まれる利用者の特徴情報との類似度を算出する。
類似度は、特徴情報抽出部514により抽出された利用者の特徴情報と、記憶部518に記憶された利用者情報aに含まれる利用者の特徴情報との一致の度合いが強いほど大きく、度合いが弱いほど小さくなる値である。例えば、類似度は、0〜1までの実数、または0[%]〜100[%]の百分率で表され、2つの特徴情報が完全に一致する場合、1または100[%]となり、2つの特徴情報が異なるほど0または0[%]に近くなる。
特徴情報抽出部514により抽出された利用者の特徴情報、および利用者情報に含まれる利用者の特徴情報は、それぞれ複数の種類の特徴量を含み、対応する特徴量が同一の特徴を示す。例えば、画像認証部515は、2つの利用者の特徴情報にそれぞれ含まれる特徴量の差分を算出し、その差分の集合を正規化して合計した値を、類似度としてもよい。また、画像認証部515は、特開2015−069495号公報、特開2014−044606号公報または特開2009−157766号公報等に記載された公知の算出方法により、類似度を算出してもよい。
また、画像認証部515は、算出した何れかの類似度が所定の閾値以上であるか否かを判定する。ここで、所定の閾値とは、2つの利用者の特徴情報が一致しているとみなせる値である。
画像認証部515は、特徴情報抽出部514により抽出された利用者の特徴情報と、利用者情報に含まれる利用者の特徴情報との類似度が、所定の閾値以上である場合、利用者を撮像した撮像画像の認証を許可する。また、画像認証部515は、画像認証の結果を、許可部516に出力する。
許可部516は、無線認証部512により無線認証が許可された無線タグ(RFIDタグ105)の利用者を示す情報と、画像認証部515により画像認証が許可された撮像画像に写っている利用者を示す情報とに基づいて、利用者の画像形成装置101に対するログイン認証を行う機能部である。許可部516は、例えば、図3に示すCPU331で動作するプログラムによって実現される。許可部516は、無線認証部512により無線認証が許可された無線タグ(RFIDタグ105)の利用者と、画像認証部515により画像認証が許可された撮像画像に写っている利用者とが同じ利用者である場合、その利用者の画像形成装置101に対するログインを許可し、その利用者の画像形成装置101の利用を許可する。好適な一例として、許可部516は、無線認証部512により無線認証が許可された無線タグの利用者の識別情報と、画像認証部515により画像認証が許可された撮像画像に写っている利用者の識別情報とが一致した場合、その利用者の画像形成装置101の利用を許可する。
一方、無線認証部512により無線認証が許可された無線タグの利用者の識別情報と、画像認証部515により画像認証が許可された撮像画像に写っている利用者の識別情報とが一致しない場合の具体例としては、RFIDタグ105を有する利用者が画像形成装置101周辺を通過し、RFIDタグ105を有していないが、後述する図6に示す利用者情報aに利用者の特徴情報が登録済みの利用者が、画像形成装置101の前にいるような場合が該当する。この場合、許可部516は、ログインを許可しない。
なお、無線認証部512から得られた利用者の識別情報と、画像認証部515から得られた利用者の識別情報とが一致した場合とは、2つの識別情報が完全に一致した場合だけではなく、2つの識別情報が実質的に同じ利用者の識別情報と判断できる場合も含まれ得る。例えば、画像認証部515から得られた利用者の識別情報が8桁の社員IDであり、無線認証部512から得られた利用者の識別情報が社員IDに2文字を付加した10桁のログインIDであるような場合、2つの識別情報が一致したと判断されるものであってもよい。このように、許可部516は、無線認証部512から得られた利用者の識別情報と画像認証部515から得られた利用者の識別情報とが、同じ利用者に関する識別情報である場合、その利用者の画像形成装置101の利用を許可するものであってもよい。
利用者情報管理部517は、記憶部518に記憶された利用者情報aを管理する機能部である。利用者情報管理部517は、例えば、図3に示すCPU331で動作するプログラムによって実現される。
記憶部518は、画像形成装置101の利用者を示す情報を含む利用者情報a等の各種の情報を記憶する機能部である。記憶部518は、例えば、図3に示すRAM333、フラッシュメモリ334、および図3に示すCPU331で動作するプログラム等によって実現される。すなわち、記憶部518からの読み出し速度は、上述の本体310のHDDまたはSSD等による記憶部504からの読み出し速度よりも速い。
通信部519は、本体310と通信を行う機能部である。通信部519は、例えば、図3に示す接続I/F337、および図3に示すCPU331で動作するプログラム等によって実現される。
登録部520は、新しい利用者に関する情報を、記憶部518の利用者情報aまたは記憶部504の利用者情報Aに登録する機能部である。登録部520は、例えば、図3に示すCPU331で動作するプログラムによって実現される。
更新部521は、登録部520により登録された利用者情報のうちの利用者の特徴情報を利用して、画像認証部515により画像認証が許可された場合、画像認証に利用された特徴情報抽出部514により抽出された利用者の特徴情報によって、利用者情報(利用者情報aまたは利用者情報A)の利用者の特徴情報を更新する機能部である。更新部521は、例えば、図3に示すCPU331で動作するプログラムによって実現される。
入力部522は、利用者の操作に応じた各種の入力を受け付ける機能部である。入力部522は、例えば、図3に示す操作パネル336の入力機能によって実現される。
表示制御部523は、表示部524の表示動作を制御する機能部である。表示制御部523は、例えば、図3に示すCPU331で動作するプログラムによって実現される。
表示部524は、表示制御部523による制御に従って、各種の情報(例えば、入力部522により受け付けた操作に応じた情報、画像形成装置101の動作状況を示す情報、および設定情報等)を表示する機能部である。表示部524は、例えば、図3に示す操作パネル336の表示機能によって実現される。
なお、図5に示す操作部330の無線通信部511、無線認証部512、撮像部513、特徴情報抽出部514、画像認証部515、許可部516、利用者情報管理部517、記憶部518、通信部519、登録部520、更新部521、入力部522、表示制御部523および表示部524は、機能を概念的に示したものであって、このような構成に限定されるものではない。例えば、図5に示す操作部330で独立した機能部として図示した複数の機能部を、1つの機能部として構成してもよい。一方、図5に示す操作部330で1つの機能部が有する機能を複数に分割し、複数の機能部として構成するものとしてもよい。
また、操作部330の無線通信部511、無線認証部512、撮像部513、特徴情報抽出部514、画像認証部515、許可部516、利用者情報管理部517、登録部520、更新部521および表示制御部523の一部または全部は、ソフトウェアであるプログラムではなく、FPGAまたはASIC等のハードウェア回路によって実現されてもよい。
また、画像形成装置101の本体310および操作部330がそれぞれ含む各機能部は、図5に示すような構成で本体310または操作部330に含まれることに限定されない。例えば、図5に示す例では、許可部516は操作部330に含まれているが、これに限定されるものではなく、本体310に含まれる構成であってもよい。この場合、画像認証部515は、通信路350を介して画像認証部515の認証結果を許可部516に通知する。また、許可部516は、通信路350を介して受信した、画像認証部515の認証結果に基づいてログイン認証を行う。また、例えば、図5に示す例では、移動体検知部501は本体310に含まれているが、これに限定されるものではなく、操作部330に含まれる構成であってもよい。
(利用者情報の構成)
図6は、実施形態に係る利用者情報の一例を示す図である。図7は、実施形態に係る利用者情報の別の一例を示す図である。図6および7を参照しながら、操作部330の記憶部518に記憶された利用者情報aのデータ構成について説明する。
図6に示す利用者情報aは、操作部330の記憶部518に予め登録(記憶)された利用者情報の一例である。図6の例では、利用者情報aには、例えば、「利用者番号」、「名前」、「メールアドレス」、「ログインID」、「ログインパスワード」、「無線タグID」(第1の識別情報)、「利用者の特徴情報」、「登録フラグ」および「閾値」等の情報が互いに関連付けられたレコードとして含まれている。
「利用者番号」は、例えば、利用者情報aに各利用者の情報が登録された際に採番されたシリアル番号、または、利用者のデータ毎に固有の識別番号等であり、利用者毎に固有の識別情報(利用者の識別情報)の一例である。また、「利用者番号」は、例えば、社員ID等のような利用者の識別情報であってもよい。
「名前」は、利用者の名前である。「メールアドレス」は、利用者のメールアドレスである。「ログインID」および「ログインパスワード」は、利用者が画像形成装置101にログインするための認証情報の一例である。
「無線タグID」は、各利用者が所持しているRFIDタグ105により送信されるRFIDタグ105を示すタグID等の識別情報であり、例えば、8桁の数字で表される。なお、「無線タグID」は、RFIDタグ105から送信される特定の情報の一例であり、特定の情報には、数字以外の情報、例えば、利用者の識別情報等が含まれていてもよい。
「利用者の特徴情報」は、画像形成装置101の利用者の、例えば、顔の輪郭、目、鼻、あご、およびほお骨等の各パーツの形状および相対位置等の複数の特徴量を含む利用者の顔に関する特徴情報である。なお、図6に示す「利用者の特徴情報」のデータ形式は一例であり、任意の形式であってもよい。「利用者の特徴情報」は、利用者ごとに予め取得して利用者情報aまたは利用者情報Aに登録しておく必要がある。「利用者の特徴情報」を含む各種データの登録処理(利用者登録処理)の詳細は、図9で後述する。
「登録フラグ」は、後述する利用者登録処理により利用者に関する情報を登録した場合に、その利用者について画像認証が一度成功しているか否かを示すフラグである。具体的には、「登録フラグ」が「1」の場合、対応する利用者について画像認証が一度も成功していないことを示し、「0」の場合、対応する利用者について画像認証が一度成功していることを示す。
「閾値」は、対応する利用者を撮像した撮像画像に対する画像認証部515による画像認証において、類似度に対する閾値判定で用いる閾値である。
図6に示す利用者情報aには、例えば、データ種別が「データ2」である場合、利用者番号が「101002」、名前が「BBBB」、メールアドレスが「bbb@bbb.ccc」、ログインIDが「BB_BB」、ログインパスワードが「abcdef」、無線タグIDが「00535213」、利用者の特徴情報が「{56,111,−3,・・・,−120,47,208}」、登録フラグが「0」、閾値が「0.8」であり、各情報が対応づけられて記憶されている。
なお、図6に示す利用者情報aには閾値が含まれるものとしたが、これに限定されるものではなく、利用者情報aに閾値を含めずに、初めて利用者が利用者情報aに登録された場合に用いる閾値と、その利用者に対する画像認証が許可された後に使用される閾値とは、それぞれ固定値として用いられるものとしてもよい。ただし、図6に示す利用者情報aのように、利用者に関する情報に関連付けて閾値を記憶する構成とすることによって、利用者ごとに適した閾値を設定することが可能となる。例えば、外見が非常に似ている人同士の場合、画像認証を許可するための類似度について、一律に固定の閾値を用いた判定では誤認証が起こる可能性があるが、このような利用者についての閾値として高い閾値を関連付けることにより、外見が似ている人同士でも精度よく画像認証が可能となる。
操作部330の記憶部518には、例えば、図6に示すような利用者情報aを300件〜1800件程度記憶することができる。例えば、操作部330の利用者情報管理部517は、本体310の記憶部504に記憶された利用者情報Aのうちの少なくとも一部のレコードを、操作部330の記憶部518に利用者情報aとして記憶(キャッシュ)しておく。利用者情報aにキャッシュしておく利用者情報Aの一部のレコードとしては、例えば、画像形成装置101の認証の頻度が高い利用者に対応するレコード、または、優先度の高い利用者に対応するレコード等が挙げられる。これにより、無線認証部512および画像認証部515は、まず、操作部330の記憶部518に記憶された利用者情報aを参照することにより、本体310の記憶部504に記憶された利用者情報Aを参照する場合よりも速く読み出すことができるようになる。
なお、記憶部518には、利用者情報aに加えて、または代えて、図7に示す利用者情報801、802が記憶されているものとしてもよい。図7(a)に示す利用者情報801には、上述した「無線タグID」と、利用者毎に固有の識別情報(利用者の識別情報)の一例である「利用者ID」と、が対応づけられて記憶されている。無線認証部512は、少なくとも利用者情報801に示す情報があれば、RFIDタグ105の認証(無線認証)を行うことができる。例えば、無線認証部512は、無線通信部511が受信したRFIDタグ105の無線タグIDが利用者情報801に含まれる場合、RFIDタグ105の認証を許可し、認証を許可したRFIDタグ105に対応する利用者IDを許可部516に出力する。
図7(b)に示す利用者情報802には、「利用者ID」と、上述した「利用者の特徴情報」と、「登録フラグ」と、「閾値」とが対応づけられて記憶されている。画像認証部515は、少なくとも利用者情報802に示す情報があれば、利用者を撮像した撮像画像の認証(画像認証)を行うことができる。例えば、画像認証部515は、特徴情報抽出部514により抽出された利用者の顔画像の特徴情報と、利用者情報802に含まれる利用者の特徴情報との類似度を算出し、類似度が、利用者情報802に含まれ、その利用者の特徴情報に対応する閾値以上である場合、利用者を撮像した撮像画像の認証を許可し、認証を許可した撮像画像に写っている利用者の利用者IDを許可部516に出力する。
なお、図6および7に示す利用者情報a、および利用者情報801、802は、いずれもレコードの情報を集約したテーブル形式の情報としているが、これに限定されるものではなく、各フィールドの値を互いに関連付けて管理することができれば、どのような形式の情報であってもよい。例えば、図6および7に示す利用者情報a、および利用者情報801、802のそれぞれを構成するレコードを、1利用者分に関するテキストファイル等のファイルとして記憶されているものとしてもよい。
(無線認証処理の流れ)
図8は、実施形態に係る画像形成装置の無線認証処理の一例を示すフローチャートである。図8を参照しながら、本実施形態に係る画像形成装置101の無線認証処理の流れについて説明する。なお、図8においては、無線通信部511は、無線タグから特定の情報を受信するための電波を放射しているものとして説明する。
<ステップS101>
まず、無線通信部511は、所定の範囲(例えば、図2に示す無線検知範囲202)内の無線タグ(RFIDタグ105)から識別情報(無線タグID)を受信する。無線通信部511が識別情報を受信した場合(ステップS101:Yes)、ステップS102へ移行し、受信できなかった場合(ステップS101:No)、無線認証処理を終了する。図8に示す処理が一度終了した場合、無線認証処理は最初から行われる。
<ステップS102>
無線認証部512は、無線通信部511が受信した識別情報と、予め登録された利用者情報(利用者情報aまたは利用者情報A)とに基づいて、特定の情報(無線タグID)を送信した無線タグ(RFIDタグ105)を認証する。具体的には、無線認証部512は、無線通信部511が受信したRFIDタグ105の無線タグIDと、予め登録された利用者情報に基づいて、RFIDタグ105の認証(無線認証)を行う。無線認証部512は、無線通信部511が受信したRFIDタグ105の無線タグIDが利用者情報に含まれる場合、RFIDタグ105の認証を許可する。一方、無線認証部512は、無線通信部511が受信した無線タグIDが利用者情報に含まれない場合、RFIDタグ105の認証を許可しない。このとき、無線認証部512は、まず、操作部330の記憶部518に記憶された利用者情報aを参照し、利用者情報aにRFIDタグ105の無線タグIDを含むレコードがない場合、本体310の記憶部504に記憶された利用者情報Aを参照する。そして、ステップS103へ移行する。
<ステップS103>
無線認証部512による無線認証の結果、RFIDタグ105の認証を許可する場合(認証結果が「OK」である場合)(ステップS103:Yes)、ステップS104へ移行する。一方、RFIDタグ105の認証を許可しない場合(認証結果が「OK」でない場合)(ステップS103:No)、無線認証処理を終了する。図8に示す処理が一度終了した場合、無線認証処理は最初から行われる。
<ステップS104>
無線認証部512は、認証を許可した(認証結果が「OK」となった)RFIDタグ105の利用者を示す情報(例えば、「利用者番号」または「利用者ID」等の利用者の識別情報)を、許可部516へ出力する。このとき、無線認証部512は、認証を許可したRFIDタグ105の利用者の識別情報と共に、認証が許可されたこと(認証結果が「OK」であること)を示す情報を、許可部516へ出力するものであってもよい。また、上述のステップS103において、無線認証部512は、認証を許可しない場合、認証が許可されないこと(認証結果が「NG」であること)を示す情報を、許可部516へ出力するものであってもよい。
以上のステップS101〜S104の動作によって、画像形成装置101により無線認証処理が実行される。
(利用者登録処理の流れ)
図9は、実施形態に係る画像形成装置における利用者登録処理の一例を示すシーケンス図である。図10は、カメラの撮像方向によって顔画像に差異が生じることを説明する図である。図11は、実施形態に係る画像形成装置の利用者の登録画面の一例を示す図である。図9〜11を参照しながら、本実施形態に係る画像形成装置101の利用者登録処理の流れについて説明する。
<ステップS201>
利用者は、入力部522に対して、利用者登録処理を開始するための操作(登録開始操作)を行う。
<ステップS202>
登録開始操作の入力を受け付けた入力部522は、利用者に関する情報の登録を開始する要求(登録開始要求)を登録部520へ送る。
<ステップS203>
登録部520は、登録開始要求を受けると、登録画面を表示する要求(登録画面表示要求)を、表示制御部523へ送る。
<ステップS204>
表示制御部523は、登録画面表示要求を受けると、登録画面を表示させるための情報(登録画面情報)を表示部524へ送る。
<ステップS205>
表示部524は、受け取った登録画面情報を用いて、利用者に関する情報の入力を促す登録画面を表示する。利用者は、表示部524に表示された登録画面を確認する。例えば、登録画面は、図11に示すような構成を有する画面である。図11に示す登録画面では、利用者に関する情報として、「利用者番号」、「名前」、「メールアドレス」、「ログインID」、「ログインパスワード」、「無線タグID」、および利用者の撮像画像の選択の入力を受け付ける。なお、利用者番号は、利用者が任意に決定して入力することに限られるものではなく、例えば、利用者情報管理部517が利用者情報(利用者情報aまたは利用者情報A)の各レコードを一意に識別する番号を自動的に決定するものとしてもよい。
<ステップS206>
利用者は、登録画面を確認し、入力部522に対して、利用者に関する情報の入力操作を行う。ここで、図11の登録画面に示すように、利用者の撮像画像の選択の際には、利用者によって自分の撮像画像が予め画像形成装置101(例えば、記憶部518または記憶部504)に記憶されているものとする。利用者の撮像画像を画像形成装置101へ予め記憶させるためには、例えば、通信I/F315または通信I/F335を介して、外部装置から撮像画像を画像形成装置101へ送信することによって記憶させるものとすればよい。
ここで、画像形成装置101に記憶させるために撮像される利用者の撮像画像について説明する。図10に示すように、利用者は、カメラ600を用いて自身を撮像し、画像形成装置101に記憶させるための撮像画像を用意する。図10(a)に示す撮像画像1001は、カメラ600によって利用者の顔を正面から撮像された画像である。図10(b)に示す撮像画像1002は、カメラ600によって利用者の顔を上方から撮像された画像である。図10(c)に示す撮像画像1003は、カメラ600によって利用者の顔を下方から撮像された画像である。このように、利用者の顔を撮像するカメラ600の位置によって、撮像画像に写り込む利用者の目、鼻、口および輪郭等の見え方が異なるため、これらの各パーツの形状および相対位置等によって求まる特徴量がそれぞれ異なる可能性がある。なお、画像形成装置のカメラ340(図1のカメラ102)を用いて、更新用の画像を撮像してもよい。
<ステップS207>
利用者によって、例えば、図11に示す登録画面の「登録」ボタンが押下されると、入力部522は、入力された利用者に関する情報(登録情報)を、登録部520へ送る。また、利用者によって、図11に示す登録画面の「戻る」ボタンが押下された場合、例えば、表示部524において登録画面が表示される前に表示されていた画面に戻る。
<ステップS208>
登録部520は、登録情報を受け取ると、その登録情報の書き込みの要求(登録情報書込要求)を、登録情報と共に記憶部518へ送信する。ここで、登録部520は、登録情報に含まれる利用者の撮像画像に対して、顔画像を検出し、検出した顔画像の特徴情報を抽出する。そして、登録部520は、抽出した特徴情報を利用者の特徴情報(第1の特徴情報)として登録情報に含めて、登録情報書込要求を記憶部518へ送信する。なお、撮像画像から検出された顔画像に対する特徴情報の抽出は、登録部520ではなく、特徴情報抽出部514が行うものとしてもよい。
また、図10で上述したように、利用者の撮像画像は、撮像したカメラの位置によって利用者の顔の写り方が異なるため、求まる特徴量がそれぞれ異なる場合もあり、その特徴量で構成される利用者の特徴情報も異なる可能性がある。したがって、登録部520は、画像認証部515によって、利用者に関する情報に含まれる利用者の特徴情報を使って類似度に対する閾値判定が行われる際に使用される閾値として、低い値(完全に一致する場合を「1」とした場合、例えば、「0.6」)を設定し、その閾値を登録情報に含めて、登録情報書込要求を記憶部518へ送信する。
さらに、登録部520は、登録情報書込要求の送信時には、その利用者について画像認証が一度も成功していないので、登録フラグを「1」として登録情報に含めて、登録情報書込要求を記憶部518へ送信する。
<ステップS209>
記憶部518は、登録情報書込要求および登録情報を受信すると、利用者情報aに対して、その登録情報を新しいレコードとして追加して記憶する。
<ステップS210>
記憶部518は、受信した登録情報を利用者情報aに追加すると、登録部520に書き込み(記憶)完了を示す応答を送信する。
<ステップS211>
登録部520は、記憶部518から応答を受信すると、登録完了の旨を表示する要求(登録完了表示要求)を、表示制御部523へ送る。
<ステップS212>
表示制御部523は、登録完了表示要求を受けると、登録完了の旨を表示させるための情報(登録完了表示情報)を表示部524へ送る。
<ステップS213>
表示部524は、受け取った登録完了表示情報を用いて、登録完了の旨を表示する。
以上のステップS201〜S213の動作によって、画像形成装置101による利用者登録処理が実行される。
なお、図9に示す利用者登録処理では、利用者により入力部522および表示部524を介して行われるものとしているが、これに限定されるものではなく、画像形成装置101とは別個の外部装置から利用者登録処理が行われるものとしてもよい。
(画像認証処理の流れ)
図12は、実施形態に係る画像形成装置の画像認証処理の一例を示すフローチャートである。図13は、実施形態に係る画像形成装置の画像認証処理において登録フラグに基づいた認証処理の詳細を示すシーケンス図である。図14は、実施形態に係る画像認証の一例について説明するための図である。図15は、実施形態に係る画像形成装置の画像認証処理で利用者の特徴情報が更新された後の利用者情報の一例を示す図である。図12〜15を参照しながら、本実施形態に係る画像形成装置101の画像認証処理の流れについて説明する。
<ステップS301>
撮像部513は、カメラ340を用いて前方の撮像範囲(例えば、図2に示す画像認証範囲203)に向かって画像を撮像し、撮像画像を取得する。このとき、取得される撮像画像の例を図14(a)に示す。図14(a)に示す撮像画像1101には、画像形成装置101の前方にいる利用者1102が含まれている。このように、カメラ340は、画像形成装置101の前方にいる利用者1102が、撮像画像1101に含まれるように設置されている。そして、ステップS302へ移行する。
<ステップS302>
特徴情報抽出部514は、撮像部513により取得された撮像画像から顔部分の画像(顔画像)を検出する。このとき、検出される顔画像の例を図14(b)に示す。特徴情報抽出部514は、例えば、カメラ340で撮像された撮像画像1101から、利用者の顔の輪郭1104、目1105、および鼻1106等のパーツを抽出し、例えば、公知のパターンマッチング技術等を用いて利用者の顔画像1103を検出する。そして、ステップS303へ移行する。
<ステップS303>
特徴情報抽出部514によって撮像画像1101から顔画像1103が検出された場合(ステップS303:Yes)、ステップS304へ移行する。一方、特徴情報抽出部514によって撮像画像1101から顔画像1103が検出されなかった場合(ステップS303:No)、画像認証処理を終了する。図12に示す処理が一度終了した場合、画像認証処理は最初から行われる。
<ステップS304>
画像認証部515は、検出された顔画像を用いて認証(画像認証)を行う。なお、画像認証の処理は、公知の様々な顔認証技術(例えば、特開2015−35178号公報参照)を適用することができる。ここで、検出された顔画像を用いた認証の動作を、図13を参照しながら、詳述する。
<<ステップS3041>>
特徴情報抽出部514は、撮像画像から検出した顔画像(例えば、図14(b)に示す顔画像1103)から、顔画像の特徴情報(利用者の特徴情報の一例)を抽出する。
<<ステップS3042>>
特徴情報抽出部514は、抽出した顔画像の特徴情報を画像認証部515へ送る。
<<ステップS3043>>
画像認証部515は、特徴情報抽出部514から顔画像の特徴情報を受け取ると、記憶部518に対して、利用者情報aに登録されている利用者の特徴情報の要求(特徴情報要求)を送信する。
<<ステップS3044>>
記憶部518は、特徴情報要求を受信すると、利用者情報aから任意のレコードの利用者の特徴情報と、それに対応する利用者番号(利用者を示す情報)と、登録フラグと、閾値と、を読み出して、画像認証部515に送信する。なお、記憶部518は、例えば、利用者情報aの先頭から順番に利用者の特徴情報、および利用者番号を読み出すものとしてもよい。
<<ステップS3045>>
画像認証部515は、抽出された利用者の顔画像の特徴情報(利用者の特徴情報)と、記憶部518から受信した利用者の特徴情報との類似度を算出する。画像認証部515が記憶部518から受信した登録フラグが「1」である場合、ステップS3046へ移行し、「0」である場合、ステップS3054へ移行する。
<<ステップS3046>>
画像認証部515は、算出した類似度が、記憶部518から受け取った閾値(第1の閾値)以上であるか否かを判定する。類似度が閾値以上である場合、ステップS3047へ移行し、閾値未満である場合、ステップS3053へ移行する。
<<ステップS3047>>
画像認証部515は、類似度が閾値以上である場合、特徴情報抽出部514により抽出された顔画像の特徴情報と、ステップS3044で、記憶部518から送信された利用者の特徴情報とが一致するものと判定する。そして、画像認証部515は、受信した利用者番号が示す利用者の撮像画像の認証を許可するために、その利用者番号、特徴情報抽出部514により抽出された顔画像の特徴情報(利用者の特徴情報)、値を「0」に設定した登録フラグ、および、記憶部518から受信した閾値(第1の閾値)より高い値に新たに設定した閾値(第2の閾値)を、更新要求と共に、更新部521へ送る。
<<ステップS3048>>
更新部521は、更新要求を受けると、記憶部518の利用者情報aにおいて、受け取った利用者番号に対応するレコードに、受け取った顔画像の特徴情報(利用者の特徴情報)、登録フラグ、および閾値を書き込む(更新する)要求(特徴情報書込要求)を、これらのデータと共に記憶部518へ送る。
<<ステップS3049>>
記憶部518は、特徴情報書込要求を受信すると、受信した利用者番号に対応する利用者情報aのレコードに対して、受信した利用者の特徴情報(第2の特徴情報)、登録フラグおよび閾値の書き込み(更新)を行う。例えば、上述の図6に示す利用者情報aにおいて、利用者番号が「101300」のレコードが更新される前のレコードであるものとする。そして、画像認証部515による閾値判定により類似度が閾値以上であると判定されると、図15に示すように、特徴情報抽出部514により抽出された顔画像の特徴情報が、新たな利用者の特徴情報として更新され、登録フラグが「1」から「0」に更新され、かつ、閾値が低い値の「0.6」から高い値の「0.8」に更新される。
<<ステップS3050>>
記憶部518は、利用者情報aに対する更新が終了すると、更新部521に書き込み(更新)完了を示す応答を送信する。
<<ステップS3051>>
更新部521は、記憶部518から書き込み(更新)完了を示す応答を受信すると、更新完了の旨を、画像認証部515に送る。
<<ステップS3052>>
画像認証部515は、更新部521から更新完了の旨を受け取ると、ステップS3041で、特徴情報抽出部514により利用者の顔画像の特徴情報が抽出された撮像画像の認証を許可する。
<<ステップS3053>>
画像認証部515は、類似度が閾値未満である場合、特徴情報抽出部514により抽出された顔画像の特徴情報と、ステップS3044で、記憶部518から送信された利用者の特徴情報とが一致しないものと判定し、特徴情報抽出部514により利用者の顔画像の特徴情報が抽出された撮像画像の認証を許可しない。
<<ステップS3054>>
画像認証部515は、算出した類似度が、記憶部518から受け取った閾値(第2の閾値)以上であるか否かを判定する。類似度が閾値以上である場合、ステップS3055へ移行し、閾値未満である場合、ステップS3056へ移行する。
<<ステップS3055>>
画像認証部515は、類似度が閾値以上である場合、特徴情報抽出部514により抽出された顔画像の特徴情報と、ステップS3044で、記憶部518から送信された利用者の特徴情報とが一致するものと判定し、特徴情報抽出部514により利用者の顔画像の特徴情報が抽出された撮像画像の認証を許可する。この場合、画像認証部515による類似度に対する閾値判定で使用される閾値は、利用者に関する情報の登録時に設定された低い値の閾値よりも高い値の閾値であり、記憶部518の利用者情報aに対して利用者の特徴情報は更新されない。
<<ステップS3056>>
画像認証部515は、類似度が閾値未満である場合、特徴情報抽出部514により抽出された顔画像の特徴情報と、ステップS3044で、記憶部518から送信された利用者の特徴情報とが一致しないものと判定し、特徴情報抽出部514により利用者の顔画像の特徴情報が抽出された撮像画像の認証を許可しない。
以上のステップS3041〜S3056により、検出された顔画像を用いた画像認証の動作が行われる。また、ステップS3043〜S3056は、類似度が閾値以上となるまで、または、利用者情報(利用者情報aおよび利用者情報A)に含まれるレコードのすべての特徴情報について類似度の閾値判定が終了するまで繰り返される。そして、図12のステップS305へ移行する。
<ステップS305>
画像認証部515による画像認証の結果、利用者の撮像画像について認証を許可する場合(認証結果が「OK」である場合)(ステップS305:Yes)、ステップS306へ移行する。一方、利用者の撮像画像について認証を許可しない場合(認証結果が「OK」でない場合)(ステップS305:No)、画像認証処理を終了する。図12に示す処理が一度終了した場合、画像認証処理は最初から行われる。
<ステップS306>
画像認証部515は、画像認証の結果を、許可部516に出力する。
以上のステップS301〜S306の動作によって、画像形成装置101による画像認証処理が実行される。
(画像形成装置の認証処理)
図16は、実施形態に係る画像形成装置の認証処理の一例を示すフローチャートである。図16を参照しながら、本実施形態に係る画像形成装置101の認証処理の流れについて説明する。なお、図16に示す認証処理の開始時点において、画像形成装置101は、電力状態制御部502によって、上述した省電力状態に制御されているものとする。
<ステップS401>
本体310の移動体検知部501により、画像形成装置101の周辺の検知範囲(例えば、図2に示すセンサ検知範囲201)内で人が検知された場合(ステップS401:Yes)、ステップS402へ移行する。移動体検知部501は、人(利用者)を検知した場合、その検知情報を、電力状態制御部502に通知する。人が検知されない場合(ステップS401:No)、移動体検知部501は、引き続き、人の検知動作を継続する。
<ステップS402>
本体310の電力状態制御部502は、本体310および操作部330の省電力状態を解除する。例えば、電力状態制御部502は、操作部330については、通信路350を介して、操作部330に復帰命令を通知することにより、操作部330を、省電力状態から通常状態へ復帰させる。これによって、図8に示す無線認証部512の無線認証処理、および図12に示す画像認証部515による画像認証処理が実行可能となる。そして、ステップS403およびS404へ移行する。
<ステップS403>
操作部330の無線通信部511および無線認証部512は、例えば、図8に示すような無線認証処理を実行する。ここで、RFIDタグ105を有する利用者106が、図2に示すセンサ検知範囲201に入って、移動体検知部501により検知された後、さらに、無線検知範囲202に入ると、無線通信部511により放射される電波により、無線通信部511とRFIDタグ105との無線通信が可能となる。
ここで、無線認証部512は、無線認証処理によりRFIDタグ105の認証を許可すると、無線認証処理の処理結果が「OK」であることを示す情報と、認証が許可されたRFIDタグ105の利用者の識別情報(例えば、図6に示す「利用者番号」)とを、許可部516に出力するものとする。一方、無線認証部512は、無線認証処理によりRFIDタグ105の認証を許可しない場合、無線認証処理の処理結果が「NG」であることを示す情報を、許可部516に出力するものとする。そして、ステップS405へ移行する。
<ステップS404>
操作部330の撮像部513、特徴情報抽出部514、画像認証部515および更新部521は、例えば、図12および13に示すような画像認証処理を実行する。ここで、画像認証部515は、画像認証処理により利用者を撮像した撮像画像の認証を許可すると、画像認証処理の処理結果が「OK」であることを示す情報と、認証が許可された撮像画像に写っている利用者の識別情報(例えば、図6に示す「利用者番号」)とを、許可部516に出力するものとする。一方、画像認証部515は、画像認証処理により利用者を撮像した撮像画像の認証を許可しない場合、画像認証処理の処理結果が「NG」であることを示す情報を、許可部516に出力するものとする。そして、ステップS405へ移行する。
<ステップS405>
許可部516は、無線認証部512および画像認証部515から出力される情報に基づいて、無線認証処理の結果が「OK」(許可)であり、かつ、画像認証処理の結果が「OK」(許可)であるか否かを判断する。無線認証処理の結果および画像認証処理の結果が、いずれも「OK」(許可)である場合(ステップS405:Yes)、ステップS406へ移行する。一方、無線認証処理の結果または画像認証処理の結果のいずれかが「OK」(許可)でない場合(ステップS405:No)、ステップS408へ移行する。
<ステップS406>
許可部516は、ステップS403で無線認証処理が「OK」になったRFIDタグ105の利用者と、ステップS404で画像認証処理が「OK」になった撮像画像に写っている利用者とが、同じ利用者であるか否かを判断する。例えば、許可部516は、無線認証部512から受け取った利用者番号と、画像認証部515から受け取った利用者番号とが一致する場合、無線認証および画像認証が許可となった利用者が同じ利用者であると判断する。無線認証および画像認証が許可となった利用者が同じ利用者である場合(ステップS406:Yes)、ステップS407へ移行し、同じ利用者でない場合(ステップS406:No)、ステップS408へ移行する。
<ステップS407>
許可部516は、無線認証および画像認証が許可となった利用者が同じ利用者であると判断した場合、その利用者の画像形成装置101へのログインを許可する。これによって、利用者は、画像形成装置101を使用することができるようになる。
<ステップS408>
電力状態制御部502は、ステップS402で本体310および操作部330の省電力状態を解除させてから(すなわち、移動体検知部501により人の検知がされてから)、所定時間(例えば、5分)が経過したか否かを判定する。また、操作部330は、上述の所定時間だけユーザ(利用者106)からの操作入力があったか否かを判定する。ユーザからの操作入力がなく所定時間が経過した場合(ステップS408:Yes)、ステップS409へ移行する。一方、ユーザからの操作入力があった場合、または、所定時間が経過していない場合(ステップS408:No)、ステップS403およびS404へ戻り、同様の処理を繰り返す。
<ステップS409>
電力状態制御部502は、本体310および操作部330を省電力状態へ移行させる。例えば、電力状態制御部502は、操作部330については、通信路350を介して、操作部330に移行命令を通知することにより、操作部330を、通常状態から省電力状態へ移行させる。
以上のステップS401〜S409の動作によって、画像形成装置101により認証処理が実行される。
以上のように、本実施形態に係る画像形成装置101では、画像認証の比較元として、カメラ(例えば、図10に示すカメラ600)で撮像した撮像画像を登録し、最初に画像認証が許可されるまでは、類似度の閾値判定に用いる閾値を低く設定し、画像認証が許可された時点で、画像形成装置101の撮像部513で撮像された撮像画像に基づく利用者の特徴情報を画像認証の新たな比較元として更新し、閾値判定に用いる閾値を、最初に設定した閾値よりも高く設定する。これによって、画像認証の比較元として最初に登録する顔画像の解像度が不十分、または、画像形成装置101の撮像部513で撮像された撮像画像とは撮像の角度が異なる、といったことがあっても、十分な認証精度を保つことができ、精度よく利用者に対して認証処理を行うことができる。
また、画像形成装置101は、いずれの認証機能も正常に機能している場合、無線認証で許可された利用者と、画像認証で許可された利用者とが同じ利用者である場合、画像形成装置101の使用を許可するものとしている。これによって、画像形成装置101は、画像認証の撮像画像に対する認証方法において、容易に認証の精度を向上させることができるようになる。
なお、次のような効果もある。一般的に、認証用の利用者情報の登録は、例えば、画像形成装置101(MFP等)の購入時、または画像形成装置101にオプションで認証手段を追加する時等に、画像形成装置101の管理者が実施する。その際、管理者は、画像およびIDを含むユーザ認証用の利用者情報を、PC等で登録用ツールを使って画像形成装置101に対して一括で登録することがある。このとき、管理者は、利用者一人一人の画像を新たに撮像するのは作業負荷が高いため、過去に撮像済みの利用者全員の画像(例えば、利用者である自社社員の入社時に撮像した写真のスキャンデータ等)を用いることが多い。この利用者情報の一括登録時には、解像度の低い画像、または、その画像を元にした特徴情報が用いられることがあるので、画像認証時の閾値が高いと、本人でも画像認証が失敗する(すなわち、認証精度が落ちる)場合がある。一方で、従来のように、閾値を低くして画像を簡単に更新できるようにすると、本人以外の者が悪意を持って更新して入れ替える虞があり、セキュリティ上問題がある。そこで、本発明によれば、初回の認証時は閾値を低く(完全一致を一致率1.0とした場合、例えば、0.6)して、画像認証を許可するが、無線認証によりセキュリティを担保しておき、登録した画像の更新後は高精度な画像認証(例えば、閾値0.8による認証)を実施する。その結果、運用上、当初解像度の低い画像を認証に用いても、認証精度を落とさず、かつ、安全に画像を更新して、画像認証を利用することができるという効果がある。
また、本体310および操作部330の省電力状態を解除させてから所定時間が経過し、かつ、利用者からの操作部330に対する操作入力がない場合、利用者による画像形成装置101の使用はされないものとして、電力状態制御部502は、本体310および操作部330を再び、省電力状態に移行させるものとしている。これによって、電力のムダな消費を抑制することができる。
(実施形態の補足)
上述の実施形態で説明した画像形成装置101の機能構成は一例であり、各機能部は、本体310に搭載されてもよいし、操作部330に搭載されてもよい。
また、上述の実施形態では、本体310および操作部330は、別々のオペレーティングシステムで、互いに独立して動作しているが、これに限定されるものではなく、例えば、本体310と操作部330とは、同じオペレーティングシステムで動作する形態であってもよい。
また、上述の実施形態において、画像形成装置101の各機能部の少なくともいずれかがプログラムの実行によって実現される場合、そのプログラムは、ROM等に予め組み込まれて提供される。また、上述の実施形態に係る画像形成装置101で実行されるプログラムは、インストール可能な形式または実行可能な形式のファイルでCD−ROM(Compact Disc Read Only Memory)、フレキシブルディスク(FD)、CD−R(Compact Disk−Recordable)、またはDVD(Digital Versatile Disc)等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。また、上述の実施形態の画像形成装置101で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、上述の実施形態の画像形成装置101で実行されるプログラムを、インターネット等のネットワーク経由で提供または配布するように構成してもよい。また、上述の実施形態の画像形成装置101で実行されるプログラムは、上述した各機能部(移動体検知部501、電力状態制御部502、画像形成部503、無線通信部511、無線認証部512、撮像部513、特徴情報抽出部514、画像認証部515、許可部516、利用者情報管理部517、登録部520、更新部521、および表示制御部523)のうち少なくともいずれかを含むモジュール構成となっており、実際のハードウェアとしてはCPU311またはCPU331が上述の記憶装置(例えば、ROM312、ROM332、ストレージ314、フラッシュメモリ334等)からプログラムを読み出して実行することにより、上述の各機能部が主記憶装置(例えば、RAM313、RAM333等)上にロードされて生成されるようになっている。
100 情報処理システム
101 画像形成装置
102 カメラ
103 RFIDタグリーダ
104 移動体センサ
105 RFIDタグ
106 利用者
201 センサ検知範囲
202 無線検知範囲
203 画像認証範囲
310 本体
311 CPU
312 ROM
313 RAM
314 ストレージ
315 通信I/F
316 接続I/F
317 エンジン部
318 移動体センサ
319 システムバス
330 操作部
331 CPU
332 ROM
333 RAM
334 フラッシュメモリ
335 通信I/F
336 操作パネル
337 接続I/F
338 外部接続I/F
339 近距離無線通信機
340 カメラ
341 システムバス
350 通信路
360 ネットワーク
411 アプリ層
412 サービス層
413 OS層
431 アプリ層
432 サービス層
433 OS層
501 移動体検知部
502 電力状態制御部
503 画像形成部
504 記憶部
505 通信部
511 無線通信部
512 無線認証部
513 撮像部
514 特徴情報抽出部
515 画像認証部
516 許可部
517 利用者情報管理部
518 記憶部
519 通信部
520 登録部
521 更新部
522 入力部
523 表示制御部
524 表示部
600 カメラ
801、802 利用者情報
1001〜1003 撮像画像
1101 撮像画像
1102 利用者
1103 顔画像
1104 輪郭
1105 目
1106 鼻
A 利用者情報
a 利用者情報
特許第4086740号公報

Claims (11)

  1. 画像形成装置であって、
    登録された利用者を撮像した画像の特徴を示す第1の特徴情報と、登録された利用者が保持する無線端末を識別する第1の識別情報と、を含む利用者情報を記憶する記憶部と、
    撮像装置を用いて認証対象となる利用者の画像を撮像する撮像部と、
    前記第1の特徴情報と、前記撮像部により撮像された前記認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、第1の閾値以上であるか否かを判定することによって、前記利用者の画像に対する第1の認証を行う第1の認証部と、
    前記第1の認証部により、前記類似度が前記第1の閾値以上であると判定されたことにより前記認証対象となる利用者の画像に対する前記第1の認証が許可された場合、前記認証対象となる利用者の画像の特徴を示す前記特徴情報を第2の特徴情報として更新し、かつ、前記第1の認証で使用される前記第1の閾値を、該第1の閾値よりも高い値の第2の閾値に更新する更新部と、
    無線端末から、該無線端末を識別する第2の識別情報を取得する無線通信部と、
    前記第2の識別情報と、前記利用者情報に含まれる前記第1の識別情報とが一致する場合、該第2の識別情報により識別される無線端末に対する第2の認証を許可する第2の認証部と、
    前記第1の認証で許可された画像に含まれる利用者と、前記第2の認証で許可された無線端末を保持する利用者とが同じ利用者である場合、該利用者に対して前記画像形成装置の利用を許可する許可部と、
    を備えた画像形成装置。
  2. 前記第1の認証部は、前記更新部によって前記第2の特徴情報および前記第2の閾値に更新された後、該第2の特徴情報と、前記撮像部により撮像された認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、前記第2の閾値以上であるか否かを判定することによって前記第1の認証を行う請求項1に記載の画像形成装置。
  3. 前記撮像部により撮像された認証対象となる利用者の画像から、該利用者の顔画像の特徴を示す前記特徴情報を抽出する抽出部を、さらに備えた請求項1または2に記載の画像形成装置。
  4. 利用者を撮像した画像の特徴を示す前記第1の特徴情報を前記利用者情報に登録する登録部を、さらに備えた請求項1〜3のいずれか一項に記載の画像形成装置。
  5. 前記記憶部は、前記利用者情報において、前記第1の特徴情報と前記第1の閾値とを関連付け、かつ、前記第2の特徴情報と前記第2の閾値とを関連付けて記憶する請求項1〜4のいずれか一項に記載の画像形成装置。
  6. 前記許可部は、前記第1の認証部により前記第1の認証が許可された画像に含まれる利用者の前記利用者情報における識別情報と、前記第2の認証部により前記第2の認証が許可された無線端末を保持する利用者の前記利用者情報における識別情報とが、同じ識別情報である場合、該利用者に対して前記画像形成装置の利用を許可する請求項1〜5のいずれか一項に記載の画像形成装置。
  7. 所定の範囲内の移動体を検知する検知部と、
    少なくとも前記検知部により前記移動体が検知されてから所定時間が経過した場合、前記画像形成装置を省電力状態に移行させる電力状態制御部を、さらに備えた請求項1〜のいずれか一項に記載の画像形成装置。
  8. プリンタ機能またはスキャナ機能を有し、
    前記撮像装置は、前記画像形成装置に接続される第1の撮像装置であり、
    前記利用者情報は、前記第1の識別情報と、前記撮像装置とは異なる第2の撮像装置で利用者を撮像した画像の特徴を示す前記第1の特徴情報とを含んで、前記記憶部に記憶され、
    前記許可部は、前記利用者情報を用いた前記第1の認証部および前記第2の認証部の認証結果に応じて、前記利用者に対して前記画像形成装置の利用を許可する請求項1〜7のいずれか一項に記載の画像形成装置。
  9. 利用者を撮像する撮像装置と、前記撮像装置を用いて利用者の認証を行う画像形成装置とを含む情報処理システムであって、
    登録された利用者を撮像した画像の特徴を示す第1の特徴情報と、登録された利用者が保持する無線端末を識別する第1の識別情報と、を含む利用者情報を記憶する記憶部と、
    前記撮像装置を用いて認証対象となる利用者の画像を撮像する撮像部と、
    前記第1の特徴情報と、前記撮像部により撮像された前記認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、第1の閾値以上であるか否かを判定することによって、前記利用者の画像に対する第1の認証を行う第1の認証部と、
    前記第1の認証部により、前記類似度が前記第1の閾値以上であると判定されたことにより前記認証対象となる利用者の画像に対する前記第1の認証が許可された場合、前記認証対象となる利用者の画像の特徴を示す前記特徴情報を第2の特徴情報として更新し、かつ、前記第1の認証で使用される前記第1の閾値を、該第1の閾値よりも高い値の第2の閾値に更新する更新部と、
    無線端末から、該無線端末を識別する第2の識別情報を取得する無線通信部と、
    前記第2の識別情報と、前記利用者情報に含まれる前記第1の識別情報とが一致する場合、該第2の識別情報により識別される無線端末に対する第2の認証を許可する第2の認証部と、
    前記第1の認証で許可された画像に含まれる利用者と、前記第2の認証で許可された無線端末を保持する利用者とが同じ利用者である場合、該利用者に対して前記画像形成装置の利用を許可する許可部と、
    を含む情報処理システム。
  10. 画像形成装置に対する利用者の認証を行う認証方法であって、
    記憶部が、登録された利用者を撮像した画像の特徴を示す第1の特徴情報と、登録された利用者が保持する無線端末を識別する第1の識別情報と、を含む利用者情報を記憶する記憶ステップと、
    撮像部が、撮像装置を用いて認証対象となる利用者の画像を撮像する撮像ステップと、
    第1の認証部が、前記第1の特徴情報と、撮像した前記認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、第1の閾値以上であるか否かを判定することによって、前記利用者の画像に対する第1の認証を行う第1の認証ステップと、
    更新部が、前記第1の認証で、前記類似度が前記第1の閾値以上であると判定したことにより前記認証対象となる利用者の画像に対する前記第1の認証を許可した場合、前記認証対象となる利用者の画像の特徴を示す前記特徴情報を第2の特徴情報として更新し、かつ、前記第1の認証で使用する前記第1の閾値を、該第1の閾値よりも高い値の第2の閾値に更新する更新ステップと、
    無銭通信部が、無線端末から、該無線端末を識別する第2の識別情報を取得する無線通信ステップと、
    第2の認証部が、前記第2の識別情報と、前記利用者情報に含まれる前記第1の識別情報とが一致する場合、該第2の識別情報により識別される無線端末に対する第2の認証を許可する第2の認証ステップと、
    許可部が、前記第1の認証で許可された画像に含まれる利用者と、前記第2の認証で許可された無線端末を保持する利用者とが同じ利用者である場合、該利用者に対して前記画像形成装置の利用を許可する許可ステップと、
    を有する認証方法。
  11. 登録された利用者を撮像した画像の特徴を示す第1の特徴情報と、登録された利用者が保持する無線端末を識別する第1の識別情報と、を含む利用者情報を記憶する記憶ステップと、
    撮像装置を用いて認証対象となる利用者の画像を撮像する撮像ステップと、
    前記第1の特徴情報と、撮像した前記認証対象となる利用者の画像の特徴を示す特徴情報との類似度が、第1の閾値以上であるか否かを判定することによって、前記利用者の画像に対する第1の認証を行う第1の認証ステップと、
    前記第1の認証で、前記類似度が前記第1の閾値以上であると判定したことにより前記認証対象となる利用者の画像に対する前記第1の認証を許可した場合、前記認証対象となる利用者の画像の特徴を示す前記特徴情報を第2の特徴情報として更新し、かつ、前記第1の認証で使用する前記第1の閾値を、該第1の閾値よりも高い値の第2の閾値に更新する更新ステップと、
    無線端末から、該無線端末を識別する第2の識別情報を取得する無線通信ステップと、
    前記第2の識別情報と、前記利用者情報に含まれる前記第1の識別情報とが一致する場合、該第2の識別情報により識別される無線端末に対する第2の認証を許可する第2の認証ステップと、
    前記第1の認証で許可された画像に含まれる利用者と、前記第2の認証で許可された無線端末を保持する利用者とが同じ利用者である場合、該利用者に対して画像形成装置の利用を許可する許可ステップと、
    をコンピュータに実行させるためのプログラム。
JP2016108857A 2016-05-31 2016-05-31 画像形成装置、情報処理システム、認証方法およびプログラム Active JP6720699B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016108857A JP6720699B2 (ja) 2016-05-31 2016-05-31 画像形成装置、情報処理システム、認証方法およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016108857A JP6720699B2 (ja) 2016-05-31 2016-05-31 画像形成装置、情報処理システム、認証方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2017215757A JP2017215757A (ja) 2017-12-07
JP6720699B2 true JP6720699B2 (ja) 2020-07-08

Family

ID=60576987

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016108857A Active JP6720699B2 (ja) 2016-05-31 2016-05-31 画像形成装置、情報処理システム、認証方法およびプログラム

Country Status (1)

Country Link
JP (1) JP6720699B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021149813A (ja) * 2020-03-23 2021-09-27 株式会社東海理化電機製作所 認証装置、コンピュータプログラム、および認証システム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5017873B2 (ja) * 2006-02-07 2012-09-05 コニカミノルタホールディングス株式会社 個人照合装置及び個人照合方法
JP2010039846A (ja) * 2008-08-06 2010-02-18 Fujitsu Ltd 認証方式制御装置、認証方式制御方法および認証方式制御プログラム
JP5390228B2 (ja) * 2009-03-24 2014-01-15 グローリー株式会社 顔画像照合装置、顔画像照合方法及び顔画像照合プログラム
JP2013186851A (ja) * 2012-03-12 2013-09-19 Panasonic Corp セキュリティを解除するための情報の入力が要求される情報処理装置及びログイン方法
JP5541407B1 (ja) * 2013-08-09 2014-07-09 富士ゼロックス株式会社 画像処理装置及びプログラム
JP2015208909A (ja) * 2014-04-25 2015-11-24 株式会社リコー 画像形成装置、電力状態遷移方法

Also Published As

Publication number Publication date
JP2017215757A (ja) 2017-12-07

Similar Documents

Publication Publication Date Title
JP6780297B2 (ja) 情報処理装置、画像形成装置、情報処理システム、プログラム、及び認証方法
US10325082B2 (en) Information processing apparatus, information processing system, authentication method, and recording medium
JP6561710B2 (ja) 情報処理装置、情報処理システム、認証方法、及びプログラム
US20170155800A1 (en) Communication apparatus, recording medium, and communication system
US10091395B2 (en) Image forming apparatus, method, and computer-readable recording medium for login and logout management based on multiple user authentication factors
US10650036B2 (en) Information processing apparatus, information processing system, and information processing method
US10009769B2 (en) Information processing apparatus, information processing system, method for authentication, and medium
US10057461B2 (en) Authentication system, image forming apparatus, terminal apparatus, and authentication method
KR102752211B1 (ko) 근접 필드 통신 카드의 복제를 위한 방법 및 그 전자 장치
US9986131B2 (en) Image processing system, image output apparatus, and a terminal, including an output method, and non-transitory recording medium storing computer readable program for causing the terminal worn by a user to obtain a physical feature of the user
JP6825503B2 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP6759621B2 (ja) 情報処理システム、情報処理装置、認証方法およびプログラム
JP2018007036A (ja) 画像処理装置、画像処理システム、画像処理方法およびプログラム
JP2017199179A (ja) 情報処理装置、情報処理システム、認証方法およびプログラム
JP6880620B2 (ja) 情報処理装置、情報処理システム、認証方法およびプログラム
JP6720699B2 (ja) 画像形成装置、情報処理システム、認証方法およびプログラム
JP2017107172A (ja) 画像形成装置、画像形成システム、認証方法およびプログラム
JP2017117119A (ja) 情報処理装置、情報処理システム、認証方法およびプログラム
EP3203369B1 (en) Image forming apparatus, print control method, and computer-readable recording medium encoded with print control program
JP2016218672A (ja) 情報処理装置及び情報処理方法
JP6840995B2 (ja) 情報処理装置、情報処理システム、プログラム、及び認証方法
JP6728807B2 (ja) 情報処理装置、情報処理システム、認証方法、及びプログラム
US10230871B2 (en) Information processing apparatus, conference support method, and recording medium
US12028706B2 (en) Information processing apparatus and non-transitory computer readable medium
JP7031140B2 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190208

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200601

R151 Written notification of patent or utility model registration

Ref document number: 6720699

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151