JP7646544B2 - 操作者状態判断システム - Google Patents

Description

この発明は、操作対象装置（例えば自動車）を操作（例えば運転）する操作者（例えば運転者）が、操作をするのに不適切な状態になっているかどうかを判断する操作者状態判断システムに関する。

例えば、自動車の運転中に交通事故を起こすと、最悪の場合には人命に関わる事態を引き起こすので、自動車の運転は安全が第１である。自動車の運転が長時間にわたると、運転者に肉体的、精神的な疲労が蓄積し、運転操作における反応速度が低下して、事故発生確率が高くなる恐れがある。また、自動車を運転中の運転者の急な体調（体の調子）の変化によっても、事故発生確率が高くなる恐れがある。

そこで、業務として乗客を乗せて走る例えばバスやタクシー、あるいは依頼された荷物を搬送するトラックなどのように、自動車を業務用として利用する企業では、運転者の健康状態や体調に気を配って、安全運転が維持できるようにする努力している。

例えば運転者に生体センサを装着してもらい、管理センターで、この生体センサからの運転者の生体情報、例えば心拍、体温、発汗などを収集して監視し、これにより運転者の体調の変化を認識することで、事故を未然に防ぐようにすることが提案されている（例えば特許文献１（特開２０１７－２１７３３３号公報）等参照）。

特開２０１７－２１７３３３号公報

しかしながら、交通事故の人為的な発生原因としては、運転者の体調だけでなく、運転者の心的状態（精神作用状態）としての気分や感情も影響することは良く知られている。例えば運転者がイライラしている、怒っている、などの心的状態（感情状態）のときには、交通事故を生じ易い傾向にあるとされている。そして、実際上は、運転者の体調の変化に起因する交通事故よりも、運転者の心的状態に基づく交通事故が起きやすいことも報告されている。

運転者の感情状態は、生体情報として現れる場合もあるが、当該生体情報からその心的状態（感情状態）を把握することは、非常に困難である。そのため、従来のような運転者などの操作者の生体情報のみを監視するだけでは、心的状態を把握できないので、交通事故などの不測の事態を効果的に回避することが困難であるという問題がある。

この発明は、以上の問題点を解決することができるようにした操作者状態判断システムを提供することを目的とする。

上記の課題を解決するために、
操作対象装置を操作する操作者が、前記操作をするのに不適切な状態になっているかどうかを判断するための情報を収集する情報収集装置と、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する判断装置とを備える操作者状態判断システムであって、
前記情報収集装置は、
前記操作者に装着されて前記操作者の生体情報を取得する生体情報取得手段と、
前記操作者による筆記入力を受け付けて、筆記入力に対応する筆記軌跡情報を取得する筆記軌跡情報取得手段と、
前記生体情報取得手段で取得した前記生体情報と、前記筆記軌跡情報取得手段で取得した前記筆記軌跡情報とを前記判断装置に送信する送信手段と、
を備え、
前記判断装置は、
前記情報収集装置から送信されてくる前記生体情報と前記筆記軌跡情報とを受信する受信手段と、
前記受信手段で受信した前記生体情報に基づいて前記操作者の体調について判断する第１の判断手段と、
前記受信手段で受信した前記筆記軌跡情報に基づいて前記操作者の心的状態について判断する第２の判断手段と、
前記第１の判断手段の判断結果及び前記第２の判断手段の判断結果に基づいて、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する状態判断手段と、
る状態判断手段と、
を備えることを特徴とする操作者状態判断システムを提供する。

上述の構成の操作者状態判断システムにおいては、操作者による筆記入力を受け付けて、筆記入力に対応する筆記軌跡情報を取得する筆記軌跡情報取得手段を備えている。人は、筆記入力をする際には、その時の心的状態（感情状態）に応じた筆記軌跡を描くことが知られている。例えば、イライラしていたり、怒っていたりしているときには、その心的状態（感情状態）が筆記軌跡に現れる。したがって、操作者の筆記軌跡情報から、操作者の心的状態（感情状態）を把握することができる。

つまり、判断装置は、生体情報から操作者の体調の変化を把握することができると共に、筆記軌跡情報から、操作者の心的状態（感情状態）を把握することができるので、両者の把握結果から、操作者、例えば運転者が、操作対象装置、例えば自動車を操作、例えば運転するのに不適切な状態になっているかどうかを判断することができる。

よって、この判断装置の判断結果を用いて、操作者にアラームを発したり、操作対象装置の操作をできないように、当該操作対象装置を停止制御したりすることができる。

この発明による操作者状態判断システムの第１の実施形態の構成例の概要を説明するための図である。 第１の実施形態の操作者状態判断システムを構成するタブレット端末及び電子ペンの構成例を説明するための図である。 第１の実施形態の操作者状態判断システムを構成するタブレット端末の構成例を説明するための分解斜視図である。 第１の実施形態の操作者状態判断システムを構成するタブレット端末及び電子ペンの構成例の電気的構成例を示す図である。 第１の実施形態の操作者状態判断システムを構成する管理サーバ装置の構成例を示す図である。 図５の例の管理サーバ装置の構成例の説明に用いる図である。 図５の例の管理サーバ装置の構成例の説明に用いる図である。 第１の実施形態の操作者状態判断システムを構成する感情サーバ装置の構成例を示す図である。 図８の例の感情サーバ装置の構成例の説明に用いる図である。 図８の例の感情サーバ装置の構成例の説明に用いる図である。 第１の実施形態の操作者状態判断システムを構成するタブレット端末の構成例の処理動作例を説明するためのフローチャートの一部を示す図である。 第１の実施形態の操作者状態判断システムを構成するタブレット端末の構成例の処理動作例を説明するためのフローチャートの一部を示す図である。 図５の例の管理サーバ装置の構成例の処理動作例を説明するためのフローチャートの一部を示す図である。 図５の例の管理サーバ装置の構成例の処理動作例を説明するためのフローチャートの一部を示す図である。 この発明による操作者状態判断システムの第２の実施形態の構成例の概要を説明するための図である。 第２の実施形態の操作者状態判断システムを構成する自動車用装置の構成例を示す図である。 図１６の例の自動車用装置の構成例の処理動作例を説明するためのフローチャートを示す図である。

以下、この発明による操作者状態判断システムの実施形態を、図を参照しながら説明する。

［第１の実施形態］
＜第１の実施形態の操作者状態判断システムの概要＞
図１は、この発明による操作者状態判断システムの第１の実施形態の概要を説明するための図である。以下に説明する第１の実施形態の操作者状態判断システムは、操作対象装置がタクシーとして用いられる自動車の場合であって、タクシー会社が、操作者の例としてのタクシー運転手（以下運転者という）の状態を管理するために用いる場合の例である。

図１に示すように、この第１の実施形態の操作者状態判断システムは、タクシーとして用いられるｎ（ｎ＝１，２，・・・）台の自動車１₁～１_nのそれぞれを操作する操作者としてのｎ人の運転者２₁～２_nのそれぞれに対して設けられるｎ個の情報収集装置３₁～３_nのそれぞれと、タクシー会社が運営するサーバ装置からなる判断装置４とが、通信ネットワーク５を通じて、無線通信により接続されるように構成されている。この例では、自動車１₁～１_nのそれぞれも、判断装置４と通信ネットワーク５を通じて無線通信により接続され、判断装置４からの制御を受けることができるように構成されている。

この第１の実施形態の操作者状態判断システムでは、運転者２₁～２_nのそれぞれの心拍や体温などの生体情報を、当該運転者２₁～２_nのそれぞれに装着した生体情報の取得手段から収集すると共に、運転者２₁～２_nのそれぞれは、運行日誌を作成することを利用して、その運行日誌の筆記軌跡情報を電子データとして収集し、それら収集した生体情報と、筆記軌跡情報とに基づいて、運転者２₁～２_nのそれぞれの体調及び感情に関する状態を判断して管理するようにする。

この実施形態では、運転者２₁～２_nのそれぞれは、乗客にタクシーサービスを提供する毎に、運行日誌に、そのサービス内容を筆記入力して記録し、その記録した運行日誌の筆記軌跡情報を、運転者の生体情報と共に、タクシー会社が運営するサーバ装置からなる判断装置４に送信するようにする。

情報収集装置３₁～３_nは、この例では、運転者２₁、・・・、２_nのそれぞれに割り当てられるタブレット端末１０₁～１０_nのそれぞれと、電子ペン２０₁、・・・、２０_nのそれぞれと、スマートウォッチ３０₁～３０_nのそれぞれとから構成されている。タブレット端末１０₁～１０_nは、同様の構成を有するものであり、また、電子ペン２０₁、・・・、２０_nも、同様の構成を有するものであり、スマートウォッチ３０₁～３０_nも同様の構成を有するものである。タブレット端末１０₁～１０_nのそれぞれと、電子ペン２０₁、・・・、２０_nのそれぞれとのペアは、筆記軌跡情報取得手段のそれぞれの例を構成する機能手段を備える。また、スマートウォッチ３０₁～３０_nのそれぞれは、生体情報取得手段の例を構成する機能手段を備える。

なお、以下の説明において、ｎ（ｎ＝１，２，・・・）台の自動車１₁～１_nのそれぞれ、ｎ人の運転者２₁～２_nのそれぞれ、ｎ個の情報収集装置３₁～３_nのそれぞれ、を区別する必要がないときには、説明の便宜上、それぞれ、自動車１、運転者２、情報収集装置３と記すこととする。また、ｎ個のタブレット端末１０₁～１０_n、ｎ本の電子ペン２０₁、・・・、２０_n、また、ｎ個のスマートウォッチ３０₁～３０_nは、それぞれ同様の構成を有するので、それぞれを区別する必要がないときには、説明の便宜上、それぞれ、タブレット端末１０、電子ペン２０、スマートウォッチ３０と記すこととする。

スマートウォッチ３０は、運転者２の腕に、腕時計のように装着されて、運転者２の、この例では、心拍、体温、発汗、血圧などの生体情報を検出する機能を備えている。検出された生体情報には、検出時刻の情報が含まれている。そして、スマートウォッチ３０は、この例では、検出した生体情報をタブレット端末１０に伝達するために、例えばブルートゥース（登録商標）規格の近距離無線通信部を備えている。

タブレット端末１０は、この例では、スマートウォッチ３０と通信するための、ブルートゥース（登録商標）規格の無線通信部が設けられており、スマートウォッチ３０からの運転者２のそれぞれの生体情報を受信して取得するようにする。

そして、タブレット端末１０は、この例では、電磁誘導結合により電子ペン２０とインタラクションを行うことで、電子ペン２０による指示位置を検出する位置検出装置部１００（後述の図２、図３参照）を備える。

この例では、タクシーの運転者２は、電子ペン２０を用いて、タブレット端末１０に対して筆記入力をすることで運行日誌を作成する。タブレット端末１０は、電子ペン２０による筆記入力を検出して、電子データとしての運行日誌の筆記軌跡情報を生成して取得する。

さらに、タブレット端末１０は、この例では、通信ネットワーク５を通じて判断装置４と無線通信する無線通信部を備える。そして、タブレット端末１０は、取得した運行日誌の筆記軌跡情報と、スマートウォッチ３０から取得した運転者２の生体情報とを、後述するように、運転者２を識別する識別情報を付加して、通信ネットワーク５を通じて判断装置４に送信する。

判断装置４は、図１に示すように、この実施形態では、管理サーバ装置４０と、感情サーバ装置５０とからなる。管理サーバ装置４０は、タブレット端末１０のそれぞれからの運行日誌の筆記軌跡情報と、運転者２のそれぞれの生体情報とを受信する。

管理サーバ装置４０は、後述するように、生体情報データベースを備えており、受信した運転者２のそれぞれの生体情報を、生体情報データベースの格納データを用いて解析することで、運転者２のそれぞれの体調をチェックし、自動車１の運転を行うことに関し、運転者２のそれぞれの体調が、不適切な状態になっているかどうかを判断する。そして、管理サーバ装置４０は、自動車１の運転を行うことに関し、体調が不適切な状態になっていると判断した運転者２のそれぞれに対しては、アラームを送信して、自動車１のそれぞれの運転を休止、あるいは停止させるように促す。

また、管理サーバ装置４０は、このアラーム送信と共に、運転を行うことが不適切な体調状態になっている運転者２の運転の対象となっている自動車１に対して、強制的に走行を一時停止、あるいは中止させるように遠隔制御する制御情報を送るようにする。例えば、管理サーバ装置４０は、所定時間の運転者の休息で運転者の体調が戻る場合には一時停止させる（当日の再運転可）、休息しても体調が戻らないと判断したときには中止（当日の再運転不可）させる、などのように制御することもできる。

また、管理サーバ装置４０は、受信した運行日誌の筆記軌跡情報を蓄積すると共に、この運行日誌に含まれる特定パターンの筆記軌跡情報を抽出して、運行日誌を作成した運転者２の気分や感情の心的変化を検出し、その心的変化に基づいて、運転者２が運転を行うことが不適切な心的状態になっているかどうかを判断する。この実施形態では、運行日誌には、運転者２が自身の氏名を自筆で署名をするように定められており、その署名が、運転者２の心的変化を把握するための特定パターンとして用いられる。

このため、この実施形態では、管理サーバ装置４０には、運転者２のそれぞれが、リラックス状態あるいは集中状態など、自動車の運転に適切である心的状態のときに、自身の氏名を電子ペンを用いて自署したときにタブレット端末で検出されて取得された筆記軌跡情報が、比較参照用情報（正常時情報）として登録されていて、それが特定パターン筆記軌跡情報データベースとして格納されている。

なお、特定パターンの例としては、この実施形態のような運転者の氏名の署名に限られるものではなく、予め定められた筆記パターンであれば、どのような筆記パターンであってもよい。また、運行日誌の筆記軌跡情報の全部を、特定パターンとするようにしても、勿論よい。

管理サーバ装置４０は、受信した運転者２の運行日誌の筆記軌跡情報中の特定パターンである署名の筆記軌跡情報を、特定パターン筆記軌跡情報データベースの格納データを用いて解析することで、運転者２の心的状態が、自動車の運転に適切である心的状態から、不適切な心的状態に変化していないかどうかをチェックする。

この場合に、この実施形態では、管理サーバ装置４０は、感情サーバ装置５０と連携することで、運転者２の心的状態に変化が生じているかどうかだけでなく、その変化している心的状態がどのような感情状態であるかの把握ができるように工夫している。すなわち、後述するように、感情サーバ装置５０は、リラックス、集中状態、イライラ状態、怒り状態などの感情状態と、それぞれの感情状態のときの筆記軌跡情報とを対応付けて格納する感情推定用データベースを備える。

この実施形態では、管理サーバ装置４０は、特定パターンである署名の筆記軌跡情報を含めた感情状態推定要求を感情サーバ装置５０に送る。感情サーバ装置５０は、この感情状態推定要求を受け取ると、それに含まれる署名の筆記軌跡情報と、感情推定用データベースの情報とを用いて、受け取った署名の筆記軌跡情報のときの感情状態の推定結果を管理サーバ装置４０に返信する。なお、管理サーバ装置４０から、特定パターンである署名の筆記軌跡情報のみを感情サーバ装置５０に送るのではなく、運行日誌の筆記軌跡情報の情報を送るようにして、感情サーバ装置５０で感情状態の推定を行うように構成しても勿論よい。

管理サーバ装置４０は、特定パターンである署名の筆記軌跡情報と、特定パターン筆記軌跡情報データベースの格納データとを用いた解析結果と、感情サーバ装置５０から取得した推定された感情状態とから、運転者２の心的状態が、自動車１の運転に適切である心的状態から、不適切な心的状態に変化したかどうかを判断する。

そして、管理サーバ装置４０は、運転者２の生体情報に基づく体調についての判断結果が、自動車１の運転を行うことに関し、不適切な状態になっていないと判断した場合であっても、特定パターンである署名の筆記軌跡情報に基づく心的状態についての判断結果が、自動車１の運転を行うことに関し、不適切な状態になっていると判断した運転者２に対しては、アラームを送信して、自動車１の運転を休止、あるいは停止させるように促す。さらに、管理サーバ装置４０は、このアラーム送信と共に、運転を行うことが不適切な心的状態になっている運転者２の運転の対象となっている自動車１に対して、強制的に走行を一時停止、あるいは中止させるように遠隔制御する制御情報を送るようにする。

次に、以上のように構成される操作者状態判断システムの各構成要素の、より詳細な構成例について説明する。

＜タブレット端末１０及び電子ペン２０の構成例＞
この実施形態では、運行日誌は、所定の用紙（運行日誌用紙）に筆記入力されることで、用紙に記録保存されると共に、その筆記軌跡の電子データである筆記軌跡情報を、タブレット端末１０の位置検出部の機能を用いて取得して保持することができるように構成されている。

このため、この例では、タブレット端末１０は、位置検出部の位置検出センサ上に用紙を載置した状態で係止させることができるように構成されている。そして、電子ペン２０は、筆記文具として用紙に印字することができる機能、この例ではボールペンの機能を備えるように構成されている。

図２及び図３は、この第１の実施形態におけるタブレット端末１０のハードウエア構成例を、電子ペン２０の構成例と共に示すものである。図２は、この例のタブレット端末１０の外観及び電子ペン２０を説明するための図であり、また、図３は、タブレット端末１０のハードウエア構成例を説明するための分解構成図である。

図２に示すように、この実施形態のタブレット端末１０は、電子ペン２０による指示入力面（位置検出センサの検出領域）を用紙の載置面１０ｓとしている。そして、この例のタブレット端末１０は、載置面１０ｓの上端部に、運行日誌用紙６を挟持してタブレット端末１０の指示入力面である載置面１０ｓ上に固定するクリップ部材１１を備え、バインダーなどと呼ばれて広く利用されている文房具と同様の外観を有する。

この実施形態においては、載置面１０ｓの裏面側であるタブレット端末１０の内部には、電磁誘導方式の位置検出装置部１００が搭載されている。図３に示すように、位置検出装置部１００は、位置検出センサ１１０と、座標データ生成部１２０と、コントローラ部１３０とで構成される。

図３に示すように、タブレット端末１０は、指示入力面となる載置面１０ｓ側を上側として、上から順番に、上部カバー（上板）１２（図３（Ａ））と、電子ペン２０と電磁誘導結合によりインタラクションするための位置検出センサ１１０（図３（Ｂ））と、シールドシート１３（図３（Ｃ））と、センサカバー１４（図３（Ｄ））とを備える。そして、図３（Ｃ）に示すように、シールドシート１３の下側には、シールドシート１３を挟んで位置検出センサ１１０と接続される座標データ生成部１２０とコントローラ部１３０とが設けられる。

座標データ生成部１２０は、位置検出センサ１１０からの出力に基づいて、電子ペン２０による指示位置の座標データを検出すると共に、筆圧データ及びペンＩＤを受信して取得する。

コントローラ部１３０は、座標データ生成部１２０に接続されており、座標データ生成部１２０で検出された座標データと共に、筆圧データ及びペンＩＤを、通信ネットワーク５を通じて判断装置４の管理サーバ装置４０に送信する機能を有する。

また、コントローラ部１３０は、スマートウォッチ３０と無線通信するための近距離無線通信部を含み、スマートウォッチ３０から送られてくる生体情報を受信して、電子ペン２０による指示位置の座標データ、筆圧データ及びペンＩＤと共に、判断装置４の管理サーバ装置４０に通信ネットワーク５を通じて送信する機能を備える。そして、コントローラ部１３０の無線通信部に対して送信アンテナＡＴが設けられている。

上部カバー１２は、電子ペン２０から送信された信号（電波）を透過させる素材、例えば合成樹脂、ガラスやセラミックなどにより形成される。この上部カバー１２の外部に露呈する面側が、位置検出装置部１００の指示入力面を兼用する載置面１０ｓとなる。

センサカバー１４は、合成樹脂や金属などにより形成され、上面は開口部となっている薄い箱型に構成される。このセンサカバー１４内に位置検出センサ１１０、座標データ生成部１２０．コントローラ部１３０、シールドシート１３が収納される。

この例では、センサカバー１４の壁部が、載置面１０ｓの周囲に突出して、運行日誌用紙６の位置規制部材として働くように構成されている。すなわち、用紙を載置面１０ｓに載置したときには、センサカバー１４の壁部により運行日誌用紙６の載置位置が規制される。

クリップ部材１１は、板状体の構成部品とバネ部材とで構成されており、運行日誌用紙６を弾性的に載置面１０ｓに押圧することで挟持するように構成されている。この実施形態においては、運行日誌用紙６には、予め定められた欄に定められた事項が記入されるようにされたペーパーフォームが印刷されている。

したがって、運行日誌用紙６が載置面１０ｓに位置規制されて載置された状態でクリップ部材１１により載置面１０ｓ上に押圧挟持されて係止させられた状態では、運行日誌用紙６は、タブレット端末１０の位置検出装置部１００の位置検出センサ１１０の指示入力領域と合致するような状態になる。そして、運行日誌用紙６に印刷されているペーパーフォームの各欄は、位置検出センサ１１０のそれぞれ定まった座標範囲位置に収まるように状態となる。したがって、運行日誌用紙６に印刷されているペーパーフォームに形成されている運転者の署名欄６ａへの署名の筆記入力は、位置検出装置部１００で検出された座標データ出力情報の中から、署名欄６ａ内の座標データとして区別して認識可能となる。

この実施形態のタブレット端末１０は、図示を省略したが、充電式のバッテリーを備えており、電源ボタン１５がオンとされることで、バッテリーから駆動電圧が供給される。また、タブレット端末１０には、図２及び図３に示すように、運転者が電子ペン２０を用いて運行日誌の筆記入力を完了したときに押下される終了ボタン１６が設けられている。この終了ボタン１６の押下は、筆記入力された運行日誌の筆記軌跡情報を、管理サーバ装置４０に送信するトリガーとされている。

なお、この実施形態のタブレット端末１０のクリップ部材１１には、インジケータ１１ａ～１１ｃ及びスピーカ１１ｓｐが設けられている。この実施形態では、図２及び図３に示すように、終了ボタン１６と、インジケータ１１ａ～１１ｃと、スピーカ１１ｓｐとは、クリップ部材１１の板状体の構成部品に設けられている。インジケータ１１ａ～１１ｃは、この例では、ＬＥＤ（Light Emitting Diode）で構成されている。

インジケータ１１ａは、電源の投入状態の報知用である。インジケータ１１ｂは、タブレット端末１０と管理サーバ装置４０との間の無線接続の状態の報知用である。インジケータ１１ｃは、載置面１０ｓに載置された運行日誌用紙６が載置面１０ｓに正しく載置されているかどうかの確認用である。スピーカ１１ｓｐは、種々の状態をアラーム音声により利用者に報知するためのもので、前述のインジケータ１１ａ～１１ｃによる報知と併用される場合もある。

また、タブレット端末１０のクリップ部材１１の板状体の裏側には、運行日誌用紙６がクリップ部材１１により挟持されて係止されている状態であるか否かを検知する用紙装着センサ１１ｓが設けられている。

図３に示すように、電源ボタン１５や終了ボタン１６、インジケータ１１ａ～１１ｃ、スピーカ１１ｓｐ及び用紙装着センサ１１ｓは、接続用コネクタＣＮを通じてコントローラ部１３０に接続されている。

この実施形態の電子ペン２０は、図２に示すように、筆記用インクが充填された芯体２１と、当該芯体２１の端部に設けられたチップ部（ペン先）２２とを有することにより用紙６に視認可能に筆跡を残すことができる機能として、この例では、ボールペン機能を有する。

電子ペン２０は、この実施形態では、電磁誘導方式でタブレット端末１０の位置検出センサ１１０と信号を授受することで、その指示位置をタブレット端末１０の位置検出装置部１００で検出させるようにする。この実施形態の電子ペン２０の機械的な構成は、芯体２１がボールペン機能を有する点を除けば、公知の電磁誘導方式の電子ペンの構成を用いることができるので、ここでは、その機械的な構成については図示を省略する。

また、この実施形態の電子ペン２０は、ペン先に印加される筆圧を検出する筆圧検出部を備え、検出した筆圧の情報を、タブレット端末１０に伝達する手段を備えている。この筆圧検出部は、図示は省略するが、この例では、例えば、特開２０１３－１６１３０７号公報に開示されているような筆圧に応じて静電容量を可変とする半導体素子を用いた構成としている。なお、筆圧検出部は、例えば特許文献：特開２０１１－１８６８０３号公報に記載されている周知の機構的な構成の筆圧検出手段を使用した、筆圧に応じて静電容量が変化する可変容量キャパシタの構成とすることもできる。

また、この実施形態では、電子ペン２０は、固有の識別情報（ペンＩＤという）を記憶するペンＩＤメモリ備えると共に、タブレット端末１０に、ペンＩＤを伝達する手段を備えている。

そして、この例では、電子ペン２０からの筆圧の情報とペンＩＤとは、電磁誘導結合によるインタラクションを通じて、後述するようにしてＡＳＫ変調信号として、タブレット端末１０に伝達されるように構成されている。なお、電子ペン２０からの筆圧の情報とペンＩＤとは、電磁誘導結合によるインタラクションではなく、例えばブルートゥース（登録商標）規格の近距離無線通信手段を用いることで、無線送信するように構成することもできる。

この実施形態では、運転者２₁、・・・、２_nのそれぞれは、自分用の電子ペン２０₁、・・・、２０_nのそれぞれを使用するように構成されているので、電子ペン２０₁、・・・、２０_nのそれぞれのペンＩＤは、運転者２₁、・・・、２_nのそれぞれの識別情報としての役割をも果たすことになる。

＜タブレット端末１０の位置検出装置部１００及び電子ペン２０の電子回路構成例＞
図４は、電子ペン２０が備える電子回路の等価回路と、この電子ペン２０と電磁誘導方式により位置検出及び筆圧検出を行うタブレット端末１０の位置検出装置部１００の回路構成例を示す図である。

この図４の例のタブレット端末１０の位置検出装置部１００は、位置検出センサ１１０と座標データ生成部１２０とコントローラ部１３０とを備えている。位置検出センサ１１０においては、Ｘ軸方向ループコイル群１１１と、Ｙ軸方向ループコイル群１１２とが積層されて形成されていると共に、２つのループコイル群１１１，１１２のうちの一のループコイルを順次選択する選択回路１１３が設けられている。

電子ペン２０は、ＩＣ２００で構成される信号制御回路を備えていると共に、このＩＣ２００を駆動するための駆動電圧を、タブレット端末１０の位置検出装置部１００の位置検出センサ１１０に備えられた励磁コイル１１４から送信された励磁信号から取得するように構成されている。なお、図４では、一例として、位置検出センサ１１０のループコイル群１１１，１１２は電子ペン２０からの電磁結合信号の受信にのみ用いられるものとして説明するが、電子ペン２０との間で電磁結合することで、励磁コイル１１４に代えて電子ペン２０に備えられた信号制御回路を駆動することを排除するものではない。また、電子ペン２０に備えられた信号制御回路に対して所定の制御データなどの信号を送信することを排除するものでもない。

この図４の例のタブレット端末１０の位置検出装置部１００の位置検出センサ１１０においては、Ｘ軸方向ループコイル群１１１と、Ｙ軸方向ループコイル群１１２とを取り囲むようにして、励磁コイル１１４が配設されている。図４に示すように、励磁コイル１１４は、ドライブ回路１２２に接続され、ドライブ回路１２２は、周波数ｆｏで発振する発振回路１２１に接続されている。

ドライブ回路１２２は、マイクロコンピュータで構成される処理制御部１２８により制御される。処理制御部１２８は、ドライブ回路１２２を制御して、発振回路１２１からの周波数ｆｏの発振信号の、励磁コイル１１４への供給を制御して、励磁コイル１１４からの電子ペン２０への信号送信を制御する。

選択回路１１３は、処理制御部１２８により選択制御されて一つのループコイルを選択する。この選択回路１１３により選択されたループコイルに発生する誘導電圧は、受信アンプ１２３にて増幅され、バンドパスフィルタ１２４に供給され、周波数ｆｏの成分のみが抽出される。バンドパスフィルタ１２４は、その抽出した成分を検波回路１２５に供給する。

検波回路１２５は、周波数ｆｏの成分を検出し、その検出した周波数ｆｏの成分に応じた直流信号をサンプルホールド回路１２６に供給する。サンプルホールド回路１２６は、検波回路１２５の出力信号の所定のタイミング、具体的には受信期間中の所定のタイミングにおける電圧値を保持し、ＡＤ変換回路１２７へ送出する。ＡＤ変換回路１２７は、サンプルホールド回路１２６のアナログ出力をデジタル信号に変換し、処理制御部１２８に出力する。処理制御部１２８は、前記所定のタイミングの信号をサンプルホールド回路１２６に供給する。

そして、処理制御部１２８は、ＡＤ変換回路１２７からのデジタル信号が所定のスレッショールド値を超えた値であるか否かを判定して、選択回路１１３で選択されているループコイルが電子ペン２０で位置指示された位置のループコイルであるか否かを判定し、その判定に基づいて電子ペン２０による指示位置を検出する。なお、処理制御部１２８は、時計機能を備えており、検出した電子ペンによる指示位置の情報には、その検出時点の時刻情報が含まれている。したがって、電子ペンによる指示位置の情報の連続からなる筆記軌跡の情報には、時間変化の情報も含まれていることになり、筆記軌跡の形成速度が検出可能である。

処理制御部１２８は、また、後述するように、電子ペン２０による指示位置の検出とは別に、電子ペン２０からの信号の断続を、数ビットのデジタル信号として検出して、筆圧を検出すると共に、ペンＩＤを検出するようにする。

また、この例では、タブレット端末１０の位置検出装置部１００は、図示は省略するが、電子ペン２０の傾きと、電子ペン２０の高さ位置とを検出する機能を備えている。ここで、電子ペン２０の傾きとは、位置検出センサ１１０の入力面に対する電子ペン２０の傾きである。また、電子ペン２０の高さ位置とは、位置検出センサ１１０の入力面からの高さ位置である。電子ペン２０の傾きや高さ位置は、公知の手法を用いることで検出可能であるので、その検出手法の説明については、ここでは省略する。

タブレット端末１０は、以上説明した、検出した電子ペン２０の指示位置の情報と、筆圧情報と、傾きの情報と、高さ位置の情報とに時刻情報が加えられた情報からなる筆記軌跡情報を、ペンＩＤに対応付けて、コントローラ部１３０に供給する。

コントローラ部１３０は、受け取った筆記軌跡情報を、送信情報生成部１３１に一時記憶する。また、コントローラ部１３０は、スマートウォッチ３０からの運転者の心拍や体温などの生体情報を近距離無線通信部１３２で受信し、送信情報生成部１３１に供給して一時記憶する。

図４に示すように、スマートウォッチ３０には、コントローラ部１３０の近距離無線通信部１３２と通信を行う近距離無線通信部３０Ｔが設けられている。コントローラ部１３０の送信情報生成部１３１は、筆記軌跡情報と生体情報とに、ペンＩＤを対応付けたものとして送信情報を生成する。

そして、コントローラ部１３０は、送信情報生成部１３１に一時記憶した筆記軌跡情報と生体情報とにペンＩＤを対応付けた情報を無線通信部１３３を通じて管理サーバ装置４０宛に送信するようにする。

電子ペン２０の回路構成は、図４において点線で囲んで示すようなものとなっている。ただし、この図４の例では、電子ペン２０の傾きを位置検出装置部１００で検出するための回路部分については、省略されている。

すなわち、図４の例の電子ペン２０においては、コイル２０１に並列にキャパシタ２０２が接続されて、共振回路２０３が構成されている。そして、この共振回路２０３に並列に、スイッチ回路２０４が接続されている。このスイッチ回路２０４は、ＩＣ２００によりオン・オフ制御されるように構成されている。このスイッチ回路２０４がオフのときには、共振回路２０３による位置検出センサ１１０からの信号（励磁コイル１１４からの交流信号）に対する共振動作がなされる。しかし、スイッチ回路２０４がオンのときには、コイル２０１に並列に接続されているキャパシタ２０２が短絡されて、共振回路２０３による位置検出センサ１１０からの信号に対する共振動作がオフとなる。

そして、ＩＣ２００は、共振回路２０３にてタブレット端末１０の位置検出装置部１００の位置検出センサ１１０から電磁誘導により受信した交流信号を、ダイオード２０５及びキャパシタ２０６からなる整流回路（電源供給回路）２０７にて整流して得られる電源電圧Ｖｃｃにより動作するように構成されている。ＩＣ２００は、共振回路２０３とはキャパシタ２０８を介して接続されており、共振回路２０３の動作状況をモニターしている。ＩＣ２００は、共振回路２０３の動作状況をモニターすることで、位置検出センサ１１０の励磁コイル１１４との電磁結合状況、あるいは、この例では説明を省略するが、２つのループコイル群１１１，１１２を使用して位置検出装置部１００の位置検出センサ１１０から送信された制御データなどの信号を検出し、所望の動作制御を行うことができるようになっている。

ＩＣ２００には、図４に示すように、筆圧検出部により構成される容量可変キャパシタＣｖが接続されている。ＩＣ２００は、容量可変キャパシタＣｖの静電容量の値から電子ペン２０の先端２０Ｔに印加される筆圧を検出する。そして、ＩＣ２００は、検出した筆圧を、複数ビットのデジタル信号に変換し、その筆圧に対応するデジタル信号により、スイッチ回路２０４を制御することにより、筆圧情報を、位置検出用信号の付加情報としてタブレット端末１０の位置検出装置部１００に送信する。

また、ＩＣ２００には、電子ペン２０の識別情報であるペンＩＤを記憶するＩＤメモリ２１０が接続されている。ＩＣ２００は、このＩＤメモリ２１０に記憶されているペンＩＤのデジタル信号により、スイッチ回路２０４を制御することにより、このペンＩＤをも、位置検出用信号の付加情報として、筆圧情報と共に、タブレット端末１０の位置検出装置部１００に送信する。

以上のように構成された電子ペン２０及びタブレット端末１０の位置検出装置部１００の位置検出動作及び筆圧情報やペンＩＤの検出動作について説明する。

位置検出装置部１００の座標データ生成部１２０の処理制御部１２８は、先ず、ドライブ回路１２２を駆動して励磁コイル１１４から、所定時間、信号を電子ペン２０に送信する。その後、処理制御部１２８は、ドライブ回路１２２を駆動して励磁コイル１１４からバースト状信号を送出し、選択回路１１３をＸ軸方向ループコイル群１１１のうちの一つのループコイルを順次に選択する処理を、Ｘ軸方向ループコイル群１１１の全てのループコイルに対して行う。これに対して、電子ペン２０は、バースト状信号を共振回路２０３で受信し、タブレット端末１０の位置検出装置部１００の位置検出センサ１１０に帰還するようにするので、処理制御部１２８は、その帰還されたバースト状信号を位置検出用信号として検出することで、電子ペン２０により指示された位置のＸ座標値を求める。

次に、処理制御部１２８は、再度、ドライブ回路１２２を駆動して励磁コイル１１４から、所定時間、信号を電子ペン２０に送信した後、ドライブ回路１２２を駆動して励磁コイル１１４からバースト状信号を送出し、選択回路１１３をＹ軸方向ループコイル群１１２のうちの一つのループコイルを順次に選択する処理を、Ｙ軸方向ループコイル群１１２の全てのループコイルに対して行う。そして、処理制御部１２８は、電子ペン２０から帰還されてくるバースト状信号を位置検出用信号として検出することで、電子ペン２０により指示された位置のＹ座標値を求める。

以上のようにして、電子ペン２０の指示位置を検出したら、処理制御部１２８は、電子ペン２０からの付加情報としての筆圧情報及びペンＩＤを検出するため、励磁コイル１１４から所定時間以上継続した送信を行った後、バースト状信号の送受信を、電子ペン２０からの付加情報のデジタル信号のビット数に応じた回数継続して行う。このとき、選択回路１１３では、検出した座標値に従い、電子ペン２０から最も近いループコイル（Ｘ軸方向ループコイル，Ｙ軸方向ループコイルのどちらでもよい）を選択して信号を受信する。

一方、電子ペン２０のＩＣ２００は、筆圧検出部を構成する容量可変キャパシタＣｖの静電容量に対応して得られた筆圧情報とペンＩＤとからなる付加情報のデジタル信号により、タブレット端末１０の位置検出装置部１００からの信号の送受信に同期してスイッチ回路２０４をオン・オフ制御する。スイッチ回路２０４がオフであるときには、共振回路２０３は、位置検出装置部１００から送信された信号を位置検出装置部１００に返送することができるので、位置検出装置部１００のループコイルはこの信号を受信する。これに対して、スイッチ回路２０４がオンであるときには共振回路２０３は共振動作が禁止された状態にあり、このために、共振回路２０３から位置検出装置部１００に信号は返送されず、位置検出装置部１００のループコイルは信号を受信しない。

位置検出装置部１００の座標データ生成部１２０の処理制御部１２８は、受信信号の有無の判別を付加情報のデジタル信号のビット数回行うことにより、筆圧情報及びペンＩＤに応じた複数ビットのデジタル信号を受信し、電子ペン２０からの筆圧情報及びペンＩＤを検出することができる。したがって、電子ペン２０は、筆圧情報とペンＩＤとを、ＡＳＫ（Amplitude Shift Keying）変調した信号として、タブレット端末１０の位置検出装置部１００に送信する。

位置検出装置部１００の処理制御部１２８は、電子ペン２０による指示位置の情報を検出すると共に、この電子ペン２０からの筆圧情報及びペンＩＤを検出し、検出した電子ペン２０による指示位置と、筆圧情報及びペンＩＤとをコントローラ部１３０に供給する。

＜管理サーバ装置４０のハードウェア構成例＞
図５は、この実施形態の操作者状態判断システムの管理サーバ装置４０の構成例を示すブロック図である。

図５に示すように、この実施形態における管理サーバ装置４０は、コンピュータからなる制御部４０１に対して、システムバス４００を通じて、無線通信部４０２、情報受信処理部４０３、生体情報データベース４０４、特定パターン筆記軌跡情報データベース４０５、通信接続情報記憶部４０６、運行日誌メモリ４０７、生体情報解析部４０８、筆記軌跡情報解析部４０９、感情状態情報取得部４１０、状態判断部４１１、運転者送信情報生成部４１２、自動車制御情報生成部４１３、表示部４１４、のそれぞれが接続されて構成されている。

特定パターン筆記軌跡情報データベース４０５には、図６に示すように、運転者２₁、・・・、２_nのそれぞれの運転者ＩＤ（この例では、運転者名）と、電子ペン２０₁、・・・、２０_nのそれぞれのペンＩＤと、運転者２₁、・・・、２_nのそれぞれが電子ペン２０₁、・・・、２０_nのそれぞれで自身の氏名を署名として筆記したときの筆記軌跡情報であるサイン筆記情報とが、互いに対応付けられて格納されている。

この場合に、サイン筆記情報は、運転者２₁、・・・、２_nのそれぞれが、集中状態あるいはリラックス状態などの自動車の運転をするのに適切な状態であるときに筆記入力されたものとされ、筆記軌跡情報を構成する座標データには時間情報が付随しており、その時間情報から、サイン筆記情報の各文字の筆記速度が検出可能とされている。

なお、特定パターン筆記軌跡情報データベース４０５には、運転者ＩＤとペンＩＤとが対応付けられて記憶されているので、ペンＩＤにより当該特定パターン筆記軌跡情報データベース４０５を参照することで、対応付けられている（紐付けられている）運転者ＩＤを取得することができる。

生体情報データベース４０４には、図示は省略するが、運転者２₁、・・・、２_nのそれぞれの正常状態での生体情報として、この例では心拍、体温、発汗などの正常状態範囲の数値情報が格納されている。この例では、正常状態の生体情報は、電子ペン２０₁、・・・、２０_nのそれぞれのペンＩＤと紐付けられる運転者ＩＤに対応付けられて記憶されている。なお、この例では、生体情報データベース４０４には、運転者２₁、・・・、２_nのそれぞれの正常状態での生体情報を格納するようにしたが、運転者２毎ではなく、不特定多数の被験者の生体情報から生成した正常状態の情報を格納して用いるようにしてもよい。

通信接続情報記憶部４０６には、図７に示すように、運転者ＩＤのそれぞれに対して、タブレット端末１０₁～１０_nのそれぞれと無線通信部４０２を通じて接続するための接続用情報と、自動車１₁～１_nのそれぞれと無線通信部４０２を通じて接続するための接続用情報とが、互いに対応付けられて記憶されている。

無線通信部４０２は、タブレット端末１０₁～１０_nのそれぞれと、通信ネットワーク５を通じて無線通信するためのものである。

情報受信処理部４０３は、タブレット端末１０₁～１０_nのそれぞれから受信した情報から、生体情報と、筆記軌跡情報と、筆記軌跡情報中の特定パターン筆記軌跡情報としての署名情報と、時間情報と、ペンＩＤとを区別して認識し、それぞれの情報を、必要な各部に分配するようにする。

この場合に、情報受信処理部４０３は、ペンＩＤにより特定パターン筆記軌跡情報データベース４０５を参照することで、運転者ＩＤを取得して、その取得した運転者ＩＤをも分配する情報に付加するようにする。

運行日誌メモリ４０７には、タクシー会社での管理のために、受信した運行日誌の筆記軌跡情報の全てを、運転者ＩＤ及び／又はペンＩＤ、また、付随されている日時情報と対応付けて、蓄積するようにする。

生体情報解析部４０８は、運行日誌の筆記軌跡情報を送信してきた運転者２（以下、運転者２Ｓと記す）の生体情報として心拍、体温、発汗などの値が、生体情報データベース４０４の対応する運転者の心拍、体温、発汗などの正常状態の数値範囲内であるかどうかにより、運転者２Ｓの体調に変調が生じているかどうかをチェックする。そして、生体情報解析部４０８は、その解析結果を、状態判断部４１１に送る。

筆記軌跡情報解析部４０９は、この実施形態では、受信した運行日誌の筆記軌跡情報から署名欄の筆記軌跡情報を抽出し、特定パターン筆記軌跡情報データベース４０５の中の運転者２Ｓのサイン署名情報と比較参照して、運転者２Ｓの心的状態が、自動車の運転をするのに不適切な状態に変化していないかをチェックする。そして、筆記軌跡情報解析部４０９は、その解析結果を、状態判断部４１１に送る。なお、前述もしたが、筆記軌跡情報解析部４０９においては、受信した運行日誌の筆記軌跡情報の全について解析して、運転者２Ｓの心的状態が、自動車の運転をするのに不適切な状態に変化していないかをチェックするようにしてもよい。

感情状態情報取得部４１０は、この実施形態では、受信した運行日誌の筆記軌跡情報から署名欄の筆記軌跡情報を抽出し、抽出した署名欄の筆記軌跡情報を、ペンＩＤあるいは運転者ＩＤと共に、感情状態推定要求に含めて、感情サーバ装置５０に通信ネットワーク５を通じて送り、その回答を待つ。

感情サーバ装置５０は、感情状態推定要求を受け取ると、それに含まれる署名の筆記軌跡情報から、後述するようにして、運転者２Ｓの感情状態を推定して、管理サーバ装置４０に回答してくる。感情状態情報取得部４１０は、感情サーバ装置５０から取得した運転者２Ｓの感情状態の情報を、状態判断部４１１に送る。

状態判断部４１１は、生体情報解析部４０８からの解析結果と、筆記軌跡情報解析部４０９からの解析結果と、感情状態情報取得部４１０からの感情状態の情報とから、運転者２Ｓの体調状態及び／又は心的状態が、自動車の運転に不適切な状態に変化していないかどうかを判断する。そして、状態判断部４１１は、その判断結果を運転者送信情報生成部４１２及び自動車制御情報生成部４１３に送る。また、状態判断部４１１は、判断結果を表示情報として、表示部４１４に送る。

運転者送信情報生成部４１２は、状態判断部４１１からの判断結果に応じた運転者送信情報を生成する。この場合に、運転者送信情報生成部４１２は、状態判断部４１１からの判断結果が、運転者は、自動車の運転をするのに不適切な状態になっていることを示しているときには、運転の継続を不許可とするアラームからなる運転者送信情報、例えば「体調又は精神状態が運転に適切ではありません。運転をしばらく休止して下さい」や「体調又は精神状態が運転に適切ではありません。運転を中止して下さい」などのアラーム音声メッセージを生成する。

そして、運転者送信情報生成部４１２は、生成したアラーム音声メッセージの情報を、無線通信部４０２を通じ、通信ネットワーク５を通じて、運転者２Ｓのタブレット端末１０に送信し、その後、タブレット端末１０に対して通信終了要求を送って通信を終了処理する。この場合に、運転者２Ｓのタブレット端末１０との通信が、アラームを送る際に、既に切断されているときには、運転者送信情報生成部４１２は、通信接続情報記憶部４０６に記憶されている運転者２Ｓのタブレット端末１０との接続情報を用いて通信路を生成して、運転者送信情報を送る。

そして、運転者送信情報生成部４１２は、状態判断部４１１からの判断結果が、運転者２Ｓは「自動車の運転をするのに不適切な状態にはなっていない」ことを示しているときには、そのまま、タブレット端末１０との間の通信を終了処理する。なお、運転者送信情報生成部４１２は、状態判断部４１１からの判断結果が、運転者２Ｓは「自動車の運転をするのに不適切な状態にはなっていない」ことを示しているときには、運転の継続を許可する運転者送信情報、例えば「お疲れ様です。継続して安全運転に考慮しながら継続して業務を行ってください」などの音声メッセージを送るようにしてもよい。

自動車制御情報生成部４１３は、状態判断部４１１からの判断結果が、運転者２Ｓは、「自動車の運転をするのに不適切な状態になっている」ことを示しているときに、自動車１を走行不能とするようにする制御信号を生成し、その生成した制御信号を無線通信部４０２を通じ、通信ネットワーク５を通じて、運転者２Ｓの運転対象の自動車１に送信する。この際に、自動車制御情報生成部４１３は、通信接続情報記憶部４０６に記憶されている運転者２Ｓの運転対象の自動車１の接続情報を取得して、その接続情報を用いて通信路を生成して、制御信号を自動車に送る。

なお、自動車１のそれぞれは、管理サーバ装置４０からの制御信号を受けると、例えば走行に関わる部位に対するバッテリーからの電力の供給を遮断するなどして、運転停止状態とするように制御する機能部を備えている。

表示部４１４は、表示画面を備え、情報受信処理部４０３からの運行日誌の筆記軌跡情報を受け取って、表示画面に表示する。管理サーバ装置４０は、この例では、タクシー会社に設けられており、タクシー会社の運転者の体調状態や心的状態を管理する運転者状態管理担当者が、この表示画面に表示される運行日誌の筆記軌跡の表示情報を観視する。運転者状態管理担当者は、表示部４１４の表示画面の運行日誌の筆記軌跡を観視し、それが平常時と異なっていないかどうかを視覚的に把握することで、当該運行日誌を作成した運転者の体調状態や心的状態の変調を類推することができる。

そして、この実施形態では、状態判断部４１１からの判断結果の表示情報が表示部４１４に送られてくるので、表示画面には、運行日誌の筆記軌跡の表示情報に加えて、運転者の状態が表示される。したがって、タクシー会社の運転者状態管理担当者は、表示部４１４の表示画面において、運転者の状態を把握することができ、必要に応じて、運転者に携帯電話端末などを用いて直接に通話をして、体調状態及び心的状態の問い合わせをしたり、アドバイスをしたりすることができる。

なお、上述の管理サーバ装置４０は、運転者２による署名の筆記軌跡情報を記憶しているので、タブレット端末から送られてきた運行日誌の署名欄の署名の筆記軌跡情報と、記憶している運転者２の署名の筆記軌跡情報とを比較して、運転者２Ｓの認証を行うようにすることもできる。

なお、図５に示した、情報受信処理部４０３、生体情報解析部４０８、筆記軌跡情報解析部４０９、感情状態情報取得部４１０、状態判断部４１１、運転者送信情報生成部４１２、自動車制御情報生成部４１３は、それぞれの機能を実行するプログラムを制御部４０１がソフトウエア処理として実現することができる。ただし、上記の各部の全てをプログラムによる処理機能とするのではなく、一部は、ハードウエアの構成部として構成してもよいことは言うまでもない。

［感情サーバ装置５０の構成例］
図８は、感情サーバ装置５０のハードウエア構成例を示すブロック図である。この図８の例の感情サーバ装置５０は、コンピュータからなる制御部５０１に対して、システムバス５００を通じて、感情推定用データベース５０２と、無線通信部５０３と、感情状態推定要求受信部５０４と、感情状態推定部５０５と、提供情報生成部５０６とが接続されて構成されている。

感情推定用データベース５０２には、運転者２₁、・・・、２_nのそれぞれからについて、種々の感情状態と、それぞれの感情状態における電子ペンのペン状態情報とが対応づけられて格納されている。この感情推定用データベース５０２の格納データは、事前に運転者２₁、・・・、２_nのそれぞれから必要な情報の収集がなされ、その収集された情報に基づいて構築されている。

すなわち、例えば運転者２₁、・・・、２_nのそれぞれに脳波計を装着してもらうと共に、それぞれのタブレット端末１０₁～１０_n及び電子ペン２０₁、・・・、２０_nを用いて筆記入力をしてもらうようにする。

そして、運転者２₁、・・・、２_nのそれぞれには、例えば「リラックス状態」、「集中状態」、「イライラ状態」、「注意力散漫状態」、「怒り状態」、などの感情状態を現出させるような状況刺激を加えるなどして、それぞれの感情状態が、それぞれ所定の時間以上の時間幅に亘って継続するようにする。その際、運転者２₁、・・・、２_nのそれぞれが、それぞれの感情状態になっていることを脳波計で測定して確認する。

そして、運転者２₁、・・・、２_nのそれぞれに、「リラックス状態」、「集中状態」、「イライラ状態」、「注意力散漫状態」、「怒り状態」のそれぞれの感情状態になっている所定の時間において、電子ペン２０₁、・・・、２０_nを用いてタブレット端末１０₁～１０_nのそれぞれに対して筆記入力をしてもらい、タブレット端末１０₁～１０_nのそれぞれで、上記の感情状態のときの筆記軌跡情報（指示位置の情報、電子ペンの傾き、高さ位置などのペン状態情報）を検出させる。そして、タブレット端末１０₁～１０_nのそれぞれで取得された各感情状態の筆記軌跡情報は、ペンＩＤと対応付けられて感情推定用データベースの構築装置に送られる。

感情推定用データベースの構築装置では、「リラックス状態」、「集中状態」、「イライラ状態」、「注意力散漫状態」、「怒り状態」のそれぞれの感情状態毎に区分けして、それぞれの運転者２₁、・・・、２_nによる筆記軌跡情報を保持する。そして、感情推定用データベースの構築装置では、それぞれの感情状態において、筆記軌跡情報中の指示位置の情報、電子ペンの傾き、高さ位置などのペン状態情報のそれぞれが取り得る範囲を、感情状態毎の特徴値となる存在範囲として算出する。すなわち、各感情状態にあるときの運転者の筆記入力時の電子ペンのペン状態（指示位置の動き変化、筆圧値、電子ペンの傾き、高さ位置など）のそれぞれの情報値は、それぞれの感情状態に応じて取り得る範囲、すなわち、存在範囲が異なるので、それぞれの感情状態毎の、各ペン状態情報の存在範囲を算出する。算出された感情状態毎の、各ペン状態情報の存在範囲は、後述する図１０に示す感情推定用データベースの記憶内容とされる。

例えば、「リラックス状態」にあるときの電子ペン２０に印加される筆圧は、比較的低い平均値となると共に、当該平均値からの偏差が比較的小さい値となるような存在範囲となる。また、「イライラ状態」にあるときの電子ペン２０に印加される筆圧は、比較的高い平均値となると共に、当該平均値からの偏差が比較的大きい値となるような存在範囲となる。

なお、ペン状態情報の範囲情報は、或る感情状態であるときにおけるペン状態情報のそれぞれの値の殆ど、例えば９０パーセントが、その中に入る、すなわち、存在することとなる範囲を判定することで算出される。このペン状態情報の範囲情報（存在範囲の情報）は、上述した平均値と偏差からなる範囲情報とすることができる。

また、この実施形態では、感情推定用データベースの構築装置では、運転者２の各感情状態における電子ペン２０による「文字筆記時の特徴パターン」をも記憶するようにしている。このため、この例においては、運転者２には、各感情状態のときに、所定の矩形領域内、所定の文字を筆記させるようにする。

すなわち、図９に示すように、運転者２に対しては、タブレット端末１０の表示画面に、文字の入力四角枠ＦＬを表示して、その入力四角枠ＦＬ内に文字を入力するように促す。図９に示すように、運転者２は、各感情状態において、当該入力四角枠ＦＬ内に、入力が求められた文字、この例では「あ」を電子ペン２０により筆記入力する。

図９に示すように、リラックス状態や、集中状態では、運転者２は、求められた文字を当該入力四角枠ＦＬ内にきちんと収めるように筆記入力する。すなわち、文字の中心位置が、入力四角枠ＦＬの中心位置の近傍になり、文字の大きさが、入力四角枠ＦＬを超えない大きさとなる。

しかし、イライラ状態、注意力散漫状態、怒り状態では、それらの感情状態に応じて、文字の中心位置が、入力四角枠ＦＬの中心位置からずれた状態になると共に、文字が入力四角枠ＦＬから食み出してしまったり、入力四角枠ＦＬよりも大きな文字となってしまったりする。そこで、感情推定用データベースの構築装置では、ペン状態情報の例としての文字筆記時の特徴パターンとしては、文字の中心位置からのずれの範囲と、文字の大きさの変移範囲、などを各感情状態に応じて算出する。

「文字筆記時の特徴パターン」としては、一文字についての特徴パターンだけではなく、複数の文字を連続的に筆記するときの当該複数の文字間についての特徴パターンを算出してもよい。この実施形態では、前述した特定パターンとされた各運転者の氏名が、「文字筆記時の特徴パターン」として用いられる。

感情推定用データベースの構築装置は、運転者２の各感情状態の情報と、複数種のペン状態情報のそれぞれについての範囲情報とを互いに対応付けたものを、電子ペン２０のペンＩＤに対応付けて、感情推定用データベース５０２に格納する。

図１０に、このときの感情推定用データベース５０２の記憶内容の例を示す。この図１０に示すように、電子ペン２０のペンＩＤに対応付けられて、「リラックス状態」、「集中状態」、「イライラ状態」、「注意力散漫状態」、「怒り状態」のそれぞれの感情状態が記憶されると共に、各感情状態のそれぞれに対応付けられて、それぞれの感情状態におけるペン状態情報のそれぞれが取り得る範囲（存在範囲）の情報が記憶されている。

図１０の例では、ペン状態情報としては、筆記入力時の「座標指示ブレ」、「筆圧」、「傾き」、「高さ位置」、「ホバー位置での位置ブレ」、などが記憶される。座標指示ブレとしては、前述の図９を用いて説明した文字の中心位置からのずれ範囲や文字の大きさの変移範囲が記憶される。なお、図１０では、ずれ範囲や変移範囲が模式的に示してあり、四角枠は、前述した図９の四角枠ＦＬに対応するものである。

なお、「座標指示ブレ」の場合、そのブレの速度または加速度が、感情状態に応じて、マイルドに変化したり、激しく変化したりするので、それらの情報も併せて感情推定用データベース５０２に格納するようにしてもよい。

「筆圧」は、使用者がそれぞれの感情状態において電子ペン２０によりセンサ上で入力するとき値が異なることが予想されるので、各感情状態において取り得る筆圧範囲（例えばＰｒａ１～Ｐｒｂ１など）が記憶される。例えばリラックス状態の筆圧よりも、集中状態での筆圧の方が大きく、かつ、その筆圧範囲も狭いものとなる。また、イライラ状態では、筆圧がまちまちとなるので、筆圧範囲が広くなる。怒り状態では、筆圧が大きくなる。なお、筆圧の範囲のみではなく、平均値も併せて記憶させるようにしてもよい。また、筆圧の時間変化も併せて感情推定用データベース５０２に格納するようにしてもよい。例えば、「リラックス状態」や「集中状態」では、筆圧の時間変化の度合いは小さく、「イライラ状態」や「注意力散漫状態」では、筆圧の時間変化の度合は大きくなる。

「傾き」は、使用者の感情状態に応じて電子ペン２０がセンサ面（入力面）とのなす角が変わることから、感情推定用データベース５０２には、その各感情状態に応じて、傾きの範囲（例えばＳＬａ１～ＳＬｂ２）が記憶される。なお、この場合も、傾きの時間変化も併せて感情推定用データベース５０２に格納するようにしてもよい。例えば、「リラックス状態」や「集中状態」では、傾きの時間変化の度合いは小さく、「イライラ状態」や「注意力散漫状態」では、傾きの時間変化の度合は大きくなる。なお、傾きは、筆圧が零でホバー状態にあるときと、筆圧が零よりも大きくセンサに接触しているときとで、分けて感情推定用データベース５０２に格納するようにしてもよい。

「高さ位置」は、上記の各種の感情状態の運転者２が、電子ペン２０を持って、指示入力（筆記入力）をする前の待機状態において電子ペン２０がホバー状態にあるときに取り得る高さ位置（センサ面に直交する方向の高さ位置）の範囲情報（例えばＨａ１～Ｈｂ１）が、感情推定用データベース５０２に格納される。

「ホバー位置での位置ブレ」は、運転者２が電子ペン２０を持って、指示入力（筆記入力）をする前の待機状態のときのセンサ面上の座標位置の、各感情状態におけるときに取り得る変化の範囲情報（例えばＡｒａ１～Ａｒｂ１）である。すなわち、例えば、運転者２が「集中状態」にあるときには、「ホバー位置での位置ブレ」は、小さくなり、「イライラ状態」や「注意力散漫状態」にあるときには、大きくなる。なお、この場合も、「ホバー位置での位置ブレ」の時間変化も併せて感情推定用データベース５０２に格納するようにしてもよい。

感情サーバ装置５０では、無線通信部５０３は、受信した感情状態推定要求を、感情状態推定要求受信部５０４に転送する。感情状態推定要求受信部５０４は、受け取った感情状態推定要求に含まれているペンＩＤ及び筆記軌跡情報を抽出して、感情状態推定部５０５に渡す。感情状態推定部５０５は、受け取ったペンＩＤ及び筆記軌跡情報の各ペン状態情報により、感情推定用データベース５０２を検索して、対応する感情状態を推定し、その推定結果の感情状態を提供情報生成部５０６に渡す。

提供情報生成部５０６は、受け取った推定結果の感情状態を通知する情報を含む提供情報を生成して、無線通信部５０３を通じて、感情状態推定要求をしてきた管理サーバ装置４０に送信する。

なお、図８の感情サーバ装置５０に構成例において、感情状態推定要求受信部５０４と、感情状態推定部５０５及び提供情報生成部５０６の処理は、制御部５０１が、内蔵するメモリに記憶するプログラムにしたがって処理するソフトウェア機能として構成してもよい。

次に、上述した実施形態の操作者状態判断システムのタブレット端末１０及び管理サーバ装置４０の主要な処理動作例について、以下に説明する。

＜タブレット端末１０の処理動作例＞
図１１及びその続きである図１２は、タブレット端末１０の処理動作例を説明するためのフローチャートである。

タブレット端末１０の処理制御部１２８は、電子ペン２０による指示入力を検出したか否か監視し（ステップＳ１０１）、電子ペン２０による指示入力を検出してはいないと判別したときには、その他の処理を行い（ステップＳ１０２）、その他の処理の終了後、処理をステップＳ１０１に戻す。

処理制御部１２８は、ステップＳ１０１で、電子ペン２０による指示入力を検出したと判別したときには、検出した指示位置の情報と、筆圧情報と、傾きの情報と、高さ位置の情報とに時刻情報が加えられた情報からなる筆記軌跡情報を取得し、ペンＩＤに対応付けて、コントローラ部１３０に供給する（ステップＳ１０３）。

コントローラ部１３０は、スマートウォッチ３０に対して生体情報の取得要求を送り、この取得要求に対応してスマートウォッチ３０から送られてくる生体情報を取得し、処理制御部１２８から取得している筆記軌跡情報と共に、ペンＩＤに対応付けて保持する（ステップＳ１０４）。

次に、コントローラ部１３０は、終了ボタン１６が押されたか否か判別し（ステップＳ１０５）、終了ボタン１６が押されていないと判別したときには、処理をステップＳ１０１に戻す。

また、コントローラ部１３０は、ステップＳ１０５で、終了ボタン１６が押されたと判別したときには、筆記軌跡情報を解析して署名欄に署名が筆記入力済であるか否か判別する（ステップＳ１０６）。そして、コントローラ部１３０は、ステップＳ１０６で、署名欄に署名が筆記入力済ではないと判別したときには、スピーカ１１ｓｐを通じて、署名入力を促す音声メッセージを送出し（ステップＳ１０７）、その後、処理をステップＳ１０１に戻す。

また、コントローラ部１３０は、ステップＳ１０６で、署名欄に署名が筆記入力済であると判別したときには、保持している運行日誌の筆記軌跡情報と生体情報とをペンＩＤに対応付けた情報を、無線通信部１３３及び通信ネットワーク５を通じて管理サーバ装置４０に送信する（ステップＳ１０８）。

次に、コントローラ部１３０は、管理サーバ装置４０からアラームを受信したか否か判別し（図１２のステップＳ１１１）、アラームを受信してはいないと判別したときには、管理サーバ装置４０からの通信終了要求を受信したか否か判別する（ステップＳ１１２）。そして、コントローラ部１３０は、ステップＳ１１２で、通信終了要求を受信してはいないと判別したときには、処理をステップＳ１１１に戻し、通信終了要求を受信したと判別したときには、通信を終了処理し（ステップＳ１１５）、この処理ルーチンを終了する。

また、コントローラ部１３０は、ステップＳ１１１で、管理サーバ装置４０からアラームを受信したと判別したときには、対応するアラーム音声をスピーカ１１ｓｐを通じて放音する（ステップＳ１１３）。

そして、コントローラ部１３０は、管理サーバ装置４０からの通信終了要求を受信したか否か判別する（ステップＳ１１４）。そして、コントローラ部１３０は、ステップＳ１１４で、通信終了要求を受信してはいないと判別したときには、処理をステップＳ１１４に戻し、通信終了要求を受信したと判別したときには、通信を終了処理し（ステップＳ１１５）、この処理ルーチンを終了する。

＜管理サーバ装置４０の処理動作例＞
図１３及びその続きである図１４は、管理サーバ装置４０の処理動作例を説明するためのフローチャートである。図１３及び図１４のフローチャートの各ステップの動作は、以下の説明では、制御部４０１が、情報受信処理部４０３、生体情報解析部４０８、筆記軌跡情報解析部４０９、感情状態情報取得部４１０、状態判断部４１１、運転者送信情報生成部４１２及び自動車制御情報生成部４１３の機能を、ソフトウエア処理として実現した場合として説明する。

制御部４０１は、タブレット端末１０からの送信情報の受信を監視し（ステップＳ２０１）、タブレット端末１０からの送信情報を受信してはいないと判別したときには、その他の処理を行い（ステップＳ２０２）、その後、処理をステップＳ２０１に戻す。

ステップＳ２０１で、タブレット端末１０からの送信情報を受信したと判別したときには、制御部４０１は、受信情報に含まれるペンＩＤにより特定パターン筆記軌跡情報データベース４０５を参照することで、運転者ＩＤを取得する（ステップＳ２０３）。そして、制御部４０１は、運行日誌の筆記軌跡情報を、運行日誌メモリ４０７に運転者ＩＤ及びペンＩＤと対応付けて格納する（ステップＳ２０４）。

次に、制御部４０１は、生体情報データベース４０４に記憶されている生体情報の内のステップＳ２０３で取得した運転者ＩＤに対応付けられている生体情報を読み出し、この読み出した生体情報と、無線通信部４０２を通じて受信した生体情報とを比較解析して、運転者ＩＤで特定される運転者２の体調状態が運転を継続して行うのに不適切な状態になっているかどうかチェックする（ステップＳ２０５）。

次に、制御部４０１は、運行日誌の筆記軌跡情報の内から署名欄の署名の筆記軌跡情報を抽出すると共に、特定パターン筆記軌跡情報データベース４０５に記憶されている署名の筆記軌跡情報の中から、ステップＳ２０３でペンＩＤを用いて取得した運転者ＩＤに対応する運転者２の署名の筆記軌跡情報を読み出す。そして、抽出した署名の筆記軌跡情報と、特定パターン筆記軌跡情報データベース４０５から読み出した署名の筆記軌跡情報とを比較解析して、運転者ＩＤで特定される運転者２の心的状態が運転を継続して行うのに不適切な状態になっているかどうかチェックする（ステップＳ２０６）。

次に、制御部４０１は、抽出した署名の筆記軌跡情報を含めた感情状態推定要求を感情サーバ装置５０に送り、その回答の推定された感情状態の情報を、感情サーバ装置５０から取得する（ステップＳ２０７）。

次に、制御部４０１は、ステップＳ２０５で取得した生体情報の解析結果と、特定パターン筆記軌跡情報の解析結果及び感情サーバ装置５０から取得した感情状態の推定結果とから、運行日誌の筆記軌跡情報を送信してきた運転者の体調状態及び心的状態を把握する（ステップＳ２０８）。

そして、制御部４０１は、ステップＳ２０８で把握した運転者２の体調状態及び心的状態から、運転者２の状態は運転をするのに不適切な状態になっているかどうか判別し（図１４のステップＳ２１１）、不適切な状態になっていないと判別したときには、運転者２のタブレット端末１０に通信終了要求を送信して（ステップＳ２１４）、無線通信の終了処理を行い（っステップＳ２１５）、この処理ルーチンを終了する。

また、ステップＳ２１１で、運転者２の状態は運転をするのに不適切な状態になっていると判別したときには、制御部４０１は、この例では音声メッセージからなるアラームを生成して、運転者２のタブレット端末１０に送信する（ステップＳ２１２）。

次に、制御部４０１は、運転をするのに不適切な状態になった運転者２の自動車１に対して走行を中止又は停止させる自動車中止制御ルーチンを実行する（ステップＳ２１３）。この自動車中止制御ルーチンでは、制御部４０１は、運転をするのに不適切な状態になった運転者２の自動車１の対する接続用情報を取得して、当該自動車１との間に無線通信路を生成して、自動車１の走行を中止又は停止させる制御情報を、当該自動車１に送信して、自動車を制御するようにする。

ステップＳ２１３の次には、制御部４０１は、運転者２のタブレット端末１０に通信終了要求を送信して（ステップＳ２１４）、無線通信の終了処理を行い（っステップＳ２１５）、この処理ルーチンを終了する。

以上のようにして、第１の実施形態の操作者状態判断システムでは、運転者２の生体情報に基づく体調状態の変調だけでなく、運行日誌の筆記軌跡情報から運転者２の心的状態が運転をするのに不適切な状態になって否かどうかをチェックして、不適切な状態になっている場合には、アラームを運転者に発して、運転者２による自動車１の運転を差し控えさせるようにする。したがって、交通事故の発生を未然に防止することができる。

しかも、上述の実施形態では、運転者２の状態（体調状態及び／又は心的状態）が運転をするのに不適切な状態になっている場合には、管理サーバ装置４０からの制御信号により、当該運転者２の運転対象の自動車の走行を中止又は停止させるように制御するので、交通事故の発生を未然に防止することができる。

また、運転者２の心的状態は、運行日誌の筆記軌跡情報を用いてチェックするようにしているので、運転者２は、運行日誌を筆記入力するだけで良く、運転者２の心的状態のチェックのために運転者２に特別な負担をかける必要がないという効果がある。

その上、上述の第１の実施形態においては、運転者２の心的状態が、運転をするのに適切な状態であるか否かを、単に登録した特定パターン筆記軌跡情報について、適切であるときの情報との乖離からのみ判断するのではなく、感情サーバ装置５０を用いて、筆記軌跡情報から推定される感情状態の把握結果をも参照するようにするので、運転をするのに適切な状態であるか否かを、より的確に判断することができるという効果もある。

なお、上述の実施形態では、感情サーバ装置５０の感情推定用データベースには、各運転者２の特定パターン筆記軌跡情報から生成されるペン状態情報と感情状態との対応を記憶するようにしたが、感情推定用データベースの構築に当たっては、特的パターン筆記軌跡情報ではなく、他の筆記パターンの筆記軌跡情報を用いるようにしてもよい。

また、感情サーバ装置５０が不特定多数の人の感情状態と、それぞれの感情状態のときの筆記軌跡情報から生成されるペン状態情報とから構築した感情推定用データベースを備えるようにしてもよい。この場合には、不特定多数の人の感情状態と、それぞれの感情状態のときの筆記軌跡情報から生成されるペン状態情報とが、いわゆるビックデータとして多量に収集されることで、感情サーバ装置５０における感情状態の推定確度が向上する。

また、上述の第１の実施形態では、タブレット端末１０が管理サーバ装置４０との間での無線通信をする機能を備えるようにしたが、管理サーバ装置４０と無線通信する機能を有する無線通信端末装置を、別途設けて、タブレット端末１０と無線通信端末装置との間は、有線で接続する、あるいは近距離無線通信で接続するように構成してもよい。その場合の無線通信端末装置としては、例えばスマートフォンなどの携帯通信機器を用いることが可能であり、管理サーバ装置４０からのアラームを、当該携帯通信機器の表示画面に表示すると共に、音声メッセージとして報知するようにしてもよい。

また、上述の第１の実施形態では、感情サーバ装置５０は、管理サーバ装置４０とは別個に構成するようにしたが、感情サーバ装置５０の機能を管理サーバ装置４０に設けて統合するように構成することもできる。

また、筆記軌跡情報取得手段の例として、上述の実施形態では、筆記具としてのボールペンの機能を有する電子ペン２０と、運行日誌用紙６への電子ペン２０による筆記と共に、電子データの筆記軌跡情報を生成することができる構成のタブレット端末１０を用いるようにしたが、筆記軌跡情報取得手段は、運行日誌用紙６への筆記はできないが、電子データの筆記軌跡情報を取得することができる一般的な構成の電子ペン及びタブレット装置であっても良い。

また、上述の例では、運転者の生体情報は、心拍、体温、発汗を例示したが、その他、血圧、血糖、脈拍などを用いてもよく、更に、それらの組み合わせを用いてもよい。

［第２の実施形態］
第２の実施形態も、図１に示したタクシー会社が運営する操作者状態判断システムの場合の例であり、上述の第１の実施形態の変形例である。図１５に、この第２の実施形態の操作者状態判断システムの概要を説明するための図を示す。

上述の第１の実施形態では、運転者２の生体情報として心拍、体温、発汗などを収集するようにしており、当該生体情報を取得するために、運転者２は、心拍センサや体温センサを備えているスマートウォッチ３０を身に着けるようにした。これに対して、第２の実施形態では、運転者２の生体情報として、運転者２の顔画像を収集するようにする。この場合に、顔画像は、顔色、唇の色などを認識できるようにするため、カラー画像として取得するようにする。

また、上述の第１の実施形態では、運転者２のタブレット端末１０が筆記軌跡情報のみではなく、生体情報も収集すると共に、管理サーバ装置４０に、筆記軌跡情報及び生体情報を送信する無線通信手段を備えるようにした。これに対して、この第２の実施形態では、タクシーとしてサービスに利用される自動車１に、管理サーバ装置４０Ａと無線通信が可能である自動車用装置６０を設ける。

なお、この第２の実施形態の管理サーバ装置４０Ａは、第１の実施形態の管理サーバ装置４０と、感情サーバ装置５０との機能を統合したものとして構成されている。そして、この管理サーバ装置４０Ａは、図示は省略するが、各運転者２の体調が良好な状態でのカラー顔画像の情報が、運転者ＩＤに対応付けられて記憶されている生体情報データベースを備える。顔画像は、正面からのみでなく、左右側方からの複数の方向から撮影された顔画像を含むものである。そして、管理サーバ装置４０Ａは、特定パターン筆記軌跡情報データベースのみでなく、感情推定用データベースを備えるものである。

この第２の実施形態の管理サーバ装置４０Ａの生体情報解析部は、カメラ７０で撮影された運転者２の、運行日誌の筆記軌跡情報の筆記入力時の顔画像と、予めデータベースに記憶されている運転者２の顔画像を比較することで、顔色が悪い、唇の色が紫色になっているなど、の体調の変調を検出するようにする。また、運転者２の顔画像から、その表情を解析して、苦しいときの顔の表情になっている、非常に疲労しているときの顔の表情などをも検出する。

そして、この第２の実施形態においては、自動車１の自動車用装置６０には、運転席に乗車している運転者２の顔画像を撮影するためのカメラ７０が接続されて設けられている。カメラ７０は、自動車用装置６０に有線あるいは無線で接続されており、自動車用装置６０は、カメラ７０の動作を制御して、当該カメラ７０で撮影された運転者２の顔画像情報を取り込むようにする。

また、この第２の実施形態において、各運転者２が利用するタブレット端末１０Ａは、コントローラ部１３０は備えておらず、その代わりに、自動車用装置６０に設けられる近距離無線通信部と無線接続する近距離無線通信部を備えている。タブレット端末１０Ａのその他の構成は、第１の実施形態のタブレット端末１０と同様である。なお、この第２の実施形態においても、運転者２のそれぞれは、上述の第１の実施形態で用いた電子ペン２０により、タブレット端末１０Ａに対して筆記入力を行うようにする。

タブレット端末１０Ａの構成及び処理動作は、コントローラ部１３０の部分を除くと、タブレット端末１０と同様であるので、ここでは、電子ペン２０の動作と共に、説明を省略する。また、管理サーバ装置４０Ａの構成及び処理動作は、感情サーバ装置５０の構成部分を備えると共に、その機能処理動作をも実行することが異なるだけで、上述の第１の実施形態の管理サーバ装置４０と同様であるので、ここでは、その説明は省略することとする。

そこで、この第２の実施形態においては、自動車用装置６０の構成例及び処理動作について説明する。

＜自動車用装置６０のハードウェア構成例＞
図１６は、この第２の実施形態における自動車用装置６０のハードウェア構成例を示すブロック図である。この図１６の例の自動車用装置６０は、コンピュータからなる制御部６０１に対して、システムバス６００を通じて、近距離無線通信部６０２と、無線通信部６０３と、ユーザインタフェース部６０４と、送信情報生成部６０５と、受信情報解析部６０６と、走行制御部６０７とが接続されていると共に、システムバス６００には、さらに、カメラ７０が接続されている。

近距離無線通信部６０２は、タブレット端末１０が備える近距離無線通信部と通信を行うためのものであり、この例では、ブルートゥース（登録商標）規格の無線通信部の構成とされている。無線通信部６０３は、通信ネットワーク５を通じて管理サーバ装置４０Ａと通信するためのものである。

ユーザインタフェース部６０４は、図示は省略するが、ディスプレイとスピーカとを備え、管理サーバ装置４０Ａからのアラームを表示したり、音声による放音を行う。

送信情報生成部６０５は、近距離無線通信部６０２を通じて取得したタブレット端末１０Ａからの筆記軌跡情報（ペンＩＤ付き）と、カメラ７０から取得した運転者２の顔画像情報とから送信情報を生成し、生成した送信情報を無線通信部６０３を通じて管理サーバ装置４０Ａに送信する。

受信情報解析部６０６は、管理サーバ装置４０Ａから送られてくる情報を解析し、その解析結果に応じた処理を行う。受信情報解析部６０６は、管理サーバ装置４０Ａからのアラームを受信したと判別したときには、ユーザインタフェース部６０４に、受信したアラームをディスプレイに表示すると共に、スピーカからアラーム音声を放音するように制御すると共に、走行中止制御信号を走行制御部６０７に送る。

走行制御部６０７は、受信情報解析部６０６から走行中止制御信号を受け取ったときには、自車の走行を中止又は停止するように制御する。

なお、図１６の自動車用装置６０の構成例において、送信情報生成部６０５、受信情報解析部６０６及び走行制御部６０７の処理は、制御部６０１が、内蔵するメモリに記憶するプログラムにしたがって処理するソフトウェア機能として構成してもよい。

＜自動車用装置６０の処理動作例＞
図１７は、自動車用装置６０の処理動作例を説明するためのフローチャートである。この図１７のフローチャートの各ステップの処理は、以下の説明では、制御部６０１が、送信情報生成部６０５、受信情報解析部６０６及び走行制御部６０７の処理を、内蔵するメモリに記憶するプログラムにしたがって処理するソフトウェア機能として構成した場合として説明する。

制御部６０１は、近距離無線通信部６０２でタブレット端末１０からの筆記軌跡情報を受信したか否か判別し（ステップＳ３０１）、筆記軌跡情報を受信してはいないと判別したときには、その他の処理を実行し（ステップＳ３０２）、その後、処理をステップＳ３０１に戻す。

ステップＳ３０１で、筆記軌跡情報を受信したと判別したときには、制御部６０１は、受信した筆記軌跡情報（時間情報付き）をペンＩＤに対応付けてバッファメモリに一時記憶保持する（ステップＳ３０３）。次に、カメラ７０で撮影された運転者２の顔画像の撮影情報を取得し、バッファメモリに、筆記軌跡情報と対応付けて保持する（ステップＳ３０４）。

そして、制御部４０１は、タブレット端末１０から筆記終了を受信したか否か判別し（ステップＳ３０５）、筆記終了を受信してはいないと判別したときには、処理をステップＳ３０１に戻し、このステップＳ３０１以降の処理を繰り返す。

また、ステップＳ３０５で、タブレット端末１０から筆記終了を受信したと判別したときには、制御部４０１は、バッファメモリに記憶している運行日誌の筆記軌跡情報と、生体情報としての運転者２の顔画像の情報とを、ペンＩＤに対応付けた情報を、無線通信部６０３を通じ、通信ネットワーク５を通じて管理サーバ装置４０Ａに送信する（ステップＳ３０６）。

そして、制御部４０１は、管理サーバ装置４０Ａからアラームを受信したか否か判別し（ステップＳ３０７）、アラームを受信してはいないと判別したときには、通信終了要求を受信したか否か判別する（ステップＳ３０８）。このステップＳ３０８で、通信終了要求を受信してはいないと判別したときには、制御部４０１は、処理をステップＳ３０７に戻し、このステップＳ３０７以降の処理を繰り返す。そして、ステップＳ３０８で、通信終了要求を受信したと判別したときには、管理サーバ装置４０Ａとの無線通信処理の終了処理を行い（ステップＳ３１１）、この処理ルーチンを終了する。

また、ステップＳ３０７で、アラームを受信したと判別したときには、ユーザインタフェース部６０４のディスプレイにアラームを表示すると共に、スピーカによりアラーム音声を放音して、運転者２に、運転を休止あるいは停止するように警告すると共に、自車の走行を休止又は停止するように制御する（ステップＳ３０９）。そして、制御部４０１は、管理サーバ装置４０Ａから通信終了要求の受信を待ち（ステップＳ３１０）、通信終了要求を受信したと判別したときには、管理サーバ装置４０Ａとの無線通信路を切断する処理を実行する（ステップＳ３１１）。そして、この処理ルーチンを終了する。

この第２の実施形態の操作者状態判断システムにおいては、上述した第１の実施形態と同様の作用効果が得られると共に、運転者２は、スマートウォッチを装着する必要はなく、単に運行日誌の筆記軌跡情報を筆記入力をする操作をするだけで良いという効果が得られる。また、タブレット端末１０は、生体情報を収集する機能を備える必要がないと共に、管理サーバ装置４０Ａとの無線通信機能を備える必要がないので、筆記軌跡情報を生成する機能を有するだけの簡単な構成とすることができるという効果を奏する。

［その他の実施形態又は変形例］
なお、上述の実施形態における電子ペン及びタブレット端末の位置検出装置部は、電磁誘導方式のものとしたが、これに限られるものではなく、例えばアクティブ静電方式の電子ペン及び位置検出装置部を用いることができるのは言うまでもない。

上述の第１の実施形態において収集する生体情報は、心拍や体温に限られるものではないことは勿論である。

また、上述の第１の実施形態及び第２の実施形態は、操作者が運転者で、操作対象の自動車は、タクシーの場合であるが、これに限定されるものではないことも言うまでもない。例えば、操作対象が荷物を運搬するトラックで、操作者がその運転者であってもよいし、操作対象がバスで、操作者がその運転者であってもよい。また、操作対象は、自動車に限られるものではなく、バイクや自転車であってもよい。

また、自動車は、陸上を走行するものに限らず、水陸両用車や空陸両用車でもよい。また、操作対象は、自動車ではなく、船舶や航空機であってもよい。

１…自動車、２…運転者、３…情報収集装置、４…判断装置、５…通信ネットワーク、１０…タブレット端末、２０…電子ペン、４０…管理サーバ装置４０…感情サーバ装置、６０…自動車用装置

Claims (16)

1. 操作対象装置を操作する操作者が、前記操作をするのに不適切な状態になっているかどうかを判断するための情報を収集する情報収集装置と、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する判断装置とを備える操作者状態判断システムであって、
   前記情報収集装置は、
   前記操作者に装着されて前記操作者の生体情報を取得する生体情報取得手段と、
   前記操作者による筆記入力を受け付けて、筆記入力に対応する筆記軌跡情報を取得する筆記軌跡情報取得手段と、
   前記生体情報取得手段で取得した前記生体情報と、前記筆記軌跡情報取得手段で取得した前記筆記軌跡情報とを前記判断装置に送信する送信手段と、
   を備え、
   前記判断装置は、
   前記情報収集装置から送信されてくる前記生体情報と前記筆記軌跡情報とを受信する受信手段と、
   前記受信手段で受信した前記生体情報に基づいて前記操作者の体調について判断する第１の判断手段と、
   前記受信手段で受信した前記筆記軌跡情報に基づいて前記操作者の心的状態について判断する第２の判断手段と、
   前記第１の判断手段の判断結果及び前記第２の判断手段の判断結果に基づいて、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する状態判断手段と、
   を備えることを特徴とする操作者状態判断システム。
2. 前記筆記軌跡情報取得手段は、前記操作者が前記筆記入力を行うための電子ペンと、前記電子ペンによる指示位置を検出して、前記筆記軌跡情報を出力する位置検出装置とを備える
   ことを特徴とする請求項１に記載の操作者状態判断システム。
3. 前記電子ペンは、用紙に筆記する筆記具の機能を備えており、
   前記位置検出装置は、前記電子ペンの前記筆記具の機能により前記用紙に筆記されたときの指示位置を検出する機能を備える
   ことを特徴とする請求項２に記載の操作者状態判断システム。
4. 前記電子ペンは、筆圧検出手段を備えると共に、前記筆圧検出手段で検出した筆圧情報を前記位置検出装置に伝達する手段を備えており、
   前記位置検出装置から出力される前記筆記軌跡情報には、前記電子ペンによる指示位置の座標情報と、前記筆圧情報とを含む
   ことを特徴とする請求項２に記載の操作者状態判断システム。
5. 前記位置検出装置は、前記電子ペンによる指示位置を検出したときの時間情報を取得する手段を備えていると共に、前記位置検出装置から出力される前記筆記軌跡情報には、前記電子ペンによる指示位置の座標情報と、前記指示位置の座標情報に対応する前記時間情報とを含む
   ことを特徴とする請求項２に記載の操作者状態判断システム。
6. 前記電子ペンは、筆圧検出手段を備えると共に、前記筆圧検出手段で検出した筆圧情報を前記位置検出装置に伝達する手段を備えており、
   前記位置検出装置は、前記電子ペンによる指示位置を検出したときの時間情報を取得する手段を備えていると共に、前記位置検出装置から出力される前記筆記軌跡情報には、前記電子ペンによる指示位置の座標情報と、前記指示位置の座標情報に対応する前記時間情報と、前記筆圧情報とを含む
   ことを特徴とする請求項２に記載の操作者状態判断システム。
7. 前記判断装置は、前記操作者により、予め定められた特定パターンの筆記軌跡が筆記入力されたときの特定パターン筆記軌跡情報を記憶している記憶手段を備えており、
   前記筆記軌跡情報取得手段は、前記操作者により筆記入力された前記特定パターンの筆記軌跡情報を取得するものであり、
   前記第２の判断手段は、前記情報収集装置から受信した情報に含まれる前記特定パターンの筆記軌跡情報と、前記記憶手段に記憶されている前記特定パターン筆記軌跡情報とを用いて前記操作者の心的状態についての判断を行う
   ことを特徴とする請求項１に記載の操作者状態判断システム。
8. 前記電子ペンは、複数の前記操作者のそれぞれ毎に割り当てられており、前記位置検出装置に対して、それぞれの識別情報を伝達する機能を備え、
   前記位置検出装置は、前記電子ペンのそれぞれによる前記指示位置に基づく前記筆記軌跡情報を前記識別情報と対応付けて取得し、
   前記送信手段は、前記筆記軌跡情報は前記識別情報と対応付けて前記判断装置に送信し、
   前記判断装置は、前記操作者により、予め定められた特定パターンの筆記軌跡が筆記入力されたときの特定パターン筆記軌跡情報を、前記識別情報に対応付けて記憶している記憶手段を備えており、
   前記筆記軌跡情報取得手段は、前記操作者により筆記入力された前記特定パターンの筆記軌跡情報を前記識別情報と対応付けて取得するものであり、
   前記第２の判断手段は、前記情報収集装置から受信した情報に含まれる前記特定パターンの筆記軌跡の筆記軌跡情報と、前記記憶手段に記憶されている前記特定パターン筆記軌跡情報とを、同一の前記識別情報が付与されているもの同士を用いて前記操作者の心的状態についての判断を行う
   ことを特徴とする請求項２に記載の操作者状態判断システム。
   
9. 前記操作者の生体情報は、前記操作者の心拍、血圧、血糖、体温、発汗のいずれか、または、それらの組み合わせを含み、前記生体情報取得手段は、前記操作者の腕に装着される
   ことを特徴とする請求項１に記載の操作者状態判断システム。
10. 前記生体情報取得手段は、前記生体情報として前記操作者の顔画像を撮影して取得するカメラを含む
    ことを特徴とする請求項１に記載の操作者状態判断システム。
11. 前記判断装置は、前記情報収集装置からの前記筆記軌跡情報から、前記操作者の筆記入力時の感情状態を推定する感情状態推定手段を備えており、前記状態判断手段は、前記感情状態推定手段で推定された前記操作者の感情の情報をも用いて、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する
    ことを特徴とする請求項１に記載の操作者状態判断システム。
12. 前記感情状態推定手段は、筆記入力をしたときの筆記者の複数種の感情状態のそれぞれと、前記複数種の感情状態のそれぞれのときの筆記入力による筆記軌跡情報とが対応付けられて記憶されている感情状態データベースを備える
    ことを特徴とする請求項１１に記載の操作者状態判断システム。
13. 前記情報収集装置と前記判断装置とは、ネットワークを通じて無線で接続されている
    ことを特徴とする請求項１に記載の操作者状態判断システム。
14. 前記ネットワークには、前記情報収集装置からの前記筆記軌跡情報から、前記操作者の筆記入力時の感情を推定する感情推定装置が接続されており、
    前記判断装置の前記状態判断手段は、前記感情推定装置からの前記操作者の推定された感情の情報をも用いて、前記操作者が、前記操作をするのに不適切な状態になっているかどうかを判断する
    ことを特徴とする請求項１３に記載の操作者状態判断システム。
15. 前記判断装置は、前記操作対象装置とネットワークを通じて無線接続されており、前記状態判断手段で前記操作者が、前記操作をするのに不適切な状態になっていると判断したときに、前記操作対象装置の動作を停止させる制御信号を前記ネットワークを通じて供給する手段を備える
    ことを特徴とする請求項１に記載の操作者状態判断システム。
16. 前記判断装置は、前記操作者が備える通信装置とネットワークを通じて無線接続されており、前記状態判断手段で前記操作者が、前記操作をするのに不適切な状態になっていると判断したときに、前記通信装置にアラームを前記ネットワークを通じて送信する
    ことを特徴とする請求項１に記載の操作者状態判断システム。

Images