WO2023181494A1

WO2023181494A1 - 評価装置、評価方法及び評価プログラム

Info

Publication number: WO2023181494A1
Application number: PCT/JP2022/042990
Authority: WO
Inventors: 敦齋藤; 賢二宮; 修二箱嶋; 妙子海老原
Original assignee: JVCKenwood Corp
Current assignee: JVCKenwood Corp
Priority date: 2022-03-24
Filing date: 2022-11-21
Publication date: 2023-09-28
Anticipated expiration: 2024-09-24
Also published as: JP2023142110A; EP4483816A4; EP4483816B1; US20250009283A1; EP4483816A1

Abstract

評価装置は、表示部と、被験者の注視点の位置を検出する注視点検出部と、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部に表示させる表示制御部と、対象物それぞれに対応した対象物判定領域と、表示部の全体に対応した全体判定領域とをタスクごとに設定する領域設定部と、検出された注視点の位置に基づいて注視点が対象物判定領域及び全体判定領域のそれぞれに存在するかを判定する判定部と、判定結果に基づいて注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率と、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率とを算出する演算部と、演算部で算出された対象物注視率及び全体注視率に基づくスコアを算出しスコアに基づいて評価データを求める評価部とを備える。

Description

評価装置、評価方法及び評価プログラム

　本開示は、評価装置、評価方法及び評価プログラムに関する。

　被験者に人物映像、幾何学模様等の画像を見せた場合における被験者の注視点を検出することにより、自閉スペクトラム症（ＡＳＤ：Autism　Spectrum　Disorder）等の発達障がいを評価する手法が提案されている（例えば特許文献１）。

特開２０１７－９９５１３号公報

　特許文献１に記載の評価技術においては、ＡＳＤの被験者特有の特性に対してより精度よく評価することが求められる。

　本開示は、上記に鑑みてなされたものであり、ＡＳＤの被験者特有の特性に対する評価の精度を向上させることが可能な評価装置、評価方法及び評価プログラムを提供することを目的とする。

　本開示に係る評価装置は、表示部と、被験者の注視点の位置を検出する注視点検出部と、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて前記表示部に表示させる表示制御部と、前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定する領域設定部と、検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定する判定部と、前記判定部の判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出する演算部と、前記演算部で算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアに基づいて評価データを求める評価部とを備える。

　本開示に係る評価方法は、被験者の注視点の位置を検出することと、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部に表示させることと、前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定することと、検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定することと、判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出することと、算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアが閾値を超えるか否かを示す評価データを求めることとを行う。

　本開示に係る評価プログラムは、被験者の注視点の位置を検出する処理と、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部に表示させる処理と、前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定する処理と、検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定する処理と、判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出する処理と、算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアに基づいて評価データを求める処理とをコンピュータに実行させる。

　本開示によれば、ＡＳＤの被験者特有の特性に対する評価の精度を向上させることができる。

図１は、本実施形態に係る評価装置の一例を模式的に示す図である。図２は、評価装置の一例を示す機能ブロック図である。図３は、表示部に表示する単位画像の一例を示す図である。図４は、本実施形態に係る評価方法の一例を示すフローチャートである。

　以下、本開示に係る評価装置、評価方法及び評価プログラムの実施形態を図面に基づいて説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。

　［評価装置］
　図１は、本実施形態に係る評価装置１００の一例を模式的に示す図である。本実施形態に係る評価装置１００は、被験者の視線を検出し、検出結果を用いることで自閉スペクトラム症（以下、ＡＳＤと表記する）についての評価を行う。評価装置１００は、例えば被験者の瞳孔の位置と角膜反射像の位置とに基づいて視線を検出する方法、又は被験者の目頭の位置と虹彩の位置とに基づいて視線を検出する方法等、各種の方法により被験者の視線を検出することができる。

　図１に示すように、評価装置１００は、表示装置１０と、画像取得装置２０と、コンピュータシステム３０と、出力装置４０と、入力装置５０と、入出力インターフェース装置６０とを備える。表示装置１０、画像取得装置２０、コンピュータシステム３０、出力装置４０及び入力装置５０は、入出力インターフェース装置６０を介してデータ通信を行う。表示装置１０及び画像取得装置２０は、それぞれ不図示の駆動回路を有する。

　表示装置１０は、液晶ディスプレイ（liquid　crystal　display：ＬＣＤ）又は有機ＥＬディスプレイ（organic　electroluminescence　display：ＯＬＥＤ）のようなフラットパネルディスプレイを含む。本実施形態において、表示装置１０は、表示部１１を有する。表示部１１は、画像等の情報を表示する。表示部１１は、ＸＹ平面と実質的に平行である。ＸＹ平面におけるＸ軸方向は表示部１１の左右方向であり、Ｙ軸方向は表示部１１の上下方向であり、Ｚ軸方向は表示部１１と直交する奥行方向である。表示装置１０は、ヘッドマウント型ディスプレイ装置であってもよい。表示装置１０がヘッドマウント型ディスプレイ装置である場合、ヘッドマウントモジュール内に画像取得装置２０のような構成が配置されることになる。

　画像取得装置２０は、被験者の左右の眼球ＥＢの画像データを取得し、取得した画像データをコンピュータシステム３０に送信する。画像取得装置２０は、撮影装置２１を有する。撮影装置２１は、被験者の左右の眼球ＥＢを撮影することで画像データを取得する。撮影装置２１は、被験者の視線を検出する方法に応じた各種カメラを有する。例えば被験者の瞳孔の位置と角膜反射像の位置とに基づいて視線を検出する方式の場合、撮影装置２１は、赤外線カメラを有し、例えば波長８５０［ｎｍ］の近赤外光を透過可能な光学系と、その近赤外光を受光可能な撮像素子とを有する。また、例えば被験者の目頭の位置と虹彩の位置とに基づいて視線を検出する方式の場合、撮影装置２１は、可視光カメラを有する。撮影装置２１は、フレーム同期信号を出力する。フレーム同期信号の周期は、例えば２０［ｍｓｅｃ］とすることができるが、これに限定されない。撮影装置２１は、例えば第１カメラ２１Ａ及び第２カメラ２１Ｂを有するステレオカメラの構成とすることができるが、これに限定されない。

　また、例えば被験者の瞳孔の位置と角膜反射像の位置とに基づいて視線を検出する方式の場合、画像取得装置２０は、被験者の眼球ＥＢを照明する照明装置２２を有する。照明装置２２は、ＬＥＤ（light　emitting　diode）光源を含み、例えば波長８５０［ｎｍ］の近赤外光を射出可能である。なお、例えば被験者の目頭の位置と虹彩の位置とに基づいて視線を検出する方式の場合、照明装置２２は設けられなくてもよい。照明装置２２は、撮影装置２１のフレーム同期信号に同期するように検出光を射出する。照明装置２２は、例えば第１光源２２Ａ及び第２光源２２Ｂを有する構成とすることができるが、これに限定されない。

　コンピュータシステム３０は、評価装置１００の動作を統括的に制御する。コンピュータシステム３０は、演算処理装置３０Ａ及び記憶装置３０Ｂを含む。演算処理装置３０Ａは、ＣＰＵ（central　processing　unit）のようなマイクロプロセッサを含む。記憶装置３０Ｂは、ＲＯＭ（read　only　memory）及びＲＡＭ（random　access　memory）のようなメモリ又はストレージを含む。演算処理装置３０Ａは、記憶装置３０Ｂに記憶されているコンピュータプログラム３０Ｃに従って演算処理を実施する。

　出力装置４０は、フラットパネルディスプレイのような表示装置を含む。なお、出力装置４０は、印刷装置を含んでもよい。入力装置５０は、操作されることにより入力データを生成する。入力装置５０は、コンピュータシステム用のキーボード又はマウスを含む。なお、入力装置５０が表示装置である出力装置４０の表示部に設けられたタッチセンサを含んでもよい。

　本実施形態に係る評価装置１００は、表示装置１０とコンピュータシステム３０とが別々の装置である。なお、表示装置１０とコンピュータシステム３０とが一体でもよい。例えば評価装置１００がタブレット型パーソナルコンピュータを含んでもよい。この場合、当該タブレット型パーソナルコンピュータに、表示装置、画像取得装置、コンピュータシステム、入力装置、出力装置等が搭載されてもよい。

　図２は、評価装置１００の一例を示す機能ブロック図である。図２に示すように、コンピュータシステム３０は、表示制御部３１と、注視点検出部３２と、領域設定部３３と、判定部３４と、演算部３５と、評価部３６と、入出力制御部３７と、記憶部３８とを有する。コンピュータシステム３０の機能は、演算処理装置３０Ａ及び記憶装置３０Ｂ（図１参照）によって発揮される。なお、コンピュータシステム３０は、一部の機能が評価装置１００の外部に設けられてもよい。

　表示制御部３１は、評価用画像を表示部１１に表示する。本実施形態において、評価用画像は、例えば人物、物体等のような特異度を有する対象物（以下、特異度対象物と表記する）と、図形、幾何学模様等のような感度を有する対象物（以下、感度対象物と表記する）の少なくとも一方を含む複数の単位画像を含む。単位画像は、静止画及び動画の少なくとも一方を含む。特異度対象物は、ＡＳＤである可能性の低い被験者が注視する傾向にある対象物である。このような特異度対象物としては、例えば人物、物体等が挙げられる。感度対象物は、ＡＳＤである可能性の高い被験者が注視する傾向にある対象物である。このような感度対象物としては、例えば図形、幾何学模様等が挙げられる。

　評価用画像において、特異度対象物及び感度対象物は、同一の単位画像内に存在してもよいし、異なる単位画像に存在してもよい。表示制御部３１は、評価用画像として、１つの単位画像を１つのタスクで表示部１１に表示させる。表示制御部３１は、予め用意された複数の単位画像を異なるタスクにおいて表示部１１に表示させる。表示制御部３１は、上記の評価用画像を、例えば評価用動画として表示部１１に表示することができるが、表示形態については評価用動画に限定されず、静止画であってもよい。

　注視点検出部３２は、被験者の注視点の位置データを検出する。本実施形態において、注視点検出部３２は、画像取得装置２０によって取得される被験者の左右の眼球ＥＢの画像データに基づいて、三次元グローバル座標系で規定される被験者の視線ベクトルを検出する。注視点検出部３２は、検出した被験者の視線ベクトルと表示装置１０の表示部１１との交点の位置データを、被験者の注視点の位置データとして検出する。つまり、本実施形態において、注視点の位置データは、三次元グローバル座標系で規定される被験者の視線ベクトルと、表示装置１０の表示部１１との交点の位置データである。注視点検出部３２は、規定のサンプリング周期毎に被験者の注視点の位置データを検出する。このサンプリング周期は、例えば撮影装置２１から出力されるフレーム同期信号の周期（例えば２０［ｍｓｅｃ］毎）とすることができる。

　領域設定部３３は、表示部１１において、対象物それぞれに対応した対象物判定領域と、表示部１１の全体に対応した全体判定領域とをタスクごとに設定する。本実施形態において、領域設定部３３で設定される各判定領域は、原則として表示部１１には表示されない。なお、例えば表示制御部３１の制御により、各判定領域が表示部１１に表示されるようにしてもよい。対象物判定領域は、全体判定領域に含まれる。

　判定部３４は、注視点の位置データに基づいて、注視点が判定領域に存在するか否かをそれぞれ判定し、判定結果を判定データとして出力する。判定部３４は、規定の判定周期毎に注視点が判定領域に存在するか否かを判定する。判定周期としては、例えば撮影装置２１から出力されるフレーム同期信号の周期（例えば２０［ｍｓｅｃ］毎）とすることができる。つまり、判定部３４の判定周期は、注視点検出部３２のサンプリング周期と同一である。判定部３４は、注視点検出部３２で注視点の位置がサンプリングされる毎に当該注視点について判定を行い、判定データを出力する。判定領域が複数設定される場合、判定部３４は、注視点が存在するか否かを判定領域毎に判定して判定データを出力することができる。

　演算部３５は、判定部３４の判定結果に基づいて、対象物注視率及び全体注視率を算出する。対象物注視率は、注視点がタスクごとに対象物判定領域に存在する割合を示す。全体注視率は、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す。演算部３５は、表示部１１に評価用映像が表示されてからの経過時間を検出するタイマと、判定部３４により対象物判定領域及び全体判定領域に注視点が存在すると判定された判定回数をカウントするカウンタとを有する。

　演算部３５は、判定部３４の判定データに基づいて、注視点の存在時間データを算出する。存在時間データは、判定領域に注視点が存在する時間を示すデータである。判定部３４により注視点が判定領域に存在すると判定された回数が多いほど、判定領域に注視点が存在した存在時間が長いと推定することができる。したがって、存在時間データは、判定領域に注視点が存在すると判定部３４に判定された回数とすることができる。

　演算部３５は、例えば、評価用映像の１つのタスクが開始されてから終了するまでの時間と、対象物判定領域における存在時間データとに基づいて、注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率を算出する。また、演算部３５は、例えば、評価用映像の最初のタスクが開始されてから最後のタスクが終了するまでの時間と、全体判定領域における存在時間データとに基づいて、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率を算出する。

　評価部３６は、対象物注視率及び全体注視率に基づいて、被験者を評価するためのスコアを算出する。評価部３６は、算出したスコアに基づいて被験者の評価データを求める。評価部３６は、スコアを求める際、対象物注視率よりも全体注視率の重みづけを重くしてスコアを算出してもよい。また、評価部３６は、記憶部３８に記憶される後述の参照データと、演算部３５で算出された対象物注視率及び全体注視率との相関の強さを示す相関係数を算出し、算出した相関係数に基づいて対象物注視率及び全体注視率に重みづけを設定してスコアを算出してもよい。

　入出力制御部３７は、画像取得装置２０及び入力装置５０の少なくとも一方からのデータ（眼球ＥＢの画像データ、入力データ等）を取得する。また、入出力制御部３７は、表示装置１０及び出力装置４０の少なくとも一方にデータを出力する。入出力制御部３７は、被験者に対する課題をスピーカ等の出力装置４０から出力してもよい。

　記憶部３８は、上記の判定データ、存在時間データ、対象物注視率及び全体注視率の参照データ、及び評価データ等の各データを記憶する。ここで、対象物注視率及び全体注視率の参照データは、ＡＳＤと診断された被験者についての対象物注視率及び全体注視率の算出結果と、ＡＳＤではないと診断された被験者についての対象物注視率及び全体注視率の算出結果とを含むデータである。

　また、記憶部３８は、被験者の注視点の位置を検出する処理と、特異度領域及び感度領域の少なくとも一方に対応する対象物を含む複数の異なる画像を異なるタスクにおいて表示部に表示させる処理と、対象物それぞれに対応した対象物判定領域と、表示部の全体に対応した全体判定領域とをタスクごとに設定する処理と、検出された注視点の位置に基づいて、注視点が対象物判定領域及び全体判定領域のそれぞれに存在するかをタスクごとに判定する処理と、判定部の判定結果に基づいて、注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率と、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率とを算出する処理と、演算部で算出された対象物注視率及び全体注視率に基づくスコアを算出し、算出したスコアに基づいて評価データを求める処理とをコンピュータに実行させる評価プログラムを記憶する。

　［評価方法］
　次に、本実施形態に係る評価方法について説明する。本実施形態に係る評価方法では、上記の評価装置１００を用いることにより、被験者の評価データが所定の閾値を超えるか否かについて評価する。

　図３は、表示部１１に表示する単位画像の一例を示す図である。図３に示すように、表示制御部３１は、特異度対象物Ｍ１及び感度対象物Ｍ２の少なくとも一方を含む単位画像ＩＭを１つのタスクにおいて表示部１１に表示する。図３に示す例において、特異度対象物Ｍ１は、例えば人物であり、感度対象物Ｍ２は、例えば図形である。表示制御部３１は、タスクごとに異なる単位画像ＩＭを表示部１１に表示する。図３では、最初のタスクで表示する単位画像ＩＭを単位画像ＩＭ１として表記し、ｋ番目のタスクで表示する単位画像を単位画像ＩＭｋとして表記している。表示制御部３１は、単位画像ＩＭとして、特異度対象物Ｍ１及び感度対象物Ｍ２のいずれか一方のみを含む画像を表示部１１に表示させてもよい。この場合、被験者の興味を分散させないようにすることができる。

　領域設定部３３は、特異度対象物Ｍ１及び感度対象物Ｍ２に対応した対象物判定領域Ａ１、Ａ２を設定する。領域設定部３３は、互いに重ならない範囲に対象物判定領域Ａ１、Ａ２を設定する。対象物判定領域Ａ１、Ａ２は、表示部１１には表示されない。また、領域設定部３３は、表示部１１の全体に対応する全体判定領域Ａ３を設定する。対象物判定領域Ａ１、Ａ２は、全体判定領域Ａ３の一部であり、全体判定領域Ａ３に含まれる。

　領域設定部３３は、対象物判定領域Ａ１、Ａ２を設定する場合、１つのタスクにおいて２領域以内とすることができる。例えば、１つのタスクで表示される１つの単位画像ＩＭに特異度対象物Ｍ１と感度対象物Ｍ２とが含まれる場合、特異度対象物Ｍ１について１領域、感度対象物Ｍ２について１領域、として設定することができる。領域設定部３３は、例えば特異度対象物Ｍ１、感度対象物Ｍ２が１つの単位画像ＩＭに複数含まれる場合、複数の特異度対象物Ｍ１についてまとめて１領域、複数の感度対象物Ｍ２についてまとめて１領域、というように設定することができる。対象物判定領域Ａ１、Ａ２の形状は、例えば、矩形、円形、楕円形、多角形などであってもよく、限定されない。複数の対象物判定領域Ａ１、Ａ２の大きさは、異なってもよい。

　一般的に、ＡＳＤである可能性の高い被験者は、ＡＳＤである可能性の低い被験者に比べて、人物、動物、植物等の特異度対象物よりも、図形、幾何学模様等の感度対象物への興味（こだわり）が強い傾向にある。このことに加えて、本発明者は、ＡＳＤである可能性の高い被験者が、ＡＳＤである可能性の低い被験者に比べて、全タスクを通じて表示部１１を注視する割合が低い傾向にあることを見出した。そこで、本実施形態では、被験者に対して表示部１１の評価用映像を見るように指示した後、被験者の注視点を検出し、検出結果に基づいて評価データを求めることで評価を行うものである。

　まず、表示制御部３１は、評価用画像を表示部１１に表示する。評価用画像には、複数のタスクが時系列順に含まれる。１つのタスクにおいて、１つの単位画像ＩＭが表示部１１に表示される。なお、表示制御部３１は、１つのタスクの最初に、注視点を所望の位置に移動させるためのアイキャッチ映像を表示部１１に表示させてもよい。また、領域設定部３３は、評価用画像の単位画像ＩＭが表示された状態で、特異度対象物Ｍ１に対応する対象物判定領域Ａ１と、感度対象物Ｍ２に対応する対象物判定領域Ａ２と、表示部１１の全体に対応する全体判定領域Ａ３とを設定する。

　表示制御部３１は、１つのタスクが終了した後、次のタスクにおいて、他の単位画像を表示部１１に表示させる。領域設定部３３は、他の単位画像が表示された状態で、対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３を設定する。このように、表示制御部３１によりタスクごとに異なる単位画像が表示部１１に表示される。また、領域設定部３３によりタスクごとに単位画像に対応する対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３が設定される。なお、表示制御部３１は、対象物注視率の検出に用いない単位画像を表示部１１に表示させるタスクを設定してもよい。

　注視点検出部３２は、評価用画像が表示される期間において、規定のサンプリング周期（例えば２０［ｍｓｅｃ］）毎に、被験者の注視点の位置を検出する。被験者の注視点の位置が検出された場合、判定部３４は、被験者の注視点が対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に存在するかを判定し、判定データを出力する。したがって、判定部３４は、注視点検出部３２で注視点の位置がサンプリングされる毎に、上記のサンプリング周期と同一の判定周期毎に判定データを出力する。

　演算部３５は、判定データに基づいて、被験者の注視点データを算出する。演算部３５は、注視点データとして、存在時間データを算出する。存在時間データは、被験者の注視点が対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に存在した存在時間を示す。本実施形態では、判定部３４により注視点が対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に存在すると判定された回数が多いほど、対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に注視点が存在した存在時間が長いと推定することができる。したがって、存在時間データは、対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に注視点が存在すると判定部３４に判定された回数とすることができる。

　演算部３５は、１つのタスクについて算出した対象物判定領域Ａ１及び対象物判定領域Ａ２の存在時間データと、当該１つのタスクの開始から終了までの時間とに基づいて、特異度対象物Ｍ１についての対象物注視率と、感度対象物Ｍ２についての対象物注視率を算出する。演算部３５は、タスクごとに対象物注視率を算出する。演算部３５は、１つのタスクにおいて、例えばタスクの最初の１秒間、最初の２秒間、タスクの全時間の３種類の期間について、対象物注視率を算出する。演算部３５は、算出した３種類の対象物注視率のうち、後述する参照データとの相関が認められる値を使用することができる。また、表示制御部３１によりタスクの最初にアイキャッチ画像が表示される場合、当該アイキャッチ画像が表示される期間については対象物注視率を算出するための時間範囲から除外することができる。例えば、タスクの最初の０．３秒間がアイキャッチ画像の表示期間である場合、演算部３５は、タスクの最初から０．３秒後を起点として対象物注視率を算出することができる。

　また、演算部３５は、それぞれのタスクにおいて算出された全体判定領域Ａ３の存在時間データと、最初のタスクの開始から最後のタスクの終了までの時間とに基づいて、表示部１１の全体における全体注視率を算出する。

　評価部３６は、算出した対象物注視率及び全体注視率に基づいて評価値を求め、評価値に基づいて評価データを求める。本実施形態において、特異度対象物Ｍ１についての対象物注視率をＲ１、感度対象物Ｍ２についての対象物注視率をＲ２、全体注視率をＲ３、とすると、評価スコアＴＳは、
　ＴＳ＝Σ_ｋ（Σ_ｍＣ１_ｋ，ｍ・Ｒ１_ｋ，ｍ＋Σ_ｎＣ２_ｋ，ｎ・Ｒ２_ｋ，ｎ）＋Ｃ３・Ｒ３
　とすることができる。ただし、Ｃ１は特異度対象物Ｍ１についての対象物注視率Ｒ１の重みを示す係数であり、Ｃ２は感度対象物Ｍ２についての対象物注視率Ｒ２の重みを示す係数であり、Ｃ３は全体注視率Ｒ３の重みを示す係数である。ｋはタスクの番号を示す。ｍはタスク内の特異度領域の番号を示す。ｎはタスク内の感度領域の番号を示す。

　ＡＳＤである可能性の低い被験者は、ＡＳＤである可能性の高い被験者に比べて、特異度対象物Ｍ１の対象物注視率Ｒ１が高く、感度対象物Ｍ２の対象物注視率Ｒ２が低い傾向にある。すなわち、ＡＳＤである可能性の低い被験者は、特異度を示す値が高く、感度を示す値が低い傾向にある。一方、ＡＳＤである可能性の高い被験者は、ＡＳＤである可能性の低い被験者に比べて、感度対象物Ｍ２の対象物注視率Ｒ２が高く、特異度対象物Ｍ１の対象物注視率Ｒ１が低い傾向にある。すなわち、ＡＳＤである可能性の高い被験者は、感度を示す値が高く、特異度を示す値が低い傾向にある。

　ＡＳＤである可能性の低い被験者は、ＡＳＤである可能性の高い被験者に比べて、全体注視率Ｒ３が高い傾向にある。一方、ＡＳＤである可能性の高い被験者は、ＡＳＤである可能性の低い被験者に比べて、全体注視率Ｒ３が低い傾向にある。この結果から、全体注視率Ｒ３は、特異度の傾向を示す値として用いることができる。

　評価部３６は、対象物注視率Ｒ１、Ｒ２よりも全体注視率Ｒ３の重みづけが重くなるようにＣ１、Ｃ２、Ｃ３の値を設定することができる。また、評価部３６は、記憶部３８に記憶される参照データと、演算部３５で算出された対象物注視率Ｒ１、Ｒ２との相関の強さを示す相関係数を算出し、算出した相関係数に基づいてＣ１、Ｃ２の値を設定することができる。

　本実施形態において、参照データは、例えば、ＡＳＤである可能性が低いと診断された被験者と、ＡＳＤである可能性が高いと診断された被験者とに対して評価用画像に含まれる各単位画像を注視させ、対象物注視率及び全体注視率を予め算出したデータである。評価部３６は、参照データのうちＡＳＤである可能性が低いと診断された被験者の対象物注視率を示す参照値を０、ＡＳＤである可能性が高いと診断された被験者の対象物注視率を示す参照値を１として、当該参照値と、評価対象となる被験者の対象物注視率の算出値とに基づいて相関係数を算出することができる。なお、参照値としては、複数の被験者の対象物注視率の平均値等を用いることができる。評価部３６は、例えば相関係数が０．２５未満となる場合には、該当するＣ１、Ｃ２の係数を０とすることができる。また、評価部３６は、例えば相関係数が０．２５以上となる場合には、該当するＣ１、Ｃ２の係数を１とすることができる。係数Ｃ１、Ｃ２の設定手法については、上記に限定されず、例えば相関係数の値をＣ１、Ｃ２の係数の値としてもよい。

　評価部３６は、例えば特異度の強さを示す対象物注視率Ｒ１の係数Ｃ１及び全体注視率Ｒ３の係数Ｃ３を負の値とし、感度の強さを示す対象物注視率Ｒ２の係数Ｃ２を正の値とするなど、係数Ｃ１、Ｃ３と、係数Ｃ２との間で符号の異なる重みづけを設定することができる。この場合、評価スコアＴＳが小さいほど特異度が強く、評価スコアＴＳが大きいほど感度が強いことを示す。評価部３６は、例えば評価スコアＴＳに閾値を設定し、評価スコアＴＳが閾値を下回る場合に特異度が強いと評価し、評価スコアＴＳが閾値以上となる場合に感度が強いと評価することができる。

　本実施形態において、評価部３６が評価データを出力した場合、入出力制御部３７は、評価データに応じて、例えば「被験者は特異度が強いと思われます」の文字データや、「被験者は感度が強いと思われます」の文字データ等を出力装置４０に出力させることができる。

　次に、本実施形態に係る評価方法の一例について、図４を参照しながら説明する。図４は、本実施形態に係る評価方法の一例を示すフローチャートである。本実施形態に係る評価方法において、図４に示すように、まず表示制御部３１は、表示部１１に評価用画像として最初のタスクに係る単位画像ＩＭを表示する（ステップＳ１０１）。領域設定部３３は、単位画像ＩＭのうち特異度対象物Ｍ１及び感度対象物Ｍ２に対応する対象物判定領域Ａ１、Ａ２と、表示部１１の全体に対応する全体判定領域Ａ３と、を設定する（ステップＳ１０２）。

　その後、注視点検出部３２は、所定のサンプリング周期で注視点の位置をサンプリングし、注視点の位置を検出する（ステップＳ１０３）。判定部３４は、注視点検出部３２で注視点の位置がサンプリングされる毎に、当該注視点の位置に基づいて注視点が対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３に存在するか否かをそれぞれ判定し、判定データを出力する（ステップＳ１０４）。演算部３５は、判定データに基づいて、対象物判定領域Ａ１、Ａ２及び全体判定領域Ａ３における存在時間を算出する（ステップＳ１０５）。演算部３５は、当該タスクにおける表示時間が終了したか否かを判定する（ステップＳ１０６）。表示時間が終了していないと判定された場合（ステップＳ１０６のＮｏ）、ステップＳ１０３以降の処理を繰り返し行う。

　表示時間が終了したと判定された場合（ステップＳ１０６のＹｅｓ）、表示制御部３１は、全てのタスクが終了したか否かを判定する（ステップＳ１０７）。全てのタスクが終了していないと判定した場合（ステップＳ１０７のＮｏ）、表示制御部３１は、次のタスクに係る単位画像ＩＭを表示部１１に表示させ（ステップＳ１０８）、ステップＳ１０２以降の処理を繰り返し行わせる。

　全てのタスクが終了したと判定した場合（ステップＳ１０７のＹｅｓ）、演算部３５は、演算結果に基づいて対象物注視率及び全体注視率を算出する（ステップＳ１０９）。評価部３６は、演算部３５の算出結果に基づいて評価スコアを算出し（ステップＳ１１０）、算出した評価スコアに基づいて評価データを算出して（ステップＳ１１１）、処理を終了する。

　以上のように、本実施形態に係る評価装置１００は、表示部１１と、被験者の注視点の位置を検出する注視点検出部３２と、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部１１に表示させる表示制御部３１と、対象物それぞれに対応した対象物判定領域と、表示部１１の全体に対応した全体判定領域とをタスクごとに設定する領域設定部３３と、検出された注視点の位置に基づいて、注視点が対象物判定領域及び全体判定領域のそれぞれに存在するかを判定する判定部３４と、判定部３４の判定結果に基づいて、注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率と、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率とを算出する演算部３５と、演算部３５で算出された対象物注視率及び全体注視率に基づくスコアを算出し、算出したスコアに基づいて評価データを求める評価部３６とを備える。

　本実施形態に係る評価方法は、被験者の注視点の位置を検出することと、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部１１に表示させることと、対象物それぞれに対応した対象物判定領域と、表示部１１の全体に対応した全体判定領域とをタスクごとに設定することと、検出された注視点の位置に基づいて、注視点が対象物判定領域及び全体判定領域のそれぞれに存在するかを判定することと、判定結果に基づいて、注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率と、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率とを算出することと、算出された対象物注視率及び全体注視率に基づくスコアを算出し、算出したスコアが閾値を超えるか否かを示す評価データを求めることとを行う。

　本実施形態に係る評価プログラムは、被験者の注視点の位置を検出する処理と、特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部１１に表示させる処理と、対象物それぞれに対応した対象物判定領域と、表示部１１の全体に対応した全体判定領域とをタスクごとに設定する処理と、検出された注視点の位置に基づいて、注視点が対象物判定領域及び全体判定領域のそれぞれに存在するかを判定する処理と、判定結果に基づいて、注視点がタスクごとに対象物判定領域に存在する割合を示す対象物注視率と、注視点が全てのタスクに亘って全体判定領域に存在する割合を示す全体注視率とを算出する処理と、算出された対象物注視率及び全体注視率に基づくスコアを算出し、算出したスコアに基づいて評価データを求める処理とをコンピュータに実行させる。

　この構成では、対象物注視率を算出することにより、被験者の特異度及び感度のいずれの特性を強く示すかの傾向を評価することができる。また、本発明者は、ＡＳＤである可能性の高い被験者が、ＡＳＤである可能性の低い被験者に比べて、全タスクを通じて表示部１１を注視する割合が低い傾向にあることを見出した。そこで、本実施形態では、対象物注視率に加えて被験者の全体注視率を算出することにより、ＡＳＤの被験者特有の特性に対する評価の精度を向上させることができる。

　本実施形態に係る評価装置１００において、評価部３６は、対象物注視率よりも全体注視率の重みづけを重くしてスコアを算出する。この構成によれば、被験者の全体注視率の評価をより強く反映させることができる。したがって、ＡＳＤの被験者特有の特性をより高精度に評価することができる。

　本実施形態に係る評価装置１００において、対象物注視率及び全体注視率の参照データを記憶する記憶部３８を更に備え、評価部３６は、記憶部３８に記憶される参照データと、演算部で算出された対象物注視率及び全体注視率との相関の強さを示す相関係数を算出し、算出した相関係数に基づいて対象物注視率及び全体注視率に重みづけを設定してスコアを算出する。この構成によれば、参照データに基づいて対象物注視率及び全体注視率に重みづけを設定するため、ＡＳＤの被験者特有の特性をより高精度に評価することができる。

　本開示の技術範囲は上記実施形態に限定されるものではなく、本開示の趣旨を逸脱しない範囲で適宜変更を加えることができる。

　本開示は、ＳＤＧｓの「すべての人に健康と福祉を」の実現に貢献し、ヘルスケア製品・サービスによる価値創出に寄与する事項を含む。

　本開示に係る評価装置、評価方法及び評価プログラムは、例えばコンピュータ等の処理装置等に利用することができる。

　Ａ１，Ａ２…対象物判定領域、Ａ３…全体判定領域、Ｍ１…特異度対象物、Ｍ２…感度対象物、ＥＢ…眼球、ＩＭ…単位画像、１０…表示装置、１１…表示部、２０…画像取得装置、２１…撮影装置、２１Ａ…第１カメラ、２１Ｂ…第２カメラ、２２…照明装置、２２Ａ…第１光源、２２Ｂ…第２光源、３０…コンピュータシステム、３０Ａ…演算処理装置、３０Ｂ…記憶装置、３０Ｃ…コンピュータプログラム、３１…表示制御部、３２…注視点検出部、３３…領域設定部、３４…判定部、３５…演算部、３６…評価部、３７…入出力制御部、３８…記憶部、４０…出力装置、５０…入力装置、６０…入出力インターフェース装置、１００…評価装置

Claims

　表示部と、
　被験者の注視点の位置を検出する注視点検出部と、
　特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて前記表示部に表示させる表示制御部と、
　前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定する領域設定部と、
　検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定する判定部と、
　前記判定部の判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出する演算部と、
　前記演算部で算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアに基づいて評価データを求める評価部と
　を備える評価装置。
　前記評価部は、前記対象物注視率よりも前記全体注視率の重みづけを重くして前記スコアを算出する
　請求項１に記載の評価装置。
　前記対象物注視率及び前記全体注視率の参照データを記憶する記憶部を更に備え、
　前記評価部は、前記記憶部に記憶される前記参照データと、前記演算部で算出された前記対象物注視率及び前記全体注視率との相関の強さを示す相関係数を算出し、算出した前記相関係数に基づいて前記対象物注視率及び前記全体注視率に重みづけを設定して前記スコアを算出する
　請求項１又は請求項２に記載の評価装置。
　被験者の注視点の位置を検出することと、
　特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部に表示させることと、
　前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定することと、
　検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定することと、
　判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出することと、
　算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアが閾値を超えるか否かを示す評価データを求めることと
　を行う評価方法。
　被験者の注視点の位置を検出する処理と、
　特異度を有する対象物及び感度を有する対象物の少なくとも一方を含む複数の単位画像を異なるタスクにおいて表示部に表示させる処理と、
　前記対象物それぞれに対応した対象物判定領域と、前記表示部の全体に対応した全体判定領域とを前記タスクごとに設定する処理と、
　検出された前記注視点の位置に基づいて、前記注視点が前記対象物判定領域及び前記全体判定領域のそれぞれに存在するかを判定する処理と、
　判定結果に基づいて、前記注視点が前記タスクごとに前記対象物判定領域に存在する割合を示す対象物注視率と、前記注視点が全ての前記タスクに亘って前記全体判定領域に存在する割合を示す全体注視率とを算出する処理と、
　算出された前記対象物注視率及び前記全体注視率に基づくスコアを算出し、算出した前記スコアに基づいて評価データを求める処理と
　をコンピュータに実行させる評価プログラム。