JP4876207B2 - 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム - Google Patents

認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム Download PDF

Info

Publication number
JP4876207B2
JP4876207B2 JP2010134403A JP2010134403A JP4876207B2 JP 4876207 B2 JP4876207 B2 JP 4876207B2 JP 2010134403 A JP2010134403 A JP 2010134403A JP 2010134403 A JP2010134403 A JP 2010134403A JP 4876207 B2 JP4876207 B2 JP 4876207B2
Authority
JP
Japan
Prior art keywords
risk
types
combination
feature quantities
prosodic feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010134403A
Other languages
English (en)
Other versions
JP2011255106A (ja
Inventor
昇平 加藤
朗子 小林
敏昭 小島
英則 伊藤
昭 本間
Original Assignee
国立大学法人 名古屋工業大学
株式会社イフコム
昭 本間
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 国立大学法人 名古屋工業大学, 株式会社イフコム, 昭 本間 filed Critical 国立大学法人 名古屋工業大学
Priority to JP2010134403A priority Critical patent/JP4876207B2/ja
Publication of JP2011255106A publication Critical patent/JP2011255106A/ja
Application granted granted Critical
Publication of JP4876207B2 publication Critical patent/JP4876207B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本発明は、認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラムに係り、特に、音声データに基づいて、認知機能障害の危険度を算出する認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラムに関する。
従来より、認知症のスクリーニングは、HDS−R(改訂長谷川式簡易知能評価スケール)、MMSE(Mini‐MentalState Examination)、CDR(Clinical DementiaRating)などが、fMRI、FDG‐PET、CSFバイオマーカーなどの神経生理学に基づくテストと同様に広く用いられている。これらは一定のトレーニングを受けた医師、あるいは臨床心理士などにより、主として医療機関において実施されている。
また、患者の認知症の症状レベルを特定してそれに応じた質問と正解を生成し、患者の回答と正解とを比較して正誤の判定を行う認知症診断支援システムが知られている(特許文献1)。
特開2007−282992号公報
しかしながら、上記特許文献1に記載の技術では、繰り返し診断を行う場合、患者が質問に対する正解を覚えてしまう可能性があり、正しい判定ができなくなってしまう、という問題がある。
本発明は、上記の問題点を解決するためになされたもので、認知機能障害の危険度を精度良く算出することができる認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラムを提供することを目的とする。
上記の目的を達成するために第1の発明に係る認知機能障害危険度算出装置は、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段と、前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段と、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段と、前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段と、を含んで構成されている。
第2の発明に係るプログラムは、コンピュータを、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段、前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段として機能させるためのプログラムである。
第1の発明及び第2の発明によれば、特徴量選択手段によって、音声データから抽出される複数種類の韻律特徴量と、音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、複数種類の韻律特徴量から、危険度との相関が最も高くなる韻律特徴量の組み合わせを選択する。重み付け決定手段によって、複数の学習データの各々の選択された韻律特徴量の組み合わせと危険度とに基づいて、選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する。
そして、特徴量抽出手段によって、入力された音声データから、複数種類の韻律特徴量を抽出する。危険度算出手段によって、特徴量抽出手段によって抽出された韻律特徴量のうちの選択された韻律特徴量の組み合わせと、重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する。
このように、認知機能障害の危険度との相関が最も高くなる韻律特徴量の組み合わせと、韻律特徴量の組み合わせの各々に対して決定された重み付けとに基づいて、認知機能障害の危険度を精度良く算出することができる。
第3の発明に係る認知機能障害危険度算出装置は、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して分析処理を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段と、前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段と、前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段と、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段と、前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段と、を含んで構成されている。
第4の発明に係るプログラムは、コンピュータを、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して分析処理を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段、前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段、前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段として機能させるためのプログラムである。
第3の発明及び第4の発明によれば、合成変数生成手段によって、音声データから抽出される複数種類の韻律特徴量と、音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの複数種類の韻律特徴量に対して分析処理を行って、複数種類の韻律特徴量を合成した合成変数を複数種類生成する。そして、合成変数選択手段によって、複数の学習データと、生成された複数種類の合成変数とに基づいて、複数種類の合成変数から、危険度との相関が最も高くなる合成変数の組み合わせを選択する。重み付け決定手段によって、複数の学習データの各々について求められる合成変数の組み合わせと、複数の学習データの各々の前記危険度とに基づいて、選択された合成変数の組み合わせの各々に対する重み付けを決定する。
そして、特徴量抽出手段によって、入力された音声データから、複数種類の韻律特徴量を抽出する。危険度算出手段によって、特徴量抽出手段によって抽出された韻律特徴量から求められる合成変数の組み合わせと、重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する。
このように、認知機能障害の危険度との相関が最も高くなる、韻律特徴量の合成変数の組み合わせと、合成変数の組み合わせの各々に対して決定された重み付けとに基づいて、認知機能障害の危険度を精度良く算出することができる。
上記の複数種類の韻律特徴量は、音声の周波数成分に関する特徴量、音声のフォルマント構造に関する特徴量、音声の大きさに関する特徴量、発話速度に関する特徴量、及び質問に回答するまでの反応時間に関する特徴量の少なくとも1つを含むようにすることができる。
上記の学習データの認知機能障害の危険度を、発話者に対する長谷川式簡易知能評価スケールによって求められたものとすることができる。
上記の特徴量抽出手段は、質問に対する回答として入力された音声データから、複数種類の韻律特徴量を抽出するようにすることができる。
第5の発明に係る認知機能障害危険度算出システムは、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段、及び前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段を含む特徴量選択装置と、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段を含む危険度算出装置と、を含んで構成されている。
第6の発明に係る認知機能障害危険度算出システムは、音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して主成分分析を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段、前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段、及び前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段を含む合成変数選択装置と、入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段を含む危険度算出装置と、を含んで構成されている。
本発明のプログラムは、記録媒体に格納して提供することができる。
以上説明したように、本発明の認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラムによれば、認知機能障害の危険度との相関が最も高くなる韻律特徴量の組み合わせと、韻律特徴量の組み合わせの各々に対して決定された重み付けとに基づいて、又は、認知機能障害の危険度との相関が最も高くなる、韻律特徴量の合成変数の組み合わせと、合成変数の組み合わせの各々に対して決定された重み付けとに基づいて、認知機能障害の危険度を精度良く算出することができる、という効果が得られる。
本発明の第1の実施の形態に係る認知機能障害危険度算出装置の構成を示す概略図である。 (A)音声データから抽出された周波数成分を示すグラフ、及び(B)フォルマント周波数を示すグラフである。 (A)音声データから抽出された短時間パワーを示すグラフ、及び(B)音声データの振幅を示すグラフである。 本発明の第1の実施の形態に係るコンピュータの学習処理ルーチンの内容を示すフローチャートである。 本発明の第1の実施の形態に係るコンピュータの認知機能障害危険度算出処理ルーチンの内容を示すフローチャートである。 本発明の第2の実施の形態に係る認知機能障害危険度算出装置の構成を示す概略図である。 第1の実施の形態及び第2の実施の形態の手法で、選択された韻律特徴量又は合成変数のうちの有意な韻律特徴量又は合成変数の例を示す図である。 第1の実施の形態及び第2の実施の形態の手法において、算出された危険度とHDS−Rスコアとの相関を示す図である。 第1の実施の形態の手法で算出された危険度とHDS−Rスコアとの散布図である。 第2の実施の形態の手法で算出された危険度とHDS−Rスコアとの散布図である。 本発明の第3の実施の形態に係る認知機能障害危険度算出システムの構成を示す概略図である。 本発明の第4の実施の形態に係る認知機能障害危険度算出システムの構成を示す概略図である。
以下、図面を参照して本発明の実施の形態を詳細に説明する。なお、本実施の形態では、危険度算出対象であるユーザの音声を入力して、認知機能障害の危険度を算出する認知機能障害危険度算出装置に、本発明を適用した場合を例に説明する。
図1に示すように、第1の発明の実施の形態に係る認知機能障害危険度算出装置10は、ユーザからの音声を入力するための音声入力部12と、音声を出力するスピーカ13と、入力された音声データに基づいて、認知機能障害の危険度を算出して、表示装置16に表示させるコンピュータ14とを備えている。
音声入力部12は、例えば、音声を入力するためのマイクロホンで構成されている。
コンピュータ14は、CPU、ROM、RAM、及びHDDを備え、HDDには、後述する学習処理ルーチン及び認知機能障害危険度算出処理ルーチンに対するプログラムが記憶されている。
コンピュータ14は、機能的には次に示すように構成されている。図1に示すように、コンピュータ14は、学習データ記憶部20、特徴量選択部22、重み付け決定部24、質問再生部25と、音声取得部26、特徴量抽出部28、危険度算出部30を備えている。
学習データ記憶部20には、学習データとして、音声データから得られた複数種類の音声韻律特徴量と、当該音声データの発話者に対して求められた認知機能障害の危険度とからなるデータが予め記憶されており、多数の発話者に対する学習データが予め記憶されている。
本実施の形態では、学習データを得るために、口頭による質疑応答形式のテストとして改訂長谷川式簡易知能評価スケール(HDS−R)を実施したときの音声会話を記録した音声データを用いている。例えば、質疑応答の中から「見当識」と「数字逆唱」についての2問の回答音声を収集し、これに追加して、出身地、子供のころの遊び、学生時代、の3つのテーマについて雑談したものから任意の発話音声の冒頭1フレーズについても収集して、音声データを収集した。このように得られた音声データから得られた複数種類の音声韻律特徴量と、テストによって得られた、認知機能障害の危険度を表わすHDS−Rスコアとを学習データとして収集して、学習データ記憶部20に格納した。
複数種類の音声韻律特徴量として、例えば、以下に示す130種の音声韻律特徴量が用いられる。これらの特徴抽出の際には、量子化ビット数16およびサンプリング周波数44.1[KHz]のデジタル音声を用い、短時間分析におけるフレーム長を23[msec]、フレーム周期11[msec]とし、窓関数としてHamming窓(1024ポイント)を使用した。
まず、音声の高さに関係するピッチ構造を反映させるために、基本周波数と基本周波数のn倍の周波数を持つn次高調波成分から得られる、以下に示す53種の音声韻律特徴量を用いた。ただし、基本周波数の時間変化の振幅とは、1事例の基本周波数のデータ列の上位25%と下位25%の値を無視したときの最大値と最小値の幅とする。
F1−7. 発音開始直後t秒間の基本周波数の時間変化の振幅(t=0.05,0.10,・・・,0.35)
F8. 周波数重心(各高調波成分のパワー値を重みとする周波数の重みつき平均)
F10−48. 全高調波成分のパワー値の合計に対する基音からn次までの高調波成分のパワー値の合計の割合(n=2,3, ・・・,40)
F49. 奇数次の高調波成分(基音含む)と偶数次の高調波成分とのパワー値の合計の比
F50−53. 基本周波数の標準偏差、平均、最大、最小値(図2(A)参照)
また、音声の特徴を表すフォルマント構造を反映させるために、以下に示すフォルマント周波数(図2(B)参照)とフォルマント帯域幅を、音声韻律特徴量として56種類用いる。
F54−57. 第nフォルマント周波数の標準偏差(n=1,・・・,4)
F58−61. 第nフォルマント周波数の平均値(n=1,・・・,4)
F62−65. 第nフォルマント周波数の最大値(n=1,・・・,4)
F66−69. 第nフォルマント周波数の最小値(n=1,・・・,4)
F70−73. 第nフォルマント周波数の中央値(n=1,・・・,4)
F74−77. 第nフォルマント周波数の最大値と最小値の差(n=1,・・・,4)
F78−81. 第nフォルマント周波数の線形近似直線の傾き(n=1,・・・,4)
F82−85. 第nフォルマント帯域幅の標準偏差(n=1,・・・,4)
F86−89. 第nフォルマント帯域幅の平均値(n=1,・・・,4)
F90−93. 第nフォルマント帯域幅の最大値(n=1,・・・,4)
F94−97. 第nフォルマント帯域幅の最小値(n=1,・・・,4)
F98−101. 第nフォルマント帯域幅の中央値(n=1,・・・,4)
F102−105. 第nフォルマント帯域幅の最大値と最小値の差(n=1,・・・,4)
F106−109. 第nフォルマント帯域幅の線形近似直線の傾き(n=1,・・・,4)
更に、音声の大きさに関係する振幅構造を反映させるために、短時間パワーとその包絡線から得られる、以下に示す10種類の音声韻律特徴量を用いる。
F110. パワー包絡線の線形最小二乗法による近似直線の傾き
F111−117. 発音開始直後t 秒間のパワー包絡線の微分係数の中央値(t=0.05,0.10,・・・,0.35)
F118−124. 最大パワー値と発音開始からt 秒後のときのパワー値の比(t=0.05,0.10,・・・,0.35)
F125−128. 短時間パワーの標準偏差、平均、最大、最小値(図3(A)参照)
また、時間構造を反映させるために、2種類の韻律特徴量として、図3(B)に示すような、発話者が話す速さ、及び質問に回答するまでの反応時間を用いる。
F129. 1モーラあたりの発話継続時間
F130. 返答までの反応時間
次に、韻律特徴量の組み合わせを選択する原理について説明する。
本実施の形態では、ユーザの音声データから音声韻律特徴を抽出し、解析することで認知機能障害(CI)と健常(NL)を判別することを目的としている。しかしながら、解析を行なう際に、音声データから抽出した韻律特徴量が多すぎると、その韻律特徴量の中には認知機能障害の判別に無関係な韻律特徴量が含まれる可能性があり、モデルの構築や判別の精度に悪影響を与えることが考えられる。また、韻律特徴量が多すぎるとモデルが複雑になりすぎたり、計算コストが高くなったりする短所もある。
そこで、本実施の形態では、上記の130種類の音声韻律特徴に対して、特徴選択を行なう。特徴選択の手法としては、科学的理論や事前の知識によって適当な変数を指定する変数指定法や、全ての変数の組合せを計算し、最良と思われるものを選択する総当たり法、一定の規則にしたがって変数を逐次選択していく逐次選択法などがあげられる。現在のところ、高齢者の認知機能障害と因果関係の高い音声特徴は特定されておらず、特徴選択として有用な理論や事前の知識は存在しない。また、抽出した韻律特徴量のすべての組合せを計算することは計算コストが高くなる。そのため、一般的に多用されている逐次選択法として例えばフォワードステップワイズ法(FSW)を用いて特徴選択を行なう。なお、フォワードステップワイズ法は、より良い組み合わせとなるように、組み合わせを増減させて逐次選択していく方法であり、非特許文献(Draper,N. and Smith, H.: Applied Regression Analysis (3rd edition), John Wiley & Sons (1998))に記載の方法と同様であるため、詳細な説明を省略する。
本実施の形態では、特徴量選択部22によって、学習データ記憶部20に記憶された多数の学習データに基づいて、フォワードステップワイズ法に従って、認知機能障害の危険度(HDS−Rスコア)との相関が最も高くなる音声韻律特徴量の組み合わせを探索し、探索された音声韻律特徴量の組み合わせを、選択する音声韻律特徴量の組み合わせとする。
また、重み付け決定部24では、選択された韻律特徴量の組み合わせを入力とし、かつ、認知機能障害の危険度を出力する学習モデルを構築し、学習データ記憶部20に記憶された多数の学習データにおける、選択された韻律特徴量の組み合わせと認知機能障害の危険度(HDS−Rスコア)とに基づいて、例えば韻律特徴量の組み合わせを説明変数とし、かつ、HDS−Rスコアを目標属性とした重回帰分析を行うことによって、選択された各韻律特徴量に対する重み付けを学習する。ここで構築された学習モデルを、音声韻律に基づく認知機能障害評定(SPCIR: speech prosody−based cognitive impairmentrating)のモデルと称することとする。
質問再生部25では、予め設定された質問データをスピーカ25から再生する。例えば、質問データとして、「出身地はどちらですか?」などの日常的な会話における質問を用いている。
音声取得部26では、スピーカ25から質問が再生されたときに、質問に対する回答として、音声入力部12によって入力されたユーザの音声データを取得する。
特徴量抽出部28は、取得したユーザの音声データから、上記の130種類の音声韻律特徴量を抽出する。
危険度算出部30は、特徴量抽出部28によって抽出された音声韻律特徴量のうち、特徴量選択部22によって選択された韻律特徴量の組み合わせに対応するものを取り出し、重み付け決定部24によって決定された重み付けを適用した学習モデルに、取り出した韻律特徴量の組み合わせを入力して、認知機能障害の危険度を算出する。
次に、本実施の形態に係る認知機能障害危険度算出装置10の作用について説明する。
まず、オペレータが、学習用の音声データから得られた複数種類の音声韻律特徴量とHDS−Rを、学習データとしてコンピュータ14に入力して、学習データ記憶部20に多数格納させる。
そして、コンピュータ14において、図4に示す学習処理ルーチンが実行される。
まず、ステップ100で、学習データ記憶部20から学習データを読み出し、ステップ102において、上記ステップ100で読み出した学習データを用いて、フォワードステップワイズ法に従って、HDS−Rスコアとの相関が最も高くなる音声韻律特徴量の組み合わせを探索し、探索された音声韻律特徴量の組み合わせを、選択する音声韻律特徴量の組み合わせとする。
そして、ステップ104で、上記ステップ100で読み出した学習データを用いて、学習モデルにおける、上記ステップ102で選択された音声韻律特徴量の各々に対する重み付けを学習して、決定する。
次のステップ106では、上記ステップ102で選択された音声韻律特徴量の組み合わせと、上記ステップ104で学習された重み付けとを、メモリ(図示省略)に記憶させて、学習処理ルーチンを終了する。
学習データが追加されるなど、学習データ記憶部20の学習データが更新されるたびに、コンピュータ14において、上記の学習処理ルーチンが再度実行される。
そして、操作部(図示省略)によって危険度の算出指示が入力されると、コンピュータ14において、図5に示す認知機能障害危険度算出処理ルーチンが実行される。
まず、ステップ118において、スピーカ13から質問データを再生し、ステップ120において、音声入力部12を介して質問の回答として入力された音声データを取得し、ステップ122で、取得した音声データから、130種類の音声韻律特徴量を抽出する。
そして、ステップ124において、上記ステップ122で抽出した音声韻律特徴量から、上記学習処理ルーチンで選択された音声韻律特徴量の組み合わせに対応する音声韻律特徴量を選択する。次のステップ126では、上記学習処理ルーチンで学習された重み付けを適用した学習モデルに、上記ステップ124で選択した音声韻律特徴量の組み合わせを入力して、認知機能障害の危険度を算出し、ステップ128において、表示装置16に算出結果を表示させて、認知機能障害危険度算出処理ルーチンを終了する。
以上説明したように、第1の発明の実施の形態に係る認知機能障害危険度算出装置によれば、HDS−Rスコアとの相関が最も高くなる音声韻律特徴量の組み合わせと、音声韻律特徴量の組み合わせの各々に対して学習された重み付けとに基づいて、認知機能障害の危険度を精度良く算出することができる。
また、従来の改訂長谷川式簡易知能評価スケールを用いた判定方法と比較した場合に、質問に対する回答の正しさや発音の正しさなど、言語の内容を考慮する必要がないため、客観的に、認知機能障害の危険度を判定することができる。また、繰り返し、認知機能障害の危険度を算出する場合であっても、認知機能障害の危険度を精度良く算出することができる。
次に、第2の実施の形態について説明する。なお、第1の実施の形態と同様の構成となる部分については、同一符号を付して説明を省略する。
第2の実施の形態では、複数種類の韻律特徴量から主成分分析によって得られた合成変数を用いて、認知機能障害の危険度を算出している点が、第1の実施の形態と主に異なっている。
図6に示すように、第2の実施の形態に係る認知機能障害危険度算出装置210のコンピュータ214は、学習データ記憶部20、変数合成部221、合成変数選択部222、重み付け決定部224、質問再生部25、音声取得部26、特徴量抽出部28、合成変数算出部229、危険度算出部230を備えている。
変数合成部221は、学習データ記憶部20に記憶された学習データの例えば130種類の音声韻律特徴量に基づいて、主成分分析(PCA)による変数合成を行って、例えば130種類の主成分(合成変数)を生成する。また、変数合成部221は、各学習データについて、130種類の音声韻律特徴量から130種類の合成変数に変換する。
合成変数選択部222は、学習データ記憶部20に記憶された多数の学習データの合成変数及び認知機能障害の危険度(HDS−Rスコア)に基づいて、フォワードステップワイズ法に従って、認知機能障害の危険度との相関が最も高くなる合成変数の組み合わせを探索し、探索された合成変数の組み合わせを、選択する合成変数の組み合わせとする。
また、重み付け決定部224では、選択された合成変数の組み合わせを入力として、認知機能障害の危険度を出力する学習モデルを構築し、学習データ記憶部20に記憶された多数の学習データにおける、選択された合成変数の組み合わせと認知機能障害の危険度(HDS−Rスコア)とに基づいて、例えば合成変数の組み合わせを説明変数とし、かつ、HDS−Rスコアを目標属性とした重回帰分析を行うことによって、学習モデルにおける、各合成変数に対する重み付けを学習する。
合成変数算出部229は、特徴量抽出部28によって抽出された130種類の音声韻律特徴量に基づいて、変数合成部221で生成された130種類の合成変数を算出する。
危険度算出部230は、合成変数算出部229によって算出された合成変数のうち、合成変数選択部222によって選択された合成変数の組み合わせに対応するものを取り出し、重み付け決定部24によって重み付けが決定された学習モデルに、取り出した合成変数の組み合わせを入力して、認知機能障害の危険度を算出する。
次に、第2の実施の形態に係る学習処理ルーチンについて説明する。
まず、学習データ記憶部20から学習データを読み出し、学習データの音声韻律特徴量に基づいて、主成分分析を行って、合成変数を生成するとともに、各学習データの音声韻律特徴量を合成変数に変換する。そして、学習データを用いて、フォワードステップワイズ法に従って、HDS−Rスコアとの相関が最も高くなる合成変数の組み合わせを探索し、探索された合成変数の組み合わせを、選択する合成変数の組み合わせとする。
そして、学習データを用いて、学習モデルにおける、上記で選択された合成変数の各々に対する重み付けを学習して、決定する。次に、上記で選択された合成変数の組み合わせと、上記で学習された重み付けとを、メモリ(図示省略)に記憶させて、学習処理ルーチンを終了する。
学習データが追加されるなど、学習データ記憶部20の学習データが更新されるたびに、コンピュータ14において、上記の学習処理ルーチンが再度実行される。
また、第2の実施の形態に係る認知機能障害危険度算出処理ルーチンについて説明する。
まず、スピーカ13から質問データを再生し、音声入力部12を介して質問の回答として入力された音声データを取得し、取得した音声データから、130種類の音声韻律特徴量を抽出する。そして、抽出した130種類の音声韻律特徴量から、学習処理ルーチンで生成された130種類の合成変数を算出する。
そして、上記で算出した合成変数から、上記学習処理ルーチンで選択された合成変数の組み合わせに対応する合成変数を選択する。次に、上記学習処理ルーチンで学習された重み付けを適用した学習モデルに、上記で選択した合成変数の組み合わせを入力して、認知機能障害の危険度を算出し、表示装置16に算出結果を表示させて、認知機能障害危険度算出処理ルーチンを終了する。
次に、上記の第1の実施の形態及び第2の実施の形態の手法を用いて認知機能障害の危険度を算出した結果について説明する。
ここで、115名の高齢者(年齢38−99歳、男性32名、女性83名)から、総数319の音声データを収集して、認知機能障害の危険度を算出し、HDS−Rスコアとの相関性を求めた。図7〜図10では、第1の実施の形態で説明した認知機能障害危険度の算出方法による算出結果をSPCIRFSW−AICと表わし、第2の実施の形態で説明した認知機能障害危険度の算出方法による算出結果をSPCIRPCA−FSW−AICと表わす。
図7、図8に示すように、第1の実施の形態の手法では、19個の韻律特徴量が選択され、そのうち、F129、F128、F118、F130、F57、F8、F101、F59、F110、F72、F69、F73が、有意な韻律特徴量であると判断された。このように、AIC規準を用いた特徴量選択により、有意な韻律特徴量が選択されていることがわかった。
また、HDS−Rスコアとの相関Rが、0.67であり、補正済み決定係数(信頼度)がR2=0.41であった。図9に示すように、算出された認知機能障害の危険度とHDS−Rスコアとの間に、比較的有意な相関を持つことが分かった。
また、第2の実施の形態の手法では、130種類の全特徴を適切に合成した55個の主成分(合成変数)が選択され、多くの合成変数が、有意であると判断された。高い固有値を持つ主成分(例えばPC2、PC7、PC4)のみならず、PC77、PC115、PC103などの低い固有値を持つ主成分も、HDS−Rスコアの推定に有用であることが示された。
また、HDS−Rスコアとの相関Rが、0.77であり、図10に示すように、算出された認知機能障害の危険度とHDS−Rスコアとの間に強い相関を持つことが示唆された。また、補正済み決定係数R2=0.50であり、韻律特徴に基づく高齢者の発話音声解析の認知機能障害のスクリーニングへの応用可能性として有意義な結果となった。
以上説明したように、第2の実施の形態に係る認知機能障害危険度算出装置によれば、HDS−Rスコアとの相関が最も高くなる、音声韻律特徴量の合成変数の組み合わせと、合成変数の組み合わせの各々に対して学習された重み付けとに基づいて、認知機能障害の危険度を精度良く算出することができる。
なお、上記の実施の形態では、主成分分析を行って、音声韻律特徴量の合成変数を生成する場合を例に説明したが、これに限定されるものではなく、例えば、因子分析を行って、音声韻律特徴量の合成変数を生成するようにしてもよい。
次に、第3の実施の形態について説明する。なお、第1の実施の形態と同様の構成となる部分については、同一符号を付して説明を省略する。
第3の実施の形態では、学習データから韻律特徴量の選択及び重み付けの学習を行う装置と、認知機能障害の危険度を算出する装置とがネットワークを介して接続されている点が、第1の実施の形態と主に異なっている。
図11に示すように、第3の実施の形態に係る認知機能障害危険度算出システム310は、学習データから韻律特徴量の選択及び重み付けの学習を行う特徴量学習装置311と、入力された音声データから、認知機能障害の危険度を算出する複数の認知機能障害危険度算出装置312とを備えており、特徴量学習装置311と、複数の認知機能障害危険度算出装置312とは、インターネットなどのネットワーク313で接続されている。
特徴量学習装置311は、例えばコンピュータサーバで構成され、機能的には次に示すように構成されている。上記図11に示すように、特徴量学習装置311は、学習データ記憶部20、特徴量選択部22、重み付け決定部24、及びパラメータ送信部324を備えている。
パラメータ送信部324は、特徴量選択部22によって選択された韻律特徴量の組み合わせ、及び重み付け決定部24によって決定された学習モデルの重み付けを示すパラメータを、ネットワーク313を介して複数の認知機能障害危険度算出装置312に送信する。
認知機能障害危険度算出装置312は、音声入力部12、スピーカ13、コンピュータ314、及び表示装置16を備えている。
コンピュータ314は、パラメータ受信部325、質問再生部25、音声取得部26、特徴量抽出部28、及び危険度算出部30を備えている。
パラメータ受信部325は、特徴量学習装置311から送信されたパラメータを受信し、メモリ(図示省略)に格納しておく。
危険度算出部30は、特徴量抽出部28によって抽出された音声韻律特徴量のうち、メモリに格納されたパラメータが示す韻律特徴量の組み合わせに対応するものを取り出し、メモリに格納されたパラメータが示す重み付けを適用した学習モデルに、取り出した韻律特徴量の組み合わせを入力して、認知機能障害の危険度を算出する。
次に、本実施の形態に係る認知機能障害危険度算出システム310の作用について説明する。
オペレータが、学習用の音声データから得られた複数種類の音声韻律特徴量とHDS−Rを、学習データとして特徴量学習装置311に入力して、学習データ記憶部20に記憶される学習データが追加される度に、上記の第1の実施の形態で説明した学習処理ルーチンが実行される。そして、特徴量学習装置311は、選択された音声韻律特徴量の組み合わせと、学習された重み付けとを示すパラメータを、ネットワーク313を介して認知機能障害危険度算出装置312に送信する。
そして、認知機能障害危険度算出装置312では、上記のパラメータを受信して、メモリ(図示省略)に格納する。
また、認知機能障害危険度算出装置312において、危険度の算出指示が入力されると、コンピュータ314において、上記の第1の実施の形態で説明した認知機能障害危険度算出処理ルーチンが実行される。
このように、HDS−Rスコアとの相関が最も高くなる音声韻律特徴量の組み合わせと、音声韻律特徴量の組み合わせの各々に対して学習された重み付けとを、特徴量学習装置で学習し、ネットワークを介して、学習結果を、複数の認知機能障害危険度算出装置に配布することにより、各認知機能障害危険度算出装置では、最新の学習結果を用いて、認知機能障害の危険度を算出することができる。
なお、上記の第2の実施の形態の構成に、上記の実施の形態を適用するようにしてもよい。この場合には、認知機能障害危険度算出システムは、ネットワーク313で接続された、学習データから合成変数の選択及び重み付けの学習を行う合成変数学習装置と、複数の認知機能障害危険度算出装置とを備えており、合成変数学習装置は、学習データ記憶部20、変数合成部221、合成変数選択部222、重み付け決定部224、及びパラメータ送信部324を備える。また、認知機能障害危険度算出装置のコンピュータは、パラメータ受信部325、質問再生部25、音声取得部26、特徴量抽出部28、合成変数算出部229、及び危険度算出部30を備える。
次に、第4の実施の形態について説明する。なお、第1の実施の形態及び第3の実施の形態と同様の構成となる部分については、同一符号を付して説明を省略する。
第4の実施の形態では、入出力端末と、認知機能障害危険度算出装置とがネットワークを介して接続されている点が、第3の実施の形態と主に異なっている。
図12に示すように、第4の実施の形態に係る認知機能障害危険度算出システム410では、複数の入出力端末412と認知機能障害危険度算出装置414とを備えており、複数の入出力端末412と、認知機能障害危険度算出装置414とは、ネットワーク313で接続されている。
入出力端末412は、音声入力部12、スピーカ13、表示装置16、質問再生部25、音声取得部26、及び通信部425を備えており、スピーカ13から再生された質問に対する回答として、音声入力部12を介してユーザから音声データが入力されると、通信部425によって、ネットワーク313を介して音声データを認知機能障害危険度算出装置414へ送信する。
認知機能障害危険度算出装置414は、通信部424によって音声データを受信すると、音声データに基づいて、認知機能障害の危険度を算出して、通信部424によって、算出結果を、ネットワーク313を介して入出力端末412へ送信する。
入出力端末412は、通信部425によって、算出結果を受信すると、表示装置16に、算出された認知機能障害の危険度を表示する。
なお、認知機能障害危険度算出装置414の他の構成及び作用については、第1の実施の形態と同様であるため、説明を省略する。
このように、複数の入出力端末と、認知機能障害危険度算出装置とをネットワークで接続し、音声データ及び算出結果を送受信することにより、各入出力端末で、認知機能障害の危険度を判定することができる。
なお、上記の第2の実施の形態の構成に、上記の実施の形態を適用するようにしてもよい。この場合には、認知機能障害危険度算出システムは、ネットワーク313で接続された、各入出力端末412と、認知機能障害危険度算出装置210と同様の機能を有する装置とを備えるようにすればよい。
また、上記の第1の実施の形態〜第4の実施の形態では、130種類の音声韻律特徴量を用いる場合を例に説明したが、これに限定されるものではなく、他の種類の音声韻律特徴量を用いてもよく、また、より少ない又はより多い種類の音声韻律特徴量を用いてもよい。
また、フォワードステップワイズ法(変数増減法)を用いて、最適な音声韻律特徴量又は合成変数の組み合わせを探索する場合を例に説明したが、これに限定されるものではなく、他の逐次選択法を用いて、最適な音声韻律特徴量又は合成変数の組み合わせを探索するようにしてもよい。例えば、変数増加法、変数減少法などを用いて、最適な音声韻律特徴量又は合成変数の組み合わせを探索するようにしてもよい。また、EMアルゴリズム、遺伝的アルゴリズム(GA)、粒子群最適化(Particle Swarm Optimization、PSO)などの同時選択法を用いて、最適な音声韻律特徴量又は合成変数の組み合わせを探索するようにしてもよい。
また、重回帰分析を用いて、当該学習モデルで用いる、各音声韻律特徴量又は各合成変数の重み付けを学習する場合を例に説明したが、これに限定されるものではなく、例えば、リッジ回帰、サポートベクトル回帰(SV回帰)、カーネル回帰などの手法を用いて、各音声韻律特徴量又は各合成変数の重み付けを学習するようにしてもよい。
また、上記の実施の形態では、長谷川式スコアなど認知機能テストの点数(0〜30)に相当する数値を、認知機能障害の危険度として算出する場合を例に説明したが、これに限定されるものではなく、例えば,健常(NL)、認知症疑い(MCI)、認知症(AD)の3分類で表わされる認知機能障害の危険度を求めるようにしてもよい。この場合には、ベイジアンネットワーク、正準判別分析、線形判別分析、ニューラルネットワーク、ナイーブベイズ法、サポートベクトルマシン(SVM)などの学習モデルを用いて、認知機能障害の危険度を算出するようにすればよい。また、当該学習モデルで用いる、各音声韻律特徴量又は各合成変数の重み付けを学習により決定するようにすればよい。
また、質問をスピーカから再生する場合を例に説明したが、これに限定されるものではなく、表示装置によって質問を表示するようにしてもよい。
また、質問に対する回答として入力された音声データに基づいて、認知機能障害の危険度を算出する場合を例に説明したが、これに限定されるものではなく、音声モニタリングにより入力された音声データに基づいて、認知機能障害の危険度を算出するようにしてもよい。
10、210、312、414 認知機能障害危険度算出装置
12 音声入力部
14、214、314 コンピュータ
20 学習データ記憶部
22 特徴量選択部
24、224 重み付け決定部
25 質問再生部
28 特徴量抽出部
30、230 危険度算出部
221 変数合成部
222 合成変数選択部
229 合成変数算出部
310、410 認知機能障害危険度算出システム
311 特徴量学習装置

Claims (9)

  1. 音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段と、
    前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段と、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段と、
    前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段と、
    を含む認知機能障害危険度算出装置。
  2. 音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して分析処理を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段と、
    前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段と、
    前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段と、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段と、
    前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段と、
    を含む認知機能障害危険度算出装置。
  3. 前記複数種類の韻律特徴量は、音声の周波数成分に関する特徴量、音声のフォルマント構造に関する特徴量、音声の大きさに関する特徴量、発話速度に関する特徴量、及び質問に回答するまでの反応時間に関する特徴量の少なくとも1つを含む請求項1又は2記載の認知機能障害危険度算出装置。
  4. 前記学習データの認知機能障害の危険度を、前記発話者に対する長谷川式簡易知能評価スケールによって求められたものとした請求項1〜請求項3の何れか1項記載の認知機能障害危険度算出装置。
  5. 前記特徴量抽出手段は、質問に対する回答として入力された音声データから、前記複数種類の韻律特徴量を抽出する請求項1〜請求項4の何れか1項記載の認知機能障害危険度算出装置。
  6. 音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段、及び
    前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段
    を含む特徴量選択装置と、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び
    前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段
    を含む危険度算出装置と、
    を含む認知機能障害危険度算出システム。
  7. 音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して分析処理を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段、
    前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段、及び
    前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段
    を含む合成変数選択装置と、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び
    前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段
    を含む危険度算出装置と、
    を含む認知機能障害危険度算出システム。
  8. コンピュータを、
    音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データに基づいて、前記複数種類の韻律特徴量から、前記危険度との相関が最も高くなる前記韻律特徴量の組み合わせを選択する特徴量選択手段、
    前記複数の学習データの各々の前記選択された韻律特徴量の組み合わせと前記危険度とに基づいて、前記選択された韻律特徴量の組み合わせの各々に対する重み付けを決定する重み付け決定手段、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び
    前記特徴量抽出手段によって抽出された前記韻律特徴量のうちの前記選択された韻律特徴量の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段
    として機能させるためのプログラム。
  9. コンピュータを、
    音声データから抽出される複数種類の韻律特徴量と、前記音声データの発話者について求められた認知機能障害の危険度とを含む複数の学習データの前記複数種類の韻律特徴量に対して分析処理を行って、前記複数種類の韻律特徴量を合成した合成変数を複数種類生成する合成変数生成手段、
    前記複数の学習データと、前記生成された複数種類の合成変数とに基づいて、前記複数種類の合成変数から、前記危険度との相関が最も高くなる前記合成変数の組み合わせを選択する合成変数選択手段、
    前記複数の学習データの各々について求められる前記合成変数の組み合わせと、前記複数の学習データの各々の前記危険度とに基づいて、前記選択された合成変数の組み合わせの各々に対する重み付けを決定する重み付け決定手段、
    入力された音声データから、前記複数種類の韻律特徴量を抽出する特徴量抽出手段、及び
    前記特徴量抽出手段によって抽出された前記韻律特徴量から求められる前記合成変数の組み合わせと、前記重み付け決定手段によって決定された重み付けとに基づいて、認知機能障害の危険度を算出する危険度算出手段
    として機能させるためのプログラム。
JP2010134403A 2010-06-11 2010-06-11 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム Expired - Fee Related JP4876207B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010134403A JP4876207B2 (ja) 2010-06-11 2010-06-11 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010134403A JP4876207B2 (ja) 2010-06-11 2010-06-11 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム

Publications (2)

Publication Number Publication Date
JP2011255106A JP2011255106A (ja) 2011-12-22
JP4876207B2 true JP4876207B2 (ja) 2012-02-15

Family

ID=45471949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010134403A Expired - Fee Related JP4876207B2 (ja) 2010-06-11 2010-06-11 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム

Country Status (1)

Country Link
JP (1) JP4876207B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016060364A1 (ko) * 2014-10-16 2016-04-21 (주)이투오피에스 동적시스템에 적용할 수 있는 휴먼요인의 트리비트리거 데이터를 이용한 빅데이터 구축 방법과 빅데이터의 활용방법
WO2019044255A1 (ja) * 2017-08-28 2019-03-07 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
WO2020255127A1 (en) * 2019-06-19 2020-12-24 M.You Cognitive Technologies Ltd. Systems and methods for detecting cognitive change based on voice and smartphone sensors
US12603083B2 (en) 2021-10-27 2026-04-14 Panasonic Intellectual Property Management Co., Ltd. Estimation device, estimation method, and recording medium

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5959016B2 (ja) 2011-05-31 2016-08-02 国立大学法人 名古屋工業大学 認知機能障害判別装置、認知機能障害判別システム、およびプログラム
JP5817582B2 (ja) * 2012-02-22 2015-11-18 株式会社Jvcケンウッド 脳機能疾患診断支援装置および脳機能疾患診断支援方法
JP6339758B2 (ja) * 2012-07-02 2018-06-06 国立研究開発法人国立長寿医療研究センター 軽度認知機能障害の有無の診断システム、認知機能検査用端末及び認知機能検査用プログラム
JP6433650B2 (ja) * 2013-11-15 2018-12-05 国立大学法人佐賀大学 気分誘導装置および気分誘導プログラムならびにコンピュータの動作方法
ES3067417T3 (en) 2015-08-11 2026-05-21 Cognoa Inc Apparatus to determine developmental progress with artificial intelligence and user input
EP3394825B1 (en) * 2015-12-18 2024-05-22 Cognoa, Inc. Platform and system for digital personalized medicine
US11972336B2 (en) 2015-12-18 2024-04-30 Cognoa, Inc. Machine learning platform and system for data analysis
JP6731631B2 (ja) * 2016-02-26 2020-07-29 パナソニックIpマネジメント株式会社 認知機能評価装置、プログラム
JP6695057B2 (ja) * 2016-04-27 2020-05-20 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価方法、およびプログラム
JP6748965B2 (ja) * 2016-09-27 2020-09-02 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価方法、およびプログラム
CN118609834A (zh) 2016-11-14 2024-09-06 科格诺亚公司 用于评估发育状况并提供覆盖度和可靠性控制的方法和装置
JP6845716B2 (ja) * 2017-03-14 2021-03-24 一般社団法人脳と心の健康科学研究所 生体機能についての医学的検査の得点判定装置、及びプログラム
WO2018204935A1 (en) * 2017-05-05 2018-11-08 Canary Speech, LLC Medical assessment based on voice
GB2567826B (en) 2017-10-24 2023-04-26 Cambridge Cognition Ltd System and method for assessing physiological state
JP6268628B1 (ja) * 2017-11-02 2018-01-31 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
JP6337362B1 (ja) * 2017-11-02 2018-06-06 パナソニックIpマネジメント株式会社 認知機能評価装置、及び、認知機能評価システム
CN108320734A (zh) * 2017-12-29 2018-07-24 安徽科大讯飞医疗信息技术有限公司 语音信号处理方法及装置、存储介质、电子设备
KR101894722B1 (ko) * 2018-03-12 2018-10-04 미디어젠(주) 언어 장애 발생 진단을 이용한 건강 이상 예측시스템 및 예측방법
KR102142754B1 (ko) 2018-03-21 2020-08-07 가톨릭대학교 산학협력단 딥러닝 기반의 전립선암 병리학적 단계 예측 방법
CN111867483B (zh) * 2018-03-29 2023-06-02 松下知识产权经营株式会社 认知功能评估装置、认知功能评估系统、认知功能评估方法及记录介质
EP3811245A4 (en) * 2018-06-19 2022-03-09 Ellipsis Health, Inc. MENTAL HEALTH ASSESSMENT SYSTEMS AND METHODS
JP7389421B2 (ja) * 2018-07-13 2023-11-30 Pst株式会社 精神・神経系疾患を推定する装置
EP3821815A4 (en) * 2018-07-13 2021-12-29 Life Science Institute, Inc. Mental/nervous system disorder estimation system, estimation program, and estimation method
JP6804779B2 (ja) * 2018-07-24 2020-12-23 日本テクトシステムズ株式会社 軽度の認知機能障害の推定システム、軽度の認知機能障害の推定装置、及び軽度の認知機能障害の有無を推定するためのプログラム
JP2020056918A (ja) * 2018-10-02 2020-04-09 パナソニックIpマネジメント株式会社 音データ学習システム、音データ学習方法および音データ学習装置
US11103171B2 (en) * 2018-10-23 2021-08-31 BlackThor Therapeutics, Ine. Systems and methods for screening, diagnosing, and stratifying patients
KR102216822B1 (ko) * 2018-12-07 2021-02-18 서울대학교병원 급성 뇌경색 환자의 3개월 후 기능적 예후 예측 방법 및 시스템
WO2020195929A1 (ja) * 2019-03-28 2020-10-01 パナソニックIpマネジメント株式会社 レコメンド商品決定装置、レコメンド商品決定システム及びレコメンド商品決定方法
EP3955801A1 (en) * 2019-04-15 2022-02-23 Janssen Pharmaceutica NV System and method for detecting cognitive decline using speech analysis
JP2019198695A (ja) * 2019-08-21 2019-11-21 西日本電信電話株式会社 通知システム、通知装置、通知方法、及びプログラム
WO2021046412A1 (en) 2019-09-06 2021-03-11 Cognoa, Inc. Methods, systems, and devices for the diagnosis of behavioral disorders, developmental delays, and neurologic impairments
US20230113656A1 (en) * 2019-12-26 2023-04-13 Pst Inc. Pathological condition analysis system, pathological condition analysis device, pathological condition analysis method, and pathological condition analysis program
JP2023015420A (ja) * 2020-01-09 2023-02-01 株式会社生命科学インスティテュート 疾患推定プログラムにおける音響特徴量の抽出方法、およびその音響特徴量を用いた疾患推定プログラム並びに装置
US20230210451A1 (en) * 2020-06-11 2023-07-06 Pst Inc. Information processing device, information processing method, information processing system and information processing program
KR20230075786A (ko) * 2021-11-23 2023-05-31 주식회사 피디젠 비대면 치매 발병 고 위험군 예측방법 및 플랫폼
CN114647992A (zh) * 2022-03-10 2022-06-21 北京航空航天大学 一种基于改进贝叶斯算法的固液火箭发动机故障诊断方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1598749B1 (en) * 2003-02-24 2009-03-11 Electronic Navigation Research Institute, an Independent Administrative Institution Chaologic index value calculation system
CA2560529C (en) * 2004-04-28 2012-06-26 Electronic Navigation Research Institute, An Independent Administrative Institution Cerebrum evaluation device
JP2007282992A (ja) * 2006-04-19 2007-11-01 Sky Kk 認知症診断支援システム
WO2009056650A1 (en) * 2007-11-02 2009-05-07 Siegbert Warkentin System and methods for assessment of the aging brain and its brain disease induced brain dysfunctions by speech analysis

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016060364A1 (ko) * 2014-10-16 2016-04-21 (주)이투오피에스 동적시스템에 적용할 수 있는 휴먼요인의 트리비트리거 데이터를 이용한 빅데이터 구축 방법과 빅데이터의 활용방법
WO2019044255A1 (ja) * 2017-08-28 2019-03-07 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
JP2019040143A (ja) * 2017-08-28 2019-03-14 パナソニックIpマネジメント株式会社 認知機能評価装置、認知機能評価システム、認知機能評価方法及びプログラム
US11766209B2 (en) 2017-08-28 2023-09-26 Panasonic Intellectual Property Management Co., Ltd. Cognitive function evaluation device, cognitive function evaluation system, and cognitive function evaluation method
WO2020255127A1 (en) * 2019-06-19 2020-12-24 M.You Cognitive Technologies Ltd. Systems and methods for detecting cognitive change based on voice and smartphone sensors
US12387746B2 (en) 2019-06-19 2025-08-12 Myndyou International Holdings Ltd. Systems and methods for detecting cognitive change based on voice and smartphone sensors
US12603083B2 (en) 2021-10-27 2026-04-14 Panasonic Intellectual Property Management Co., Ltd. Estimation device, estimation method, and recording medium

Also Published As

Publication number Publication date
JP2011255106A (ja) 2011-12-22

Similar Documents

Publication Publication Date Title
JP2011255106A (ja) 認知機能障害危険度算出装置、認知機能障害危険度算出システム、及びプログラム
Wester et al. Are we using enough listeners? No! An empirically-supported critique of Interspeech 2014 TTS evaluations
CN105593936A (zh) 用于文本转语音性能评价的系统和方法
TWI742486B (zh) 輔助歌唱系統、輔助歌唱方法及其非暫態電腦可讀取記錄媒體
GB2579038A (en) Language disorder diagnosis/screening
RU2510954C2 (ru) Способ переозвучивания аудиоматериалов и устройство для его осуществления
JP2019083902A (ja) 認知機能評価装置、及び、認知機能評価システム
US10553240B2 (en) Conversation evaluation device and method
US12510966B2 (en) Haptic feedback method, system and related device for matching split-track music to vibration
Bone et al. Classifying language-related developmental disorders from speech cues: the promise and the potential confounds
CN113780811A (zh) 乐器演奏评估方法、装置、设备及存储介质
US11557287B2 (en) Pronunciation conversion apparatus, pitch mark timing extraction apparatus, methods and programs for the same
Harrison Variability of formant measurements
CN116612742B (zh) 语音合成方法、装置、设备及存储介质
Bunnell et al. The ModelTalker project: A web-based voice banking pipeline for ALS/MND patients
JP2013088552A (ja) 発音トレーニング装置
CN121459815A (zh) 一种基于人形机器人的情感语音交互方法和装置
CN100585663C (zh) 语言学习系统
US20220270635A1 (en) Evaluation apparatus, training apparatus, methods and programs for the same
Lustyk et al. Evaluation of disfluent speech by means of automatic acoustic measurements
JP6587308B1 (ja) 音声処理装置、および音声処理方法
JP6578544B1 (ja) 音声処理装置、および音声処理方法
CN117095670A (zh) 语音生成方法和装置、存储介质及电子设备
Omar et al. Feature fusion techniques based training MLP for speaker identification system
Daniluk et al. Comparative analysis of natural and synthesized Polish speech

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
R150 Certificate of patent or registration of utility model

Ref document number: 4876207

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141209

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees