JP2017504087A - コンピュータ化された臨床診断支援のための階層的自己学習システム - Google Patents

コンピュータ化された臨床診断支援のための階層的自己学習システム Download PDF

Info

Publication number
JP2017504087A
JP2017504087A JP2016529437A JP2016529437A JP2017504087A JP 2017504087 A JP2017504087 A JP 2017504087A JP 2016529437 A JP2016529437 A JP 2016529437A JP 2016529437 A JP2016529437 A JP 2016529437A JP 2017504087 A JP2017504087 A JP 2017504087A
Authority
JP
Japan
Prior art keywords
learning system
local
global
correct
diagnosis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016529437A
Other languages
English (en)
Other versions
JP6466442B2 (ja
JP2017504087A5 (ja
Inventor
インフイ デン
インフイ デン
シャオミン リ
シャオミン リ
シャオリン グー
シャオリン グー
ヴィジャイ タークル シャムダサーニ
ヴィジャイ タークル シャムダサーニ
イン ウー
イン ウー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2017504087A publication Critical patent/JP2017504087A/ja
Publication of JP2017504087A5 publication Critical patent/JP2017504087A5/ja
Application granted granted Critical
Publication of JP6466442B2 publication Critical patent/JP6466442B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references
    • G16H70/20ICT specially adapted for the handling or processing of medical references relating to practices or guidelines

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Biomedical Technology (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Bioethics (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

個々のコンピュータ診断支援(CDS)システムは、「グローバル」CDSシステムに結合される。各CDSシステムは、同じ学習システム又は同じ学習システム技術を使用する。各CDSシステムからの訓練症例及びテスト症例が、グローバルCDSシステムに提供され、グローバルCDSシステムは、訓練症例を使用して、訓練症例に基づいた学習システムパラメータを生成する。個々のCDSシステムのどのCDSシステムよりも多くの訓練症例を有することにより、グローバルCDSシステムによって提供されるパラメータは、個々のCDSシステムのどのCDSシステムよりも高品質の診断出力を提供する。グローバルCDSシステムにおける学習システムパラメータは、個々のCDSシステムの学習システムのパラメータを更新するために、各CDSシステムに提供される。グローバルCDSシステムは更に、具現化された学習システムの構造を改良及び/又は調整することもできる。

Description

本発明は、医療診断の分野に関し、特に、階層的に配置される複数の診断システムを含むコンピュータベースの自己学習システムに関する。
臨床診断支援(CDS)システムは、一般に、診断処理において、医療従事者を支援するように使用される。CDSシステムは、医者のオフィス、クリニック、ヘルスセンター等に配置されてよい。システムのユーザは、患者の生命兆候、検査室検査結果、観測、経歴、家族歴等といった患者に関する入力データをCDSシステムに提供し、CDSシステムは、このデータが、特定の病状と又は一組の病状と一致しているかどうかを決定することを試みる。この決定は、医療従事者に、2値、イエス/ノー決定、一組の可能性値等として提示される。
多くのCDSシステムは、各診断の精度に関するフィードバックを受信することによって、又は、一組の例示的な症例を使用して「訓練」されることによって、その診断精度を向上させる自己学習、又は、「マシン学習」システムとして具現化される。つまり、「正しい」診断が、入力データに加えて提供され、システムは、正しい診断を踏まえて、データを処理し、これにより、別の患者について、同様の一組の入力データが提供されると、正しい診断を提供する可能性が増加する。「正しい」診断があることによって、その性能を評価する及び/又は学習システムが実際の臨床応用における使用に十分にロバストであるかどうかを決定するために、当該学習システムをテストすることも可能にする。
学習システムは、ニューラルネットワーク、トランスダクティブ(transductive)及びベイジアン推論、デシジョンツリー学習等を含む様々なマシン学習技術のうちの何れかを用いて具現化されてよい。これらの技術のそれぞれにおいて、学習システムは、訓練又はフィードバック段階中に、学習処理に関連付けられる一組のパラメータを調整する処理と、これらのパラメータを入力データに適用して、診断結果を生成する処理とを含む。例えばニューラルネットワークは、各入力部に、互いに及び出力部に結合される複数の内部ノードを含む。パラメータは、出力部において出力値を提供するように所与の一組の入力値がネットワークを伝播される方法を規定する各ノードと当該ノード間の各接続とに関連付けられる。訓練段階中、パラメータは、決定された出力値と既知の「正しい」出力値との差分が減少されるように、当該差分に基づいて調整されて、これにより、後続の一組の入力データに適用されたときに、既知の「正しい」出力を生成する可能性が増加される。
学習システムを訓練するために必要な例示的症例数は、使用される技術、入力データと出力との固有の相関関係、訓練症例間の分散等に依存する。ロバストな訓練可能なシステムでは、学習システムの診断精度は、訓練症例数が増加するにつれて上がる。しかし、特定の医師、クリニック又は医療センターが提供可能である症例数は、特に、既知の「正しい」診断で、CDSシステムを訓練し、テストするために使用される場合は、通常、比較的少ない。
更に、「正しい」診断の決定は、CDSシステムのユーザの診断スキルによって異なり、幾つかの実施形態では、特定のCDSシステムは、ユーザの誤った診断を単に強めるために訓練されてしまうことがある。
コンピュータ診断システム(CDS)の特定のユーザ/訓練者にあまり依存しない当該CDSを提供することが有利である。
この課題に対処するために、本発明の一実施形態において、個々のコンピュータ診断支援(CDS)システムは、「グローバル」CDSシステムに結合される。各CDSシステムは、同じ学習システム又は同じ学習システム技術を使用する。各CDSシステムからの訓練症例及びテスト症例が、グローバルCDSシステムに、定期的又は非定期的に、提供され、グローバルCDSシステムは、様々な個々のCDSシステムからの訓練症例を使用して、訓練症例に基づいた学習システムパラメータを生成する。個々のCDSシステムのどのCDSシステムよりも多くの訓練症例を有することにより、グローバルCDSシステムによって提供されるパラメータは、個々のCDSシステムのどのCDSシステムよりも高品質の診断出力を提供する。テストによって、グローバルCDSシステムの精度又はロバスト性における向上が分かると、グローバルCDSシステムにおける学習システムパラメータは、個々のCDSシステムの学習システムのパラメータを更新するために、各CDSシステムに提供される。グローバルCDSシステムは更に、具現化された学習システムの構造を改良及び/又は調整して、これらの学習システムの精度、ロバスト性及び/又は効率を更に向上させることもできる。
本発明は、添付図面を参照して、更に詳細に、また、例として説明される。
図1Aは、従来技術の臨床診断支援システムに関連付けられる例示的な動作を示す。 図1Bは、従来技術の臨床診断支援システムに関連付けられる例示的な動作を示す。 図1Cは、従来技術の臨床診断支援システムに関連付けられる例示的な動作を示す。 図1Dは、従来技術の臨床診断支援システムに関連付けられる例示的な動作を示す。 図2は、グローバル臨床診断支援(CDS)システムがローカルCDSシステムと通信する、臨床診断支援システムの例示的なネットワークを示す。 図3Aは、例示的なグローバル臨床診断支援システムを示す。 図3Bは、例示的なローカル臨床診断支援システムを示す。 図4は、臨床診断支援システムのネットワークにおける通信の例示的なフロー図を示す。
図面全体を通して、同じ参照符号は、同様の又は対応する特徴又は機能を示す。図面は、例示を目的として含まれており、発明の範囲を限定することを意図していない。
以下の説明において、限定ではなく例示を目的として、本発明の概念の十分な理解を提供するために、特定のアーキテクチャ、インターフェース、技術等といった具体的な詳細が記載される。しかし、本発明は、これらの具体的な詳細から離れる他の実施形態においても実施可能であることは、当業者には明らかであろう。同様に、本説明の本文も、図面に例示される実施形態に向けられたものであり、請求項に明示的に含まれる限界を超える請求項に係る発明を制限することを意図していない。単純さ及び明確さのために、周知のデバイス、回路及び方法の詳細な説明は、不必要な詳細で、本発明の説明を曖昧としないために、省略される。
図1A乃至図1Dは、従来技術の臨床診断支援(CDS)システム150に関連付けられる例示的な動作を説明する。
図1Aは、CDSシステム150内の学習システムの例示的な訓練を示す。複数の訓練データ110が、CDSシステム150に提供される。この訓練データ110は、(実際又は仮想の)患者に関連付けられる複数の入力データを含み、例えば患者の生命兆候、検査室検査結果、観察、症状等だけでなく、性別、年齢、民族的背景、家族歴等といった背景情報を含んでもよい。幾つかの実施形態では、提供される入力データのセットは、診断対象である特定の疾病又は疾患に固有である。例えば家族歴は、遺伝的であることが分かっている疾病については提供されるが、他の疾病には提供されない。入力データ110は、収集された「生データ」に直接的に相当しないが、そのような生データを前処理した結果であってよい。例えば、生データにおける2つの要素間の比率は、しばしば、要素の各値よりもよい診断値を有することが知られており、この比率が、入力データとして提供されてよい。
CDSシステム150は、入力データと一致した1つ以上の疾病又は疾患の特定、及び/又は、入力データと一致しない1つ以上の疾病又は疾患の特定を提供するために、特定の疾病若しくは疾患、又は、一組の疾病若しくは疾患に対処する。CDSシステム150は、入力データを受信し、診断出力を提供する学習システムを含む。CDSシステム150の品質又は精度は、提供された診断出力が正しいかどうか、及び/又は、出力が正しい度合いに基づいて評価される。
診断出力の「正しさ」は、診断出力を、既知の「正しい」診断又は「正しい」と仮定される診断と比較することによって決定される。「正しい」診断とは、同じ入力データを検討した後に、医療従事者によって、又は、患者の状態における後続の変化によって、提供される診断である。例えば診断出力が、患者は特定の疾病の初期段階を経験している可能性が高いというものである場合、患者が最終的に当該疾病の後期段階を経験する場合、当該診断出力は、正しかったと決定される。当該患者が、当該疾病の後期段階を発現しない場合、当該診断出力は、正しくなかったと決定される。
CDSシステム150の精度を向上させるために、図1Aに示される「学習モード」中に、それに対して「正しい」診断が利用可能である入力データのセットが、CDSシステム150内の学習システムに提供される。入力データと「正しい」診断との両方が、学習システムに提供され、当該学習システムは、この入力データ及び「正しい」診断を処理して、CDSシステム150からの診断出力が「正しい」診断と一致する可能性を増加させる。
上記されたように、学習システムは、入力データの各要素、又は、入力データの要素のセットによって診断出力が影響を受ける態様を決定するパラメータ120によって特徴付けられる。説明及び理解し易くするために、各隣接層のノード間の接続を有する単一出力ノードの複数層を含むニューラルネットワークを使用する学習システムの実例が使用される。入力データは、第1の層に接続され、診断出力は、最後の層において生成される。各ノードは、「バイアス」又は「閾値」パラメータを有し、ノード間の各接続は、「重み」パラメータを有する。各ノードの出力は、次の層における各ノードへの各接続の重みによって、当該ノードの出力を乗算することによって、次の層のノードへと伝播される。各ノードは、当該ノードの出力を生成するために、ノードへの入力とノードのバイアスとを組み合わせる伝達関数を含む。一般に、シグモイド関数が、各ノードにおける伝達関数として使用される。
この例示的な実施形態では、各出力のノードの出力値は、当該出力の上記された既知の「正しい」値又は「正しい」と仮定される値と比較され、誤差値が生成される。ノード及び接続のパラメータ(バイアス及び重み)は、各入力及び介在するノードが出力値、また、対応して、誤差値に与えた影響を決定する。これらのパラメータは、各パラメータに対する誤差の差又は勾配と、「学習率」とに基づいて調整される。マルチ出力学習システムでは、パラメータは、(「平均平方誤差」といった)最小複合誤差を提供するように調整される。
学習率は、パラメータの修正がどれだけ大きいかを決定する。これにより、入力データの各セットの、パラメータの前の値によって決められる学習マシンの現在の状態への影響が決められる。低学習率では、学習システムを適切に訓練するには、多数の入力データセットを必要とし、高学習率では、必要とする入力データセットは少なくてよいが、急変をもたらすことがあり、適切な精度を達成できないことがある。
すべての訓練データが処理された後、学習システムは、図1Bに示されるように、精度についてテストされる。入力データの多数のセット112及び対応する「正しい」診断が、CDSシステム150に提供され、CDSシステム150内の学習システムは、図1Aの訓練段階中に生成された学習システムパラメータ120を使用する。
テストデータ112は、学習システムを訓練するために使用された訓練データ110のサブセットを含んでいてもよいし、訓練データ110とは関係なくてもよい。しかし、この場合、学習システムパラメータ120は、入力データの各セットの「正しい」診断に基づいて調整されるのではなく、出力診断が、「正しい」診断と比較されて、各出力診断の精度尺度が提供される。各出力診断の精度尺度は、これらのパラメータ120を有するCDSシステム150の品質に関連付けられる1つ以上の精度統計値を提供するように、組み合わされてもよい。これらの統計値及び他の決定は、精度評価レポート130に提示される。このような精度評価130に基づいて、ユーザは、決定された学習システムパラメータ120を有するCDSシステム150が、臨床環境における使用に適しているかどうかを決定することができる。
図1Cは、新しい患者の入力データ115又は既存患者の更新された入力データの診断を行うために使用される、決定された学習システムパラメータ120を有する例示的なCDSシステム150を示す。この構成では、CDSシステムは、図1Bのテスト段階と同様に動作し、入力データ115及びCDSシステム内の学習システムの現在のパラメータ120に基づいて、診断出力140を提供する。
診断出力140は、処方箋を提供する、更なる検査を要求する等のために、医療従事者によって使用される。しかし、上記されたように、この診断出力140の精度は、訓練データ110のセット数と、訓練データ110の各セットについて「正しい」と想定される診断の品質とに大きく依存する。
図1Dに示されるように、訓練データのセット数は、既存の入力データのセットについて、「正しい」診断を決定することによって増加することができる。この「正しい」診断は、例えば入力データ115を、CDSシステム150によって対処されている特定の疾病又は疾患の分野における診断専門家といった「評価者」180に提供することによって得られる。上記されたように、「正しい」診断は、患者の症状の後続の変化によって決定されてもよい。特定の入力データのセットについて、「正しい」診断が決定できると、当該入力データと「正しい」診断とが、新しい訓練データ110’のセットを提供するために使用される。
しかし、新しい訓練データの作成は、依然として、CDSシステム150に提供された症例の数、これらの症例の「正しい」診断の利用可能性、及び、これらの利用可能な診断の品質/精度に制限されている。
図2は、グローバルCDSシステム250GがローカルCDSサイト200A乃至200DにおけるCDSシステム250A乃至250Dと通信する臨床診断支援システムの例示的なネットワークを示す。このネットワークは、任意の特定のCDSサイト200A乃至200Dにおいて従来から利用可能であるパラメータ値よりもよりロバストで正確な訓練システムパラメータ値のセットを提供することを目的としている。
この例示的な実施形態では、CDSシステム250A乃至250D、250Gはいずれも、同様の学習システムを使用するので、学習システムパラメータ120A乃至120D、220は、互いに互換性があるか、又は、この互換性を提供するように変換可能である。参照及び理解し易くするために、以下において、これらのシステム250A乃至250D、250Gのそれぞれにおける学習システムは、同一であると仮定される。
上記されたように、単一のCDSサイト200A乃至200Dは、限られた量の訓練データを有し、各CDSシステム250A乃至250Dを訓練するために使用される「正しい」診断の品質は、各サイト200A乃至200Dによって異なる。本発明の一態様によれば、グローバルCDSシステム250Gは、各サイト200A乃至200Dから、訓練データを受信し、これにより、個別のCDSシステム250A乃至250Dの何れかがアクセスできる訓練データよりも多くの訓練データが蓄積される。この大量の訓練データは、訓練データにおける任意の特定の誤りのある「正しい」診断の影響を最小限にすることもできる。
グローバルCDSシステム250Gは、ローカルCDSシステム250A乃至250Dからのローカル訓練データ110A乃至110Dを受信し、このデータを、グローバル訓練データ210として記憶する。ローカル訓練データ110A乃至110Dを得るために、様々な技術のうちのどの技術を使用してもよい。ローカルCDSシステム250A乃至250Dは、グローバルCDSシステム250Gに、定期的に又は非定期的に連絡して、任意の新しい訓練データをアップロードするか、及び/又は、グローバルCDSシステム250Gが、各ローカルCDSシステム250A乃至250Dに、定期的に又は非定期的に連絡して、任意の新しい訓練データのアップロードを要求してもよい。訓練データ110A乃至110Dを用いてグローバル訓練データ210をポピュレートするために、他の技術が使用されてもよい。上記されたように、CDSシステム250A乃至250D、250Gが同一ではない場合、グローバルCDSシステム250Gは、必要に応じて、互換性を提供するように、受信した訓練データを前処理してもよい。同様に、ローカルCDSシステム250A乃至250Dが、例えば患者データにおける要素の比率を提供するように、患者データを前処理する場合、当該前処理は、グローバルCDSシステム250Gにおいても行われる。
新しい訓練データ210を受信すると、グローバルCDSシステム250Gは、この新しい訓練データ210を使用して、グローバルCDSシステム250G内の学習システムを更に訓練して、新しいグローバル学習システムパラメータ220のセットを生成する。任意選択的に、グローバルCDSシステム250Gの操作者は、グローバル学習システムパラメータ220に変更が適用される前に、受信した新しい訓練データを「事前スクリーニング」してもよい。例えば操作者は、新しい訓練データを、グローバルCDSシステム250Gに、学習モードではなく、診断モードにおいて適用して、CDSシステム250Gの診断出力を、新しい訓練データ210において提供された「正しい」診断と比較してもよい。当該診断出力と「正しい」診断との間に、著しい差分がある場合、新しい訓練データ210は、医療従事者に提供され、受信した訓練データにおける「正しい」診断が、対応する入力データに一致しているかどうかが評価される。この事前スクリーニングは、各CDSシステム250A乃至250Dからの診断に関連付けられる仮定される品質及び/又は信頼性に基づいて、受信されるすべての訓練データ、又は、選択されたCDSシステムから受信される訓練データに適用される。
グローバル学習システムパラメータ220を作成又は変更するために訓練データを処理した後、これらのパラメータ220を有するグローバルCDSシステム250Gは、上記精度評価及び/又は精度統計値を提供するためにテストされる。テストが、許容可能なレベルの精度及び/又は信頼性を示す場合、これらのパラメータ220を、ローカルCDSサイト200A乃至200Dが利用できるようにする。
推定上、これらの更新されたパラメータ220は、追加の訓練データを使用して生成されるので、更新されたパラメータ220を使用するCDSシステム250Gの精度及び/又は信頼性は、更新前のパラメータを使用するCDSシステム250Gの精度及び/又は信頼性よりも優れていることが期待される。任意選択的に、グローバルCDSシステム250Gの操作者は、更新されたパラメータが、前のパラメータほどうまく機能しないと決定されると、これらの更新されたパラメータを提供しないこともある。テストの結果は、適用される特定のテストデータのセットと他の偶然要因とに依存するので、更新されたパラメータの性能に関するこの決定は、観察された差分が、これらの新しい学習システムパラメータ220のリリースを保留するのに十分に「著しい」かどうかを決定するための1つ以上の統計的テストを使用することを含む。
新しい学習システムパラメータ220は、様々な技術の何れかを使用して、ローカルCDSサイト200A乃至200Dにダウンロードされてもよい。グローバルCDSシステム250Gは、各サイト200A乃至200Dに、新しいパラメータ220が利用であることを通知し、各サイト200A乃至200Dからのダウンロードの要求を待つことができる。或いは、グローバルCDSシステム250Gは、新しいパラメータ220を、すべてのサイト200A乃至200Dに、例えば電子メールへの添付ファイルとして、「ブロードキャスト」してもよい。
各サイト200A乃至200Dは、そのローカル学習システムパラメータ120A乃至120Dを、新しいパラメータ220に基づいて更新するオプションを有し、当該更新は、自動的に行われても、又は、ローカルテストの後に行われてもよい。この更新は、ローカルパラメータ120の更新されたパラメータ220との直接的な置換であってもよいし、ローカルCDSシステムとグローバルシステムとが異なる場合に応じて、何らかの前処理を含んでもよい。参照し易くするために、ここでは、「パラメータを更新」及び「パラメータを置換」との用語は、パラメータの1つ以上に対する変更と定義される。
サイト200は、その独自のテストデータを、前のパラメータ120を有するそのシステム250に適用し、次に、新しいパラメータ220で前のパラメータ120を置換する前に、新しいパラメータ220を有するシステム250に適用する。上記されたように、推論上、新しいパラメータ220は、ローカルパラメータ120よりも高い品質及び/又は信頼性を提供するが、パラメータ220が、当該高い品質及び/又は信頼性を提供しないと決定される場合、サイト200の操作者は、パラメータ120の新しいパラメータ220による更新を、あまり良くない性能の原因が決定されるまで、延期する。
上記されたように、所与のパラメータ120、220のセットによって提供される品質及び/又は信頼性は、訓練データにおいて提供される「正しい」診断の精度に依存する。同様に、ローカルテストデータを使用するテストの結果は、テストデータにおける「正しい」診断の精度に依存する。新しいパラメータ220が、ローカルパラメータ120に劣る性能を示す場合、パラメータ220が、ローカルテストデータに適用された場合に、ローカルパラメータ120よりも真に劣っているか、又は、テストデータにおいて提供される診断が、パラメータ220を決定するために使用されたグローバル訓練データ210における診断よりも劣っている。ローカルサイト200の操作者は、これらのシナリオのうちのどちらがサイト200においてあるのか解決できるまで、パラメータ120の新しいパラメータ220による更新を延期する。
一般的には、所与のサイトにおいて利用可能である訓練症例数を著しく超える訓練症例数に基づいているグローバルパラメータ220は、ローカルパラメータ120よりも優れ、各サイト200A乃至200Dは、そのローカルパラメータ120A乃至120Dを、パラメータ220のコピーで更新する。その後、グローバルパラメータ220は、時間の経過に伴ってグローバルCDSシステム250Gに提供される訓練症例の数が増加して、更新されるので、更新された学習システムパラメータ220が、各サイトにおけるローカル学習システムパラメータ120A乃至120Dとしてのパラメータ220の先のコピーを置換する。
各ローカルCDSサイト200A乃至200Dは、互いに独立していてよく、また、他のサイトの識別さえも知らなくてよい。グローバルCDSシステム250Gは、ローカルCDSシステム250A乃至250Dのベンダーによって、ネットワーキング及びパラメータ更新機能が提供されてよい。当該機能は、これらのCDSシステム250を競合CDSシステムから区別する特徴として提供される。
つまり、例えばCDSシステム250の購入者には、そのローカル訓練データ110A乃至110DをグローバルCDSシステム250Gに提供することと引き換えに、グローバルCDSシステム250Gから学習システムパラメータ220を受信する機会が提供される。グローバルCDSシステム250Gに提供されるローカル訓練データ110A乃至110Dは、特定の患者の識別情報を含む必要はないため、患者のプライバシーは保証される。他のセキュリティ手段が使用されてもよい。
図3A及び図3Bは、それぞれ、例示的なグローバルCDSシステム及びローカルCDSシステムを示す。
図3Aの例示的なグローバルCDSシステムは、学習システム320と、メモリ330と、ネットワークインターフェース340と、学習システム320及びネットワークインターフェース340の動作を制御するプロセッサ350とを含む。
上記されたように、複数のローカルCDSシステムに対してデータを送受信できる任意の通信デバイスであってよいネットワークインターフェース340は、複数のローカルCDSシステムのそれぞれから訓練データ110を受信し、当該データ110を、共有グローバル訓練データ210として、メモリ330に記憶する。メモリ330は更に、グローバル学習システムパラメータ220も含む。これらのパラメータは、学習システム320が、患者に対応する所与の入力データのセットに対応する診断出力325を提供できるようにする構造パラメータ及び動作パラメータを含む。この患者は、実際の人であっても、1つの特定の疾病を有する仮想の人といった仮想の人であってもよい。この仮想の人は、当該仮想の人が有する可能性のある仮定された入力データを有する。このような仮想患者は、各仮想患者の仮想入力データを処理し、結果としてもたらされる診断325を、各仮想患者の特定の疾病と比較することによって、学習システムパラメータを初期化するために使用される。仮想患者の処理は更に、医学生の教育ツールとして使用されてもよい。
ニューラルネットワークベースの学習システムの例では、構造パラメータは、ネットワークの構造(入力部の数、出力部の数、隠れ層の数、各層におけるノードの数、ノード間の接続等)、入力データの要素のネットワークの特定の入力部への割当て、ネットワークの特定の出力部の出力診断データへの割当て等である。動作パラメータは、各ノードに関連付けられる上記バイアス、及び、ノード間の各接続に関連付けられる重みであってよい。
パラメータ220を初期化するために、プロセッサ350は、モード制御355を介して、学習システム320を学習モードに設定し、当該学習システムに、訓練データ(入力データ+「正しい」診断)210のセットを連続して提供する。訓練データ210の各セットが学習システム320によって処理されるにつれて、学習システム320は、その決定された診断を、「正しい」診断と比較し、パラメータ220を調整して、後続の繰り返しにおいて、決定された診断が「正しい」診断により合う可能性を増加させる。幾つかの学習システムにおいて、訓練データ210のセットのグループは、パラメータ220が調整される前に処理されてもよい。
訓練データ210の各セットを処理するために必要な時間に応じて、学習処理は、現在、利用可能な訓練データ210がすべて処理されるまで、継続するか、又は、学習処理は、所与の基準が満足された後、「中断」されて、すべての訓練データ210が処理される前に、パラメータ220のテスト及びローカルCDSサイトへの潜在的なリリースが可能にされてもよい。
初期訓練が完了した(又は中断された)後、プロセッサは、学習システムを、非学習モードに設定する。非学習モードでは、パラメータ220は固定されたままである一方で、入力データの各セットが、学習システムによって処理され、これらのパラメータ220を使用して、診断325が生成される。この非学習モード中、プロセッサ350は、患者入力データと、当該入力データに対応する「正しい」診断とを含むテストデータ310を、学習システム320に提供し、当該学習システム320から、対応する出力診断を受信する。このテストデータ310は、訓練データ210のサブセットであっても、学習システムを訓練するために使用されていないデータ310であってもよい。
プロセッサは更に、訓練データ210から「正しい」診断315を受信し、これらの2つの診断315、325を比較して、これらの診断315、325間の差分を決定する。プロセッサ350は、テストデータのセットに対して、当該差分を評価し、精度レポート358を提供する。グローバルCDSシステムの操作者が、報告された精度が十分であると決定すると、当該操作者は、プロセッサ350に、パラメータ210を、ローカルCDSシステムへの分布のためにネットワークインターフェース340に提供するように指示する。そうではない場合、パラメータ210は、更なる訓練データが処理されるまでリリースされないか、又は、不正確さの原因が決定される。
幾つかの実施形態では、テスト及び精度評価は、プロセッサ350によって、自立的に行われる。プロセッサ350は、決定された精度尺度が所定の閾値に達するかどうかに基づいて、新しいパラメータ210を、分布のためにネットワークインターフェースに提供する。
図3Bの例示的なローカルCDSシステムも、学習システム320と、メモリ330と、ネットワークインターフェース340と、学習システム320及びネットワークインターフェース340の動作を制御するプロセッサ360とを含む。図3BのローカルCDSシステムのコンポーネントの幾つかは、図3AのグローバルCDSシステムのコンポーネントと同じ参照符号を有するが、当業者であれば、これらの同じ参照符号を有するコンポーネントは、互いに同一である必要はなく、同様の機能を行えばよいことは理解できよう。図3Bのプロセッサ360は、図3Aのプロセッサ350とは違う参照符号で特定されて、それぞれ、異なる制御機能を行うことが示されている。
ネットワークインターフェース340が、グローバルCDSシステムから、パラメータ220を受信すると、プロセッサ360は、これらの更新されたパラメータ220に基づいて、現在のローカル訓練システムパラメータ120を更新する。
上記されたように、プロセッサ360は、ローカルパラメータ120がこれらのパラメータ220によって置換される前に、ローカルテストデータ312を使用して、更新されたパラメータ220をテストし、性能が劣る原因が決定されるまで、パラメータ220の設定を延期してもよい。
更新されたパラメータ220は、今度は、ローカルパラメータ120となり、プロセッサ360は、学習システム320を非学習モードにし、これらのパラメータ120への変更を阻止する。この非学習モード中、これらの更新されたローカルパラメータ120を使用して新しい患者データ(新しい患者又は既存患者の新しいデータ)370を処理して、診断出力325を提供するように、ローカルCDSシステムが使用される。プロセッサ360は、この診断出力325を使用して、1つ以上の診断レポート368を作成する。
次に、「正しい」診断が、所与の新しい患者データ370のセットに関連付けられていることが発見されると、この診断は、患者の入力データに追加されて、新しい訓練及び/又はテストデータが形成される。任意選択的に、プロセッサ360は、学習システム320を、学習モードにして、この訓練データを処理し、当該訓練データに基づいて、ローカルパラメータ120を更新してもよい。或いは、プロセッサ360は、単に、この新しい訓練データをグローバルCDSシステムに提供し、グローバルCDSシステムからのパラメータ220の次の更新を受信するまで待機していてもよい。
上で詳細に説明されたように、プロセッサ360は、定期的に又は非定期的に、ネットワークインターフェース340に、グローバル学習システム320の後続の訓練のためのグローバルCDSシステムへの送信のために、メモリ330から新しい訓練データ110を取り出すように指示する。この送信は、訓練データの新しいセットが作成される度に、又は、訓練データの所与の数の新しいセットが作成されると起きてよい。送信は、スケジュールに基づいて、グローバルCDSシステムからの要求に基づいて、又は、ローカルCDSシステムの操作者からのコマンドに基づいて起きてもよい。この送信を開始する他の契機は、当業者には明らかであろう。
グローバルCDSシステムは、ローカルCDSシステムから、新しい訓練データ110を受信し、処理する際に、この新しい訓練データ110の一部又は全部を使用して、グローバル学習システムパラメータ220を更新し、これらの新しいパラメータ220を、ローカルCDSシステムに提供し、上記処理の繰り返しを開始する。
図4は、臨床診断支援システムのネットワーク間の通信の例示的なフロー図を示す。
ステップ410において、ローカルCDSシステムは、患者データのセットを収集し、ステップ420において、「正しい」診断を決定できるセットに対して、訓練データが作成される。ステップ410〜420のループによって示されるように、これは、通常、時間の経過に伴い継続される処理である。任意選択的に、この訓練データは、ローカルCDSシステムを訓練するために使用されてもよい。
ステップ430において、ローカル訓練データが、グローバルCDSシステムに通信される。グローバルCDSシステムは、この訓練データの一部又は全部(訓練データの一部は、グローバルCDSシステムをテストするために使用されてもよい)を使用して、グローバルCDSシステムを訓練し、ステップ440において、この訓練データに基づいて、グローバル学習システムパラメータのセットが決定される。任意選択的に、ステップ445において、これらのパラメータを用いるグローバルCDSシステムの性能が、テストデータを用いて評価される。
ステップ450において、決定されたグローバル学習システムパラメータが、ローカルCDSシステムに提供され、ステップ460において、ローカル学習システムパラメータが更新される。ステップ455において、ローカルCDSシステムは、そのローカルパラメータを置換する前に、これらのグローバルパラメータを用いて、そのCDSシステムの性能を任意選択的に評価してもよい。
その後、ステップ480において、新しい患者データが、ローカルCDSシステムによって、グローバルCDSシステムからの更新されたパラメータを使用して処理される。「正しい」診断が、新しい患者データのセットに対して提供可能である場合、ローカルCDSシステムは、ステップ490において、新しい訓練データを作成し、ステップ430において、それを、グローバルCDSシステムに提出する。ステップ430〜490のループによって示されるように、この訓練データ及び学習システムパラメータの更新は、時間の経過と共に継続する。
複数のローカルCDSシステムからローカル訓練データを受信するグローバルCDSシステムを提供することによって、各CDSシステムにおける専門家システムの品質及び信頼性が、大幅に増加することが期待でき、また、品質及び信頼性におけるこの大幅な増加は、ローカルCDSシステムへの負担が最小限で提供される。
更に、グローバルCDSシステムは、「正しい」診断を伴う大量の患者データへのアクセスがあるため、グローバルCDSシステムは、ローカルCDSシステムの診断能力を更に向上させる可能性のある他の分析を行うこともできる。例えば患者データのセットのどの要素が、適切な診断を提供するのに最も効果的であるのか、及び/又は、入力データの(比率の形成といった)前処理がより良い診断を提供するのかどうかを確認することはしばしば困難である。グローバルCDSシステムは、これらの問題等に対処するために、提供された訓練データに分析を適用してもよい。
例えばグローバルCDSシステムは、訓練データを、様々な構成の学習システムの性能を比較する遺伝的アルゴリズム処理に適用してもよい。各構成は、学習システムへの入力として使用される異なる要素のセットを使用する。様々な要素のセットは、前の設定において、うまく機能した要素を組み合わせる遺伝的アルゴリズムによって生成されてもよい。
新しい学習システム構成が、ローカルCDSシステムにおける現在の学習システム構成よりも優れていることが分かると、この新しいシステム構成が、それ以降の使用のために、ローカルCDSシステムに提供される。
本発明は図面及び上記記載において詳細に例示且つ説明されたが、このような例示及び説明は、例示的と見なされるべきであって限定的ではない。本発明は、開示された実施形態に限定されない。
例えばグローバルCDSシステムもローカルCDSシステムとして動作し、当該CDSシステムが上で詳細に説明された「グローバル」CDSシステムとして動作する場合に使用される患者データ及び診断のプールに、患者データと、それに付随する「正しい」診断とを提供する実施形態において、本発明を動作させることも可能である。
開示された実施形態の他の変形は、請求に係る発明を実施する際に、図面、開示内容、添付の請求項を検討することにより、当業者により理解及び達成されうる。請求項において、「含む」との用語は、他の要素又はステップを排除するものではなく、また、「a」又は「an」との不定冠詞は、複数形を排除するものではない。単一のプロセッサ又は他のユニットが、請求項に記載される幾つかのアイテムの機能を果たしてもよい。特定の手段が相互に異なる従属請求項に記載されるという単なる事実が、これらの手段の組み合わせを有利に用いることができないことを示すものではない。コンピュータプログラムは、他のハードウェアと共に又は他のハードウェアの一部として供給される光学記憶媒体又は固体媒体といった適切な媒体上に記憶される及び/又は分散配置されるが、インターネット又は他の有線若しくは無線通信システムを介した形態といった他の形態で分配されてもよい。請求項における任意の参照符号は、範囲を限定するものと解釈するべきではない。

Claims (19)

  1. 臨床診断支援(CDS)ネットワークであって、
    患者データを受信し、ローカル学習システムのローカル学習システムパラメータに基づいて、対応する診断出力を提供する前記ローカル学習システムをそれぞれ含む複数のローカル臨床診断支援システムと、
    前記複数のローカル臨床診断支援システムから、患者データと、対応する「正しい」診断とを含む訓練データを受信し、前記訓練データを、グローバル学習システムに適用し、前記グローバル学習システムの出力診断と、前記対応する「正しい」診断との比較に基づいて、グローバル学習システムパラメータを生成し、前記グローバル学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供する前記グローバル学習システムを含むグローバル臨床診断支援システムと、
    を含み、
    前記複数のローカル臨床診断支援システムのうちの1つ以上は、前記グローバル学習システムパラメータに基づいて、前記ローカル学習システムパラメータを更新し、更新された前記ローカル学習システムパラメータに基づいて、後続の診断出力を提供する、ネットワーク。
  2. 前記ローカル学習システム及び前記グローバル学習システムは、ニューラルネットワークを含み、前記グローバル学習システムパラメータ及び前記ローカル学習システムパラメータは、前記ニューラルネットワークの各ノードに関連付けられるバイアスと、前記ノード間の各接続に関連付けられる重みとを含む、請求項1に記載のネットワーク。
  3. 前記複数のローカル臨床診断支援システムのうちの少なくとも1つのローカル臨床診断支援システムは、前記グローバル学習システムパラメータを使用する前記ローカル学習システムに適用されるテストデータに基づいて、前記ローカル学習システムパラメータを更新するかどうかを決定し、前記テストデータは、複数の患者データのセットと、対応する「正しい」診断とを含み、前記ローカル学習システムパラメータを更新するかどうかの前記決定は、前記ローカル学習システムの各診断出力と、前記対応する「正しい」診断との比較に基づいている、請求項1に記載のネットワーク。
  4. 前記グローバル臨床診断支援システムは、前記複数のローカル臨床診断支援システムから受信され、前記グローバル学習システムパラメータを使用する前記グローバル学習システムに適用されるテストデータに基づいて、前記グローバル学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供するかどうかを決定し、前記テストデータは、複数の患者データのセットと、対応する「正しい」診断とを含み、前記グローバル学習システムパラメータを提供するかどうかの前記決定は、前記グローバル学習システムの各診断出力と、前記対応する「正しい」診断との比較に基づいている、請求項1に記載のネットワーク。
  5. 前記グローバル学習システム及び前記ローカル学習システムは、前記患者データを処理するための特定の構造を含み、前記グローバル臨床診断支援システムは更に、前記訓練データを処理し、代替構造を有する学習システムの診断出力と、前記訓練データに関連付けられる前記「正しい」診断との比較に基づいて、前記特定の構造よりも優れている前記代替構造を特定し、前記代替構造を、前記複数のローカル臨床診断支援システムに提供する、請求項1に記載のネットワーク。
  6. グローバル臨床診断支援(CDS)システムであって、
    複数のローカル臨床診断支援システムから、複数の患者データのセットと、対応する「正しい」診断とを含むローカル訓練データを受信するネットワークインターフェースと、
    前記複数のローカル臨床診断支援システムからの前記ローカル訓練データの一部又は全部を処理し、学習システムの各診断出力と、前記対応する「正しい」診断との比較に基づいて、学習システムパラメータを提供する、前記学習システムと、
    前記学習システム及び前記ネットワークインターフェースを制御し、前記ネットワークインターフェースを介して、前記学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供するプロセッサと、
    を含む、システム。
  7. 前記学習システムは、ニューラルネットワークを含み、前記学習システムパラメータは、前記ニューラルネットワークの各ノードに関連付けられるバイアスと、前記ノード間の各接続に関連付けられる重みとを含む、請求項6に記載のシステム。
  8. 前記プロセッサは、前記複数のローカル臨床診断支援システムから受信され、前記学習システムパラメータを使用する前記学習システムに適用されるテストデータに基づいて、前記学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供するかどうかを決定し、前記テストデータは、複数の患者データのセットと、対応する「正しい」診断とを含み、前記学習システムパラメータを提供するかどうかの前記決定は、前記学習システムの各診断出力と、前記対応する「正しい」診断との比較に基づいている、請求項6に記載のシステム。
  9. 前記学習システムは、前記患者データを処理するための特定の構造を含み、前記学習システムは更に、前記訓練データを処理し、代替構造を有する学習システムの診断出力と、前記訓練データに関連付けられる前記「正しい」診断との比較に基づいて、前記特定の構造よりも優れている前記代替構造を特定し、前記代替構造を、前記複数のローカル臨床診断支援システムに提供する、請求項6に記載のシステム。
  10. ローカル臨床診断支援(CDS)システムであって、
    患者データを処理し、ローカル学習システムパラメータに基づいて、前記患者データの各セットについて診断出力を提供する学習システムと、
    グローバル臨床診断支援システムに、複数の前記患者データのセットと、対応する「正しい」診断とを含むローカル訓練データを提供し、前記グローバル臨床診断支援システムから、提供した前記ローカル訓練データに少なくとも部分的に基づいているグローバル学習システムパラメータを受信するネットワークインターフェースと、
    前記学習システム及び前記ネットワークインターフェースを制御し、受信した前記グローバル学習システムパラメータに基づいて、前記ローカル学習システムパラメータを更新するプロセッサと、
    を含む、システム。
  11. 前記学習システムは、ニューラルネットワークを含み、前記ローカル学習システムパラメータ及び前記グローバル学習システムパラメータは、前記ニューラルネットワークの各ノードに関連付けられるバイアスと、前記ノード間の各接続に関連付けられる重みとを含む、請求項10に記載のシステム。
  12. 前記プロセッサは、前記グローバル学習システムパラメータを使用する前記学習システムに適用されるテストデータに基づいて、前記ローカル学習システムパラメータを更新するかどうかを決定し、前記テストデータは、複数の前記患者データのセットと、対応する「正しい」診断とを含み、前記ローカル学習システムパラメータを更新するかどうかの前記決定は、前記ローカル学習システムの各診断出力と、前記対応する「正しい」診断との比較に基づいている、請求項10に記載のシステム。
  13. 複数のローカル臨床診断支援(CDS)システムから、複数の患者データのセットと、対応する「正しい」診断とを含む訓練データを受信するステップと、
    学習システムの診断出力と、前記対応する「正しい」診断との比較に基づいて、グローバル学習システムパラメータを生成するように、前記訓練データを前記学習システムに適用するステップと、
    前記グローバル学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供するステップと、
    を含む、方法。
  14. 前記学習システムは、ニューラルネットワークを含み、前記グローバル学習システムパラメータは、前記ニューラルネットワークの各ノードに関連付けられるバイアスと、前記ノード間の各接続に関連付けられる重みとを含む、請求項13に記載の方法。
  15. テストデータを、前記学習システムに適用するステップと、
    前記学習システムからの診断出力と、前記テストデータに関連付けられる「正しい」診断との比較に基づいて、前記グローバル学習システムパラメータを、前記複数のローカル臨床診断支援システムに提供するかどうかを決定するステップと、
    を含む、請求項13に記載の方法。
  16. 前記学習システムは、前記患者データを処理するための特定の構造を含み、前記方法は更に、
    代替構造を有する学習システムの診断出力と、前記訓練データに関連付けられる前記「正しい」診断との比較に基づいて、前記特定の構造よりも優れている前記代替構造を特定するように、前記訓練データを処理するステップと、
    前記代替構造を、前記複数のローカル臨床診断支援システムに提供するステップと、
    を含む、請求項13に記載の方法。
  17. 複数の患者データのセットと、対応する「正しい」診断とを含むローカル訓練データを、グローバル臨床診断支援(CDS)システムに提供するステップと、
    前記グローバル臨床診断支援システムから、提供された前記ローカル訓練データに少なくとも部分的に基づいているグローバル学習システムパラメータを受信するステップと、
    新しい患者データと、前記グローバル学習システムパラメータとに基づいて診断出力を提供するように、前記新しい患者データを、ローカル学習システムに適用するステップと、
    を含む、方法。
  18. 前記ローカル学習システムは、ニューラルネットワークを含み、前記グローバル学習システムパラメータは、前記ニューラルネットワークの各ノードに関連付けられるバイアスと、前記ノード間の各接続に関連付けられる重みとを含む、請求項17に記載の方法。
  19. テストデータを、前記ローカル学習システムに適用するステップと、
    前記グローバル学習システムパラメータを使用する前記ローカル学習システムからの診断出力と、前記テストデータに関連付けられる「正しい」診断との比較に基づいて、前記ローカル学習システムパラメータを更新するステップと、
    を含む、請求項17に記載の方法。
JP2016529437A 2013-11-13 2014-11-10 コンピュータ化された臨床診断支援のための階層的自己学習システム Active JP6466442B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361903475P 2013-11-13 2013-11-13
US61/903,475 2013-11-13
PCT/IB2014/065921 WO2015071815A1 (en) 2013-11-13 2014-11-10 Hierarchical self-learning system for computerized clinical diagnostic support

Publications (3)

Publication Number Publication Date
JP2017504087A true JP2017504087A (ja) 2017-02-02
JP2017504087A5 JP2017504087A5 (ja) 2017-12-21
JP6466442B2 JP6466442B2 (ja) 2019-02-06

Family

ID=52000903

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016529437A Active JP6466442B2 (ja) 2013-11-13 2014-11-10 コンピュータ化された臨床診断支援のための階層的自己学習システム

Country Status (5)

Country Link
US (1) US11361849B2 (ja)
EP (1) EP3069286A1 (ja)
JP (1) JP6466442B2 (ja)
CN (1) CN106462655B (ja)
WO (1) WO2015071815A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018225578A1 (ja) * 2017-06-05 2018-12-13 キヤノン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP2020509498A (ja) * 2016-11-14 2020-03-26 コグノア,インク. 発達に係る疾病を評価し、およびカバー率と信頼度に対する制御を提供する方法および装置
JP2020526819A (ja) * 2017-07-03 2020-08-31 エックス デベロップメント エルエルシー ロボットアクションへの修正に基づく局所的特徴モデルの更新
US11780083B2 (en) 2017-07-03 2023-10-10 Google Llc Determining and utilizing corrections to robot actions
US11972336B2 (en) 2015-12-18 2024-04-30 Cognoa, Inc. Machine learning platform and system for data analysis
US12402840B2 (en) 2015-08-11 2025-09-02 Cognoa, Inc. Methods and apparatus to determine developmental progress with artificial intelligence and user input
US12564342B2 (en) 2019-09-06 2026-03-03 Cognoa, Inc. Methods, systems, and devices for the diagnosis of behavioral disorders, developmental delays, and neurologic impairments

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10007407B2 (en) * 2014-11-03 2018-06-26 Cerner Innovation, Inc. Duplication detection in clinical documentation to update a clinician
US20190066244A1 (en) * 2017-08-30 2019-02-28 International Business Machines Corporation Personalized healthcare image analysis system
DE102017219441A1 (de) * 2017-10-30 2019-05-02 Robert Bosch Gmbh Verfahren zum Trainieren eines zentralen Künstlichen-Intelligenz-Moduls
KR102656543B1 (ko) 2018-03-16 2024-04-12 삼성메디슨 주식회사 의료 영상 장치, 그 제어 방법, 및 컴퓨터 프로그램
CN108831554B (zh) * 2018-06-05 2021-08-31 中国联合网络通信集团有限公司 医疗信息处理方法及装置
JP7374201B2 (ja) * 2019-09-26 2023-11-06 富士フイルム株式会社 機械学習システムおよび方法、統合サーバ、プログラムならびに推論モデルの作成方法
JP7717501B2 (ja) * 2021-06-15 2025-08-04 キヤノンメディカルシステムズ株式会社 医用情報処理装置、医用情報処理システム、医用情報処理方法及び医用情報処理プログラム
EP4399719A1 (en) * 2021-09-07 2024-07-17 Koninklijke Philips N.V. Defining preset parameter values for an ultrasound imaging system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004072858A1 (ja) * 2003-01-17 2004-08-26 Ho Jinyama 状態識別方法及び状態識別システム
US20050216208A1 (en) * 2004-03-26 2005-09-29 Akira Saito Diagnostic decision support system and method of diagnostic decision support
US20110119212A1 (en) * 2008-02-20 2011-05-19 Hubert De Bruin Expert system for determining patient treatment response

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3231810B2 (ja) * 1990-08-28 2001-11-26 アーチ・デベロップメント・コーポレーション ニューラル・ネットワークを用いた鑑別診断支援方法
US6714925B1 (en) * 1999-05-01 2004-03-30 Barnhill Technologies, Llc System for identifying patterns in biological data using a distributed network
US7650321B2 (en) * 2005-02-16 2010-01-19 Siemens Medical Solutions Usa, Inc. Two classifier based system for classifying anomalous medical patient records
RU2573218C2 (ru) 2009-09-04 2016-01-20 Конинклейке Филипс Электроникс Н.В. Поддержка принятия клинических решений
US10242156B2 (en) 2010-08-18 2019-03-26 Koninklijke Philips N.A. Visualization of concurrently executing computer interpretable guidelines
JP2013536521A (ja) * 2010-08-19 2013-09-19 コーニンクレッカ フィリップス エヌ ヴェ 拡張可能意思決定支援システム
US20120109689A1 (en) 2010-10-28 2012-05-03 Jason Lee Support System for Improved Quality Healthcare
CN114530203A (zh) * 2012-04-02 2022-05-24 皇家飞利浦有限公司 用于临床决策支持的途径可视化
US9996670B2 (en) * 2013-05-14 2018-06-12 Zynx Health Incorporated Clinical content analytics engine

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004072858A1 (ja) * 2003-01-17 2004-08-26 Ho Jinyama 状態識別方法及び状態識別システム
US20050216208A1 (en) * 2004-03-26 2005-09-29 Akira Saito Diagnostic decision support system and method of diagnostic decision support
US20110119212A1 (en) * 2008-02-20 2011-05-19 Hubert De Bruin Expert system for determining patient treatment response

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12402840B2 (en) 2015-08-11 2025-09-02 Cognoa, Inc. Methods and apparatus to determine developmental progress with artificial intelligence and user input
US11972336B2 (en) 2015-12-18 2024-04-30 Cognoa, Inc. Machine learning platform and system for data analysis
JP2020509498A (ja) * 2016-11-14 2020-03-26 コグノア,インク. 発達に係る疾病を評価し、およびカバー率と信頼度に対する制御を提供する方法および装置
JP7182554B2 (ja) 2016-11-14 2022-12-02 コグノア,インク. 発達に係る疾病を評価し、およびカバー率と信頼度に対する制御を提供する方法および装置
US12205725B2 (en) 2016-11-14 2025-01-21 Cognoa, Inc. Methods and apparatus for evaluating developmental conditions and providing control over coverage and reliability
US12027267B2 (en) 2017-06-05 2024-07-02 Canon Kabushiki Kaisha Information processing apparatus, information processing system, information processing method, and non-transitory computer-readable storage medium for computer-aided diagnosis
JP2018206082A (ja) * 2017-06-05 2018-12-27 キヤノン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
WO2018225578A1 (ja) * 2017-06-05 2018-12-13 キヤノン株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
US11780083B2 (en) 2017-07-03 2023-10-10 Google Llc Determining and utilizing corrections to robot actions
US12064876B2 (en) 2017-07-03 2024-08-20 Google Llc Determining and utilizing corrections to robot actions
US12159210B2 (en) 2017-07-03 2024-12-03 Google Llc Update of local features model based on correction to robot action
US11640517B2 (en) 2017-07-03 2023-05-02 X Development Llc Update of local features model based on correction to robot action
JP2020526819A (ja) * 2017-07-03 2020-08-31 エックス デベロップメント エルエルシー ロボットアクションへの修正に基づく局所的特徴モデルの更新
US12564342B2 (en) 2019-09-06 2026-03-03 Cognoa, Inc. Methods, systems, and devices for the diagnosis of behavioral disorders, developmental delays, and neurologic impairments

Also Published As

Publication number Publication date
WO2015071815A1 (en) 2015-05-21
EP3069286A1 (en) 2016-09-21
US11361849B2 (en) 2022-06-14
JP6466442B2 (ja) 2019-02-06
CN106462655A (zh) 2017-02-22
US20160283680A1 (en) 2016-09-29
CN106462655B (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
JP6466442B2 (ja) コンピュータ化された臨床診断支援のための階層的自己学習システム
JP7200311B2 (ja) 人工知能およびユーザ入力を用いて発達進度を判定するための方法および装置
US11862339B2 (en) Model optimization and data analysis using machine learning techniques
JP7584388B2 (ja) デジタル個別化医療のためのプラットフォームおよびシステム
US11862345B2 (en) Medical treatment metric modelling based on machine learning
US20220414464A1 (en) Method and server for federated machine learning
WO2020148998A1 (ja) モデル統合装置、方法及びプログラム並びに推論、検査及び制御システム
US20230351204A1 (en) Selecting a training dataset with which to train a model
Gong et al. Application of deep learning for diagnosing, classifying, and treating age-related macular degeneration
US11308615B1 (en) Systems and processes for improving medical diagnoses
US20210182599A1 (en) Matching a subject to resources
US7877341B2 (en) Self-adaptive data pre-fetch by artificial neuron network
US20150356274A1 (en) Methods and systems to create and apply models that screen patients for referral to a specialist for a medical therapy
CN113360612A (zh) 一种基于问诊请求的ai诊断方法、装置、存储介质和设备
CN118711836B (zh) 基于贝叶斯网络的检查项目推荐方法、辅助决策系统
Kannan et al. An adaptive reward-based behavioral model to optimize academic stress level in medical students
KR20240071256A (ko) 임상 의사 결정 지원 장치 및 방법
HK1259195B (zh) 利用人工智能和用户输入来确定发育进展的方法和装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171109

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171109

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180918

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190109

R150 Certificate of patent or registration of utility model

Ref document number: 6466442

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250