JP7833894B2 - 情報処理装置、情報処理システム、情報処理方法及びプログラム - Google Patents

Description

本発明は情報処理装置、情報処理システム、情報処理方法及びプログラムに係り、特に画像の解析結果を提供する技術に関する。

放射線科の読影医は、診療科の主治医からの画像診断依頼に対して、医用画像を診断し、異常の有無等を記載した読影レポートを作成する。このような読影レポートを作成する際に、所見文の作成をサポートする技術が知られている。例えば、構造化されたデータから、所見文に入力される単語の候補を表示することが行われている。

近年、医療機関において、読影レポートに記載されている内容が主治医に適切に伝達されず、治療介入が遅れることが問題となっている。これには複数の原因があると言われているが、原因の１つに、読影レポートが文字だけで構成されており、直感的でないことが挙げられる。

このような課題に対し、特許文献１には、被検体の関心部位のレーダーチャートを生成して表示する技術が記載されている。

特開２０１９－１１８８２０号公報

しかしながら、単に定量値のレーダーチャートを表示させるだけでは、病変の状態について把握しづらいという課題があった。

本発明はこのような事情に鑑みてなされたもので、関心領域の状態を直感的に把握させることができる情報処理装置、情報処理システム、情報処理方法及びプログラムを提供することを目的とする。

上記目的を達成するための情報処理装置の一の態様は、少なくとも１つのプロセッサと、少なくとも１つのプロセッサに実行させるための命令を記憶する少なくとも１つのメモリと、を備え、少なくとも１つのプロセッサは、画像の関心領域の性状に関する解析結果を取得し、解析結果に基づいてダイアグラムを生成し、ダイアグラムは、広がりの方向及び面積の少なくとも一方によって排他的関係を有する関心領域の状態を表現する情報処理装置である。本態様によれば、ユーザが関心領域の状態を直感的に把握することができる。

画像は、被検体が撮影された医用画像であることが好ましい。関心領域の状態は、良性及び悪性であることが好ましい。関心領域の状態は、原発性癌及び転移性癌であってもよいし、病名であってもよい。これにより、ユーザが医用画像の排他的関係を有する関心領域の状態を把握することができ、医用画像の診断を支援することができる。

少なくとも１つのプロセッサは、ダイアグラムをディスプレイに表示させることが好ましい。これにより、ユーザが関心領域の状態を一目で把握することができる。

少なくとも１つのプロセッサは、関心領域の状態を推定し、推定した結果をディスプレイに表示させることが好ましい。これにより、ユーザが関心領域の状態を知ることができる。

少なくとも１つのプロセッサは、ダイアグラムの方向及び面積の少なくとも一方に基づいて関心領域の状態を推定することが好ましい。これにより、関心領域の状態を正確に推定することができる。

ダイアグラムは、レーダーチャートを含むことが好ましい。これにより、関心領域の状態をわかりやすく表現することができる。

少なくとも１つのプロセッサは、同一被検体の複数の画像であって、それぞれ異なる時期に撮影された複数の画像の解析結果を取得することが好ましい。ダイアグラムは、複数の画像のそれぞれの解析結果を重ねて表現することが好ましい。複数の画像のそれぞれの解析結果をそれぞれ異なる色で表現することが好ましい。これにより、関心領域の状態の時系列的な変化を表現することができる。

少なくとも１つのプロセッサは、同一被検体の複数の画像であって、撮影条件及び撮影装置の少なくとも一方が異なる複数の画像の解析結果を取得することが好ましい。これにより、撮影条件及び撮影装置の違いによる関心領域の状態の相違を表現することができる。

撮影条件は、造影条件を含むことが好ましい。これにより、造影条件の違いによる関心領域の状態の相違を表現することができる。

少なくとも１つのプロセッサは、画像を解析して解析結果を取得することが好ましい。少なくとも１つのプロセッサは、画像の読影レポートを解析して解析結果を取得してもよい。これにより、解析結果を適切に取得することができる。

少なくとも１つのプロセッサは、読影レポートを解析して取得した解析結果、及び画像を解析して取得した解析結果を合わせたダイアグラムを生成することが好ましい。これにより、関心領域の状態をより正確に表現することができる。

少なくとも１つのプロセッサは、読影レポートを解析して取得した解析結果、及び画像を解析して取得した解析結果を区別したダイアグラムを生成することが好ましい。これにより、画像の関心領域の状態と読影レポートの関心領域の状態とをそれぞれ表現することができる。

排他的関係を有する関心領域の状態は、第１の状態、及び第１の状態とは異なる第２の状態を含み、ダイアグラムは、第１の状態の特徴を示す性状の軸、及び第２の状態の特徴を示す性状の軸がダイアグラムの中心に対してそれぞれ反対側に配置されることが好ましい。例えば、ダイアグラムは、第１の状態の特徴を示す性状の軸がダイアグラムの中心より左側に、及び第２の状態の特徴を示す性状の軸がダイアグラムの中心より右側に配置される。ダイアグラムは、第１の状態の特徴を示す性状の軸がダイアグラムの中心より上側に、及び第２の状態の特徴を示す性状の軸がダイアグラムの中心より下側に配置されてもよい。これにより、各軸のプロット点の広がりの方向によって関心領域の状態を表現することができる。

軸の値は、ダイアグラムの中心から離れるほど相対的に大きい値に設定され、少なくとも１つのプロセッサは、第１の状態の特徴を示す性状に関する解析結果を、第１の状態の特徴に該当するほど相対的に大きい数値として取得し、第２の状態の特徴を示す性状に関する解析結果を、第２の状態の特徴に該当するほど相対的に大きい数値として取得することが好ましい。これとは逆に、軸の値は、ダイアグラムの中心から離れるほど相対的に小さい値に設定され、少なくとも１つのプロセッサは、第１の状態の特徴を示す性状に関する解析結果を、第１の状態の特徴に該当するほど相対的に小さい数値として取得し、第２の状態の特徴を示す性状に関する解析結果を、第２の状態の特徴に該当するほど相対的に小さい数値として取得してもよい。これにより、各軸のプロット点を結んだ線に囲まれた領域の面積によって関心領域の状態を表現することができる。

上記目的を達成するための情報処理システムは、上記の情報処理装置と、画像を撮影する撮影装置と、ダイアグラムを表示するディスプレイと、を備える情報処理システムである。本態様によれば、ディスプレイに表示されたダイアグラムをユーザが視認することで、撮影装置において撮影された画像の関心領域の状態をユーザが直感的に把握することができる。

上記目的を達成するための情報処理方法は、画像の関心領域の性状に関する解析結果を取得する解析結果取得工程と、解析結果に基づいてダイアグラムを生成するダイアグラム生成工程と、を備え、ダイアグラムは、広がりの方向及び面積の少なくとも一方によって排他的関係を有する関心領域の状態を表現する情報処理方法である。本態様によれば、ユーザが関心領域の状態を直感的に把握することができる。

上記目的を達成するためのプログラムの一の態様は、上記の情報処理方法をコンピュータに実行させるためのプログラムである。本態様によれば、ユーザが関心領域の状態を直感的に把握することができる。このプログラムが記録された、コンピュータが読み取り可能な非一時的記憶媒体も本態様に含んでよい。

本発明によれば、関心領域の状態を直感的に把握させることができる。

図１は、医用情報処理システムの全体構成図である。 図２は、医用情報処理装置の構成を示すブロック図である。 図３は、医用情報処理方法を示すフローチャートである。 図４は、肺結節に関するレーダーチャートの一例を示す図である。 図５は、医用画像、及び医用画像に対応する肺結節のレーダーチャートの一例を示す図である。 図６は、医用画像、及び医用画像に対応する肺結節のレーダーチャートの一例を示す図である。 図７は、肝腫瘍に関するレーダーチャートの一例を示す図である。 図８は、医用画像の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。 図９は、医用画像、及び医用画像に対応するレーダーチャートの一例を示す図である。 図１０は、医用画像の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。 図１１は、医用画像、及び医用画像に対応するレーダーチャートの一例を示す図である。 図１２は、医用画像の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。 図１３は、医用画像、及び医用画像に対応するレーダーチャートの一例を示す図である。 図１４は、カラー表示されるレーダーチャートの一例を示す図である。 図１５は、複数の病変についてまとめて表現したレーダーチャートの一例を示す図である。 図１６は、現在の医用画像及び過去の画像と、それぞれの医用画像に対応するレーダーチャートの一例を示す図である。 図１７は、医用画像の読影レポートの内容の一例を示す図である。 図１８は、レーダーチャートが添付された読影レポートを示す図である。

以下、添付図面に従って本発明の好ましい実施形態について詳説する。

＜医用画像処理システム＞
本実施形態に係る医用情報処理システムは、被検体（患者）の医用画像を撮影し、撮影された医用画像の病変の性状分析を実施し、性状分析の結果に基づいてダイアグラムを生成し、生成したダイアグラムを提示するシステムである。図１は、医用情報処理システム１０の全体構成図である。図１に示すように、医用情報処理システム１０は、医用画像検査機器１２と、医用画像データベース１４と、医用情報処理装置１６と、読影レポートデータベース１８と、ユーザ端末２０と、を備えて構成される。

医用画像検査機器１２と、医用画像データベース１４と、医用情報処理装置１６と、読影レポートデータベース１８と、ユーザ端末２０とは、ネットワーク２２を介してそれぞれデータを送受信可能に接続される。ネットワーク２２は、医療機関内の各種機器を通信接続する有線、又は無線のＬＡＮ（Local Area Network）を含む。ネットワーク２２は、複数の医療機関のＬＡＮ同士を接続するＷＡＮ（Wide Area Network）を含んでもよい。

医用画像検査機器１２は、検査対象の検査対象部位を撮像し、医用画像を生成する撮影装置である。医用画像検査機器１２の例として、Ｘ線撮影装置、ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、ＰＥＴ（Positron Emission Tomography）装置、超音波装置、及び平面Ｘ線検出器を用いたＣＲ（Computed Radiography）装置が挙げられる。

医用画像データベース１４は、医用画像検査機器１２によって撮影された医用画像を管理するデータベースである。医用画像データベース１４は、医用画像を保存するための大容量ストレージ装置を備えるコンピュータが適用される。コンピュータには、データベース管理システムの機能を提供するソフトウェアが組み込まれる。

医用画像のフォーマットは、Ｄｉｃｏｍ（Digital Imaging and COmmunications in Medicine）規格を適用可能である。医用画像は、Ｄｉｃｏｍ規格において規定された付帯情報（Ｄｉｃｏｍタグ情報）が付加されてもよい。なお、本明細書における画像という用語には、写真等の画像自身の意味の他に、画像を表す信号である画像データの意味が含まれる。

医用情報処理装置１６は、医用画像を解析して、医用画像の関心領域の性状に関する解析結果を取得する。医用情報処理装置１６は、医用画像の読影レポートを解析して、関心領域の性状に関する解析結果を取得してもよい。また、医用情報処理装置１６は、解析結果に基づいてダイアグラムを生成する。医用情報処理装置１６は、医用画像の読影レポートを自動生成してもよい。

医用情報処理装置１６は、パーソナルコンピュータ、又はワークステーション（「コンピュータ」の一例）を適用可能である。図２は、医用情報処理装置１６の構成を示すブロック図である。図２に示すように、医用情報処理装置１６は、プロセッサ１６Ａと、メモリ１６Ｂと、通信インターフェース１６Ｃと、を備える。

プロセッサ１６Ａは、メモリ１６Ｂに記憶された命令を実行する。プロセッサ１６Ａのハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の機能部として作用する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるＰＬＤ（Programmable Logic Device）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、又はＣＰＵとＦＰＧＡの組み合わせ、あるいはＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の機能部を１つのプロセッサで構成してもよい。複数の機能部を１つのプロセッサで構成する例としては、第１に、クライアント又はサーバ等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能部として作用させる形態がある。第２に、ＳｏＣ（System On Chip）等に代表されるように、複数の機能部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。

メモリ１６Ｂは、プロセッサ１６Ａに実行させるための命令を記憶する。メモリ１６Ｂは、不図示のＲＡＭ（Random Access Memory）、及びＲＯＭ（Read Only Memory）を含む。プロセッサ１６Ａは、ＲＡＭを作業領域とし、ＲＯＭに記憶された後述する情報処理プログラムを含む各種のプログラム及びパラメータを使用してソフトウェアを実行し、かつＲＯＭ等に記憶されたパラメータを使用することで、医用情報処理装置１６の各種の処理を実行する。

通信インターフェース１６Ｃは、所定のプロトコルに従って、ネットワーク２２を介した医用画像検査機器１２、医用画像データベース１４、読影レポートデータベース１８、及びユーザ端末２０との通信を制御する。

医用情報処理装置１６は、インターネットを介して複数の医療機関からアクセス可能なクラウドサーバであってもよい。医用情報処理装置１６で行う処理は、課金制、又は固定料金制のクラウドサービスであってもよい。

図１の説明に戻り、読影レポートデータベース１８は、医用情報処理装置１６によって自動生成された読影レポート、及びユーザ端末２０において読影医等のユーザによって生成された読影レポートを管理するデータベースである。読影レポートデータベース１８は、読影レポート保存するための大容量ストレージ装置を備えるコンピュータが適用される。コンピュータには、データベース管理システムの機能を提供するソフトウェアが組み込まれる。医用画像データベース１４と読影レポートデータベース１８とは、１つのコンピュータで構成されてもよい。

ユーザ端末２０は、ユーザが読影レポートを閲覧、及び編集するための端末機器である。ユーザ端末２０は、例えばパーソナルコンピュータが適用される。ユーザ端末２０は、ワークステーションであってもよいし、タブレット端末であってもよい。ユーザ端末２０は、入力装置２０Ａ及びディスプレイ２０Ｂを備える。ユーザは、入力装置２０Ａを使用して医用情報処理システム１０への指示を入力する。また、ユーザ端末２０は、医用画像、及び読影レポートをディスプレイ２０Ｂに表示させる。さらに、医用情報処理装置１６は、後述するダイアグラムをディスプレイ２０Ｂに表示させる。

＜医用情報処理方法＞
図３は、医用情報処理システム１０を用いた医用情報処理方法を示すフローチャートである。ここでは、検査対象の医用画像について読影レポートを作成する例を説明する。

ステップＳＴ１の画像入力工程では、医用画像検査機器１２において撮影され、医用画像データベース１４に保存された医用画像が、ユーザの操作するユーザ端末２０に送信（入力）される。ユーザ端末２０は、医用画像を受信し、受信した医用画像をディスプレイ２０Ｂに表示させる。

ステップＳＴ２の病変指定工程では、画像入力工程で入力された医用画像に対して病変（「関心領域」の一例）を指定する。病変の指定は、ユーザが、ディスプレイ２０Ｂに表示された医用画像を見ながら、入力装置２０Ａを使用して行う。病変の指定は、医用情報処理装置１６、又はユーザ端末２０において、ＣＡＤ（Computer-Aided Diagnosis）により自動的に医用画像を解析して指定してもよい。また、病変の指定は、ＣＡＤにより自動的に抽出された病変の領域の候補を医用情報処理装置１６、又はユーザ端末２０がディスプレイ２０Ｂに表示させ、表示された候補の中から入力装置２０Ａを用いてユーザが選択することで行ってもよい。

ステップＳＴ３の性状分析工程（「解析結果取得工程」の一例）では、医用情報処理装置１６は、病変指定工程で指定された病変に対して、予め定められた性状分析を実施する。性状分析は、深層学習を用いた手法で識別するようにしてもよい。例えば、Characterization of Pulmonary Nodules in Computed Tomography Images Based on Pseudo-Labeling using Radiology Reports に記載されている手法を用いることができる。

性状分析の結果（「解析結果」の一例）は、例えば０～１の値をとり、スコアが大きいほど、その項目についての所見が顕著であることを示す。スコアの値の範囲については、例えば、０～１００等、他の数値の範囲であってもよい。性状分析の結果は、離散的な値として出力してもよい。例えば、「明瞭」、「やや明瞭」、「やや不明瞭」、及び「不明瞭」の４段階の値としてもよい。

ステップＳＴ４のダイアグラム生成工程では、医用情報処理装置１６は、性状分析工程の分析結果から、ダイアグラムを生成する。本実施形態では、ダイアグラムは、広がりの方向及び面積の少なくとも一方によって排他的関係を有する病変の状態を表現する。ダイアグラムは、レーダーチャート、折れ線グラフ、及び棒グラフ等を含む。レーダーチャートとは、原点を中心に複数の項目にそれぞれ対応する複数の軸を放射状に配置したレーダーチャート座標に対し、各軸に対応する項目のスコアをプロットし、プロットした点を隣り合う軸のプロットした点と直線で繋いで多角形にしたグラフである。

ステップＳＴ５の読影レポート作成工程では、画像入力工程で入力された画像の読影レポートが作成される。読影レポートは、前述のように医用情報処理装置１６によって自動生成されてもよいし、ユーザ端末２０においてユーザによって生成されてもよい。また、医用情報処理装置１６は、ダイアグラム生成工程で作成されたダイアグラムを読影レポートに添付し、読影レポートを読影レポートデータベース１８に保存する。

医用情報処理装置１６が実施するステップＳＴ３～ステップＳＴ５の工程は、情報処理方法を構成する。情報処理方法は、プロセッサ１６Ａがメモリ１６Ｂに記憶された情報処理プログラムを実行することで実現される。情報処理プログラムは、コンピュータが読み取り可能な非一時的記憶媒体によって提供されてもよい。この場合、医用情報処理装置１６は、非一時的記憶媒体から情報処理プログラムを読み取り、メモリ１６Ｂに記憶させてもよい。

＜レーダーチャート＞
〔肺結節〕
肺結節に関するレーダーチャートについて説明する。肺結節の状態は、それぞれ排他的関係を有する、良性、及び悪性を含む。ここでは、左側の面積が大きくなるほど良性を表し、右側の面積が大きくなるほど悪性を表すように表現したレーダーチャートについて説明する。

図４は、肺結節に関するレーダーチャート座標ＣＬＡの一例を示す図である。図４に示すように、レーダーチャート座標ＣＬＡは、原点を中心に放射状に配置された複数の軸であって、肺結節の病変の性状に関する１０個の項目である「境界」、「辺縁」、「形状」、「スピキュラ」、「分葉」、「胸膜陥入」、「気管支透亮像」、「空洞」、「石灰化」、及び「脂肪」にそれぞれ対応する軸を有する。各項目の軸には、原点から離れるほど大きい値が割り振られている。レーダーチャート座標ＣＬＡは、それぞれ隣り合う軸の同じ値を結ぶ実線の直線である目盛線、及び破線の直線である補助線を有する。

ここでは、項目の数が１０であるため、レーダーチャート座標ＣＬＡの形は１０角形である。なお、肺結節の病変の性状に関する項目は、ここで挙げた１０項目に限定されない。項目の数が整数であるＮの場合、レーダーチャート座標ＣＬＡの形はＮ角形である。

また、レーダーチャート座標ＣＬＡは、良性の特徴である「脂肪」、「石灰化」、「空洞」、及び「気管支透亮像」の４つの項目の軸が図４において原点よりも左側に配置され、悪性の特徴である「境界」、「辺縁」、「形状」、「スピキュラ」、「分葉」、及び「胸膜陥入」の６つ項目の軸が図４において原点よりも右側に配置されている。

レーダーチャート座標ＣＬＡには、各項目のスコアが各軸にプロットされ、隣り合うプロット点が繋げられた線により囲まれた領域であるスコア領域が形成される。スコア領域は、色、又はハッチング等で塗りつぶされてもよい。

このように、レーダーチャート座標ＣＬＡは、良性（「第１の状態」の一例）の特徴の項目の軸が原点（「ダイアグラムの中心」の一例）よりも左側に配置され、悪性（「第２の状態」の一例）の特徴の項目の軸が原点よりも右側（ダイアグラムの中心に対して「反対側」の一例）に配置される。また、レーダーチャート座標ＣＬＡは、各軸は原点から離れるほど相対的に大きい値に設定され、この軸に良性、及び悪性の特徴に該当するほど相対的に大きいスコアが付与された解析結果がプロットされる。したがって、レーダーチャート座標ＣＬＡのスコア領域は、病変が良性の場合は原点よりも左側に広がり、左側の面積の方が右側の面積よりも相対的に大きくなる。一方、病変が悪性の場合はスコア領域は原点よりも右側に広がり、右側の面積の方が左側の面積よりも相対的に大きくなる。

図５は、医用画像ＩＭ１、及び医用画像ＩＭ１の病変の肺結節の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ１の一例を示す図である。レーダーチャートＣＬ１は、レーダーチャート座標ＣＬＡの各軸に、各軸の項目に対応するスコアをプロットしたものである。レーダーチャートＣＬ１のスコア領域をレーダーチャートＣＬ１の原点を通る垂直線で左右に分割すると、スコア領域は右側よりも左側に広がり、右側の面積よりも左側の面積の方が相対的に大きい。したがって、ユーザは、レーダーチャートＣＬ１を視認することで、医用画像ＩＭ１の病変が良性の肺結節であることを一目で認識することができる。

図６は、医用画像ＩＭ２、及び医用画像ＩＭ２の病変の肺結節の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ２の一例を示す図である。レーダーチャートＣＬ２は、レーダーチャート座標ＣＬＡの各軸に、各軸の項目に対応するスコアをプロットしたものである。レーダーチャートＣＬ１とは逆に、レーダーチャートＣＬ２のスコア領域をレーダーチャートＣＬ２の原点を通る垂直線で左右に分割すると、スコア領域は左側よりも右側に広がり、左側の面積よりも右側の面積の方が相対的に大きい。したがって、ユーザは、レーダーチャートＣＬ２を視認することで、医用画像ＩＭ２の病変が悪性の肺結節であることを一目で認識することができる。

本実施形態に係るレーダーチャートによれば、スコア領域の広がりの方向及び面積の少なくとも一方によって肺結節の排他的関係を有する病変の状態を表現することができる。ここでは、広がりの方向及び面積をレーダーチャートの左右に分けて表現したが、広がりの方向及び面積は左右に限定されず、任意の方向に分けて表現してよい。また、レーダーチャート座標の各軸は等角度間隔に設けられてもよい。

〔肝腫瘍〕
肝腫瘍に関するレーダーチャートについて説明する。肝腫瘍の状態は、それぞれ排他的関係を有する、肝細胞癌（「原発性癌」の一例）、転移性肝癌（「転移性癌」の一例）、及び血管腫を含む。ここでは、右側の面積が大きくなるほど肝細胞癌を表し、下側の面積が大きくなるほど転移性肝癌を表し、左側の面積が大きくなるほど血管腫を表すように表現したレーダーチャートについて説明する。

図７は、肝腫瘍に関するレーダーチャート座標ＣＬＢの一例を示す図である。図７に示すように、レーダーチャート座標ＣＬＢは、原点を中心に放射状に配置された複数の軸であって、肝腫瘍の病変の性状に関する８つの項目である「早期濃染」、「Washout」、「被膜」、「リング状濃染」、「点状濃染」、「漸増性」、「遷延性」、及び「吸収値」にそれぞれ対応する軸を有する。各項目の軸には、原点から離れるほど大きい値が割り振られている。

なお、レーダーチャート座標ＣＬＢは、レーダーチャート座標ＣＬＡとは異なり、各軸は線分としては表現されておらず、それぞれ隣り合う軸の同じ値を結ぶ目盛線だけが線分として表現されている。また、肝腫瘍の病変の性状に関する項目は、ここで挙げた８項目に限定されない。

レーダーチャート座標ＣＬＢは、肝腫瘍のうちの肝細胞癌の特徴である「早期濃染」、「Washout」、及び「被膜」の３つの項目の軸が図７において原点よりも右側に配置されている。また、レーダーチャート座標ＣＬＢは、肝腫瘍のうちの転移性肝癌の特徴である「リング状濃染」の項目の軸が図７において原点よりも下側に配置されている。さらに、レーダーチャート座標ＣＬＢは、肝腫瘍のうちの血管腫の特徴である「点状濃染」、「漸増性」、及び「遷延性」の３つの項目の軸が図７において原点よりも左側に配置されている。

また、レーダーチャート座標ＣＬＢには、吸収値の軸が図７において原点よりも上側に配置されている。吸収値は「多血性」「乏血性」、及び「どちらでもない」の３つに分類される。「多血性」は「肝細胞癌」の特徴であり、「乏血性」は「転移性肝癌」の特徴であり、「どちらでもない」は「血管腫」の特徴である。

レーダーチャート座標ＣＬＢには、各項目のスコアが各軸にプロットされ、隣り合うプロット点が繋げられた線により囲まれたスコア領域が形成される。

このように、レーダーチャート座標ＣＬＢは、肝細胞癌の特徴の項目の軸が右側に配置され、転移性肝癌の特徴の項目の軸が下側に配置され、血管腫の特徴の項目の軸が左側及び上側に配置され、この軸にスコアの値が相対的に大きいほど原点から離れた位置にプロットされる。したがって、レーダーチャート座標ＣＬＢのスコア領域は、病変が肝細胞癌の場合は原点より右側に広がり、右側の面積がその他の領域の面積よりも相対的に大きくなる。また、スコア領域は、病変が転移性肝癌の場合は原点より下側に広がり、下側の面積がその他の領域の面積よりも相対的に大きくなる。また、スコア領域は、病変が血管腫の場合は原点より左側に広がり、左側の面積がその他の領域の面積よりも相対的に大きくなる。

・肝細胞癌
図８は、医用画像ＩＭ３（図９参照）の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。

図９は、医用画像ＩＭ３、及び医用画像ＩＭ３の病変の肝腫瘍の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ３の一例を示す図である。レーダーチャートＣＬ３は、レーダーチャート座標ＣＬＢの各軸に、図８に示した各軸の項目に対応するスコアをプロットしたものである。レーダーチャートＣＬ３のスコア領域は右側に広がり、右側の面積がその他の領域の面積より相対的に大きい。したがって、ユーザはレーダーチャートＣＬ３を視認することで、医用画像ＩＭ３の病変が肝細胞癌であることを一目で認識することができる。

・転移性肝癌
図１０は、医用画像ＩＭ４（図１１参照）の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。

図１１は、医用画像ＩＭ４、及び医用画像ＩＭ４の病変の肝腫瘍の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ４の一例を示す図である。レーダーチャートＣＬ４は、レーダーチャート座標ＣＬＢの各軸に、図１０に示した各軸の項目に対応するスコアをプロットしたものである。レーダーチャートＣＬ４のスコア領域は下側に広がり、下側の面積がその他の領域の面積より相対的に大きい。したがって、ユーザはレーダーチャートＣＬ４を視認することで、医用画像ＩＭ４の病変が転移性肝癌であることを一目で認識することができる。

・血管腫
図１２は、医用画像ＩＭ５（図１３参照）の肝腫瘍の性状に関する解析結果の各項目のスコアの一例を示す表である。

図１３は、医用画像ＩＭ５、及び医用画像ＩＭ５の病変の肝腫瘍の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ５の一例を示す図である。レーダーチャートＣＬ５は、レーダーチャート座標ＣＬＢの各軸に、各軸の項目に対応するスコアをプロットしたものである。レーダーチャートＣＬ５のスコア領域は左側に広がり、左側の面積がその他の領域の面積より相対的に大きい。したがって、ユーザはレーダーチャートＣＬ５を視認することで、医用画像ＩＭ５の病変が血管腫であることを一目で認識することができる。

本実施形態に係るレーダーチャートによれば、スコア領域の広がりの方向及び面積の少なくとも一方によって肝腫瘍の排他的関係を有する病変の状態を表現することができる。

〔病名〕
ここまで、排他的関係を有する関心領域の状態が病名である例として、肝腫瘍の肝細胞癌、転移性肝癌、及び血管腫を説明したが、排他的関係を有する関心領域の状態は、その他の病名であってもよい。すなわち、同時に発症することのない複数の病名について、複数の性状に関する解析結果を取得し、広がりの方向及び面積の少なくとも一方によってそれぞれの病名の性状特徴の差異が大きくなるダイアグラムを生成してもよい。例えば、肺結節の場合、肺癌、過誤腫、及び肺内リンパ節等が排他的関係を有する例として挙げられる。

〔関心領域の状態の推定〕
医用情報処理装置１６は、病変の状態を推定してもよい。医用情報処理装置１６は、ダイアグラムの方向及び面積の少なくとも一方に基づいて病変の状態を推定してもよい。

例えば、医用情報処理装置１６は、レーダーチャートＣＬ１に基づいて、医用画像ＩＭ１の病変の状態を「良性」であると推定することができる。また、医用情報処理装置１６は、レーダーチャートＣＬ２に基づいて、医用画像ＩＭ２の病変の状態を「悪性」であると推定することができる。

また、医用情報処理装置１６は、推定した病変の状態をディスプレイ２０Ｂに表示させてもよい。医用情報処理装置１６は、推定した病変の状態をカラー表示させてもよい。

図１４は、ディスプレイ２０Ｂにカラー表示されるレーダーチャートの一例を示す図である。レーダーチャートＣＬ６は、不図示の医用画像の病変の肺結節の性状に関する解析結果のスコア領域が表現されている。レーダーチャートＣＬ６は、病変が「良性」と判定（推定）された場合はスコア領域が青色に、「悪性」と判定された場合はオレンジ色に塗り潰される。ここでは、病変の状態が「良性」と判定（推定）されており、スコア領域が青色に塗り潰されている。また、ディスプレイ２０Ｂには、レーダーチャートＣＬ６とともに、病変の状態の判定結果である「良性」が文字ＴＸ１によって表示されている。

なお、同一被検体に複数の結節が存在する場合がある。この場合、複数の病変の性状に関する解析結果を１つのレーダーチャートにまとめて表示してもよい。図１５は、ディスプレイ２０Ｂにカラー表示されるレーダーチャートであって、複数の病変についてまとめて表現したレーダーチャートの一例を示す図である。レーダーチャートＣＬ７は、不図示の医用画像のそれぞれ異なる２つの病変の肺結節の性状に関する解析結果のスコア領域が重ねて表現されている。また、レーダーチャートＣＬ７は、病変の状態が「良性」と判定された第１のスコア領域Ｒ１が青色に、「悪性」と判定された第２のスコア領域Ｒ２がオレンジ色に塗り潰されている。さらに、ディスプレイ２０Ｂには、レーダーチャートＣＬ７とともに、病変の状態の判定結果である「良性」、及び「悪性」が文字ＴＸ２によって表示されている。

このように、推定した病変の状態をカラー表示させることで、ユーザは医用画像の病変の状態を一目で認識することができる。

〔フォローアップ検査〕
医師が被検体の経過を確認するために、同一被検体に対して一定期間の経過後にフォローアップ検査が行われる場合がある。医用情報処理装置１６は、同一被検体の複数の画像であって、それぞれ異なる時期に撮影された複数の画像の解析結果を取得し、複数の画像の解析結果に基づいてダイアグラムを生成してもよい。例えば、医用情報処理装置１６は、ダイアグラム座標に最新の医用画像である現在画像の解析結果をプロットするとともに、同じダイアグラム座標に過去に撮影された医用画像である過去画像の解析結果を重ねてプロットしてもよい。すなわち、１つのダイアグラムに複数の画像の解析結果を表示させてもよい。

図１６は、同一被検体のそれぞれ異なる時期に撮影された複数の画像である最新の医用画像ＩＭ６、及び過去の医用画像ＩＭ７と、医用画像ＩＭ６及び医用画像ＩＭ７の病変の性状に関する解析結果に基づいて生成されたレーダーチャートＣＬ８の一例を示す図である。レーダーチャートＣＬ８は、レーダーチャート座標ＣＬＡと同様に、左側の面積が大きくなるほど良性を表し、右側の面積が大きくなるほど悪性を表すように表現したものである。

また、レーダーチャートＣＬ８は、医用画像ＩＭ６の関心領域の肺結節の性状に関する解析結果である第３のスコア領域Ｒ３、及び医用画像ＩＭ７の関心領域の肺結節の性状に関する解析結果である第４のスコア領域Ｒ４を重ねて、かつ色分けして表示している。

このように、現在画像の解析結果を示すレーダーチャートに過去画像の解析結果を重ねて表示させることで、ユーザはどの項目が良性から悪性に変化していったのかをより明確に把握することができる。

〔異なる撮影条件・異なるモダリティ（撮影装置）〕
医用情報処理装置１６は、同一被検体の複数の画像であって、撮影条件及び撮影装置の少なくとも一方が異なる複数の画像の解析結果を取得してもよい。また、異なる撮影条件は、造影剤を用いたＣＴ検査、及びＭＲＩ検査の造影条件に関するものであってもよい。

〔読影レポートの解析〕
読影レポートを解析することで、医用画像の関心領域における解析結果を取得してもよい。

図１７は、不図示の医用画像に関する読影レポートの内容の一例を示す図であり、読影レポートに含まれる所見文ＦＤ、及び所見文ＦＤの構造化データＤＳを示している。図１７に示すように、所見文ＦＤは、「右肺Ｓ４に長径３ｃｍの充実型腫瘤を認めます。境界は不明瞭で、辺縁は分葉状で、スピキュラを呈しています。胸膜陥入像も認めます。内部に石灰化や空洞、気管支透亮像は含みません。」と記載されている。

構造化データＤＳは、所見文ＦＤに対して自然言語技術による構造化を実施したものである。構造化データＤＳは、属性として「臓器」、「場所」、「病変」、「事実性」、「サイズ」、及び「性状」を有する。ここでは、所見文ＦＤが、「臓器」が「肺」、「場所」が「右肺、Ｓ４」、「病変」が「腫瘤」、「事実性」が「有り」、「サイズ」が「長径３ｃｍ」、及び「性状」が「充実型、境界不明瞭、分葉状（＋）、スピキュラ（＋）、胸膜陥入像（＋）、石灰化（－）、空洞（－）、気管支透亮像（－）」に構造化されている。

医用情報処理装置１６は、構造化データＤＳから医用画像の関心領域の性状に関する解析結果を取得する。その際、レーダーチャートの軸は予め定義されたものを使用してもよいし、読影レポートに記載のある性状の項目に絞って軸を定義してもよい。また、予め定義された軸を使用する場合は、読影レポートに記載がなかった性状の項目に関してはプロットせず、読影レポートに記載があった性状の項目についてのみスコアをプロットするようにしてもよい。

医用情報処理装置１６は、医用画像の解析結果と読影レポートの解析結果とを合わせて（マージして）レーダーチャートを生成してもよい。医用画像の解析結果と読影レポートの解析結果が異なる場合は、読影レポートの解析結果を優先して採用してもよい。

また、医用情報処理装置１６は、医用画像の解析結果と読影レポートの解析結果とを識別可能に区別してレーダーチャートを生成してもよい。例えば、「スピキュラ」が読影レポートに記載されている場合、レーダーチャートの「スピキュラ」の項目の文字を、その他の項目とは異なる色である赤色で示してもよい。

フォローアップ検査において、過去画像の読影レポートに記載のなかった性状について、現在画像の読影レポートで新たに記載があった場合、その性状をレーダーチャートで識別可能に区別して表示させてもよい。

〔読影レポート〕
ダイアグラムは、読影レポートに添付される。図１８は、ディスプレイ２０Ｂに表示された読影レポートであって、レーダーチャートが添付された読影レポートを示す図である。図１８に示すように、この読影レポートＲＰは、医用画像ＩＭ８、画像情報ＤＴ８、医用画像ＩＭ９、画像情報ＤＴ９、グラフＧＬ、及びレーダーチャートＣＬ９を含む。読影レポートＲＰは、所見文を含んでもよい。

医用画像ＩＭ８、及び画像情報ＤＴ８は、読影レポートの左上に配置される。医用画像ＩＭ８は、被検体の現在画像である。画像情報ＤＴ８は、医用画像ＩＭ８に関する情報である。画像情報ＤＴ８は、撮影年月日時刻、病変の長径［単位：ｍｍ］、短径［単位：ｍｍ］、面積［単位：ｍｍ^２］、及び体積［単位：ｍｍ^３］の項目とそれぞれの値を含む。

医用画像ＩＭ９、及び画像情報ＤＴ９は、読影レポートの右上に配置される。医用画像ＩＭ９は、同一被検体の過去画像である。画像情報ＤＴ９は、医用画像ＩＭ９に関する情報であり、項目は画像情報ＤＴ８と同様である。

グラフＧＬは、読影レポートの左下に配置される。グラフＧＬは、病変の推移を示す折れ線グラフである。グラフＧＬは、病変の長径［単位：ｍｍ］、短径［単位：ｍｍ］、面積［単位：ｍｍ^２］、及び体積［単位：ｍｍ^３］のうちのいずれかの項目をユーザが選択可能である。グラフＧＬは、横軸が検査日（撮影日）であり、縦軸が選択された項目の数値である。図１８に示す例では、「長径［ｍｍ］」が選択され、病変の長径の推移が表示されている。

レーダーチャートＣＬ９は、読影レポートの右下に配置される。レーダーチャートＣＬ９は、医用画像ＩＭ８の病変の肺結節の性状に関する解析結果に基づいて生成されたものである。レーダーチャートＣＬ９の軸は、レーダーチャート座標ＣＬＡ（図４参照）と同様である。

〔医用画像以外への転用〕
本実施形態に係るダイアグラムは、医用画像以外にも適用可能である。例えば、交通、電気、ガス、及び水道等の社会的インフラ設備について、画像の関心領域の性状に関する解析結果を取得し、解析結果に基づいて、広がりの方向及び面積の少なくとも一方によって排他的関係を有する関心領域の状態を表現するダイアグラムを生成することができる。排他的関係を有する関心領域の状態は、例えば修復の要否であってもよい。

例えば、道路の路面の画像から関心領域を設定し、関心領域の画像を解析し、経過年数、傷の深さ、傷の大きさ、傷の位置（道路の端か中央か）等の性状項目をスコアで出力し、その結果をダイアグラムとして表示させてもよい。

＜その他＞
本発明の技術的範囲は、上記の実施形態に記載の範囲には限定されない。各実施形態における構成等は、本発明の趣旨を逸脱しない範囲で、各実施形態間で適宜組み合わせることができる。

１０…医用情報処理システム
１２…医用画像検査機器
１４…医用画像データベース
１６…医用情報処理装置
１６Ａ…プロセッサ
１６Ｂ…メモリ
１６Ｃ…通信インターフェース
１８…読影レポートデータベース
２０…ユーザ端末
２０Ａ…入力装置
２０Ｂ…ディスプレイ
２２…ネットワーク
ＣＬ１…レーダーチャート
ＣＬ２…レーダーチャート
ＣＬ３…レーダーチャート
ＣＬ４…レーダーチャート
ＣＬ５…レーダーチャート
ＣＬ６…レーダーチャート
ＣＬ７…レーダーチャート
ＣＬ８…レーダーチャート
ＣＬ９…レーダーチャート
ＣＬＡ…レーダーチャート座標
ＣＬＢ…レーダーチャート座標
ＤＳ…構造化データ
ＤＴ８…画像情報
ＤＴ９…画像情報
ＦＤ…所見文
ＧＬ…グラフ
ＩＭ１…医用画像
ＩＭ２…医用画像
ＩＭ３…医用画像
ＩＭ４…医用画像
ＩＭ５…医用画像
ＩＭ６…医用画像
ＩＭ７…医用画像
ＩＭ８…医用画像
ＩＭ９…医用画像
Ｒ１…第１のスコア領域
Ｒ２…第２のスコア領域
Ｒ３…第３のスコア領域
Ｒ４…第４のスコア領域
ＲＰ…読影レポート
ＳＴ１～ＳＴ５…医用情報処理方法のステップ
ＴＸ１…文字
ＴＸ２…文字

Claims (22)

1. 少なくとも１つのプロセッサと、
   前記少なくとも１つのプロセッサに実行させるための命令を記憶する少なくとも１つのメモリと、
   を備え、
   前記少なくとも１つのプロセッサは、
   画像の読影レポートを解析して前記画像の関心領域の性状に関する解析結果を取得し、
   前記解析結果に基づいてレーダーチャートを生成し、
   前記レーダーチャートは、広がりの方向及び面積の少なくとも一方によって排他的関係を有する前記関心領域の状態を表現し、
   前記排他的関係を有する前記関心領域の状態は、第１の状態、及び前記第１の状態とは異なる第２の状態を含み、
   前記レーダーチャートは、前記第１の状態の特徴を示す性状の軸、及び前記第２の状態の特徴を示す性状の軸が前記レーダーチャートの中心に対してそれぞれ反対側に配置され、
   前記第１の状態の特徴を示す性状の軸、及び前記第２の状態の特徴を示す性状の軸は、前記読影レポートに記載のある性状の項目から定義される、
   情報処理装置。
2. 前記画像は、被検体が撮影された医用画像である、
   請求項１に記載の情報処理装置。
3. 前記関心領域の状態は、良性及び悪性である、
   請求項２に記載の情報処理装置。
4. 前記関心領域の状態は、原発性癌及び転移性癌である、
   請求項２又は３に記載の情報処理装置。
5. 前記関心領域の状態は、病名である、
   請求項２から４のいずれか１項に記載の情報処理装置。
6. 前記少なくとも１つのプロセッサは、
   前記レーダーチャートをディスプレイに表示させる、
   請求項１から５のいずれか１項に記載の情報処理装置。
7. 前記少なくとも１つのプロセッサは、
   前記関心領域の状態を推定し、
   前記推定した結果をディスプレイに表示させる、
   請求項１から６のいずれか１項に記載の情報処理装置。
8. 前記少なくとも１つのプロセッサは、
   前記レーダーチャートの方向及び面積の少なくとも一方に基づいて前記関心領域の状態を推定する、
   請求項７に記載の情報処理装置。
9. 前記少なくとも１つのプロセッサは、同一被検体の複数の画像であって、それぞれ異なる時期に撮影された複数の画像の前記解析結果を取得する、
   請求項１から８のいずれか１項に記載の情報処理装置。
10. 前記レーダーチャートは、前記複数の画像のそれぞれの解析結果を重ねて表現する、
    請求項９に記載の情報処理装置。
11. 前記レーダーチャートは、前記複数の画像のそれぞれの解析結果をそれぞれ異なる色で表現する、
    請求項１０に記載の情報処理装置。
12. 前記レーダーチャートは、前記複数の画像に対する複数の読影レポートのうちの一部の読影レポートにのみ記載のある性状の項目を識別可能に表現する、
    請求項９から１１のいずれか１項に記載の情報処理装置。
13. 前記少なくとも１つのプロセッサは、同一被検体の複数の画像であって、撮影条件及び撮影装置の少なくとも一方が異なる複数の画像の前記解析結果を取得する、
    請求項１から１２のいずれか１項に記載の情報処理装置。
14. 前記撮影条件は、造影条件を含む、
    請求項１３に記載の情報処理装置。
15. 前記少なくとも１つのプロセッサは、前記画像を解析して前記解析結果を取得する、
    請求項１から１４のいずれか１項に記載の情報処理装置。
16. 前記少なくとも１つのプロセッサは、
    前記読影レポートを解析して取得した前記解析結果、及び前記画像を解析して取得した前記解析結果を合わせたレーダーチャートを生成する、
    請求項１５に記載の情報処理装置。
17. 前記少なくとも１つのプロセッサは、
    前記読影レポートを解析して取得した前記解析結果、及び前記画像を解析して取得した前記解析結果を区別したレーダーチャートを生成する、
    請求項１５に記載の情報処理装置。
18. 前記少なくとも１つのプロセッサは、
    前記生成したレーダーチャートを前記読影レポートに添付する、
    請求項１から１７のいずれか１項に記載の情報処理装置。
19. 前記軸の値は、前記レーダーチャートの中心から離れるほど相対的に大きい値に設定され、
    前記少なくとも１つのプロセッサは、
    前記第１の状態の特徴を示す性状に関する前記解析結果を、前記第１の状態の特徴に該当するほど相対的に大きい数値として取得し、
    前記第２の状態の特徴を示す性状に関する前記解析結果を、前記第２の状態の特徴に該当するほど相対的に大きい数値として取得する、
    請求項１から１８のいずれか１項に記載の情報処理装置。
20. 請求項１から１９のいずれか１項に記載の情報処理装置と、
    前記画像を撮影する撮影装置と、
    前記レーダーチャートを表示するディスプレイと、
    を備える情報処理システム。
21. 少なくとも１つのプロセッサが、
    画像の読影レポートを解析して前記画像の関心領域の性状に関する解析結果を取得する解析結果取得工程と、
    前記解析結果に基づいてレーダーチャートを生成するレーダーチャート生成工程と、
    を実行し、
    前記レーダーチャートは、広がりの方向及び面積の少なくとも一方によって排他的関係を有する前記関心領域の状態を表現し、
    前記排他的関係を有する前記関心領域の状態は、第１の状態、及び前記第１の状態とは異なる第２の状態を含み、
    前記レーダーチャートは、前記第１の状態の特徴を示す性状の軸、及び前記第２の状態の特徴を示す性状の軸が前記レーダーチャートの中心に対してそれぞれ反対側に配置され、
    前記第１の状態の特徴を示す性状の軸、及び前記第２の状態の特徴を示す性状の軸は、前記読影レポートに記載のある性状の項目から定義される、
    情報処理方法。
22. 請求項２１に記載の情報処理方法をコンピュータに実行させるためのプログラム。