JP2017016347A - 情報処理装置、情報処理方法及びプログラム - Google Patents
情報処理装置、情報処理方法及びプログラム Download PDFInfo
- Publication number
- JP2017016347A JP2017016347A JP2015131682A JP2015131682A JP2017016347A JP 2017016347 A JP2017016347 A JP 2017016347A JP 2015131682 A JP2015131682 A JP 2015131682A JP 2015131682 A JP2015131682 A JP 2015131682A JP 2017016347 A JP2017016347 A JP 2017016347A
- Authority
- JP
- Japan
- Prior art keywords
- patient
- specifying
- information
- display
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Controls And Circuits For Display Device (AREA)
- Image Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
【課題】医師等のユーザが必要な情報を適切に表示することを目的とする。
【解決手段】撮影手段により撮影された、患者の撮影画像に基づいて、患者の部位を特定する部位特定手段と、部位の現実空間における部位位置を特定する位置特定手段と、部位特定手段により特定された部位に関する患者情報を、表示手段と撮影手段の位置関係に基づいて、現実空間の部位位置に対応する表示手段の位置に関連付けて、表示手段に表示する表示処理手段とを有する。
【選択図】図1
【解決手段】撮影手段により撮影された、患者の撮影画像に基づいて、患者の部位を特定する部位特定手段と、部位の現実空間における部位位置を特定する位置特定手段と、部位特定手段により特定された部位に関する患者情報を、表示手段と撮影手段の位置関係に基づいて、現実空間の部位位置に対応する表示手段の位置に関連付けて、表示手段に表示する表示処理手段とを有する。
【選択図】図1
Description
本発明は、情報処理装置、情報処理方法及びプログラムに関する。
従来、医療現場の電子化の普及により、患者に関する画像や文書等の大量な情報をPC等のデバイスを使って管理できるようになった。例えば、診察室に設置されたディスプレイに患者の情報を表示し、医師は、表示を確認した上で、視線を再び患者に戻して処置にあたるといった、患者の情報の利用が考えられる。このとき、医師が視線を動かすモーションが発生し、さらに表示された情報と患者を対応付ける作業が発生する等の問題がある。これに対し、特許文献1には、医師が装着型ディスプレイを装着し、医師の視界に含まれていない機器の情報を装着型ディスプレイに表示する技術が開示されている。これにより、医師は視界を患者から逸らすことなく、その場では見えない機器の情報を見ることができる。
しかしながら、特許文献1の技術では、患者と同時に機器の情報を見ることができるが、機器に表示されている情報以外は表示することができないといった問題がある。また、例えば、同一の空間に複数の患者と測定機器が存在している場合、医師が担当する患者以外の患者について測定された情報が表示され得るといった問題がある。
本発明はこのような問題点に鑑みなされたもので、医師等のユーザが必要な情報を適切に表示することを目的とする。
そこで、本発明は、撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、前記部位の現実空間における部位位置を特定する位置特定手段と、前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段とを有することを特徴とする。
本発明によれば、医師等のユーザが必要な情報を適切に表示することができる。
(第1の実施形態)
以下、本発明の実施形態について図面に基づいて説明する。図1は、第1の実施形態に係る情報処理システムとしての医療システムを示す図である。医療システムは、情報処理装置100と、サーバ装置110とを備えている。情報処理装置100及びサーバ装置110は、ネットワーク120を介して接続している。情報処理装置100は、透過型の表示部を有する装着型の装置であり、装着者である医師等のユーザ(以下、単にユーザという場合がある)に、現実空間に情報を重畳した拡張現実を提供する装置である。なお、以下の実施形態においてはユーザが医師である場合を例に説明を行うが、ユーザは医師に限定されるものではなく、医療従事者であってもよい。情報処理装置100としては、例えば眼鏡型の装置や、ヘッドマウントディスプレイのような頭部装着型の装置が挙げられる。ユーザは、表示部を透過して、表示部に表示された情報が現実空間に重畳された拡張現実を視認することができる。本実施形態においては、情報処理装置100は、表示部に、診察中の患者に関する診療内容や検査結果等の患者情報を表示する。サーバ装置110は、患者情報を記憶、管理する。
以下、本発明の実施形態について図面に基づいて説明する。図1は、第1の実施形態に係る情報処理システムとしての医療システムを示す図である。医療システムは、情報処理装置100と、サーバ装置110とを備えている。情報処理装置100及びサーバ装置110は、ネットワーク120を介して接続している。情報処理装置100は、透過型の表示部を有する装着型の装置であり、装着者である医師等のユーザ(以下、単にユーザという場合がある)に、現実空間に情報を重畳した拡張現実を提供する装置である。なお、以下の実施形態においてはユーザが医師である場合を例に説明を行うが、ユーザは医師に限定されるものではなく、医療従事者であってもよい。情報処理装置100としては、例えば眼鏡型の装置や、ヘッドマウントディスプレイのような頭部装着型の装置が挙げられる。ユーザは、表示部を透過して、表示部に表示された情報が現実空間に重畳された拡張現実を視認することができる。本実施形態においては、情報処理装置100は、表示部に、診察中の患者に関する診療内容や検査結果等の患者情報を表示する。サーバ装置110は、患者情報を記憶、管理する。
なお、本実施形態においては、患者情報は、サーバ装置110に記憶されており、情報処理装置100は、サーバ装置110から適宜患者情報を受信し、これを表示するものとする。ただし、患者情報は、医療システムのいずれかの装置が記憶していればよく、患者情報を記憶する装置は、サーバ装置110に限定されるものではない。他の例としては、情報処理装置100が患者情報を記憶、管理していてもよい。また、他の例としては、医療システムは、患者情報の記憶、管理を複数の装置に分散してもよい。
情報処理装置100は、CPU101と、メモリ102と、記憶装置103と、表示装置105と、撮影部106と、マイク107と、通信I/F部108とを有している。これら各部は、バス109により相互に接続されている。CPU101は、記憶装置103に記憶されているプログラム104を実行することにより、後述する各種機能を実行する。メモリ102は、CPU101が記憶装置103から読み出したプログラムやデータを一時的に記憶する。また、メモリ102は、CPU101が各種のプログラムを実行するための領域としても利用される。
記憶装置103は、オペレーティングシステム(OS)や各種プログラムや制御プログラム、データ等を記憶する。なお、制御用のプログラム104は記憶装置103の一部データとして格納されている。プログラムとしては、各種認識処理や患者情報の表示に係るプログラム等が挙げられる。データとしては、患者に関する画像や文書等が挙げられる。後述する情報処理装置100の機能や処理は、CPU101が記憶装置103に格納されているプログラムを読み出し、このプログラムを実行することにより実現されるものである。表示装置105は、各種情報を表示する。表示装置105は、シースルー型の視界を妨げない透過型の表示装置であるものとする。撮影部106は、画像を撮影する。マイク107は、音声を集音する。
情報処理装置100は、撮影部106及びマイク107を介して、ユーザからの指示を受け付ける。すなわち、撮影部106及びマイク107は、入力部として機能する。具体的には、ユーザは、所定のジェスチャや発話により情報処理装置100への指示入力を行う。これに対し、情報処理装置100は、撮影部106により撮影された画像に基づいて、ジェスチャ認識により指示を受け付け、また、マイク107により集音された音声に対する音声認識により指示を受け付ける。なお、情報処理装置100は、撮影部106及びマイク107以外にも、物理的なボタン等の入力装置を備えてもよい。
次に、情報処理装置100が、現実空間に存在するオブジェクトに情報を重畳して表示するための構成及び処理について説明する。撮影部106は、情報処理装置100を装着するユーザが、表示装置105を透過して現実空間を見る際の視線の方向と、撮影方向とが略一致するような、位置及び向きに設けられているものとする。これにより、撮影部106は、ユーザが見ている現実空間の画像を撮影することができる。なお、他の例としては、撮影部106は、撮影方向と装着者の視線方向とが一定の関係になるように設置されていてもよい。そして、撮影部106はオブジェクトを含む画像を撮影し、CPU101は、撮影画像におけるオブジェクトの位置、情報処理装置100の位置や情報処理装置100の向き(ユーザの視線方向)に基づいて、オブジェクトの現実空間における位置を特定する。そして、CPU101は、現実空間におけるオブジェクトの位置に基づいて、現実空間のオブジェクトの位置に対応する表示装置105上の位置を特定し、特定した表示装置105上の位置に情報が配置された表示情報を生成し、これを表示装置105に表示する。
図2は、情報処理装置100による表示処理を示すフローチャートである。図3は、情報処理装置100の利用形態の説明図である。図3に示すように、医師Aは、患者Bの診察時、情報処理装置100を装着する。そして、情報処理装置100の表示装置105越しに、患者Bを見る。このとき、表示装置105には、患者Bの患者情報が表示される。したがって、医師Aは、表示装置105越しに患者Bを見るのと同時に、患者Bの患者情報を確認することができる。以下、この時の情報処理装置100の処理について説明する。
S200において、情報処理装置100のCPU101は、ユーザである医師が担当する診療領域を特定する(診療領域特定処理)。ここで、診療領域とは、医師が診察可能な診療科を示す情報である。なお、診療領域は、診療内容を特定する情報であればよくその分類方法は実施形態に限定されるものではない。例えば内科のうち特定の部位、特定の疾病、といったように、診療領域をさらに細分化してもよい。CPU101は、具体的には、ユーザの発話から診療領域の入力指示を受け付け、入力指示に従い、診療領域を特定する。また、他の例としては、記憶装置103が予めユーザの識別情報に対応付けて診療領域を記憶しており、CPU101は、生体認証等に基づいて、ユーザを識別し、識別したユーザに対応付けられている診療領域を特定してもよい。
次に、S201において、CPU101は、患者の存在を確認し、かつ患者を識別するまで待機する。そして、CPU101は、患者の存在を確認し、かつ患者を識別すると(S201でYES)、処理をS202へ進める。CPU101は、具体的には、入力部を介して患者の識別情報(患者ID)を受け付けた場合に(受付処理)、患者の存在を確認し、かつ患者を識別したと判断することとする。なお、他の例としては、CPU101は、撮影部106により撮影された撮影画像における画像認識処理により、患者の存在を確認し、かつ画像特徴量等から患者を識別してもよい。ここで、S201の処理は、患者確認処理の一例である。
S202において、CPU101は、サーバ装置110に記憶されている患者情報のうち、S201において識別された患者に対応する患者情報で、かつS200において特定された診療領域に関する患者情報を優先的に抽出(抽出処理)、受信する。次に、S203において、CPU101は、撮影画像に対する画像認識処理により患者の部位を特定する(部位特定処理)。本実施形態においては、CPU101は、頭部、上半身、下半身の3つの部位を特定することとするが、特定対象の部位は、これに限定されるものではない。他の例としては、CPU101は、腕、首といったように、さらに細かい単位で部位を特定してもよい。
次に、S204において、CPU101は、撮影画像において、部位が特定された部位位置に基づいて、現実空間における部位位置を特定する(位置特定処理)。なお、CPU101は、撮影方向、視線方向及び情報処理装置100の位置等の情報から、撮影画像上の位置と、現実空間上の位置との対応関係に基づいて、撮影画像上の部位位置を、現実空間における部位位置に変換するものとする。例えば、CPU101は、撮影方向の一例である撮影部106の位置と情報処理装置100の位置の一例である表示装置105の位置との関係に基づいて、現実空間における部位位置を特定する。より具体的には、CPU101は、撮影部106の位置と表示装置105の位置との関係に基づいて、現実空間における表示装置105上での部位位置を特定する。
次に、S205において、CPU101は、S202において抽出された各患者情報が、いずれの部位に対応するものかを特定する。なお、患者情報は、部位を示す情報を含んでおり、CPU101は、部位を示す情報から、患者情報がいずれの部位に関する情報であるかを特定することとする。なお、患者情報が含む部位の単位はS203において特定される部位の単位と一致しない場合もある。この場合も、CPU101は、予め定められた対応関係に従い、例えば肺に関する患者情報であれば、部位として上半身を特定する。
そして、CPU101は、各患者情報を、現実空間における部位位置に対応する表示装置105の位置に関連付けて表示する(表示処理)。なお、CPU101は、表示装置105に表示する患者情報と、現実空間に存在する患者の部位との位置合わせには、表示装置105と撮影部106との間の位置関係を利用することができる。また、CPU101は、いずれの部位とも関連しない患者情報については、部位に関連付けない形式で表示する。このように、CPU101は、患者の存在を確認し、かつ患者を識別したことを条件とし、条件に合致したタイミングで、患者情報を現実空間に重畳して表示する。なお、撮影部106により動画が撮影される場合には、ステップS203−205が繰返し行われることとしてもよい。
図4は、表示装置105を介してユーザが視認する拡張現実の表示例を示す図である。表示装置105には、ユーザが表示装置105越しに視認する患者Bの各部位の部位位置に対応する表示装置105上の位置を基準に、吹き出し400a,400bが表示されている。さらに、各吹き出し400a,400bの中には、部位に対応する患者情報401a,401bが示されている。例えば、吹き出し400aは、患者Bの頭部の部位位置に対応する表示装置105上の位置を基点として表示されており、この吹き出し400aに示される患者情報401aは、頭部に関する患者情報である。また、吹き出し400bは、患者Bの上半身の部位位置に対応する表示装置105上の位置を基点として表示されており、この吹き出し400bに示される患者情報401bは、例えば肺のレントゲン写真等、上半身に関する患者情報である。なお、吹き出し400a,400bは、患者情報と部位位置とを関連付ける関連情報の一例である。
また、枠402には、いずれの部位にも対応しない患者情報403が表示されている。このように、CPU101は、いずれの部位にも対応しない患者情報については、吹き出し400a,400bと表示態様の異なる枠402に表示する。すなわち、CPU101は、部位特定処理(S203)において特定された部位に関する患者情報以外の患者情報については、部位位置に関連付けない形式で表示する。これにより、ユーザは、枠402に表示されている内容は、部位に関連しない情報であることを把握することができる。
なお、CPU101は、いずれの患者情報も、現実空間に存在する患者Bに重ならない位置に配置して表示することとする。すなわち、CPU101は、現実空間における患者Bに対応する表示装置105の位置には重ならないように患者情報を表示する。また、CPU101は、部位に関する患者情報については、対応する部位位置に対応する表示装置105の位置にできるだけ近い位置に配置することとする。すなわち、CPU101は、部位位置を基準として定まる位置に、対応する患者情報を表示する。
以上のように、本実施形態に係る情報処理装置100は、部位に関する患者情報を、患者の部位位置に関連付けて表示する。したがって、ユーザは、患者情報と、現実空間に存在する、診療対象の患者の部位との関係を容易に把握することができる。また、情報処理装置100は、ユーザとしての医師の診療領域に基づいて、表示対象の患者情報を絞り込むことにより、ユーザが必要な情報を適切に表示することができる。例えば、整形外科を担当の診療領域とする医師にとって、歯科に関する患者情報は不要である。これに対し、情報処理装置100は上述のように絞り込みにより歯科の情報を除き、整形外科の情報を優先的に表示することができる。
第1の実施形態の第1の変更例としては、情報処理装置100は、拡張現実を提供する装置であり、ユーザの視界をすべて覆うような非透過型の表示部を有するものであってもよい。この場合には、情報処理装置100は、表示装置105に撮影部106により撮影された撮影画像を表示する。そして、情報処理装置100は、この撮影画像上において、患者の部位に関連付けて、対応する患者情報を表示する。この場合、情報処理装置100は、撮影画像において、部位位置を特定し、この部位位置に関連付けて、患者情報を撮影画像上に重畳して表示すればよい。
第2の変更例としては、情報処理装置100は、拡張現実を提供する装置に限定されるものではない。例えば、情報処理装置100は、図5に示すように、患者と同程度のサイズの表示装置105を有してもよい。この場合、表示装置105は、診察時に患者が座る位置に隣接する位置、座る位置の後方の位置等、予め定められた位置に設置されるものとする。また、撮影部106は、患者の座る位置を含む領域を撮影できる位置に設置されているものとする。さらに、撮影部106と表示装置105の位置関係は既知であるものとする。そして、CPU101は、この位置関係に応じて、撮影部106により撮影された患者の撮影画像から特定された、現実空間における部位位置に関連付けるように、表示装置105に患者情報を表示する。
第3の変更例としては、情報処理装置100は、さらに、医師が患者を診る際に顔を動かして患部を注視すると、その時の動きを検知する検知装置をさらに有してもよい。この場合、CPU101は、上方向の動きを検知した場合には、表示対象の部位を頭部、下方向への動きを検知した場合には、表示対象の部位を下半身に絞り込んでもよい。そして、CPU101は、絞り込んだ部位についての患者情報を表示することとしてもよい。
(第2の実施形態)
第2の実施形態に係る医療システムにおいては、情報処理装置100は、患者の存在を確認しただけでなく、患者と共に、特定の機器の存在を確認した場合に、患者情報を表示する。以下、第2の実施形態に係る医療システムの、第1の実施形態に係る医療システムと異なる点について説明する。
第2の実施形態に係る医療システムにおいては、情報処理装置100は、患者の存在を確認しただけでなく、患者と共に、特定の機器の存在を確認した場合に、患者情報を表示する。以下、第2の実施形態に係る医療システムの、第1の実施形態に係る医療システムと異なる点について説明する。
図6は、第2の実施形態に係る情報処理装置100による表示処理を示すフローチャートである。なお、図6に示す各処理のうち、図2を参照しつつ説明した第1の実施形態に係る表示処理の各処理と同一の処理には、同一の番号を付している。第2の実施形態においては、CPU101は、S200の処理の後、処理をS600へ進める。S600において、CPU101は、撮影画像に基づいて、患者の存在を確認し、患者を識別し、さらに患者と共に予め定められた特定の機材を認識するまで待機する(機材確認処理)。ここで、特定の機材としては、診察の際に利用される椅子やベッド等の診察台が挙げられる。
そして、CPU101は、患者と共に機材の存在を認識した場合には(S600でYES)、処理をS202へ進める。このように、本実施形態に係る情報処理装置100は、患者が確認され、かつ機材が確認されたことを、患者情報表示の条件とし、この条件に合致したタイミングにおいて、患者情報を表示することができる。すなわち、情報処理装置100は、ユーザにとってより適切なタイミングにおいて、患者情報を表示することができる。
図7は、機器と患者の関係を示す図である。診察時には、患者は、図7(a)のように椅子700に座っているか、または図7(b)に示すように、ベッド701に横たわっている場合が多い。そこで、情報処理装置100の患者情報の表示タイミングを、このような機器と同時に患者が確認された場合に限定することにより、不要なタイミングにおいて患者情報が表示されるのを防ぎつつ、診察時に患者情報を表示することができる。なお、第2の実施形態に係る医療システムのこれ以外の構成及び処理は、第1の実施形態に係る医療システムの構成及び処理と同様である。
第2の実施形態の第1の変更例としては、サーバ装置110は、例えば、心電図に係る患者情報に機器「ベッド」を対応付けるなど、患者情報と関連する機器情報とを対応付けて記憶していてもよい。この場合、情報処理装置100は、S600において確認された機材に基づいて、S202において抽出する患者情報を絞り込んでもよい。これにより、機材に対応する患者情報を優先的に表示することができる。
また、第2の変更例としては、情報処理装置100は、患者の部位を画像認識する際に、例えば、椅子の位置の上部に頭部が認識される、といった部位と機材との位置関係を利用してもよい。これにより、より高精度に部位を特定することができる。
(第3の実施形態)
第3の実施形態に係る医用システムにおいては、情報処理装置100は、患者を確認し、かつ予め定められたキーワードを認識した場合に、患者情報を表示する。以下、第3の実施形態に係る医療システムの、第1の実施形態に係る医療システムと異なる点について説明する。図8は、第3の実施形態に係る情報処理装置100による表示処理を示すフローチャートである。なお、図8に示す各処理のうち、図2を参照しつつ説明した第1の実施形態に係る表示処理の各処理と同一の処理には、同一の番号を付している。第3の実施形態においては、CPU101は、S201において、患者の存在を確認し、かつ患者を識別すると(S201でYES)、処理をS800へ進める。
第3の実施形態に係る医用システムにおいては、情報処理装置100は、患者を確認し、かつ予め定められたキーワードを認識した場合に、患者情報を表示する。以下、第3の実施形態に係る医療システムの、第1の実施形態に係る医療システムと異なる点について説明する。図8は、第3の実施形態に係る情報処理装置100による表示処理を示すフローチャートである。なお、図8に示す各処理のうち、図2を参照しつつ説明した第1の実施形態に係る表示処理の各処理と同一の処理には、同一の番号を付している。第3の実施形態においては、CPU101は、S201において、患者の存在を確認し、かつ患者を識別すると(S201でYES)、処理をS800へ進める。
S800において、CPU101は、患者の音声から、診療領域に関連するキーワードを認識するまで待機する(キーワード認識処理)。なお、キーワードは、診療領域毎に、記憶装置103に予め設定されているものとする。例えば、診療領域「内科」に対しては、「肺」、「胃」等がキーワードとして設定されている。また、他の例としては、患者情報に含まれる単語をキーワードとしてもよい。CPU101は、キーワードを認識した場合には(S800でYES)、処理をS202へ進める。CPU101は、キーワードを認識できなかった場合には(S800でNO)、処理をS201へ進める。このように、本実施形態に係る情報処理装置100は、患者が確認され、かつキーワードが認識されたことを患者情報表示の条件とし、この条件に合致したタイミングにおいて、患者情報を表示することができる。すなわち、情報処理装置100は、ユーザにとってより適切なタイミングにおいて、患者情報を表示することができる。なお、第3の実施形態に係る医療システムのこれ以外の構成及び処理は、他の実施形態に係る医療システムの構成及び処理と同様である。
第3の実施形態の変更例としては、CPU101は、S202において、S700において認識したキーワードに基づいて、抽出する患者情報を絞り込んでもよい。例えば、CPU101は、診療領域として内科が特定され、かつ「肺が・・・」という患者の発話から「内科」に関連するキーワード「肺」を認識したとする。この場合、患者情報のうち、肺に関する患者情報を抽出し、これを優先的に表示する。これにより、不要な情報をさらに除外することができる。
以上、上述した各実施形態によれば、医師等のユーザが必要な情報を適切に表示することができる。
<その他の実施形態>
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インタフェース機器、撮像装置、Webアプリケーション等)から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器(例えば、ホストコンピュータ、インタフェース機器、撮像装置、Webアプリケーション等)から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
また、本発明の目的は、以下のようにすることによって達成されることはいうまでもない。即ち、前述した実施形態の機能を実現するソフトウェアのプログラムコード(コンピュータプログラム)を記録した記録媒体(または記憶媒体)を、システムあるいは装置に供給する。係る記憶媒体は言うまでもなく、コンピュータ読み取り可能な記憶媒体である。そして、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムコードを読み出し実行する。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。
以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
100 情報処理装置
101 CPU
105 表示装置
110 サーバ装置
101 CPU
105 表示装置
110 サーバ装置
Claims (19)
- 撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
を有することを特徴とする情報処理装置。 - 前記表示手段は、透過型であり、
前記表示処理手段は、前記患者情報を、前記表示手段を透過してユーザにより視認される前記現実空間の前記部位位置に関連付けて前記表示手段に表示することを特徴とする請求項1に記載の情報処理装置。 - 前記表示処理手段は、前記患者情報と、前記患者情報と前記部位位置とを関連付ける関連情報と、を表示することにより、前記患者情報を前記部位位置に関連付けて表示することを特徴とする請求項1又は2に記載の情報処理装置。
- 前記表示処理手段は、前記患者情報を前記部位位置を基準として定まる位置に表示することにより、前記患者情報を前記部位位置に関連付けて表示することを特徴とする請求項1又は2に記載の情報処理装置。
- 前記表示処理手段は、前記部位位置と重ならない位置に前記患者情報を表示することを特徴とする請求項1乃至4何れか1項に記載の情報処理装置。
- 前記表示処理手段は、前記部位特定手段により特定された部位に関する患者情報以外の患者情報を、前記部位位置に関連付けない形式で表示することを特徴とする請求項1乃至5何れか1項に記載の情報処理装置。
- 医師の診療領域を特定する診療領域特定手段と、
前記患者の患者情報の中から、前記診療領域に関する患者情報を抽出する抽出手段と
をさらに有し、
前記表示処理手段は、前記抽出手段により抽出された前記患者情報を表示することを特徴とする請求項1乃至6何れか1項に記載の情報処理装置。 - 前記患者の存在を確認し、かつ前記患者を識別する患者確認手段をさらに有し、
前記表示処理手段は、前記患者が確認されたことを条件として、前記患者情報を表示することを特徴とする請求項1乃至7何れか1項に記載の情報処理装置。 - 前記患者確認手段は、前記撮影画像における画像認識により前記患者の存在を確認し、かつ前記患者を識別することを特徴とする請求項8に記載の情報処理装置。
- ユーザからの患者の識別情報を受け付ける受付手段をさらに有し、
前記患者確認手段は、前記識別情報に基づいて、前記患者の存在を確認し、かつ前記患者を識別することを特徴とする請求項8に記載の情報処理装置。 - 前記患者と共に予め定められた機材の存在を確認する機材確認手段をさらに有し、
前記表示処理手段は、前記患者が確認され、かつ前記機材が確認されたことを条件として、前記患者情報を表示することを特徴とする請求項8乃至10何れか1項に記載の情報処理装置。 - 予め定められたキーワードを認識するキーワード認識手段をさらに有し、
前記表示処理手段は、前記キーワードが認識されたことを条件として、前記患者情報を表示することを特徴とする請求項1乃至7何れか1項に記載の情報処理装置。 - 撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
を有することを特徴とする情報処理装置。 - 撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
を有することを特徴とする情報処理システム。 - 撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
を有することを特徴とする情報処理システム。 - 情報処理装置が実行する情報処理方法であって、
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定ステップと、
前記部位の現実空間における部位位置を特定する位置特定ステップと、
前記部位特定ステップにおいて特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理ステップと
を含むことを特徴とする情報処理方法。 - 情報処理装置が実行する情報処理方法であって、
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定ステップと、
前記部位の撮影画像における部位位置を特定する位置特定ステップと、
前記部位特定ステップにおいて特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理ステップと
を含むことを特徴とする情報処理方法。 - コンピュータを、
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
として機能させるためのプログラム。 - コンピュータを、
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
として機能させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015131682A JP2017016347A (ja) | 2015-06-30 | 2015-06-30 | 情報処理装置、情報処理方法及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015131682A JP2017016347A (ja) | 2015-06-30 | 2015-06-30 | 情報処理装置、情報処理方法及びプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017016347A true JP2017016347A (ja) | 2017-01-19 |
Family
ID=57830729
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015131682A Pending JP2017016347A (ja) | 2015-06-30 | 2015-06-30 | 情報処理装置、情報処理方法及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2017016347A (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018136834A (ja) * | 2017-02-23 | 2018-08-30 | キヤノンメディカルシステムズ株式会社 | 病院情報システム、及びそのプログラム |
| JP2021520551A (ja) * | 2018-04-27 | 2021-08-19 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 患者の医学的状態もしくは治療又はその両方と関連付けられた拡張現実の提示 |
-
2015
- 2015-06-30 JP JP2015131682A patent/JP2017016347A/ja active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018136834A (ja) * | 2017-02-23 | 2018-08-30 | キヤノンメディカルシステムズ株式会社 | 病院情報システム、及びそのプログラム |
| JP2021520551A (ja) * | 2018-04-27 | 2021-08-19 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 患者の医学的状態もしくは治療又はその両方と関連付けられた拡張現実の提示 |
| JP7300802B2 (ja) | 2018-04-27 | 2023-06-30 | インターナショナル・ビジネス・マシーンズ・コーポレーション | 患者の医学的状態もしくは治療又はその両方と関連付けられた拡張現実の提示 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11004554B2 (en) | Method and apparatus for identification | |
| US10839956B2 (en) | Universal device and method to integrate diagnostic testing into treatment in real-time | |
| JP7292878B2 (ja) | 患者アバターを用いた医療記録システム | |
| US8194956B2 (en) | Medical imaging system and related methods | |
| US20200005481A1 (en) | Method and system using augmentated reality for positioning of ecg electrodes | |
| KR20200068992A (ko) | 전자 차트 관리 장치, 전자 차트 관리 방법 및 기록 매체 | |
| EP4025131B1 (en) | X-ray imaging system | |
| JP5698293B2 (ja) | 携帯型医用画像表示端末及びその作動方法 | |
| JP6195336B2 (ja) | 撮影装置、認証方法及びプログラム | |
| JP2009045131A (ja) | 医用情報処理システム、医用情報処理方法、及びプログラム | |
| JP2007289657A (ja) | 画像記録装置、画像記録方法、および画像記録プログラム | |
| JP2017016347A (ja) | 情報処理装置、情報処理方法及びプログラム | |
| US11670013B2 (en) | Methods, systems, and computing platforms for photograph overlaying utilizing anatomic body mapping | |
| KR102803396B1 (ko) | 환자와 의료진 간 신뢰 향상을 위한 xr 기반 실감형 커뮤니케이션 시스템 및 그 방법 | |
| CN113811954A (zh) | 存储和呈现用户的音频和/或视觉内容 | |
| CN114996764B (zh) | 一种基于脱敏数据的信息分享方法和装置 | |
| CN113126762B (zh) | 一种用于监测医疗行为的医疗数据核查装置及方法 | |
| WO2014104357A1 (ja) | 動作情報処理システム、動作情報処理装置及び医用画像診断装置 | |
| JP2012200292A (ja) | 医療情報管理システム | |
| JP4736040B2 (ja) | 人体内部情報投影システム | |
| JP6411041B2 (ja) | 医用画像診断装置、医療情報提供方法、及び医療情報提供システム | |
| JP7159001B2 (ja) | 医用情報処理装置及び医用情報処理システム | |
| JP2015138457A (ja) | 情報処理装置、情報処理方法及びプログラム | |
| CN120077442A (zh) | 用于辅助第一用户捕获透明伤口敷料的数字图像及用于辅助第二用户查看透明伤口敷料的数字图像的方法、计算机可读介质和计算机程序 | |
| CN121370142A (zh) | 体位识别方法、系统和设备 |