CN105228501A - 内窥镜装置和内窥镜装置的工作方法 - Google Patents

内窥镜装置和内窥镜装置的工作方法 Download PDF

Info

Publication number
CN105228501A
CN105228501A CN201480029669.1A CN201480029669A CN105228501A CN 105228501 A CN105228501 A CN 105228501A CN 201480029669 A CN201480029669 A CN 201480029669A CN 105228501 A CN105228501 A CN 105228501A
Authority
CN
China
Prior art keywords
degree
information
treatment instrument
notification
blood vessel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480029669.1A
Other languages
English (en)
Inventor
田中哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN105228501A publication Critical patent/CN105228501A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00055—Operational features of endoscopes provided with output arrangements for alerting the user
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064—Constructional details of the endoscope body
    • A61B1/00071—Insertion part of the endoscope body
    • A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00087—Tools
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/044—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for absorption imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods
    • A61B17/32—Surgical cutting instruments
    • A61B17/3209—Incision instruments
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/02007—Evaluating blood vessel condition, e.g. elasticity, compliance
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/02042—Determining blood loss or bleeding, e.g. during a surgical procedure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1076—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions inside body cavities, e.g. using catheters
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods
    • A61B17/32—Surgical cutting instruments
    • A61B17/320016—Endoscopic cutting instruments, e.g. arthroscopes, resectoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
    • A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
    • A61B18/14—Probes or electrodes therefor
    • A61B18/1402—Probes for open surgery
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00022—Sensing or detecting at the treatment site
    • A61B2017/00057—Light
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107—Visualisation of planned trajectories or target regions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • A61B2034/2057—Details of tracking cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2074—Interface software
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06—Measuring instruments not otherwise provided for
    • A61B2090/061—Measuring instruments not otherwise provided for for measuring dimensions, e.g. length
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06—Measuring instruments not otherwise provided for
    • A61B2090/062—Measuring instruments not otherwise provided for penetration depth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/08—Accessories or related features not otherwise provided for
    • A61B2090/0801—Prevention of accidental cutting or pricking
    • A61B2090/08021—Prevention of accidental cutting or pricking of the patient or his organs
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/08—Accessories or related features not otherwise provided for
    • A61B2090/0807—Indication means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/371—Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983—Reference marker arrangements for use with image guided surgery
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Robotics (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Gynecology & Obstetrics (AREA)
  • Vascular Medicine (AREA)
  • Endoscopes (AREA)
  • Orthopedic Medicine & Surgery (AREA)

Abstract

内窥镜装置包括距离信息取得部(120)、关联度取得部(130)、通知处理部(140)。距离信息取得部(120)取得与特定部位和处置器械之间的距离有关的距离信息。关联度取得部(130)根据特定部位的特性信息即特定部位信息和处置器械的特性信息即处置器械信息中的至少一方以及距离信息，取得特定部位与处置器械之间的关联度。而且，通知处理部(140)进行基于关联度的通知处理。

Description

内窥镜装置和内窥镜装置的工作方法
技术领域
本发明涉及内窥镜装置和内窥镜装置的工作方法等。
背景技术
公知有在手术中向用户通知处置器械接近危险部位的手术支援系统。例如在专利文献1中公开了如下的手术支援系统：能够在手术中使手术医生得知处置器械不能接触的危险部位等指定部位与处置器械的相对位置关系。在该手术支援系统中，具有根据预先取得的活体组织的图像数据生成活体组织的模型的模型生成部、求出处置器械的前端与指定部位的分开距离的分开距离运算部、以及在分开距离为规定的阈值以下的情况下判断为接近状态的判定部，根据手术中的活体组织和处置器械的位置数据，得知该处置器械接近活体组织内的指定部位。
现有技术文献
专利文献
专利文献1：日本特开2009-233240号公报
发明内容
发明要解决的课题
但是，在上述方法中，例如在设指定部位为血管等特定部位的情况下，由于仅使用处置器械与特定部位之间的距离来通知处置器械接近特定部位，所以，具有在不需要考虑处置器械的特性或特定部位的特性的情况下也进行通知的课题。
根据本发明的若干个方式，能够提供能够考虑处置器械的特性或特定部位的特性来通知处置器械接近特定部位的内窥镜装置和内窥镜装置的工作方法等。
用于解决课题的手段
本发明的一个方式涉及一种内窥镜装置，该内窥镜装置包括：距离信息取得部，其取得与特定部位和处置器械之间的距离有关的距离信息；关联度取得部，其根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；以及通知处理部，其进行基于所述关联度的通知处理。
根据本发明的一个方式，根据特定部位的特性信息即特定部位信息和处置器械的特性信息即处置器械信息中的至少一方以及特定部位与处置器械之间的距离信息，取得特定部位与处置器械之间的关联度。由此，能够考虑处置器械的特性或特定部位的特性来通知处置器械接近特定部位。
并且，本发明的另一个方式涉及一种内窥镜装置的工作方法，取得与特定部位和处置器械之间的距离有关的距离信息；根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，所述特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；以及进行基于所述关联度的通知处理。
附图说明
图1是本实施方式的内窥镜装置的基本结构例。
图2是第1实施方式中的内窥镜装置的结构例。
图3是将距离信息和关联度对应起来的一览表的例子。
图4是关联度通知的例子。
图5是第2实施方式中的内窥镜装置的结构例。
图6是第3实施方式中的内窥镜装置的结构例。
图7是特殊光图像的例子。
图8是第4实施方式中的内窥镜装置的结构例。
图9是将切开能力、距离信息、关联度对应起来的一览表的例子。
图10是第5实施方式中的内窥镜装置的结构例。
图11是第6实施方式中的关联度通知的例子。
具体实施方式
下面，对本实施方式进行说明。另外，以下说明的本实施方式并不是不当地限定权利要求范围所记载的本发明的内容。并且，本实施方式中说明的全部结构不一定是本发明的必须结构要件。
1.本实施方式的概要
首先，对本实施方式的概要进行说明。如上所述，在专利文献1的方法中，由于仅使用处置器械与指定部位之间的距离来通知处置器械接近指定部位，所以，具有在不需要考虑处置器械的特性或指定部位的特性的情况下也进行通知的课题。
并且，在专利文献1的方法中，采用如下的结构：例如需要使用MRI等预先取得活体组织的图像数据，并且，在进行手术时，需要位置检测装置以检测处置器械的位置数据。因此，存在装置大型化的课题。
并且，在使位置检测装置小型化的方面，例如考虑使用立体内窥镜从图像中检测处置器械。但是，例如在使用刀等进行处置的情况下，处置器械的前端可能隐藏在活体内而未被摄像。因此，仅使用立体内窥镜的图像，可能本来就无法检测到处置器械接近指定部位。
因此，如图1所示，本实施方式的内窥镜装置包括距离信息取得部120、关联度取得部130、通知处理部140。距离信息取得部120取得与特定部位和处置器械(例如刀)之间的距离有关的距离信息。关联度取得部130根据特定部位的特性信息即特定部位信息和处置器械的特性信息即处置器械信息中的至少一方以及距离信息，取得特定部位与处置器械之间的关联度。而且，通知处理部140进行基于关联度的通知处理。
这样，不仅根据从处置器械到特定部位的距离，还能够根据特定部位的特性和处置器械的特性向用户通知特定部位与处置器械之间的关联度。由此，不仅考虑处置器械接近特定部位，还能够考虑处置器械对特定部位造成的影响和通知的必要性来取得关联度，向用户通知该关联度。
并且，在采用从摄像图像中检测特定部位和处置器械的结构的情况下，由于能够从摄像图像中求出特定部位与处置器械之间的距离，所以，不需要预先使用MRI等取得指定部位的图像，能够紧凑地构成装置。另外，特定部位和处置器械的位置不限于从摄像图像检测的情况，在本实施方式中能够应用各种位置检测方法。
并且，通过使用处置器械的特性信息，在处置器械的整体未在摄像图像中映出的情况下，也能够取得从处置器械到特定部位的关联度。例如，在取得处置器械的物理的尺寸信息作为处置器械的特性信息的情况下，如果映出处置器械的一部分，则能够从此处根据尺寸信息估计处置器械的前端的位置，能够估计从该处置器械的前端到特定部位的距离。
这里，特定部位是指通过内窥镜装置的处置器械进行处置的区域中危险的部位或应该注意的部位。即，是在通过处置器械(例如电刀或超声波刀等)进行处置(例如切开或止血等)时，当用户无意损伤时可能对活体组织造成危害的部位。例如，作为特定部位，假设血管、神经、尿道等线状或管状的部位。
这里，距离信息只要与特定部位和处置器械之间的距离有关即可，也可以不是从处置器械到特定部位的距离本身。即，距离的基准点不需要是处置器械的前端，只要是任意设定的规定位置即可。例如，距离的基准点也可以是处置器械的根部或摄像部(镜体)的前端等。处置器械从摄像部的前端插入，由于形状和尺寸已经决定，所以，也可以使用从上述基准点起的距离来代替从处置器械起的距离。并且，关于距离的终点，也不限于最接近处置器械的特定部位的位置。例如，在使用刀作为处置器械的情况下，也可以将刀的切开方向(刃尖的延长线上)的特定部位的位置作为距离的终点。在本实施方式中，由于取得处置器械对特定部位造成的影响(例如在特定部位为血管的情况下为出血的可能性)作为关联度，所以，只要将受到该处置器械的影响的特定部位的位置作为距离的终点即可。
并且，距离信息可以是二维距离的信息，也可以是三维距离的信息。作为二维距离，例如考虑图像上的两点间的距离。作为三维距离，例如考虑如下方法：通过立体拍摄来求出两点的三维位置，根据该三维位置求出两点的三维距离。或者，考虑如下方法：使用自动对焦来估计进深方向的距离，根据该进深方向的距离和图像上的两点间的距离求出两点的三维距离。或者，在特定部位为血管的情况下，也可以通过后述NBI等方法求出从活体表面到血管的深度，根据该深度和图像上的两点间的距离求出三维距离。或者，也可以不是仅根据实时摄像图像求出距离的方法，而是使用预先通过MRI等取得的特定部位的位置和通过超声波回声或GPS等位置检测方法取得的处置器械的位置求出距离。
并且，关联度是用于使用户判断处置器械对特定部位造成的影响的临界度的指标。例如，作为处置器械对特定部位造成的影响，考虑损伤血管而出血。该情况下，该出血的可能性越高，或者预想到出血量越多，则临界度越高，增大关联度。具体而言，由于出血的可能性或出血量根据处置器械的切开能力或血管的粗细等特性而变化，所以，处置器械的切开能力越高，或者血管越粗，则越增大关联度。
另外，处置器械对特定部位造成的影响实际是否危险，终究是由用户(医师)来判断，关联度是用于辅助该判断的指标。即，在进行处置的过程中有意切断特定部位的情况下，即使关联度较高，用户也不一定判断为危险。另一方面，在希望进行处置而不损伤特定部位的情况下，如果关联度较高，则能够提示用户注意。
并且，处置器械的特性信息是与处置器械所具有的特性对应的信息。例如，在处置器械为刀的情况下，作为与其切开能力对应的信息，假设为刀中流过的电流值、对刀施加的电压值、刀的材质、刃的形状、刃的尺寸、所设定的处置模式(例如止血模式或切开模式)等。或者，也可以是使用处置器械的部位(例如下部消化道、上部消化道等)的信息、表示处置器械的种类或用途的信息、与处置器械对应的ID信息等。
并且，特定部位的特性信息是与存在于处置的对象部的特定部位所具有的特性对应的信息。例如，在特定部位为血管的情况下，假设为表示血管的种类(例如动脉或静脉、末梢血管)、血管的粗细、血管所在的部位(例如下部消化道、上部消化道等)、血管所在的组织(例如粘膜、脂肪、肌肉)等的信息。例如能够通过图像处理从摄像图像中识别血管，通过检测该识别出的血管的宽度(例如像素数)，能够得知血管的粗细。
2.第1实施方式
接着，对本实施方式的详细结构进行说明。作为本实施方式的内窥镜装置，可以假设为插入到消化器(例如食道或胃等上部消化道、或大肠等下部消化道)中进行诊察/处置的消化器内窥镜装置、在外科手术中通过插入到手术部位(例如脑、腹部、关节等)来拍摄手术部位的外科内窥镜装置。
另外，下面以特定部位是血管的情况为例进行说明，但是，本实施方式不限于此。即，如上所述，特定部位只要是在通过内窥镜装置的处置器械进行处置的区域中危险的部位或应该注意的部位即可。
图2示出第1实施方式中的内窥镜装置的结构例。该内窥镜装置包括摄像部200(镜体部)、处理器部300、显示部400。在第1实施方式中，从摄像图像中检测处置器械和血管(特定部位)，求出它们之间的图像平面上的二维距离，根据该二维距离取得关联度，向用户通知该关联度。
具体而言，摄像部200具有例如以CCD或CMOS传感器等为代表的摄像元件。摄像部200通过该摄像元件对被摄体进行摄像，将该摄像而得到的图像数据输出到处理器部300。并且，摄像部200具有钳子或刀等处置器械210、未图示的照明光学系统(例如光导纤维或透镜等)、操作部(例如对镜体前端进行操作的操作系统、对处置器械进行操作的操作系统、模式设定按钮等)。并且，摄像部200构成为能够相对于处理器部300进行拆装，例如能够根据使用部位等进行更换。
处理器部300进行针对摄像图像的图像处理、内窥镜装置的各部的控制。处理器部300包括图像取得部110、距离信息取得部120、关联度取得部130、通知处理部140、图像处理部150、显示控制部160。
图像取得部110接收从摄像部200发送的摄像图像(图像数据)，将该摄像图像输出到图像处理部150和距离信息取得部120。
图像处理部150对摄像图像进行各种图像处理。例如，进行白平衡处理、伽马校正处理、强调处理、放大/缩小处理、失真校正处理、噪声降低处理等。
距离信息取得部120从摄像图像中检测处置器械和血管，求出该检测到的处置器械与血管之间的二维距离。多数情况下，处置器械由金属构成，所以，考虑利用该性质来检测处置器械的方法。例如，将摄像图像转换为亮度图像，检测具有规定的阈值以上的亮度值的像素，通过对该像素的集合进行轮廓检测来进行分组，检测规定的像素数以上的组作为处置器械。血管也同样，考虑根据与没有血管的部分之间的亮度差等进行检测的方法。然后，将检测到的像素组的前端视为处置器械的前端，计算从该前端到血管的距离。另外，处置器械或血管的检测方法不限于上述，例如也可以使用色差图像(Cr或Cb)等，根据颜色的特征来检测处置器械或血管。另外，在特定部位为神经的情况下，例如通过投放使神经进行荧光发光的药剂，能够对神经进行摄像，能够从图像中检测神经。并且，在特定部位为尿道的情况下，例如当投放作为近红外荧光探针的ICG(吲哚菁绿)后，使其在活体内循环，通过观察其荧光，能够识别构造作为图像。
关联度取得部130根据由距离信息取得部120取得的二维距离取得关联度。具体而言，从处置器械到血管的二维距离越近，则越增大关联度。例如，如图3所示，关联度取得部130存储一览表，通过参照该一览表，将二维距离转换为关联度。这里，D1>D2>D3>D4。或者，关联度取得部130也可以根据将二维距离与关联度对应起来的函数来计算关联度。在设二维距离为D的情况下，例如关联度表示为f(D)＝α/D等。这里，α是规定的系数。
通知处理部140进行如下处理：将由关联度取得部130取得的关联度转换为经由显示控制部160向用户通知的形式并进行通知。图4示出关联度通知的例子。在显示部400所显示的图像中设置有显示映出了血管11和处置器械12等的摄像图像的图像显示区域10、以及显示关联度的关联度显示区域20。例如，在关联度为第1阈值以上的情况下，通知处理部140使关联度显示区域20显示表示关联度较高的红色，在关联度小于第1阈值且为第2阈值以上的情况下，通知处理部140使关联度显示区域20显示表示关联度为中等程度的黄色，在关联度小于第2阈值的情况下，通知处理部140使关联度显示区域20显示表示关联度较低的黑色。另外，关联度的通知方法不限于图像显示，例如也可以通过声音、振动、LED的点亮等进行通知。
根据以上的第1实施方式，根据从内窥镜镜体输出的图像数据计算处置器械和特定部位(例如血管)的位置信息，通过取得各个距离信息，能够导出处置器械与特定部位的相互间的距离作为接近度。能够将该接近度作为关联度对用户进行通知。用户一边在监视器上确认关联度一边对处置器械进行操作，由此，能够削减误接近或接触特定部位而损伤特定部位(例如从血管出血)的风险。
3.第2实施方式
图5示出第2实施方式中的内窥镜装置的结构例。该内窥镜装置包括摄像部200、处理器部300、显示部400。处理器部300包括图像取得部110、距离信息取得部120、关联度取得部130、通知处理部140、图像处理部150、显示控制部160。另外，对与第1实施方式中说明的结构要素相同的结构要素标注相同标号并适当省略说明。
在第2实施方式中，求出处置器械与血管之间的三维距离(相对距离)，根据该三维距离取得关联度。
具体而言，摄像部200具有处置器械210和能够对立体图像进行拍摄的立体光学系统220。立体光学系统220例如构成为配置具有视差的2个摄像光学系统。距离信息取得部120对具有该视差的立体图像进行匹配处理，计算图像上的各位置处的进深方向的距离。然后，距离信息取得部120从立体图像中检测处置器械和血管，根据通过匹配处理而检测到的进深方向的距离来检测处置器械和血管的三维位置，求出它们之间的三维距离。与第1实施方式同样，关联度取得部130将三维距离转换为关联度并将其输出到通知处理部140。
另外，检测处置器械和血管的三维位置的方法不限于上述立体拍摄。例如，摄像部200也可以具有进行自动对焦的光学系统，根据通过该自动对焦而对焦在处置器械或血管上时的透镜位置，估计与处置器械或血管之间的进深方向的距离。或者，也可以利用被摄体越远、则从摄像部200的前端照射的照明光越暗的性质，根据图像的明亮度估计进深方向上的到处置器械或血管的距离。
根据以上的第2实施方式，距离信息取得部120取得特定部位与处置器械210之间的相对距离(三维距离)作为距离信息。而且，相对距离越小，则关联度取得部130越是增大关联度。
这样，能够向用户通知处置器械210越接近特定部位则越高的关联度。由此，用户能够判断在根据当前的处置器械210和特定部位的配置关系进行处置的情况下是否存在损伤特定部位(例如从血管出血)的危险性，能够提供更加安全的处置。
另外，在现有技术(例如专利文献1等)中，例如构成为需要通过MRI等预先取得的活体组织(危险部位)的图像数据和检测处置器械的位置的位置检测装置。因此，存在装置大型化的课题。
关于这点，在本实施方式中，图像取得部110取得由摄像部200进行摄像而得到的包含特定部位(例如血管)和处置器械的像在内的摄像图像。距离信息取得部120从摄像图像中检测处置器械210和特定部位的位置，根据该检测到的处置器械210和特定部位的位置取得从处置器械210到特定部位的距离信息。
这样，由于不需要在事前取得特定部位的图像数据，所以，能够从摄像图像中实时检测处置器械210接近特定部位的情况，能够作为关联度通知给用户。并且，由于不需要用于在事前取得特定部位的图像数据的装置以及从摄像图像以外检测处置器械210的位置的装置(例如超声波图像装置、MRI、GPS发送接收装置)，所以，能够紧凑地构成装置。
并且，在上述现有技术中，还考虑使用立体内窥镜来检测处置器械或危险部位的位置，但是，不一定对处置器械或危险部位进行摄像。因此，仅在立体内窥镜的图像数据中，可能无法检测到处置器械接近危险部位。另外，在专利文献1中，没有言及针对该课题的对应策略。
关于这点，在本实施方式中，如后所述，对一定会看到的部分(例如处置器械的手柄)标注检测用的标记，根据从图像中检测到的标记的位置和处置器械的尺寸信息，能够检测活体内部隐藏的处置器械的前端位置。或者，通过使用后述的NBI对活体深部的血管进行摄像，能够检测其位置。这样，根据本实施方式，仅根据图像就能够检测处置器械或特定部位的位置，不需要现有技术那样的大型化的装置。
4.第3实施方式
图6示出第3实施方式中的内窥镜装置的结构例。该内窥镜装置包括摄像部200、处理器部300、显示部400、光源部500。处理器部300包括图像取得部110、距离信息取得部120、关联度取得部130、通知处理部140、图像处理部150、显示控制部160、光源控制部190。另外，对与第1、第2实施方式中说明的结构要素相同的结构要素标注相同标号并适当省略说明。
在第3实施方式中，取得基于能够对深部血管进行摄像的特殊光的摄像图像，从该摄像图像中检测深部血管，使用该深部血管的从被摄体起的深度取得从处置器械到深部血管的距离信息，根据该距离信息取得关联度。
具体而言，光源部500产生具有白色波段的通常光(白色光)和具有特定波段的特殊光作为照明光。例如，光源部500具有产生通常光的光源和透射特殊光的滤镜，在未将该滤镜插入到光路中的情况下出射通常光，在将滤镜插入到光路中的情况下出射特殊光。或者，光源部500也可以具有产生通常光的光源和产生特殊光的光源，切换这些光源来出射通常光和特殊光。
光源控制部190对光源部500进行控制，进行切换通常光和特殊光来作为照明光出射的控制。关于通常光和特殊光的切换，例如可以根据来自用户的指示进行，或者也可以自动交替切换来进行照射。
特定波段是比白色波段(例如380nm～650nm)窄的波段(NBI：NarrowBandImaging：窄带成像)，是被血液中的血红蛋白吸收的波长的波段。更具体而言，被血红蛋白吸收的波长为390nm～445nm(B2成分、第1窄带光)或530nm～550nm(G2成分、第2窄带光)。另外，390nm～445nm或530nm～550nm的波段是根据被血红蛋白吸收这样的特性和分别到达活体的表层部或深部这样的特性得到的数字。即，不限于这些波段，例如根据与基于血红蛋白的吸收和与到达活体的表层部或深部有关的实验结果等的变动要因，考虑使波段的下限值减少0～10％左右，上限值上升0～10％左右。
摄像部200例如通过通常的RGB摄像元件对特殊光进行摄像。然后，图像取得部110分别取得从摄像部200输入的图像的B成分(即B2成分)和从摄像部200输入的图像的G成分(即G2成分)作为特殊光图像。图7示出特殊光图像的例子。特殊光的B2成分和G2成分能够对存在于比活体表面深的部分的深部血管进行拍摄，所以，在特殊光图像中映出基于B2成分的深部血管13和基于G2成分的深部血管14。B2成分和G2成分能够到达的从活体表面起的深度不同，所以，深部血管13、14的深度不同。
距离信息取得部120从B2成分的图像和G2成分的图像中检测血管。由于各成分中映出的血管的深度预先已知，所以，取得该深度作为血管的进深方向的距离信息。然后，根据图像平面上的处置器械和血管的位置以及B2、G2成分中的血管的深度，计算从处置器械到血管的三维距离。关联度取得部130通过与第1实施方式相同的方法将该三维距离转换为关联度。
另外，在本实施方式中，也可以取得以下这样的特殊光图像。即，图像取得部110通过将从摄像部200输入的图像的G成分(即G2成分)输入到R通道、将从摄像部200输入的图像的B成分(即B2成分)输入到G、B通道，也可以取得特殊光图像。根据这种特殊光图像，能够利用褐色等显示扁平上皮癌等通过通常光难以视觉辨认的病变等，能够抑制病变部的漏看。
另外，在上述中，以切换通常光和特殊光而取得特殊光图像的情况为例进行了说明，但是，在本实施方式中不限于此。例如，也可以通过所谓的面顺次方式取得通常光图像和特殊光图像。该情况下，光源部500依次出射作为通常光的R成分、G成分、B成分的光以及作为特殊光的B2成分、G2成分的光。摄像部200例如通过单色摄像元件对各成分的光进行摄像。然后，图像取得部110从R成分、G成分、B成分的图像中取得通常光图像，从B2成分、G2成分的图像中取得特殊光图像。或者，在本实施方式中，光源部500也可以仅出射通常光(白色光)，摄像部200具备具有透射特殊光的滤镜的摄像元件，通过该摄像元件对特殊光图像进行拍摄。
根据以上的第3实施方式，图像取得部110取得包含具有特定波段(B2成分、G2成分)中的信息的被摄体的像在内的特殊光图像作为摄像图像。然后，距离信息取得部120取得从被摄体的表面到特殊光图像中拍摄的特定部位(例如图7的深部血管13、14)的深度(通过B2成分、G2成分的各成分能够拍摄的深部血管的深度)的信息。距离信息取得部120根据该取得的深度的信息，取得特定部位与处置器械210之间的距离信息。
这样，通过照射特定波段的照明光，能够包含深部的特定部位在内，更加准确地对被摄体的特定部位进行摄像。并且，通过取得根据该特殊光进行拍摄而得到的深部的特定部位的深度的信息，能够取得特定部位的位置作为三维信息。由此，能够准确地取得处置器械210与特定部位的距离(即还包含深度方向的信息)作为接近度，能够向用户通知更加准确的关联度的信息。
5.第4实施方式
图8示出第4实施方式中的内窥镜装置的结构例。该内窥镜装置包括摄像部200、处理器部300、显示部400。处理器部300包括图像取得部110、距离信息取得部120、关联度取得部130、通知处理部140、图像处理部150、显示控制部160、处置器械信息取得部170、切开能力取得部175、存储器230。另外，对与第1～第3实施方式中说明的结构要素相同的结构要素标注相同标号并适当省略说明。
这里，下面以处置器械210是刀的情况为例进行说明，但是，在本实施方式中，处置器械210不限于刀，可以假设可能损伤血管的各种处置器械。
在第4实施方式中，根据作为处置器械210的刀的特性信息取得刀的切开能力(切开度)，根据该切开能力和从刀到血管的距离信息取得关联度。
具体而言，处置器械信息取得部170取得刀(处置器械210)的特性信息作为处置器械信息。刀的特性信息例如存储在处理器部300的存储器230中。在处理器部300中，识别正在使用的处置器械，从存储器230中取得处置器械信息。在存储器230中存储有例如刀的用途和使用部位、尺寸、形状等信息作为特性信息。并且，刀的特性信息也可以作为用户的操作信息进行输入。例如，在刀是电刀的情况下，由用户设定刀中流过的电流值和要施加的电压值等。或者，由用户设定刀的处置模式(例如仅进行切开的切开模式、在切开的同时进行止血的止血模式等)。
切开能力取得部175根据处置器械信息取得部170取得的处置器械信息(刀的特性信息)取得刀的切开能力。例如，预先存储将处置器械信息和切开能力对应起来的一览表，参照该一览表取得切开能力。或者，也可以通过将处置器械性能作为自变量来计算切开能力的函数，取得切开性能。这里，切开能力是表示刀切开活体的能力的信息，例如是根据用户的指示而在刀中流过电流(或施加电压)时切开活体的范围(例如长度、深度等)。
关联度取得部130根据刀的切开能力和从刀到血管的距离信息取得关联度。例如如图9所示，参照针对切开能力SA～SC决定了距离D和关联度的对应关系的一览表来取得关联度。在图9的例子中，当设切开能力为SA<SB<SC时，例如，相同距离D属于距离范围D1a≧D>D2a、D2b≧D>D3b、D3c≧D>D4c。该情况下，在切开能力SA时成为关联度1，在切开能力SB时成为关联度2，在切开能力SC时成为关联度3。即，切开能力越高，则针对相同距离D，参照越大的关联度。或者，关联度取得部130也可以通过将切开能力和距离信息与关联度对应起来的函数来计算关联度。在设切开能力为S、距离为D的情况下，例如关联度表示为f(S、D)＝βS/D等。这里，β是规定的系数。
另外，在本实施方式中，也可以进行根据处置器械信息来估计刀的前端位置的处理。该情况下，距离信息取得部120取得处置器械信息取得部170所取得的处置器械信息中的处置器械的前端的长度或宽度等物理信息。例如在利用刀切开活体时等，刀的前端隐藏在活体内，有时在图像中无法识别刀的前端。在本实施方式中，假设这种情况，对处置器械210的前端以外的部分(例如刀柄的部分等)标注标记。然后，从摄像图像中识别标记的位置，使用刀的物理信息取得从标记到刀的前端的距离。这样，确定刀的前端的位置，根据该位置取得从刀的前端到血管的距离信息。进而，利用与切开模式有关的内容进行了说明，但是，在止血模式的情况下，考虑除了所述切开能力、还取得止血能力的结构。
在如上所述那样估计出刀的前端位置的情况下，通知处理部140也可以使显示部400显示该刀的前端位置。根据这种显示，也能够得知处置器械210和血管的关联度，所以，刀的前端位置的显示也是关联度通知的一种。这样，即使在刀的前端隐藏在活体内的情况下，也能够使用户得知刀的前端位置，能够减小无意识地损伤血管的可能性。
根据以上的第4实施方式，内窥镜装置包括处置器械信息取得部170和切开能力取得部175。处置器械信息取得部170取得与处置器械210(例如刀、电刀等)的切开能力有关的性能信息(例如电流值和电压值的设定值、尺寸信息等物理信息等)作为处置器械信息。切开能力取得部175根据处置器械210的性能信息取得处置器械210的切开能力的信息(例如切开范围)。而且，处置器械210的切开能力越高，关联度取得部130越增大关联度(例如图9)。
这样，通过采用取得处置器械210的性能信息的结构，能够根据该性能信息取得关联度。即，能够根据性能信息取得切开能力，除了距离信息以外，还考虑切开能力，能够更加准确地计算关联度并通知给用户。例如，即使是相同处置器械210，根据电流值等的设定而使切开能力不同，但是，在本实施方式中，能够通知与这种切开能力的变化对应的关联度。
并且，在本实施方式中，距离信息取得部120从摄像图像中检测对处置器械210标注的标记的位置，根据该检测到的标记的位置取得距离信息。这里，作为标记，只要在摄像图像中能够识别即可。例如，考虑标注反射率与处置器械210不同的物质、加工/刻印成图像处理中能够识别的形状等、标注活体内不存在且容易与活体进行区分的颜色等。
更具体而言，内窥镜装置包括取得处置器械210的尺寸信息(物理信息)作为处置器械信息的处置器械信息取得部170。距离信息取得部120根据从摄像图像中检测到的标记的位置和处置器械210的尺寸信息确定处置器械210的前端的位置，取得从该确定的前端的位置到特定部位的距离信息。
这样，在图像中无法确认处置器械210的前端的情况下，也能够检测处置器械210的前端作为三维的位置信息。由此，能够准确地计算从处置器械210的前端到特定部位的距离信息，所以，能够向用户通知精度更高的关联度。并且，不使用图像识别以外的方法，也能够高精度地从图像中检测从处置器械210到特定部位的距离，所以，能够简化装置。
6.第5实施方式
图10示出第5实施方式中的内窥镜装置的结构例。该内窥镜装置包括摄像部200、处理器部300、显示部400。处理器部300包括图像取得部110、距离信息取得部120、关联度取得部130、通知处理部140、图像处理部150、显示控制部160、处置器械信息取得部170、切开能力取得部175、特定部位信息取得部180、存储器230。另外，对与第1～第4实施方式中说明的结构要素相同的结构要素标注相同标号并适当省略说明。
在第5实施方式中，取得特定部位的特性信息，根据该特定部位的特性信息以及从处置器械210到特定部位的距离信息取得关联度。另外，下面以特定部位是血管、血管的特性信息是血管直径的情况为例进行说明，但是，本实施方式不限于此，例如也可以将通过特殊光进行拍摄的情况下的血管的深度等作为特性信息。
特定部位信息取得部180具有血管直径取得部181。特定部位信息取得部180从图像取得部110所取得的摄像图像中检测血管，血管直径取得部181根据该检测结果取得血管直径(血管的宽度)作为血管的特性信息。由于认为血管的截面一般为圆形，所以，设图像上的血管的宽度为血管直径。该血管直径的信息附加在血管的位置信息中输出到关联度取得部130。另外，距离信息取得部120也可以从特定部位信息取得部180接受血管的位置信息来取得距离信息，还可以单独从摄像图像中检测血管来取得距离信息。
关联度取得部130根据血管直径和从处置器械210到血管的距离信息取得关联度。具体而言，血管直径越大，则针对相同距离D，取得越大的关联度。例如，预先存储针对血管直径而将距离和关联度对应起来的一览表(例如将图9的切开能力作为血管直径的表)，参照该一览表取得关联度。或者，也可以通过将血管直径和距离信息与关联度对应起来的函数来计算关联度。在设血管直径为R、距离为D的情况下，例如关联度表示为f(R、D)＝γR/D等。这里，γ是规定的系数。
并且，关联度取得部130根据参数通知级别来决定是否进行关联度的通知。具体而言，关联度取得部130包括通知范围设定部131和比较部132(参数比较部)。
例如通过用户设定等对通知范围设定部131输入参数通知级别。通知范围设定部131根据该参数通知级别来设定进行关联度的通知的参数范围(以下称为通知范围)。在参数是血管直径的情况下，参数通知级别例如为血管直径的阈值，通知范围是血管直径大于阈值的情况。或者，也可以输入多个阈值作为参数通知级别。例如在输入第1阈值和第2阈值的情况下，血管直径大于第1阈值且小于第2阈值的情况为第1通知范围，大于第2阈值的情况为第2通知范围。
比较部132对血管直径和通知范围进行比较，在血管直径为通知范围内的情况下，对通知处理部140输出通知标志。然后，通知处理部140在接受到通知标志的情况下，进行通知关联度的处理。在设定了多个通知范围(例如上述第1、第2通知范围)的情况下，也可以根据通知范围来变更通知方法(例如显示的颜色、显示的大小、显示的闪烁速度等)。
另外，也可以输入血管直径以外的特性信息的通知级别作为参数通知级别。例如，可以输入通过特殊光进行拍摄的情况下的血管的深度的通知级别，或者也可以输入距离信息的通知级别，或者还可以输入处置器械210的特性信息(例如刀的切开能力)的通知级别。比较部132可以在任意一个参数在通知范围内的情况下输出通知标志，或者也可以在多个参数在通知范围内的情况下输出通知标志。
例如通过用户设定等对通知处理部140输入用户通知级别，根据该用户通知级别来决定是否进行关联度的通知。具体而言，用户通知级别是关联度的阈值，在关联度大于阈值的情况下，通知处理部140通知关联度。或者，用户通知级别是关联度的第1阈值和第2阈值，在关联度大于第1阈值且小于第2阈值的情况下，通知处理部140通知关联度。关于该用户通知级别，也可以按照每个用户而设定不同的通知级别。
根据以上的第5实施方式，内窥镜装置包括取得作为特定部位的血管的血管直径的信息来作为血管信息的特定部位信息取得部180。而且，该血管直径越大，则关联度取得部130越增大关联度。
这样，由于采用从图像中取得血管直径作为特定部位信息的结构，所以，能够根据血管的粗细而可变地控制关联度。在处置器械210损伤血管的情况下，一般情况下，血管越粗，则危险性越增加(例如出血量增多、难以止血等)，但是，在本实施方式中，能够向用户通知与这种危险性对应的关联度。
并且，在本实施方式中，关联度取得部130具有设定向用户通知的血管直径的范围即血管直径通知范围的通知范围设定部131、以及进行血管直径和血管直径通知范围的比较处理的比较部132。然后，在通过比较部132判定为血管直径在血管直径通知范围内的情况下，通知处理部140进行基于关联度的通知处理。
这样，能够根据血管直径是否在通知范围内来控制是否向用户通知关联度。例如，输入血管直径的阈值作为用户通知级别，能够将血管直径比该阈值粗的情况设定为血管直径通知范围。该情况下，能够仅在血管直径比阈值粗的情况下向用户通知关联度，在血管直径比阈值细的情况下不向用户通知关联度。这样，通过在满足期望条件的情况下通知关联度，能够仅在用户需要关联度通知的情况(例如容易出血的较粗的血管)下通知关联度，能够抑制进行烦杂的关联度通知。
并且，在本实施方式中，通知范围设定部131设定对用户进行关联度的通知的切开能力的范围即切开能力通知范围。比较部132进行切开能力和切开能力通知范围的比较处理。然后，在通过比较部132判定为切开能力在切开能力通知范围内的情况下，通知处理部140进行基于关联度的通知处理。
这样，能够根据切开能力是否在通知范围内来控制是否向用户通知关联度。例如，能够仅在切开能力大于阈值的情况下向用户通知关联度。由此，能够仅在用户需要关联度通知的情况(例如切开能力较高而容易导致出血的情况)下通知关联度，能够抑制进行烦杂的关联度通知。
并且，在本实施方式中，特定部位信息取得部180取得作为特定部位的血管的血管直径的信息，来作为特定部位信息。然后，在判定为切开能力在切开能力通知范围内、且血管直径大于阈值(参数通知级别或用户通知级别。或者也可以是规定的阈值)的情况下，通知处理部140进行基于关联度的通知处理。
这样，不仅根据切开能力，还能够根据血管直径来控制是否向用户通知关联度。例如，在血管直径较粗的情况下，出血的可能性较高，但是，何种程度的血管直径危险则取决于用户的技术。关于这点，在本实施方式中，通过根据用户来变更阈值(血管直径的用户通知级别)，能够变更通知处置器械接近血管的血管直径的粗细。
并且，在本实施方式中，通知范围设定部131设定向用户通知的特定部位(例如血管)的深度的范围即深度通知范围。比较部132进行特定部位的深度和深度通知范围的比较处理。然后，在通过比较部132判定为特定部位的深度在深度通知范围内的情况下，通知处理部140进行基于关联度的通知处理。
这样，能够根据特定部位的深度是否在通知范围内来控制是否向用户通知关联度。例如，能够仅在特定部位的深度比阈值浅的情况下向用户通知关联度。由此，能够仅在用户需要关联度通知的情况(例如特定部位的深度以处置器械的切开能力能够到达的情况)下通知关联度，能够抑制进行烦杂的关联度通知。
并且，在本实施方式中，通知范围设定部131设定向用户通知的相对距离的范围即相对距离通知范围。比较部132进行相对距离和相对距离通知范围的比较处理。然后，在通过比较部132判定为相对距离在相对距离通知范围内的情况下，通知处理部140进行基于关联度的通知处理。
这样，能够根据从处置器械210到特定部位的距离是否在通知范围内来控制是否向用户通知关联度。例如，能够仅在距离比阈值近的情况下向用户通知关联度。由此，能够仅在用户需要关联度通知的情况(例如处置器械210接近特定部位、以处置器械210的切开能力可能切开特定部位的情况)下通知关联度，能够抑制进行烦杂的关联度通知。
另外，在本实施方式中，也可以仅根据上述多个参数(血管直径、切开能力、特定部位的深度、相对距离)的通知范围中的任意一方来判断有无通知处理，或者，还可以组合若干个参数的通知范围来判断有无通知处理。
并且，在本实施方式中，通知处理部140设定向用户通知的关联度的范围即关联度通知范围，在判定为关联度在关联度通知范围内的情况下，进行基于关联度的通知处理。
这样，能够根据关联度是否在通知范围内来控制是否向用户通知关联度。例如，可以构成为按照每个用户设定关联度的阈值作为用户通知级别，在关联度大于阈值的情况下进行通知。由此，能够根据希望仅在关联度较高的情况(例如处置器械和特定部位接近、血管较粗等)下进行通知的用户、希望在关联度较低的情况(例如处置器械和特定部位没那么接近、血管较细等)下也进行通知的用户来定制通知级别。
7.第6实施方式
图11示出第6实施方式中的关联度通知的例子。在第6实施方式中，在显示部400中显示刀(处置器械)的切开范围作为关联度。
具体而言，从摄像图像中检测刀的前端位置(或者根据标记和刀的物理信息来估计前端位置)，从刀的特性信息取得刀的切开能力。然后，根据该切开能力确定所切开的范围，在显示部400中显示该切开范围。
例如，如图11所示，在摄像图像的显示区域10中，在刀12的前端(检测或估计出的前端位置)显示切开范围15。
或者，也可以设置垂直方向(画面的纵向)中的切开范围的显示区域30和水平方向(画面的横向)中的切开范围的显示区域40。在显示区域30中显示表示处置器械12的显示31、表示切开范围的条32、表示血管11的条33。条32渐变地(例如蓝色)表示垂直方向中的切开范围，越接近处置器械12的前端(即切开能力越高的部分)，则显示为越深。条33渐变地(例如红色)表示垂直方向中的血管11，越接近处置器械12的前端(即被切开的可能性越高)，则显示为越深。同样，在显示区域40中显示表示水平方向中的处置器械12的显示41、表示切开范围的条42、表示血管11的条43。
另外，除了上述切开范围的显示以外，还可以进一步显示第1～第5实施方式中说明的关联度。并且，当处置器械12的前端在图像上看不到(例如隐藏在活体内)的情况下，也可以如第4实施方式中说明的那样估计前端位置，在显示区域10中显示该前端位置。并且，不仅可以如图11那样显示血管位置，还可以显示通过特殊光取得的血管的深度。通过显示血管深度，在处置器械的前端在图像中无法识别的情况下，也能够更加准确地操作处置器械，能够避免出血的风险。
根据以上的第6实施方式，通知处理部140进行使显示部400显示处置器械210由于切开能力而造成影响的范围即切开范围(例如图11的15、32和42)的处理作为通知处理。
并且，在本实施方式中，通知处理部140进行使显示部400显示特定部位(例如血管)的深度和距离信息(例如图11的33、43)中的至少一方的处理作为通知处理。
这样，与如图4那样仅利用数值范围(颜色区分)来显示关联度的情况相比，能够对用户提示更加详细的关联度的信息。特别是在从处置器械210来看在多个方向上存在有特定部位的情况下、在深度方向上存在有重合的特定部位的情况下，能够更加准确地通知关联度，用户能够更加适当地掌握危险性。并且，由于能够在监视器画面上目视关联度，所以，能够在画面上确认处置器械210的设定(例如电流值等的与切开能力有关的设定)是否如假定的那样。并且，在如第5实施方式那样采用设定用户通知级别的结构的情况下，由于在设定用户通知级别时能够在监视器画面上确认关联度，所以，能够设定最佳的用户通知级别。
8.变形例
另外，上述第1～第6实施方式只不过是一例，也可以采用以下结构。
例如，通知处理部140也可以具有如下的通知停止部：在根据从关联度取得部130发送的关联度进行了用户通知后，在与规定的条件一致的情况下，停止对用户进行通知。例如，在向用户通知了关联度后，在从处置器械到血管的距离(相对距离、二维距离)为零(等距离)的情况下、用户按下了停止按钮的情况下、开始对用户进行通知后经过了一定时间的情况下等，自动停止通知。
或者，处理器部300也可以还具有预测到存在出血的可能性并通知给通知处理部140的预测通知部。例如，预测通知部是出血判定部，在电刀这样的刀等未设定为止血模式而设定为切开模式并且刀接近具有规定的阈值以上的血管直径的血管的情况下，出血判定部判定为存在出血的可能性。在从预测通知部通知了存在出血的可能性的通知的情况下，通知处理部140向用户通知出血的可能性(例如在显示部400中进行显示)。或者，也可以在从预测通知部通知了存在出血的可能性的通知的情况下，通知处理部140向用户通知变更处置器械的种类的请求，或者向用户通知变更处置器械的模式(例如变更为止血模式)的请求。
根据以上的变形例，在根据关联度开始通知后经过了规定的时间的情况下、或者根据关联度开始通知后关联度超过了规定的阈值的情况下，通知处理部140停止通知。
这样，通过采用停止通知的结构，不会烦杂地进行通知，能够降低用户感觉到的通知的烦躁。例如，在用户有意切开特定部位的情况下，如果处置器械210到达特定部位(或者如果成为规定的距离以下)，则不需要通知关联度。在本变形例中，在这种情况下，能够自动停止通知。
并且，在本变形例中，特定部位也可以是血管。该情况下，通知处理部140具有如下的出血判定部(未图示)：根据特定部位信息和处置器械信息中的至少一方，判定由于处置器械而从血管出血的可能性。然后，在通过出血判定部判定为存在出血的可能性的情况下，通知处理部140进行通知存在出血的可能性的处理。
这样，由于能够向用户通知出血的可能性，所以，用户能够根据该通知来选择适合的处置器械210及其设定。例如，能够变更处置器械210的设定，成为能够一边切开一边止血的设定(止血模式)。并且，用户受理通知，一边确认监视器画面一边进行操作而不会使处置器械210过于接近血管等，能够防止出血。并且，即使在出血的情况下，由于预先通知，所以，能够及早进行止血等的对应。
并且，在本变形例中，特定部位信息取得部180取得血管的血管直径的信息作为特定部位信息。而且，在关联度高于关联度的阈值(例如规定的阈值)、且血管直径大于血管直径的阈值(例如规定的阈值)的情况下，出血判定部判定为存在出血的可能性。
更具体而言，在关联度大于第2关联度的阈值(第5实施方式的参数通知级别或用户通知级别。或者也可以是规定的阈值)的情况下、或者血管直径大于第2血管直径的阈值(第5实施方式的参数通知级别或用户通知级别。或者也可以是规定的阈值)的情况下，通知处理部140进行基于关联度的通知处理。此时，判定出血的可能性的情况下的关联度的阈值大于第2关联度的阈值，判定出血的可能性的情况下的血管直径的阈值大于第2血管直径的阈值。
这样，能够仅在出血时的危险性较大的较粗血管的情况下向用户通知出血的可能性，能够排除无用的通知。并且，由于出血判定的阈值大于关联度通知的阈值，所以，能够在处置器械接近血管而使关联度增大时开始通知，在处置器械进一步接近血管时通知出血的可能性。
并且，在本变形例中，处置器械信息取得部170取得处置器械中设定的模式信息作为处置器械信息。而且，在关联度高于关联度的阈值、且处置器械设定为切开模式的情况下，出血判定部判定为存在出血的可能性。
这样，在使用能够设定切开能力不同的多个模式的处置器械时，能够仅在设定为切开能力较高的模式的情况下向用户通知出血的可能性，能够排除无用的通知。例如在电刀的情况下，可以假设通过施加比较小功率的高频而使得与切开相比更加重视止血的止血模式、通过施加比较大功率的高频而使得与止血相比更加重视切开的切开模式。例如通过用户指示来切换这些模式。
并且，在本变形例中，通知处理部140具有如下的处置器械判定部(未图示)：根据特定部位信息和处置器械信息，判定当前正在使用的处置器械210是否适合于特定部位。在通过处置器械判定部判定为处置器械不适合的情况下，通知处理部140进行通知变更为适合于特定部位的处置器械210的处理。
这样，由于能够向用户通知正在使用不适合的处置器械210的可能性，所以，能够提示用户更换处置器械210。例如，在血管附近使用切开能力较高(或者设定为切开模式)的处置器械210的情况下，能够通知变更为切开能力更低的处置器械210或模式设定(止血模式)。
并且，在本变形例中，特定部位信息取得部180取得作为特定部位的血管的血管直径的信息，来作为特定部位信息。而且，在关联度高于关联度的阈值(例如规定的阈值)、且血管直径大于血管直径的阈值(例如规定的阈值)的情况下，处置器械判定部判定为处置器械不适合。
更具体而言，在关联度大于第2关联度的阈值(第5实施方式的参数通知级别或用户通知级别。或者也可以是规定的阈值)的情况下、或者血管直径大于第2血管直径的阈值(第5实施方式的参数通知级别或用户通知级别。或者也可以是规定的阈值)的情况下，通知处理部140进行基于关联度的通知处理。此时，判定处置器械是否适合的情况下的关联度的阈值大于第2关联度的阈值，判定处置器械是否适合的情况下的血管直径的阈值大于第2血管直径的阈值。
这样，能够仅在损伤时的危险性较大的情况下(例如出血时的危险性较大的较粗血管的情况下)提示用户更换处置器械，能够排除无用的通知。并且，由于处置器械判定的阈值大于关联度通知的阈值，所以，能够在处置器械接近特定部位而使关联度增大时开始通知，在处置器械进一步接近特定部位时通知处置器械不适合。
并且，在本变形例中，处置器械信息取得部170取得处置器械中设定的模式信息作为处置器械信息。而且，在关联度高于关联度的阈值、且处置器械设定为切开模式的情况下，处置器械判定部判定为处置器械适合。
这样，在使用能够设定切开能力不同的多个模式的处置器械(例如能够切换止血模式和切开模式的电刀)时，能够仅在设定为切开能力较高的模式的情况下向用户通知处置器械不适合，能够排除无用的通知。
以上对应用了本发明的实施方式及其变形例进行了说明，但是，本发明不限于各实施方式及其变形例，能够在实施阶段在不脱离发明主旨的范围内对结构要素进行变形而具体化。并且，通过适当组合上述各实施方式和变形例所公开的多个结构要素，能够形成各种发明。例如，可以从各实施方式和变形例所记载的全部结构要素中删除若干个结构要素。进而，可以适当组合不同实施方式和变形例中说明的结构要素。这样，能够在不脱离发明主旨的范围内进行各种变形和应用。并且，在说明书或附图中，至少一次与更加广义或同义的不同用语一起记载的用语能够在说明书或附图的任意部位置换为该不同的用语。
标号说明
10：图像显示区域；11：血管；12：处置器械；13、14：深部血管；15：切开范围；20：关联度显示区域；30、40：切开范围的显示区域；31、41：表示处置器械的显示；32、42：表示切开范围的条；33、43：表示血管的条；110：图像取得部；120：距离信息取得部；130：关联度取得部；131：通知范围设定部；132：比较部；140：通知处理部；150：图像处理部；160：显示控制部；170：处置器械信息取得部；175：切开能力取得部；180：特定部位信息取得部；181：血管直径取得部；190：光源控制部；200：摄像部；210：处置器械；220：立体光学系统；230：存储器；300：处理器部；400：显示部；500：光源部；D：距离；SA～SC：切开能力。
权利要求书(按照条约第19条的修改)
1.(修改后)一种内窥镜装置，其特征在于，该内窥镜装置包括：
距离信息取得部，其取得与特定部位和处置器械之间的距离有关的距离信息；
关联度取得部，其根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，所述特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；
通知处理部，其进行基于所述关联度的通知处理；
处置器械信息取得部，其取得与所述处置器械的切开能力有关的性能信息作为所述处置器械信息；以及
切开能力取得部，其根据所述处置器械的所述性能信息取得所述处置器械的所述切开能力的信息，
所述处置器械的所述切开能力越高，则所述关联度取得部越增大所述关联度。
2.(删除)
3.(修改后)根据权利要求1所述的内窥镜装置，其特征在于，
所述通知处理部进行使显示部显示切开范围的处理作为所述通知处理，其中，所述切开范围是所述处置器械由于所述切开能力而造成影响的范围。
4.(修改后)根据权利要求1所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户进行所述关联度的通知的切开能力通知范围，该切开能力通知范围是所述切开能力的范围；以及
比较部，其进行所述切开能力与所述切开能力通知范围的比较处理，
在通过所述比较部判定为所述切开能力在所述切开能力通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
5.根据权利要求4所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
在判定为所述切开能力在所述切开能力通知范围内、且所述血管直径大于阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
6.根据权利要求1所述的内窥镜装置，其特征在于，
所述距离信息取得部从摄像图像中检测标注在所述处置器械上的标记的位置，根据检测到的所述标记的位置取得所述距离信息。
7.根据权利要求6所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械的尺寸信息作为所述处置器械信息，
所述距离信息取得部根据从所述摄像图像中检测到的所述标记的位置和所述处置器械的所述尺寸信息确定所述处置器械的前端的位置，取得从所确定的所述前端的位置到所述特定部位的所述距离信息。
8.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括图像取得部，该图像取得部取得包含具有特定波段中的信息的被摄体的像在内的特殊光图像作为摄像图像，
所述距离信息取得部取得从所述被摄体的表面到所述特殊光图像中拍摄到的所述特定部位的深度的信息，根据所取得的所述深度的信息取得所述特定部位与所述处置器械之间的所述距离信息。
9.根据权利要求8所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的深度通知范围，该深度通知范围是所述特定部位的所述深度的范围；以及
比较部，其进行所述特定部位的所述深度与所述深度通知范围的比较处理，
在通过所述比较部判定为所述特定部位的所述深度在所述深度通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
10.根据权利要求8所述的内窥镜装置，其特征在于，
所述通知处理部进行使显示部显示所述特定部位的深度和所述距离信息中的至少一方的处理作为所述通知处理。
11.根据权利要求1所述的内窥镜装置，其特征在于，
距离信息取得部取得所述特定部位与所述处置器械之间的相对距离作为所述距离信息，
所述相对距离越小，则所述关联度取得部越增大所述关联度。
12.根据权利要求11所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的相对距离通知范围，该相对距离通知范围是所述相对距离的范围；以及
比较部，其进行所述相对距离与所述相对距离通知范围的比较处理，
在通过所述比较部判定为所述相对距离在所述相对距离通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
13.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括血管信息取得部，该血管信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
所述血管直径越大，则所述关联度取得部越增大所述关联度。
14.根据权利要求13所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的血管直径通知范围，该血管直径通知范围是所述血管直径的范围；以及
比较部，其进行所述血管直径与所述血管直径通知范围的比较处理，
在通过所述比较部判定为所述血管直径在所述血管直径通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
15.根据权利要求1所述的内窥镜装置，其特征在于，
所述通知处理部设定向用户通知的关联度通知范围，在判定为所述关联度在所述关联度通知范围内的情况下，进行基于所述关联度的所述通知处理，其中，所述关联度通知范围是所述关联度的范围。
16.根据权利要求1所述的内窥镜装置，其特征在于，
在根据所述关联度开始通知后经过了规定的时间的情况下、或根据所述关联度开始通知后所述关联度超过规定的阈值的情况下，所述通知处理部停止所述通知。
17.根据权利要求1所述的内窥镜装置，其特征在于，
所述特定部位是血管，
所述通知处理部具有出血判定部，该出血判定部根据所述特定部位信息和所述处置器械信息中的至少一方，判定由于所述处置器械而从所述血管出血的可能性，
在通过所述出血判定部判定为存在所述出血的可能性的情况下，所述通知处理部进行通知存在所述出血的可能性的处理。
18.根据权利要求17所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得所述血管的血管直径的信息作为所述特定部位信息，
在所述关联度高于关联度阈值、且所述血管直径大于血管直径阈值的情况下，所述出血判定部判定为存在所述出血的可能性。
19.根据权利要求18所述的内窥镜装置，其特征在于，
在所述关联度大于第2关联度阈值的情况下、或所述血管直径大于第2血管直径阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理，
判定所述出血的可能性的情况下的所述关联度阈值大于所述第2关联度阈值，
判定所述出血的可能性的情况下的所述血管直径阈值大于所述第2血管直径阈值。
20.根据权利要求17所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械中设定的模式信息作为所述处置器械信息，
在所述关联度高于关联度阈值、且所述处置器械被设定为切开模式的情况下，所述出血判定部判定为存在所述出血的可能性。
21.根据权利要求1所述的内窥镜装置，其特征在于，
所述通知处理部具有处置器械判定部，该处置器械判定部根据所述特定部位信息和所述处置器械信息，判定当前使用的所述处置器械是否适合于所述特定部位，
在通过所述处置器械判定部判定为所述处置器械不适合的情况下，所述通知处理部进行通知变更为适合于所述特定部位的所述处置器械的处理。
22.根据权利要求21所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
在所述关联度高于关联度阈值、且所述血管直径大于血管直径阈值的情况下，所述处置器械判定部判定为所述处置器械不适合。
23.根据权利要求22所述的内窥镜装置，其特征在于，
在所述关联度大于第2关联度阈值的情况下、或所述血管直径大于第2血管直径阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理，
判定所述处置器械是否适合的情况下的所述关联度阈值大于所述第2关联度阈值，
判定所述处置器械是否适合的情况下的所述血管直径阈值大于所述第2血管直径阈值。
24.根据权利要求21所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械中设定的模式信息作为所述处置器械信息，
在所述关联度高于关联度阈值、且所述处置器械被设定为切开模式的情况下，所述处置器械判定部判定为所述处置器械适合。
25.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括图像取得部，该图像取得部取得由摄像部进行摄像而得到的包含特定部位和处置器械的像在内的摄像图像，
所述距离信息取得部从所述摄像图像中检测所述处置器械和所述特定部位的位置，根据检测到的所述处置器械和所述特定部位的位置取得从所述处置器械到所述特定部位的所述距离信息。
26.(修改后)一种内窥镜装置的工作方法，其特征在于，
取得与特定部位和处置器械之间的距离有关的距离信息；
根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，所述特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；
取得与所述处置器械的切开能力有关的性能信息作为所述处置器械信息；
根据所述处置器械的所述性能信息取得所述处置器械的所述切开能力的信息；
所述处置器械的所述切开能力越高，越增大所述关联度；以及
进行基于所述关联度的通知处理。

Claims (26)

1.一种内窥镜装置，其特征在于，该内窥镜装置包括：
距离信息取得部，其取得与特定部位和处置器械之间的距离有关的距离信息；
关联度取得部，其根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，所述特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；以及
通知处理部，其进行基于所述关联度的通知处理。
2.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括：
处置器械信息取得部，其取得与所述处置器械的切开能力有关的性能信息作为所述处置器械信息；以及
切开能力取得部，其根据所述处置器械的所述性能信息取得所述处置器械的所述切开能力的信息，
所述处置器械的所述切开能力越高，则所述关联度取得部越增大所述关联度。
3.根据权利要求2所述的内窥镜装置，其特征在于，
所述通知处理部进行使显示部显示切开范围的处理作为所述通知处理，其中，所述切开范围是所述处置器械由于所述切开能力而造成影响的范围。
4.根据权利要求2所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户进行所述关联度的通知的切开能力通知范围，该切开能力通知范围是所述切开能力的范围；以及
比较部，其进行所述切开能力与所述切开能力通知范围的比较处理，
在通过所述比较部判定为所述切开能力在所述切开能力通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
5.根据权利要求4所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
在判定为所述切开能力在所述切开能力通知范围内、且所述血管直径大于阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
6.根据权利要求1所述的内窥镜装置，其特征在于，
所述距离信息取得部从摄像图像中检测标注在所述处置器械上的标记的位置，根据检测到的所述标记的位置取得所述距离信息。
7.根据权利要求6所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械的尺寸信息作为所述处置器械信息，
所述距离信息取得部根据从所述摄像图像中检测到的所述标记的位置和所述处置器械的所述尺寸信息确定所述处置器械的前端的位置，取得从所确定的所述前端的位置到所述特定部位的所述距离信息。
8.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括图像取得部，该图像取得部取得包含具有特定波段中的信息的被摄体的像在内的特殊光图像作为摄像图像，
所述距离信息取得部取得从所述被摄体的表面到所述特殊光图像中拍摄到的所述特定部位的深度的信息，根据所取得的所述深度的信息取得所述特定部位与所述处置器械之间的所述距离信息。
9.根据权利要求8所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的深度通知范围，该深度通知范围是所述特定部位的所述深度的范围；以及
比较部，其进行所述特定部位的所述深度与所述深度通知范围的比较处理，
在通过所述比较部判定为所述特定部位的所述深度在所述深度通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
10.根据权利要求8所述的内窥镜装置，其特征在于，
所述通知处理部进行使显示部显示所述特定部位的深度和所述距离信息中的至少一方的处理作为所述通知处理。
11.根据权利要求1所述的内窥镜装置，其特征在于，
距离信息取得部取得所述特定部位与所述处置器械之间的相对距离作为所述距离信息，
所述相对距离越小，则所述关联度取得部越增大所述关联度。
12.根据权利要求11所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的相对距离通知范围，该相对距离通知范围是所述相对距离的范围；以及
比较部，其进行所述相对距离与所述相对距离通知范围的比较处理，
在通过所述比较部判定为所述相对距离在所述相对距离通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
13.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括血管信息取得部，该血管信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
所述血管直径越大，则所述关联度取得部越增大所述关联度。
14.根据权利要求13所述的内窥镜装置，其特征在于，
所述关联度取得部具有：
通知范围设定部，其设定向用户通知的血管直径通知范围，该血管直径通知范围是所述血管直径的范围；以及
比较部，其进行所述血管直径与所述血管直径通知范围的比较处理，
在通过所述比较部判定为所述血管直径在所述血管直径通知范围内的情况下，所述通知处理部进行基于所述关联度的所述通知处理。
15.根据权利要求1所述的内窥镜装置，其特征在于，
所述通知处理部设定向用户通知的关联度通知范围，在判定为所述关联度在所述关联度通知范围内的情况下，进行基于所述关联度的所述通知处理，其中，所述关联度通知范围是所述关联度的范围。
16.根据权利要求1所述的内窥镜装置，其特征在于，
在根据所述关联度开始通知后经过了规定的时间的情况下、或根据所述关联度开始通知后所述关联度超过规定的阈值的情况下，所述通知处理部停止所述通知。
17.根据权利要求1所述的内窥镜装置，其特征在于，
所述特定部位是血管，
所述通知处理部具有出血判定部，该出血判定部根据所述特定部位信息和所述处置器械信息中的至少一方，判定由于所述处置器械而从所述血管出血的可能性，
在通过所述出血判定部判定为存在所述出血的可能性的情况下，所述通知处理部进行通知存在所述出血的可能性的处理。
18.根据权利要求17所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得所述血管的血管直径的信息作为所述特定部位信息，
在所述关联度高于关联度阈值、且所述血管直径大于血管直径阈值的情况下，所述出血判定部判定为存在所述出血的可能性。
19.根据权利要求18所述的内窥镜装置，其特征在于，
在所述关联度大于第2关联度阈值的情况下、或所述血管直径大于第2血管直径阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理，
判定所述出血的可能性的情况下的所述关联度阈值大于所述第2关联度阈值，
判定所述出血的可能性的情况下的所述血管直径阈值大于所述第2血管直径阈值。
20.根据权利要求17所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械中设定的模式信息作为所述处置器械信息，
在所述关联度高于关联度阈值、且所述处置器械被设定为切开模式的情况下，所述出血判定部判定为存在所述出血的可能性。
21.根据权利要求1所述的内窥镜装置，其特征在于，
所述通知处理部具有处置器械判定部，该处置器械判定部根据所述特定部位信息和所述处置器械信息，判定当前使用的所述处置器械是否适合于所述特定部位，
在通过所述处置器械判定部判定为所述处置器械不适合的情况下，所述通知处理部进行通知变更为适合于所述特定部位的所述处置器械的处理。
22.根据权利要求21所述的内窥镜装置，其特征在于，
所述内窥镜装置包括特定部位信息取得部，该特定部位信息取得部取得作为所述特定部位的血管的血管直径的信息，来作为所述特定部位信息，
在所述关联度高于关联度阈值、且所述血管直径大于血管直径阈值的情况下，所述处置器械判定部判定为所述处置器械不适合。
23.根据权利要求22所述的内窥镜装置，其特征在于，
在所述关联度大于第2关联度阈值的情况下、或所述血管直径大于第2血管直径阈值的情况下，所述通知处理部进行基于所述关联度的所述通知处理，
判定所述处置器械是否适合的情况下的所述关联度阈值大于所述第2关联度阈值，
判定所述处置器械是否适合的情况下的所述血管直径阈值大于所述第2血管直径阈值。
24.根据权利要求21所述的内窥镜装置，其特征在于，
所述内窥镜装置包括处置器械信息取得部，该处置器械信息取得部取得所述处置器械中设定的模式信息作为所述处置器械信息，
在所述关联度高于关联度阈值、且所述处置器械被设定为切开模式的情况下，所述处置器械判定部判定为所述处置器械适合。
25.根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置包括图像取得部，该图像取得部取得由摄像部进行摄像而得到的包含特定部位和处置器械的像在内的摄像图像，
所述距离信息取得部从所述摄像图像中检测所述处置器械和所述特定部位的位置，根据检测到的所述处置器械和所述特定部位的位置取得从所述处置器械到所述特定部位的所述距离信息。
26.一种内窥镜装置的工作方法，其特征在于，
取得与特定部位和处置器械之间的距离有关的距离信息；
根据特定部位信息和处置器械信息中的至少一方以及所述距离信息，取得所述特定部位与所述处置器械之间的关联度，其中，所述特定部位信息是所述特定部位的特性信息，所述处置器械信息是所述处置器械的特性信息；以及
进行基于所述关联度的通知处理。
CN201480029669.1A 2013-05-23 2014-01-30 内窥镜装置和内窥镜装置的工作方法 Pending CN105228501A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-108583 2013-05-23
JP2013108583A JP6265627B2 (ja) 2013-05-23 2013-05-23 内視鏡装置及び内視鏡装置の作動方法
PCT/JP2014/052039 WO2014188740A1 (ja) 2013-05-23 2014-01-30 内視鏡装置及び内視鏡装置の作動方法

Publications (1)

Publication Number Publication Date
CN105228501A true CN105228501A (zh) 2016-01-06

Family

ID=51933307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480029669.1A Pending CN105228501A (zh) 2013-05-23 2014-01-30 内窥镜装置和内窥镜装置的工作方法

Country Status (5)

Country Link
US (1) US20160038004A1 (zh)
EP (1) EP3001941A4 (zh)
JP (1) JP6265627B2 (zh)
CN (1) CN105228501A (zh)
WO (1) WO2014188740A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110769738A (zh) * 2017-06-21 2020-02-07 奥林巴斯株式会社 图像处理装置、内窥镜装置、图像处理装置的工作方法及图像处理程序
WO2022037397A1 (zh) * 2020-08-21 2022-02-24 上海微创医疗机器人（集团）股份有限公司 内窥镜系统及用于检测内窥镜的末端与组织接触的方法
CN116034307A (zh) * 2020-08-24 2023-04-28 富士胶片株式会社 图像处理装置、方法及程序

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6649260B2 (ja) * 2014-02-04 2020-02-19 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 血管の深さ及び位置の可視化並びに血管断面のロボットガイド可視化
JP6323184B2 (ja) * 2014-06-04 2018-05-16 ソニー株式会社 画像処理装置、画像処理方法、並びにプログラム
US10052015B2 (en) * 2014-09-30 2018-08-21 Fujifilm Corporation Endoscope system, processor device, and method for operating endoscope system
JP6616071B2 (ja) * 2014-12-22 2019-12-04 富士フイルム株式会社 内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法、内視鏡用の制御プログラム
JP6243364B2 (ja) * 2015-01-26 2017-12-06 富士フイルム株式会社 内視鏡用のプロセッサ装置、及び作動方法、並びに制御プログラム
WO2016194718A1 (ja) * 2015-06-05 2016-12-08 ソニー株式会社 画像処理装置、画像処理方法、および手術システム
EP3360461A4 (en) * 2015-11-10 2019-05-08 Olympus Corporation ENDOSCOPE DEVICE
JP6488249B2 (ja) * 2016-03-08 2019-03-20 富士フイルム株式会社 血管情報取得装置、内視鏡システム及び血管情報取得方法
WO2018225316A1 (ja) * 2017-06-05 2018-12-13 オリンパス株式会社 医療用制御装置
WO2018235179A1 (ja) * 2017-06-21 2018-12-27 オリンパス株式会社 画像処理装置、内視鏡装置、画像処理装置の作動方法及び画像処理プログラム
DE112018003204T5 (de) * 2017-06-21 2020-03-19 Sony Corporation Chirurgisches Bildgebungssystem und -verfahren
WO2019087269A1 (ja) * 2017-10-31 2019-05-09 オリンパス株式会社 内視鏡システム
CN111433711A (zh) * 2017-11-07 2020-07-17 皇家飞利浦有限公司 设备的增强现实触发
WO2019146077A1 (ja) * 2018-01-26 2019-08-01 オリンパス株式会社 内視鏡画像処理装置、内視鏡画像処理方法及び内視鏡画像処理プログラム
US11559298B2 (en) 2018-07-16 2023-01-24 Cilag Gmbh International Surgical visualization of multiple targets
US12257013B2 (en) 2019-03-15 2025-03-25 Cilag Gmbh International Robotic surgical systems with mechanisms for scaling camera magnification according to proximity of surgical tool to tissue
JP2021003453A (ja) * 2019-06-27 2021-01-14 学校法人昭和大学 内視鏡治療システム
EP4345733B1 (en) 2019-09-23 2025-07-16 Boston Scientific Scimed, Inc. System for endoscopic video enhancement
WO2021131344A1 (en) * 2019-12-23 2021-07-01 Sony Group Corporation Computer assisted surgery system, surgical control apparatus and surgical control method
US11776144B2 (en) 2019-12-30 2023-10-03 Cilag Gmbh International System and method for determining, adjusting, and managing resection margin about a subject tissue
US12002571B2 (en) 2019-12-30 2024-06-04 Cilag Gmbh International Dynamic surgical visualization systems
US12207881B2 (en) 2019-12-30 2025-01-28 Cilag Gmbh International Surgical systems correlating visualization data and powered surgical instrument data
US12453592B2 (en) 2019-12-30 2025-10-28 Cilag Gmbh International Adaptive surgical system control according to surgical smoke cloud characteristics
US11219501B2 (en) 2019-12-30 2022-01-11 Cilag Gmbh International Visualization systems using structured light
US11744667B2 (en) 2019-12-30 2023-09-05 Cilag Gmbh International Adaptive visualization by a surgical system
US11648060B2 (en) 2019-12-30 2023-05-16 Cilag Gmbh International Surgical system for overlaying surgical instrument data onto a virtual three dimensional construct of an organ
US11832996B2 (en) 2019-12-30 2023-12-05 Cilag Gmbh International Analyzing surgical trends by a surgical system
US11759283B2 (en) 2019-12-30 2023-09-19 Cilag Gmbh International Surgical systems for generating three dimensional constructs of anatomical organs and coupling identified anatomical structures thereto
US12053223B2 (en) 2019-12-30 2024-08-06 Cilag Gmbh International Adaptive surgical system control according to surgical smoke particulate characteristics
US11284963B2 (en) 2019-12-30 2022-03-29 Cilag Gmbh International Method of using imaging devices in surgery
US11896442B2 (en) 2019-12-30 2024-02-13 Cilag Gmbh International Surgical systems for proposing and corroborating organ portion removals
WO2021152785A1 (ja) * 2020-01-30 2021-08-05 株式会社インキュビット 動画再生システム
WO2021181502A1 (ja) * 2020-03-10 2021-09-16 オリンパス株式会社 手術支援システム、手術支援システムの作動方法および手術支援システムの制御装置
WO2022145424A1 (ja) * 2020-12-29 2022-07-07 アナウト株式会社 コンピュータプログラム、学習モデルの生成方法、及び手術支援装置
JP2022180108A (ja) * 2021-05-24 2022-12-06 富士フイルム株式会社 医療画像処理装置、内視鏡システム、及び医療画像処理装置の作動方法
CN114391792B (zh) * 2021-09-13 2023-02-24 南京诺源医疗器械有限公司 基于窄带成像的肿瘤预测方法、装置及成像内镜
US12527478B2 (en) * 2022-05-06 2026-01-20 Boston Scientific Scimed, Inc. Predicting vessel compliance responsive to multiple potential treatments
JP2024095408A (ja) * 2022-12-28 2024-07-10 株式会社アドバンテスト 蛍光検出装置
WO2025153571A1 (en) 2024-01-15 2025-07-24 Symphera Gmbh Improved microinvasive surgery device
WO2026079251A1 (ja) * 2024-10-11 2026-04-16 学校法人日本医科大学 手術支援装置、学習装置、手術支援方法、学習モデル生成方法及びプログラム

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060106281A1 (en) * 2004-09-30 2006-05-18 Scimed Life Systems, Inc. Multi-functional endoscopic system for use in electrosurgical applications
CN101132744A (zh) * 2005-03-31 2008-02-27 奥林巴斯医疗株式会社 手术支援装置和处理支援装置
JP2009195623A (ja) * 2008-02-25 2009-09-03 Fujifilm Corp 内視鏡検査システム及び検査支援装置並びに内視鏡検査方法
CN101721251A (zh) * 2009-11-10 2010-06-09 上海交通大学医学院附属第九人民医院 将手术导航系统和内窥镜系统结合的装置及其应用
JP2011136005A (ja) * 2009-12-28 2011-07-14 Fujifilm Corp 内視鏡装置
EP2364660A1 (en) * 2010-03-10 2011-09-14 Tyco Healthcare Group, LP System and method for determining proximity relative to a critical structure
US20120158011A1 (en) * 2010-12-16 2012-06-21 Sandhu Kulbir S Proximity sensor interface in a robotic catheter system
CN102811655A (zh) * 2010-03-17 2012-12-05 富士胶片株式会社 内窥镜观察支持系统、方法、设备和程序
EP2554103A1 (en) * 2010-03-31 2013-02-06 FUJIFILM Corporation Endoscope observation supporting system and method, and device and programme

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6485639A (en) * 1987-09-29 1989-03-30 Olympus Optical Co Ultrasonic probe
JP4063933B2 (ja) * 1997-12-01 2008-03-19 オリンパス株式会社 手術シミュレーション装置
AU2006238292B2 (en) * 2005-03-31 2010-04-15 Olympus Medical Systems Corp. Surgery assisting apparatus and treatment assisting apparatus
JP4152402B2 (ja) * 2005-06-29 2008-09-17 株式会社日立メディコ 手術支援装置
JP4785127B2 (ja) * 2005-12-08 2011-10-05 学校法人早稲田大学 内視鏡視野拡張システム、内視鏡視野拡張装置及び内視鏡視野拡張用プログラム
US8560047B2 (en) * 2006-06-16 2013-10-15 Board Of Regents Of The University Of Nebraska Method and apparatus for computer aided surgery
JP5410021B2 (ja) * 2008-01-22 2014-02-05 株式会社日立メディコ 医用画像診断装置
JP5160276B2 (ja) * 2008-03-24 2013-03-13 富士フイルム株式会社 画像表示方法及び装置
JP5288447B2 (ja) * 2008-03-28 2013-09-11 学校法人早稲田大学 手術支援システム、接近状態検出装置及びそのプログラム
WO2011066470A1 (en) * 2009-11-25 2011-06-03 Clements Robert M Device and system for multiple core biopsy
JP2013027481A (ja) * 2011-07-27 2013-02-07 Fujifilm Corp 光音響撮像システムおよび装置並びにそれらに使用されるプローブユニット
US9681884B2 (en) * 2012-05-31 2017-06-20 Ethicon Endo-Surgery, Llc Surgical instrument with stress sensor

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060106281A1 (en) * 2004-09-30 2006-05-18 Scimed Life Systems, Inc. Multi-functional endoscopic system for use in electrosurgical applications
CN101132744A (zh) * 2005-03-31 2008-02-27 奥林巴斯医疗株式会社 手术支援装置和处理支援装置
JP2009195623A (ja) * 2008-02-25 2009-09-03 Fujifilm Corp 内視鏡検査システム及び検査支援装置並びに内視鏡検査方法
CN101721251A (zh) * 2009-11-10 2010-06-09 上海交通大学医学院附属第九人民医院 将手术导航系统和内窥镜系统结合的装置及其应用
JP2011136005A (ja) * 2009-12-28 2011-07-14 Fujifilm Corp 内視鏡装置
EP2364660A1 (en) * 2010-03-10 2011-09-14 Tyco Healthcare Group, LP System and method for determining proximity relative to a critical structure
CN102811655A (zh) * 2010-03-17 2012-12-05 富士胶片株式会社 内窥镜观察支持系统、方法、设备和程序
EP2554103A1 (en) * 2010-03-31 2013-02-06 FUJIFILM Corporation Endoscope observation supporting system and method, and device and programme
US20120158011A1 (en) * 2010-12-16 2012-06-21 Sandhu Kulbir S Proximity sensor interface in a robotic catheter system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110769738A (zh) * 2017-06-21 2020-02-07 奥林巴斯株式会社 图像处理装置、内窥镜装置、图像处理装置的工作方法及图像处理程序
CN110769738B (zh) * 2017-06-21 2022-03-08 奥林巴斯株式会社 图像处理装置、内窥镜装置、图像处理装置的工作方法及计算机可读存储介质
WO2022037397A1 (zh) * 2020-08-21 2022-02-24 上海微创医疗机器人（集团）股份有限公司 内窥镜系统及用于检测内窥镜的末端与组织接触的方法
CN116034307A (zh) * 2020-08-24 2023-04-28 富士胶片株式会社 图像处理装置、方法及程序

Also Published As

Publication number Publication date
JP6265627B2 (ja) 2018-01-24
EP3001941A1 (en) 2016-04-06
US20160038004A1 (en) 2016-02-11
JP2014226341A (ja) 2014-12-08
EP3001941A4 (en) 2017-01-25
WO2014188740A1 (ja) 2014-11-27

Similar Documents

Publication Publication Date Title
JP6265627B2 (ja) 内視鏡装置及び内視鏡装置の作動方法
JP6265630B2 (ja) 内視鏡装置及び内視鏡装置の作動方法
CN113395928B (zh) 增强医疗视觉系统和方法
US20200243185A1 (en) Information processing apparatus, information processing method, program, and medical observation system
EP4408331B1 (en) Surgical systems with intraluminal and extraluminal cooperative instruments
US12472002B2 (en) Surgical devices, systems, and methods using fiducial identification and tracking
JP6355875B2 (ja) 内視鏡システム
US20230096406A1 (en) Surgical devices, systems, and methods using multi-source imaging
US12226082B2 (en) Medical system, energy control method, and processor
JPWO2018163644A1 (ja) 情報処理装置、支援システム及び情報処理方法
JP6001219B1 (ja) 内視鏡システム
JP2020532384A (ja) 組織及び／又はアーチファクト特性を判定するために使用されるシステム及び方法
JP2007244746A (ja) 観察システム
WO2019155931A1 (ja) 手術システム、画像処理装置及び画像処理方法
US20240260811A1 (en) Medical system and notification method
US12295667B2 (en) Surgical devices, systems, and methods using multi-source imaging
CN115381379A (zh) 医疗图像处理装置、内窥镜系统及医疗图像处理装置的工作方法
US10537225B2 (en) Marking method and resecting method
WO2020009127A1 (ja) 医療用観察システム、医療用観察装置、及び医療用観察装置の駆動方法
JP7147890B2 (ja) 情報処理システム、情報処理方法及びプログラム
WO2023052960A1 (en) Surgical devices, systems, and methods using fiducial identification and tracking
KR20220114926A (ko) 복강경시스템 및 이를 이용한 병변 거리측정방법
WO2018225316A1 (ja) 医療用制御装置
KR20190057624A (ko) 형광 복강경 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160106

WD01 Invention patent application deemed withdrawn after publication