JP6798511B2 - 撮像装置及び撮像システム - Google Patents
撮像装置及び撮像システム Download PDFInfo
- Publication number
- JP6798511B2 JP6798511B2 JP2017567961A JP2017567961A JP6798511B2 JP 6798511 B2 JP6798511 B2 JP 6798511B2 JP 2017567961 A JP2017567961 A JP 2017567961A JP 2017567961 A JP2017567961 A JP 2017567961A JP 6798511 B2 JP6798511 B2 JP 6798511B2
- Authority
- JP
- Japan
- Prior art keywords
- speckle image
- imaging
- speckle
- unit
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0066—Optical coherence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
- A61B5/026—Measuring blood flow
- A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4887—Locating particular structures in or on the body
- A61B5/489—Blood vessels
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0025—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for optical correction, e.g. distorsion, aberration
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/48—Laser speckle optics
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
- G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
- G02B7/09—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted for automatic focusing or varying magnification
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/30—Systems for automatic generation of focusing signals using parallactic triangle with a base line
- G02B7/32—Systems for automatic generation of focusing signals using parallactic triangle with a base line using active means, e.g. light emitter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/611—Correction of chromatic aberration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus, e.g. for MRI, optical tomography or impedance tomography apparatus; Arrangements of imaging apparatus in a room
- A61B5/0035—Features or image-related aspects of imaging apparatus, e.g. for MRI, optical tomography or impedance tomography apparatus; Arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2407—Optical details
Landscapes
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Surgery (AREA)
- General Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Vascular Medicine (AREA)
- Hematology (AREA)
- Cardiology (AREA)
- Physiology (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Automatic Focus Adjustment (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
- Focusing (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Eye Examination Apparatus (AREA)
Description
この特許文献1に記載の撮像システムでは、第一のタイミングで発光部からの光がオブジェクトに反射して干渉した光により干渉光画像を撮像し、第二のタイミングでオブジェクトから発せられた光の発光画像を撮像している。
また、本技術に係る撮像装置は、更に、前記非スペックル画像撮像部の焦点に対する前記スペックル画像撮像部の焦点距離を調整する焦点調整部と、前記焦点調整部により調整された焦点に基づいて撮像されたスペックル画像を表示する表示部と、を備えていてもよい。
本技術に係る撮像装置は、更に、前記非スペックル画像撮像部と前記スペックル画像撮像部との間に生じる収差を補正する収差補正部を備えていてもよい。この撮像装置において、前記収差補正部は、色収差を補正する構成であってもよい。
本技術に係る撮像装置は、更に、前記非スペックル画像撮像部により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定部と、当該関心領域特定部による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整部と、を備えていてもよい。
インコヒーレント光を撮像対象に照射するインコヒーレント光源と、前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像装置と、前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像装置と、前記非スペックル画像撮像装置の焦点位置に基づいて、前記スペックル画像撮像装置の焦点を検出する焦点検出装置と、を備える、撮像システムをも提供する。
この撮像システムは、更に、前記非スペックル画像撮像装置の焦点に対する前記スペックル画像撮像装置の焦点距離を調整する焦点調整装置と、前記焦点調整装置により調整された焦点に基づいて撮像されたスペックル画像を表示する表示装置と、を備えていてもよい。
本技術に係る撮像システムは、更に、前記非スペックル画像撮像装置と前記スペックル画像撮像装置との間に生じる収差を補正する収差補正装置と、を備えていてもよい。この撮像システムにおいて、前記収差補正装置は、色収差を補正する構成であってもよい。
本技術に係る撮像システムは、更に、前記非スペックル画像撮像装置により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定装置と、当該関心領域特定装置による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整装置と、を備えていてもよい。
なお、ここに記載された効果は、必ずしも限定されるものではなく、本技術中に記載されたいずれかの効果であってもよい。
1.第一実施形態に係る撮像装置
(1)コヒーレント光源
(2)インコヒーレント光源
(3)スペックル画像撮像部
(4)非スペックル画像撮像部
(5)焦点検出部
(6)合成部
(7)解析部
(8)記憶部
(9)表示部
(10)撮像対象
2.第二実施形態に係る撮像装置
(1)焦点調整部
3.第三実施形態に係る撮像装置
(1)収差補正部
4.第四実施形態に係る撮像装置
(1)関心領域特定部
(2)光照射調整部
5.本技術に係る撮像システム
(1)コヒーレント光源
(2)インコヒーレント光源
(3)スペックル画像撮像装置
(4)非スペックル画像撮像装置
(5)焦点検出装置
(6)合成装置
(7)解析装置
(8)記憶装置
(9)焦点調整装置
(10)表示装置
(11)収差補正装置
(12)関心領域特定装置
(13)光照射調整装置
6.第一実施形態に係る撮像方法
(1)インコヒーレント光照射工程
(2)収差補正工程
(3)非スペックル画像撮像工程
(4)表示工程
(5)焦点調整工程
(6)焦点検出工程
(7)関心領域特定工程
(8)光照射調整工程
(9)コヒーレント光照射工程
(10)スペックル画像撮像工程
(11)合成工程
(12)解析工程
(13)記憶工程
(14)表示工程
図1は、本技術に係る撮像装置の第一実施形態を模式的に示す模式概念図である。第一実施形態に係る撮像装置1は、コヒーレント光源11、インコヒーレント光源12、スペックル画像撮像部13、非スペックル画像撮像部14、焦点検出部15、を少なくとも備える。また、必要に応じて、合成部16、解析部17、記憶部18、表示部19、などを更に備えることも可能である。以下、各部について詳細に説明する。
コヒーレント光源11からは、撮像対象Oに対するコヒーレント光の照射が行われる。コヒーレント光源11が発するコヒーレント光とは、光束内の任意の二点における光波の位相関係が時間的に不変で一定であり、任意の方法で光束を分割した後、大きな光路差を与えて再び重ねあわせても完全な干渉性を示す光をいう。
インコヒーレント光源12からは、撮像対象Oに対するインコヒーレント光の照射が行われる。前記インコヒーレント光とは、物体光(物体波)のように干渉性を殆ど示さない光をいう。ここで、インコヒーレント光の波長は、前記コヒーレント光源11が発するコヒーレント光の波長と同程度であることが好ましいため、インコヒーレント光を照射する際には、バンドパスフィルターを用いてインコヒーレント光の波長の調整を行うことが可能な構成を採用することが好ましい。
本技術に係る撮像装置1は、スペックル画像撮像部13を備える。このスペックル画像撮像部13では、前記コヒーレント光が照射された前記撮像対象Oから得られる散乱光に基づいて、スペックルの撮像が行われる。より具体的には、前記焦点検出部15により検出された焦点に基づいて、スペックルの撮像が行われる。
この輝度分布の測定方法は、本技術の効果が損なわれない限り特に限定されず、公知の算出方法を1種又は2種以上選択して、自由に組み合わせて用いることができる。
尚、前記スペックル画像撮像部13では、スペックルが生じている部分をより明確にするため、例えば複数のスペックル画像を用いて平準化を行い、スペックル画像のムラを低減させる構成を備えていてもよい。
本技術に係る撮像装置1は、非スペックル画像撮像部14を備える。この非スペックル画像撮像部14では、インコヒーレント光が照射された前記撮像対象Oから得られる反射光に基づいて、明視野画像の撮像が行われる。ここで、インコヒーレント光は干渉性を殆ど示さない光であるため、インコヒーレント光に基づく撮像画像は、ランダムな干渉・回折パターンであるスペックルが発生しないものとなる。以下、説明の便宜上、スペックルが発生しない撮像画像を「非スペックル画像」という。この非スペックル画像撮像部14において行われる撮像方法は、スペックル画像撮像部13にて行われる撮像方法と同一であるため、ここではその説明を割愛する。
本技術に係る撮像装置1は、前記スペックル画像を撮像するための焦点を検出する焦点検出部15を備える。
スペックルはランダムな干渉・回折パターンであるため、当該スペックルを撮像する場合、焦点を確認することが困難となる。一方、結像系が手前あるいは奥側にオフフォーカスしており、且つ撮影対象Oが光軸から垂直方向に外れて行く場合、撮影対象Oの一点から発して一つのスペックル形状を形成する干渉光路は、手前側オフフォーカスでは結像系の主光線に対してイメージャ上で光軸よりの(に近い)点を、奥側オフフォーカスでは光軸より離れた点を通る。その結果、非スペックル画像、すなわち明視野画像を撮像する際の焦点に対して、スペックル画像を撮像するための焦点位置をユーザ側或いは奥側に変位させた場合、明視野画像に映し出される動体に対して、スペックルが当該動体と同一方向又は異なる方向へと移動する。以下の説明において、この現象を「スペックルの相関現象」と称す。
ここで、前記検出方法は一例に過ぎず、前記方法では第一工程後に第二工程を行っているが、第二工程後に第一工程を行うようにしても差し支えない。
本技術に係る撮像装置1は、合成部16を備える。この合成部16では、前記スペックル画像撮像部13により撮像されたスペックル画像と、前記非スペックル画像撮像部14により撮像された非スペックル画像と、を合成する。具体的には、前記非スペックル画像の画像情報とスペックル画像の画像情報とを重ねあわせて、スペックル合成画像を作成する。
尚、前記スペックル合成画像を作成する方法については特に限定されず、公知の方法を採用することができる。
本技術に係る撮像装置1は、必要に応じて、解析部17を備えていてもよい。この解析部17では、前記合成部16により作成されたスペックル合成画像を利用し、前記撮像対象Oの状態が解析される。
すなわち、前述の如く、スペックルの相関現象では、前記明視野画像上の動体に対してスペックルが相対的に移動する。このため、前記解析部17では、前記スペックル画像撮像部13の焦点位置が明視野画像の焦点位置と変位している状態における移動画像を観察し、スペックルの移動速度を測定することができるように構成されていてもよい。
かかる場合、例えば、撮像対象Oを血管とした場合、血液などの散乱流体が移動したり、時間的に変化すると、これに応じてスペックルも時間的に変動することとなる。このため、前記解析部17により、血流の速度を測定することができる。
尚、この解析部17は、本技術に係る撮像装置1に必須ではなく、外部の解析装置等を用いて撮像対象Oの状態を解析することも可能である。
本技術に係る撮像装置1には、スペックル画像撮像部13によって撮像されたスペックル画像、非スペックル画像撮像部14によって撮像された非スペックル画像、前記合成部16によって作成されたスペックル合成画像、前記焦点検出部15によって検出されたスペックル画像の焦点、前記解析部17によって解析された解析結果などを記憶する記憶部18を更に備えることができる。
この記憶部18は、本技術に係る撮像装置1においては必須ではなく、例えば、外部の記憶装置を接続して、前記スペックル画像等を記憶することも可能である。
本技術に係る撮像装置1には、スペックル画像撮像部13によって撮像されたスペックル画像、非スペックル画像撮像部14によって撮像された非スペックル画像、前記合成部16により作成された合成画像、前記解析部17によって解析された解析結果などを表示する表示部19を更に備えることができる。また、この表示部19においては、前記スペックル画像撮像部13及び非スペックル画像撮像部14により測定された輝度分布を、前記スペックル画像に重畳させて表示することもできる。この表示部19は、本技術に係る撮像装置1においては必須ではなく、例えば、外部のモニター等を用いて撮像対象Oに光照射を行うことも可能である。
本技術に係る撮像装置1は、様々なものを撮像対象とすることができるが、例えば、流体を含むものを撮像対象Oとするイメージングに、好適に用いることができる。スペックルの性質上、流体からはスペックルが発生しにくいという性質がある。そのため、本技術に係る撮像装置1を用いて流体を含むものをイメージングとすると、流体とそれ以外の部分の境界や流体の流速等を、求めることができる。
また、例えば、血液が流れる血管を撮像した際、血液の時間的変動に従ったスペックルが変動を観測することができるため、血球の流路を正確に認識可能な画像を取得することができる。その結果、生体組織(例えば、心臓など)に対する血管の相対的位置を正確に観測することができる。
図2は、本技術を適用可能な第二実施形態に係る撮像装置を示す模式概念図である。
この第二実施形態に係る撮像装置201は、スペックル画像撮像部の焦点距離を調整する焦点調整部21を備える点と、前記表示部19が前記焦点調整部21により焦点が調整され、その結果撮像されたスペックル画像を表示する点のみが第一実施形態に係る撮像装置1と異なる。
その一方で、前記コヒーレント光源11、インコヒーレント光源12、スペックル画像撮像部13、非スペックル画像撮像部14、焦点検出部15、を少なくとも備える点は同一であり、更に必要に応じて、合成部16、解析部17、記憶部18を備えていてもよい点は同一である。
このため、以下の第二実施形態に係る撮像装置201の説明において、第一実施形態に係る撮像装置1と共通する構成についてはその説明を省略する。以下、前記焦点調整部21について説明する。
第二実施形態に係る撮像装置201は、前記焦点調整部21を備える。この焦点調整部21は、前記焦点検出部15がスペックル画像を撮像する際の焦点を検出する段階において、前記スペックル画像撮像部13の焦点距離を変更する処理を行う。
具体的には、前記焦点検出部15が行っていた処理、すなわち、前記スペックル画像撮像部13の焦点位置を前記非スペックル画像撮像部14の焦点位置に対して相対的に移動させる処理を行う。例えば、前記スペックル画像撮像部13の焦点位置を前記非スペックル画像の焦点位置よりもユーザの手前側に配置させる作業や、前記スペックル画像撮像部13の焦点位置を前記非スペックル画像の焦点位置よりもユーザの奥側に配置させる作業を行う。
そして最終的には、検出された焦点に基づいて撮像されたスペックル画像が前記表示部19に表示されるようになっている。また、当該表示部19では、前記焦点調整部21の処理段階で観察された、撮像対象O上の動体に対してスペックルが相対的に移動している状態の画像を表示するように構成されている。
その結果、例えば、血管を撮像した場合、血球の流れる方向を正確に把握することができ、撮像された血管が動脈であるか静脈であるかといった血管の種類を把握することもできる。
次に、図3を用いて、本技術を適用した第三実施形態に係る撮像装置301について説明する。図3は、第三実施形態に係る撮像装置301の模式概念図である。
この第三実施形態に係る撮像装置301は、収差補正部31を備える点が第一実施形態に係る撮像装置1と異なる。その一方で、前記コヒーレント光源11、インコヒーレント光源12、スペックル画像撮像部13、非スペックル画像撮像部14、焦点検出部15、を少なくとも備える点は同一であり、更に必要に応じて、合成部16、解析部17、記憶部18、表示部19、焦点調整部21、を備えていてもよい点は同一である。
このため、以下の第三実施形態に係る撮像装置301の説明において、第一実施形態に係る撮像装置1と共通する構成についてはその説明を省略する。以下、前記収差補正部31について説明する。
第三実施形態に係る撮像装置301は、前記スペックル画像撮像部13によりスペックル画像が撮像され、前記非スペックル画像撮像部14により非スペックル画像が撮像される。すなわち、当該撮像装置301は、複眼撮像装置を構成している。このため、当該撮像装置301では、スペックル画像と非スペックル画像との間には収差が生じる。
かかる場合、前記非スペックル画像とスペックル画像と重畳された合成画像を作成する場合、前記収差を可及的に排除する必要がある。前記収差補正部31は、当該収差を補正する処理を行う。
この収差補正部31が補正することができる収差の種類は特に限定されず、球面収差、コマ収差、非点収差、色収差(軸上色収差、倍率色収差)、波面収差、像面湾曲、歪像など公知の収差を補正することができるものの、これらの中でも、本技術に係る撮像装置では波長の異なる二種の光源を用いていることから、特に色収差を補正するように構成されていることが好ましい。
ここで、収差を補正する方法としては特に限定されず、公知の方法を採用することができ、例えば、デフォーマブルミラーを用いた方法や取得画像自体を補正する方法などを用いることができる。
そして、当該収差測定部32によって測定された収差は、前記収差補正部31に入力され、当該収差補正部31はこの入力情報に基づいて前記収差を補正するように構成されている。
その結果、例えば血液の流れる血管を撮像した場合、生体組織に対する血管の相対的位置を正確に観測することができる。
次に、図4を用いて、本技術を適用した第四実施形態に係る撮像装置401について説明する。図4は、第四実施形態に係る撮像装置401の模式概念図である。
この第四実施形態に係る撮像装置401は、関心領域特定部41と、光照射調整部42とを備える点が第一実施形態に係る撮像装置1と異なる。その一方で、前記コヒーレント光源11、インコヒーレント光源12、スペックル画像撮像部13、非スペックル画像撮像部14、焦点検出部15、を少なくとも備える点は同一であり、更に必要に応じて、合成部16、解析部17、記憶部18、表示部19、焦点調整部21、収差補正部31などを備えていてもよい点は同一である。
このため、以下の第四実施形態に係る撮像装置401の説明において、第一実施形態に係る撮像装置1と共通する構成についてはその説明を省略する。以下、関心領域特定部41及び光照射調整部42について説明する。
第四実施形態に係る撮像装置401は、非スペックル画像からユーザが観察するための領域を特定するための関心領域特定部41を備える。
より具体的には、前記表示部19により表示された非スペックル画像を確認し、ユーザが観察する上で関心を示した任意の領域を選定する。その後、前記関心領域特定部41では、ユーザにより選定された関心領域の位置情報を検出する。更に、検出した関心領域に関する情報に基づいて、前記非スペックル画像上に示された撮像対象O内の関心領域を特定する。
尚、当該関心領域特定部41に行われる特定方法は特に限定されず、公知の方法を用いることができる。例えば、前記関心領域特定部41は、ユーザにより選定された関心領域が含まれる、前記合成画像の水平方向及び垂直方向に関する各画素の位置情報を検出し、これに基づいて関心領域を特定する方法などが考えられる。
第四実施形態に係る撮像装置401では、前記関心領域特定部41により特定された関心領域に対して光を照射するための光照射調整部42を備える。
具体的には、前記光照射調整部42の構成は特に限定されず、例えば、前記インコヒーレント光源12を左右上下方向に移動させ、且つ、静止させる二軸アクチュエータの構成をなしている。
そして、この光照射調整部42は、前記関心領域特定部41により検出された関心領域の位置情報に基づいて、前記関心領域にインコヒーレント光が照射されるように、前記インコヒーレント光源12を移動させて照射方向を調整する。
本技術は、撮像システムをも提供する。
図5は、本技術の第一実施形態に係る撮像システム501を模式的に示す模式概念図である。当該撮像システム501は、少なくとも、コヒーレント光源110、インコヒーレント光源120、スペックル画像撮像装置130、非スペックル画像撮像装置140、焦点検出装置150、を備える。また、必要に応じて、合成装置160、解析装置170、記憶装置180、表示装置190、焦点調整装置210、収差補正装置220、関心領域特定装置230、光照射調整装置240、を備えていてもよい。以下、各装置について説明する。
コヒーレント光源110からは、撮像対象Oに対するコヒーレント光の照射が行われる。コヒーレント光源110が発するコヒーレント光とは、光束内の任意の二点における光波の位相関係が時間的に不変で一定であり、任意の方法で光束を分割した後、大きな光路差を与えて再び重ねあわせても完全な干渉性を示す光をいう。
インコヒーレント光源120からは、撮像対象Oに対するインコヒーレント光の照射が行われる。前記インコヒーレント光とは、物体光(物体波)のように干渉性を殆ど示さない光をいう。ここで、インコヒーレント光の波長は、前記コヒーレント光源110が発するコヒーレント光の波長と同程度であることが好ましいため、インコヒーレント光を照射する際には、バンドパスフィルターを用いてインコヒーレント光の波長の調整を行うことが可能な構成を採用することが好ましい。
本技術に係る撮像システム501は、スペックル画像撮像装置130を備える。このスペックル画像撮像装置130では、前記コヒーレント光が照射された前記撮像対象Oから得られる散乱光に基づいて、スペックルの撮像が行われる。
この輝度分布の測定方法は、本技術の効果が損なわれない限り特に限定されず、公知の算出方法を1種又は2種以上選択して、自由に組み合わせて用いることができる。
尚、前記スペックル画像撮像装置130では、スペックルが生じている部分をより明確にするため、例えば複数のスペックル画像を用いて平準化を行い、スペックル画像のムラを低減させる構成を備えていてもよい。
本技術に係る撮像システム501は、非スペックル画像撮像装置140を備える。この非スペックル画像撮像装置140では、インコヒーレント光が照射された前記撮像対象Oから得られる反射光に基づいて、明視野画像の撮像が行われる。ここで、インコヒーレント光は干渉性を殆ど示さない光であるため、インコヒーレント光に基づく撮像画像は、ランダムな干渉・回折パターンであるスペックルが発生しないものとなる。以下、説明の便宜上、スペックルが発生しない撮像画像を「非スペックル画像」という。この非スペックル画像撮像装置140において行われる撮像方法は、スペックル画像撮像装置130にて行われる撮像方法と同一であるため、ここではその説明を割愛する。
本技術に係る撮像システム501は、前記スペックル画像を撮像するための焦点を検出する焦点検出装置150を備える。
スペックルはランダムな干渉・回折パターンであるため、当該スペックルを撮像する場合、焦点を確認することが困難となる。一方、結像系が手前あるいは奥側にオフフォーカスしており、且つ撮影対象Oが光軸から垂直方向に外れて行く場合、撮影対象Oの一点から発して一つのスペックル形状を形成する干渉光路は、手前側オフフォーカスでは結像系の主光線に対してイメージャ上で光軸よりの(に近い)点を、奥側オフフォーカスでは光軸より離れた点を通る。その結果、非スペックル画像、すなわち明視野画像を撮像する際の焦点に対して、スペックル画像を撮像するための焦点位置をユーザ側或いは奥側に変位させた場合、明視野画像に映し出される動体に対して、スペックルが当該動体と同一方向又は異なる方向へと移動する。以下の説明において、この現象を「スペックルの相関現象」と称す。
このように、前記焦点検出装置150では、前記スペックルの相関現象を利用することにより、画像上でスペックルが移動しない、スペックル画像の焦点を検出することができる。
ここで、前記検出方法は一例に過ぎず、前記方法では第一工程後に第二工程を行っているが、第二工程後に第一工程を行うようにしても差し支えない。
本技術に係る撮像システム501は、必要に応じて、合成装置160を備える。この合成装置160では、前記スペックル画像撮像装置130により撮像されたスペックル画像と、前記非スペックル画像撮像装置140により撮像された非スペックル画像と、を合成する。具体的には、例えば、スペックル画像の画像情報と非スペックル画像の画像情報とを重ねあわせて、合成画像を作成する。
尚、前記合成画像を作成する方法については特に限定されず、公知の方法を採用することができる。
本技術に係る撮像システム501は、必要に応じて、解析装置170を備えていてもよい。この解析装置170では、前記合成装置160により作成されたスペックル合成画像を利用し、前記撮像対象Oの状態が解析される。
すなわち、前述の如く、スペックルの相関現象では、前記明視野画像上の動体に対してスペックルが相対的に移動する。このため、前記解析装置170では、前記スペックル画像撮像装置130の焦点位置が明視野画像の焦点位置と変位している状態における移動画像を観察し、スペックルの移動速度を測定することができるようになっていてもよい。
かかる場合、例えば、撮像対象Oを血管とした場合、血液などの散乱流体が移動したり、時間的に変化すると、これに応じてスペックルも時間的に変動することとなる。このため、前記解析装置170により、血流の速度を測定することができる。
尚、この解析装置170は、本技術に係る撮像システム501に必須ではなく、外部の解析装置等を用いて撮像対象Oの状態を解析することも可能である。
本技術に係る撮像システム501には、スペックル画像撮像装置130によって撮像されたスペックル画像、非スペックル画像撮像装置140によって撮像された非スペックル画像、前記合成装置160により作成されたスペックル合成画像、前記焦点検出装置150によって検出されたスペックル画像の焦点、前記解析装置170によって解析された解析結果などを記憶する記憶装置180を更に備えることができる。
この記憶装置180は、本技術に係る撮像システム501においては必須ではなく、例えば、外部の記憶装置を接続して、前記スペックル画像等を記憶することも可能である。
本技術に係る撮像システム501は、前記焦点調整装置210を備える。この焦点調整装置210は、前記焦点検出装置150がスペックル画像を撮像する際の焦点を検出する段階において、前記スペックル画像撮像装置130の焦点距離を変更する処理を行う。
具体的には、第一実施形態に係る撮像装置1の焦点検出装置150が行っていた処理、すなわち、前記スペックル画像撮像装置130の焦点位置を前記非スペックル画像撮像装置140の焦点位置に対して相対的に移動させる処理を行う。
そして、この焦点調整装置210により調整された焦点が前記スペックル画像撮像装置130に入力され、当該スペックル画像撮像装置130は当該入力情報に基づいてスペックル画像の撮像を行うこととなる。
本技術に係る撮像システム501には、スペックル画像撮像装置130によって撮像されたスペックル画像、非スペックル画像撮像装置140によって撮像された非スペックル画像、前記合成装置160により作成されたスペックル合成画像、前記解析装置170によって解析された解析結果などを表示する表示装置190を更に備えることができる。また、この表示装置190においては、前記スペックル画像撮像装置130により測定された輝度分布を、前記スペックル画像に重畳させて表示することもできる。尚、この表示装置190は、本技術に係る撮像システム501においては必須ではなく、例えば、外部のモニター等を用いて撮像対象Oに光照射を行うことも可能である。
本技術に係る撮像システム501は、前記スペックル画像撮像装置130によりスペックル画像が撮像され、前記非スペックル画像撮像装置140により非スペックル画像が撮像される。すなわち、当該撮像システム501は、複眼による撮像システムを構成している。このため、当該撮像システム501では、スペックル画像と非スペックル画像との間には収差が生じる。
かかる場合、前記非スペックル画像とスペックル画像と重畳された合成画像を作成する場合、前記収差を可及的に排除する必要がある。このため、本技術に係る撮像システムでは、前記収差の補正を行う収差補正装置220を備えている方がよい。
この収差補正装置220が補正することができる収差の種類は特に限定されず、球面収差、コマ収差、非点収差、色収差(軸上色収差、倍率色収差)、波面収差、像面湾曲、歪像など公知の収差を補正することができるものの、これらの中でも、本技術に係る撮像装置では波長の異なる二種の光源を用いていることから、特に色収差を補正するように構成されていることが好ましい。
ここで、収差を補正する方法としては特に限定されず、公知の方法を採用することができ、例えば、デフォーマブルミラーを用いた方法や取得画像自体を補正する方法などを用いることができる。
そして、当該収差測定部221によって測定された収差は、前記収差補正装置220に入力され、当該収差補正装置220はこの入力情報に基づいて前記収差を補正するように構成されている。
本技術に係る撮像システム501は、前記非スペックル画像から、観察するための領域を特定するための関心領域特定装置230を備える。
より具体的には、前記表示装置190により表示された非スペックル画像を確認し、ユーザが観察する上で関心を示した任意の領域を選定する。その後、前記関心領域特定装置230では、ユーザにより選定された関心領域の位置情報を検出する。更に、検出した関心領域に関する情報に基づいて、前記非スペックル画像上に示された撮像対象O内の関心領域を特定する。
尚、当該関心領域特定装置230に行われる特定方法は特に限定されず、公知の方法を用いることができる。例えば、前記関心領域特定装置230は、ユーザにより選定された関心領域が含まれる、前記合成画像の水平方向及び垂直方向に関する各画素の位置情報を検出し、これに基づいて関心領域を特定する方法などが考えられる。
本技術に係る撮像システム501では、前記関心領域特定装置230を備える場合、当該関心領域特定装置230により特定された関心領域に対して光を照射するための光照射調整装置240を備えることが好ましい。
具体的には、前記光照射調整装置240の構成は特に限定されず、例えば、前記インコヒーレント光源120を左右上下方向に移動させ、且つ、静止させる二軸アクチュエータの構成をなしている。
そして、この光照射調整装置240は、前記関心領域特定装置230により検出された関心領域の位置情報に基づいて、前記関心領域にインコヒーレント光が照射されるように、前記インコヒーレント光源120を移動させて照射方向を調整するように構成されている。
また、例えば、血液が流れる血管を撮像した際、血液の時間的変動に従ったスペックルが変動を観測することができるため、血球の流路を正確に認識可能な画像を取得することができる。その結果、生体組織に対する血管の相対的位置を正確に観測することができる。
更に、本技術に係る撮像システム501において、前記焦点調整装置210を備えている場合には、当該焦点調整装置210により検出された焦点に基づいて撮像されたスペックル画像を表示するように構成されているため、スペックルの相関現象を利用し、明視野画像上の動体に対するスペックルの移動方向を目視にて正確に把握することができる。
その結果、例えば、血管を撮像した場合、血球の流れる方向を正確に把握することができるため、撮像された血管が動脈であるか静脈であるかといった血管の種類を把握することができる。
その結果、例えば血液の流れる血管を撮像した場合、生体組織に対する血管の相対的位置を正確に観測することができる。
更に、本技術に係る撮像システム501において、前記関心領域特定装置230及び光照射調整装置240を備えている場合、ユーザが関心のある領域に対してのみインコヒーレント光を照射することができるため、撮像されるスペックル画像において、スペックルの強度分布を前記関心領域で最大とすることができる。その結果、解像度の高いスペックル画像、ひいては合成画像を作成することができる。インコヒーレント光の照射範囲を関心領域の範囲に限定することができる、すなわち、必要最低限の照明強度とすることができるため、インコヒーレント光のコヒーレンシを一定に保つことができる。また、出力密度の高く、人体に有害であるインコヒーレント光の照射によるユーザへの悪影響を低減することができる。
本技術は、撮像方法をも提供する。
図6は、本技術に係る撮像方法のフローチャートである。第一実施形態に係る撮像方法は、コヒーレント光照射工程、インコヒーレント光照射工程、スペックル画像撮像工程、非スペックル画像撮像工程、焦点検出工程、を少なくとも含み、必要に応じて、合成工程、解析工程、記憶工程、表示工程、焦点調整工程、収差補正工程、関心領域特定工程、光照射調整工程、を含んでいてもよい。尚、図6では、前記合成工程、解析工程、記憶工程、表示工程、焦点調整工程、収差補正工程、関心領域特定工程、光照射調整工程に関しても示されているが、前述の如くこれらの工程は必須ではないため、本技術に係る撮像方法にて行わなくとも差支えない。但し、各工程の内、焦点調整工程、収差補正工程、関心領域特定工程、光照射調整工程を含むことにより、所定の効果を発揮するため、これらの工程に関しては含まれていることが好ましい。各工程について、以下に、本技術に係る撮像方法を実行する順序に説明する。
本技術に係る撮像方法では先ず、前記撮像対象Oに対して、インコヒーレント光を照射する。ここで、前記インコヒーレント光源の種類としては、本技術の効果を損なわない限り特に限定されない。一例としては、発光ダイオード等を挙げることができる。また、他の光源としては、キセノンランプ、メタルハライドランプ、高圧水銀ランプ等も挙げられる。
本技術に係る撮像方法は、必要に応じて、収差補正工程S2を含んでいてもよい。
本技術に係る撮像方法では、波長の異なる二つの光を照射するため、スペックル画像と非スペックル画像との間に収差が発生し得る。このため、当該収差補正工程S2では、当該収差の補正が行われる。
より具体的には、当該収差補正工程S2では先ず、収差情報の測定が行われる。当該測定方法としては特に限定されず、公知の方法を用いることができ、例えば、光干渉測定により干渉縞を解析するといった方法を採用することが考えられる。
このようにして収差情報が測定された後、当該収差情報に基づいて、収差の補正を行う。収差を補正する方法としては特に限定されず、公知の方法を採用することができ、例えば、デフォーマブルミラーを用いた方法や取得画像自体を補正する方法などを用いることができる。
次に、本技術に係る撮像方法では、前記インコヒーレント光照射工程S1によりインコヒーレント光が照射された前記撮像対象Oから得られる反射光に基づいて、スペックルが映し出されない非スペックル画像、すなわち明視野画像の撮像が行われる。
より具体的には、前記収差補正工程S2により収差が補正された状態で、この非スペックル画像撮像工程S3を行い、収差が生じない非スペックル画像の撮像を行う。
当該非スペックル画像撮像工程S3における撮像方法は特に限定されず、公知の撮像方法を1種又は2種以上選択して、自由に組み合わせて用いることができる。例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)センサー等の撮像素子を用いた撮像方法を挙げることができる。
本技術に係る撮像方法は、必要に応じて、前記表示工程S4を含んでいてもよい。
この表示工程S4では、前記非スペックル画像撮像工程S3により撮像された非スペックル画像をユーザが認識できるように表示する。
本技術に係る撮像方法では、必要に応じて、焦点調整工程S5を含んでいてもよい。この焦点調整工程S5では、撮像対象Oのスペックル画像を撮像する際の焦点距離を変更する処理を行う。
具体的には、前記非スペックル画像撮像工程S3による撮像の際に検出された焦点位置に対して、スペックル画像撮像装置における焦点位置を相対的に移動させる。例えば、前記スペックル画像撮像の焦点位置を前記非スペックル画像撮像の焦点位置よりもユーザの手前側に配置させる処理や、前記スペックル画像撮像の焦点位置を前記非スペックル画像撮像の焦点位置よりもユーザの奥側に配置させる処理を行う。
本技術に係る撮像方法では、前記焦点調整工程S5の後、焦点検出工程S6を行う。
具体的には、前記焦点調整工程S5を行うことにより、スペックルの性質上、前記スペックルの相関現象が起こる。すなわち、スペックル画像撮像の焦点位置を非スペックル画像撮像の焦点位置に対して相対移動させた場合、明視野画像に映し出される動体に対して、スペックルが当該動体と同一方向又は異なる方向へと移動する。
これを利用し、焦点検出工程S6では、明視野画像に映し出される動体に対して、スペックルが移動しない撮像位置をスペックル画像の焦点位置として検出する。
本技術に係る撮像方法では、必要に応じて、関心領域特定工程S7を含んでいてもよい。
この関心領域特定工程S7では先ず、ユーザが前記表示工程S4により表示された非スペックル画像を確認し、観察する上で関心のある任意の領域を選定する。
具体的には、前記非スペックル画像上における関心領域の位置情報を検出し、当該位置情報に基づいて、前記合成画像上に示された撮像対象O内の関心領域を特定する。
尚、この関心領域特定工程S7における特定方法は特に限定されず、公知の方法を用いることができる。例えば、非スペックル画像において、前記関心領域が含まれる前記非スペックル画像の水平方向及び垂直方向に関する各画素の位置情報を検出し、これに基づいて関心領域を特定する方法などが考えられる。
本技術に係る撮像方法は、必要に応じて、光照射調整工程S8を含んでいてもよい。当該光照射調整工程S8では、前記関心領域特定工程S7により特定された関心領域に対してコヒーレント光を照射するために、コヒーレント光源の照射位置や照射量などを調整する。
好ましくは、前記関心領域特定工程S7により検出された関心領域の位置情報に基づいて、前記関心領域にコヒーレント光を照射し、撮像されるスペックル画像において、スペックルの強度分布が前記関心領域にて最大となるように、コヒーレント光源の照射位置や照射量などを調整する。
本技術に係る撮像方法では、光照射調整工程S8の後、当該光照射調整工程S8によりコヒーレント光源の照射位置や照射量などが調整された状態で、前記特定領域に対してコヒーレント光を照射するコヒーレント光照射工程S9を行う。このコヒーレント光の光源としては、本技術の効果を損なわない限り特に限定されず、一例としては、レーザー光等を挙げることができる。レーザー光を発するコヒーレント光源としては、例えば、アルゴンイオン(Ar)レーザー、ヘリウム−ネオン(He-Ne)レーザー、ダイ(dye)レーザー、クリプトン(Kr)レーザー、半導体レーザー、または、半導体レーザーと波長変換光学素子を組み合わせた固体レーザー等を、1種又は2種以上、自由に組み合わせて用いることができる。
本技術に係る撮像方法では、前記コヒーレント光照射工程S9の後、コヒーレント光が照射された前記撮像対象Oから得られる散乱光に基づいて、スペックルの撮像が行われる。
このスペックル画像撮像工程S10における撮像方法は特に限定されず、公知の撮像方法を1種又は2種以上選択して、自由に組み合わせて用いることができる。例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)センサー等の撮像素子を用いた撮像方法を挙げることができる。
尚、図6では、前記非スペックル画像撮像工程S3の前に、収差補正工程S2が行われるようになっているが、解像度の高いスペックル画像を得るためには、スペックル画像撮像工程S10の前でも、収差補正工程S2を行うことが好ましい。
本技術に係る撮像方法は、必要に応じて、前記非スペックル画像撮像工程S3により撮像された非スペックル画像と、前記スペックル画像撮像工程S10により撮像されたスペックル画像と、を合成する合成工程S11を含んでいてもよい。
具体的には、前記非スペックル画像に対してスペックル画像を重ねあわせて、合成画像を作成する。尚、前記合成画像を作成する方法については特に限定されず、公知の方法を採用することができる。
本技術に係る撮像方法は、必要に応じて、前記合成工程S11により作成された合成画像に基づいて、撮像対象Oの状態を解析する解析工程S12を備えていてもよい。
この解析工程S12では、前記焦点調整工程S5の際に検出されたスペックルの相対現象に基づいて、スペックルとして映し出される散乱流体の移動速度などを解析することができる。
本技術に係る撮像方法は、解析工程S12が行われた後、必要に応じて、前記非スペックル画像撮像工程S3により撮像された非スペックル画像、前記スペックル画像撮像工程S10により撮像されたスペックル画像、前記焦点検出工程S6により検出されたスペックル画像の撮像のための焦点、前記合成工程S11により作成された合成画像、前記解析工程S12による解析結果などを記憶する記憶工程S13を備えていてもよい。
本技術に係る撮像方法は、記憶工程S13が行われた後、必要に応じて、前記表示工程S14を含んでいてもよい。
この表示工程S14では、前記スペックル画像撮像工程S10により撮像されたスペックル画像、前記焦点検出工程S6により検出されたスペックル画像の撮像のための焦点、前記合成工程S11により作成されたスペックル合成画像、前記解析工程S12による解析結果などをユーザが認識できるように表示する。
また、例えば、血液が流れる血管を撮像した際、血液の時間的変動に従ったスペックルが変動を観測することができるため、血球の流路を正確に認識可能な画像を取得することができる。その結果、生体組織に対する血管の相対的位置を正確に観測することができる。
更に、本技術に係る撮像方法において、前記焦点調整工程S5を含む場合には、スペックルの相関現象を利用し、明視野画像上の動体に対するスペックルの移動方向を目視にて正確に把握することができる。
その結果、例えば、血管を撮像した場合、血球の流れる方向を正確に把握することができるため、撮像された血管が動脈であるか静脈であるかといった血管の種類を把握することができる。
その結果、例えば血液の流れる血管を撮像した場合、生体組織に対する血管の相対的位置を正確に観測することができる。
更に、本技術に係る撮像方法において、前記関心領域特定工程S7及び光照射調整工程S8を含む場合、ユーザが関心のある領域に対してのみインコヒーレント光を照射することができるため、撮像されるスペックル画像において、スペックルの強度分布を前記関心領域で最大とすることができる。その結果、解像度の高いスペックル画像、ひいては合成画像を作成することができる。インコヒーレント光の照射範囲を関心領域の範囲に限定することができる、すなわち、必要最低限の照明強度とすることができるため、インコヒーレント光のコヒーレンシを一定に保つことができる。また、出力密度の高く、人体に有害であるインコヒーレント光の照射によるユーザへの悪影響を低減することができる。
(1)
コヒーレント光を撮像対象に照射するコヒーレント光源と、
インコヒーレント光を撮像対象に照射するインコヒーレント光源と、
前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像部と、
前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像部と、
前記非スペックル画像撮像部の焦点位置に基づいて、前記スペックル画像撮像部の焦点を検出する焦点検出部と、
を備える、撮像装置。
(2)
更に、前記非スペックル画像撮像部の焦点に対する前記スペックル画像撮像部の焦点距離を調整する焦点調整部と、
前記焦点調整部により調整された焦点に基づいて撮像されたスペックル画像を表示する表示部と、
を備える、(1)に記載の撮像装置。
(3)
更に、前記非スペックル画像撮像部と前記スペックル画像撮像部との間に生じる収差を補正する収差補正部を備える、(1)又は(2)に記載の撮像装置。
(4)
前記収差補正部は、色収差を補正する、(3)記載の撮像装置。
(5)
更に、前記非スペックル画像撮像部により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定部と、
当該関心領域特定部による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整部と、
を備える、(1)から(4)のいずれか一つに記載の撮像装置。
(6)
コヒーレント光を撮像対象に照射するコヒーレント光源と、
インコヒーレント光を撮像対象に照射するインコヒーレント光源と、
前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像装置と、
前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像装置と、
前記非スペックル画像撮像装置の焦点位置に基づいて、前記スペックル画像撮像装置の焦点を検出する焦点検出装置と、
を備える、撮像システム。
(7)
更に、前記非スペックル画像撮像装置の焦点に対する前記スペックル画像撮像装置の焦点距離を調整する焦点調整装置と、
前記焦点調整装置により調整された焦点に基づいて撮像されたスペックル画像を表示する表示装置と、
を備える、(6)に記載の撮像システム。
(8)
更に、前記非スペックル画像撮像装置と前記スペックル画像撮像装置との間に生じる収差を補正する収差補正装置と、を備える、(6)又は(7)に記載の撮像システム。
(9)
前記収差補正装置は、色収差を補正する、(8)記載の撮像システム。
(10)
更に、前記非スペックル画像撮像装置により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定装置と、
当該関心領域特定装置による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整装置と、
を備える、(6)から(9)のいずれか一つに記載の撮像システム。
(11)
コヒーレント光を撮像対象に照射するコヒーレント光照射工程と、
インコヒーレント光を撮像対象に照射するインコヒーレント光照射工程と、
前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像工程と、
前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像工程と、
前記非スペックル画像撮像工程における焦点位置に基づいて、前記スペックル画像を撮像するための焦点を検出する焦点検出工程と、
を含む、撮像方法。
11 コヒーレント光源
12 インコヒーレント光源
13 スペックル画像撮像部
14 非スペックル画像撮像部
15 焦点検出部
Claims (10)
- コヒーレント光を撮像対象に照射するコヒーレント光源と、
インコヒーレント光を撮像対象に照射するインコヒーレント光源と、
前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像部と、
前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像部と、
前記非スペックル画像撮像部の焦点位置に基づいて、前記スペックル画像撮像部の焦点を検出する焦点検出部と、
を備える、撮像装置。 - 更に、前記非スペックル画像撮像部の焦点に対する前記スペックル画像撮像部の焦点距離を調整する焦点調整部と、
前記焦点調整部により調整された焦点に基づいて撮像されたスペックル画像を表示する表示部と、
を備える、請求項1に記載の撮像装置。 - 更に、前記非スペックル画像撮像部と前記スペックル画像撮像部との間に生じる収差を補正する収差補正部を備える、請求項1又は2に記載の撮像装置。
- 前記収差補正部は、色収差を補正する、請求項3記載の撮像装置。
- 更に、前記非スペックル画像撮像部により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定部と、
当該関心領域特定部による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整部と、
を備える請求項1から4のいずれか一項に記載の撮像装置。 - コヒーレント光を撮像対象に照射するコヒーレント光源と、
インコヒーレント光を撮像対象に照射するインコヒーレント光源と、
前記コヒーレント光が照明された前記撮像対象の散乱光から得られるスペックル画像を撮像するスペックル画像撮像装置と、
前記インコヒーレント光が照明された前記撮像対象の反射光から得られる非スペックル画像を撮像する非スペックル画像撮像装置と、
前記非スペックル画像撮像装置の焦点位置に基づいて、前記スペックル画像撮像装置の焦点を検出する焦点検出装置と、
を備える、撮像システム。 - 更に、前記非スペックル画像撮像装置の焦点に対する前記スペックル画像撮像装置の焦点距離を調整する焦点調整装置と、
前記焦点調整装置により調整された焦点に基づいて撮像されたスペックル画像を表示する表示装置と、
を備える、請求項6に記載の撮像システム。 - 更に、前記非スペックル画像撮像装置と前記スペックル画像撮像装置との間に生じる収差を補正する収差補正装置と、を備える、請求項6又は7に記載の撮像システム。
- 前記収差補正装置は、色収差を補正する、請求項8記載の撮像システム。
- 更に、前記非スペックル画像撮像装置により撮像された非スペックル画像中の任意の関心領域を特定する関心領域特定装置と、
当該関心領域特定装置による関心領域の特定情報に基づき、前記コヒーレント光源の照射位置を調整する光照射調整装置と、
を備える、請求項6から9のいずれか一項に記載の撮像システム。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016028762 | 2016-02-18 | ||
| JP2016028762 | 2016-02-18 | ||
| PCT/JP2016/086695 WO2017141524A1 (ja) | 2016-02-18 | 2016-12-09 | 撮像装置、撮像方法及び撮像システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2017141524A1 JPWO2017141524A1 (ja) | 2018-12-06 |
| JP6798511B2 true JP6798511B2 (ja) | 2020-12-09 |
Family
ID=59624933
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017567961A Expired - Fee Related JP6798511B2 (ja) | 2016-02-18 | 2016-12-09 | 撮像装置及び撮像システム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10681259B2 (ja) |
| JP (1) | JP6798511B2 (ja) |
| CN (1) | CN108601505B (ja) |
| WO (1) | WO2017141524A1 (ja) |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20190293554A1 (en) * | 2016-03-28 | 2019-09-26 | Sony Corporation | Imaging apparatus and imaging method |
| JPWO2019087557A1 (ja) * | 2017-11-06 | 2020-12-03 | オリンパス株式会社 | 内視鏡システム |
| CN111742209B (zh) * | 2018-12-21 | 2024-09-06 | 索尼公司 | 粒子确认方法、粒子捕获芯片、以及粒子分析系统 |
| US12292564B2 (en) | 2019-04-08 | 2025-05-06 | Activ Surgical, Inc. | Systems and methods for medical imaging |
| CN113950279B (zh) | 2019-04-08 | 2023-04-14 | 艾科缇弗外科公司 | 用于医疗成像的系统和方法 |
| JP7071650B2 (ja) * | 2019-06-19 | 2022-05-19 | 日亜化学工業株式会社 | 画像取得装置 |
| CN110505402B (zh) * | 2019-08-19 | 2021-03-23 | Oppo广东移动通信有限公司 | 控制方法、深度相机和电子装置 |
| CN114599263A (zh) | 2019-08-21 | 2022-06-07 | 艾科缇弗外科公司 | 用于医疗成像的系统和方法 |
| IL294563B1 (en) | 2020-01-14 | 2026-04-01 | Pxe Computational Imaging Ltd | System and method for optical imaging and measurement of objects |
| US12201396B2 (en) | 2021-09-10 | 2025-01-21 | Rockley Photonics Limited | Optical speckle receiver |
| US12478429B2 (en) * | 2021-09-17 | 2025-11-25 | Gyrus Acmi, Inc. | Monitoring liquid medium conditions proximate a laser lithotripsy treatment area in real time |
| US12390117B2 (en) | 2021-11-16 | 2025-08-19 | Rockley Photonics Limited | Optical sensor module for speckleplethysmography (SPG) and photoplethysmography (PPG) |
| US12484796B1 (en) | 2024-11-27 | 2025-12-02 | Rockley Photonics Limited | System and method for measuring pulse wave velocity |
| US12396648B1 (en) | 2024-11-27 | 2025-08-26 | Rockley Photonics Limited | Wearable device with light source and optical sensor |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2413483A1 (en) * | 2001-12-26 | 2003-06-26 | Kevin R. Forrester | Motion measuring device |
| AU2005270037B2 (en) | 2004-07-02 | 2012-02-09 | The General Hospital Corporation | Endoscopic imaging probe comprising dual clad fibre |
| US20080287808A1 (en) | 2006-09-12 | 2008-11-20 | The General Hospital Corporation | Apparatus, probe and method for providing depth assessment in an anatomical structure |
| CN101243966B (zh) * | 2008-03-21 | 2010-06-16 | 中国科学院光电技术研究所 | 一种高分辨率眼底血管流速测量系统及测量方法 |
| US8502926B2 (en) * | 2009-09-30 | 2013-08-06 | Apple Inc. | Display system having coherent and incoherent light sources |
| JP2013213695A (ja) * | 2012-03-30 | 2013-10-17 | Sumitomo Osaka Cement Co Ltd | 形状測定装置 |
| WO2013184226A1 (en) | 2012-06-05 | 2013-12-12 | Hypermed Imaging, Inc. | Hyperspectral image processing via a computer network |
| US9766382B2 (en) * | 2012-06-05 | 2017-09-19 | Hypermed Imaging, Inc. | Single-sensor hyperspectral imaging device |
| JP6394367B2 (ja) * | 2014-05-30 | 2018-09-26 | ソニー株式会社 | 流体分析装置、流体分析方法、プログラム及び流体分析システム |
| JP2016193066A (ja) * | 2015-03-31 | 2016-11-17 | ソニー株式会社 | スペックルイメージング装置、スペックルイメージング方法及びスペックルイメージングシステム |
-
2016
- 2016-12-09 JP JP2017567961A patent/JP6798511B2/ja not_active Expired - Fee Related
- 2016-12-09 CN CN201680081453.9A patent/CN108601505B/zh not_active Expired - Fee Related
- 2016-12-09 WO PCT/JP2016/086695 patent/WO2017141524A1/ja not_active Ceased
- 2016-12-09 US US16/076,447 patent/US10681259B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108601505B (zh) | 2021-01-29 |
| US20190045112A1 (en) | 2019-02-07 |
| CN108601505A (zh) | 2018-09-28 |
| JPWO2017141524A1 (ja) | 2018-12-06 |
| WO2017141524A1 (ja) | 2017-08-24 |
| US10681259B2 (en) | 2020-06-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6798511B2 (ja) | 撮像装置及び撮像システム | |
| EP2932888B1 (en) | Ophthalmologic device | |
| US8770752B2 (en) | Ophthalmic apparatus, ophthalmic system, processing apparatus, and blood flow velocity calculation method | |
| US9330299B2 (en) | Fundus image acquiring apparatus and control method therefor | |
| JP5512682B2 (ja) | 眼球運動、特に眼底の運動の測定装置および測定方法 | |
| US11025812B2 (en) | Imaging apparatus, imaging method, and imaging system | |
| WO2017168984A1 (ja) | 撮像装置、撮像方法 | |
| JP6701322B2 (ja) | 点像分布関数の測定装置、測定方法、画像取得装置および画像取得方法 | |
| JP6776076B2 (ja) | Oct装置 | |
| JP7243023B2 (ja) | Oct装置 | |
| US10681283B2 (en) | Imaging system, imaging apparatus, and imaging method | |
| JP6507509B2 (ja) | 流路撮像装置及び流路撮像方法 | |
| CN112656368B (zh) | 眼科装置 | |
| US20190059722A1 (en) | Ophthalmologic apparatus | |
| JP6831506B2 (ja) | 光測定装置及び光測定方法 | |
| JP7279379B2 (ja) | Oct装置及びoct画像処理プログラム | |
| WO2011145182A1 (ja) | 光干渉断層画像計測装置 | |
| JP2021090631A (ja) | 画像処理方法、走査型イメージング方法、画像処理装置、その制御方法、走査型イメージング装置、その制御方法、プログラム、及び記録媒体 | |
| JP6127731B2 (ja) | 眼底カメラ及び画像処理プログラム | |
| JP2010164635A (ja) | 共焦点顕微鏡 | |
| JP2009180708A (ja) | 形状測定方法及び形状測定装置 | |
| JP6932581B2 (ja) | 眼科装置、情報処理装置、情報処理方法及びプログラム | |
| CA3039471C (en) | Visualization systems and methods for optimized optical coherence tomography | |
| JP2024122529A (ja) | 眼科装置及びその制御方法 | |
| JP2022075771A (ja) | 眼科装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191128 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200428 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200617 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201020 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201102 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6798511 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |