JP2017203822A - 照明設定方法、シート照明顕微鏡装置、及びプログラム - Google Patents
照明設定方法、シート照明顕微鏡装置、及びプログラム Download PDFInfo
- Publication number
- JP2017203822A JP2017203822A JP2016094159A JP2016094159A JP2017203822A JP 2017203822 A JP2017203822 A JP 2017203822A JP 2016094159 A JP2016094159 A JP 2016094159A JP 2016094159 A JP2016094159 A JP 2016094159A JP 2017203822 A JP2017203822 A JP 2017203822A
- Authority
- JP
- Japan
- Prior art keywords
- sample
- illumination
- image
- optical system
- sheet
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0032—Optical details of illumination, e.g. light-sources, pinholes, beam splitters, slits, fibers
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/002—Scanning microscopes
- G02B21/0024—Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
- G02B21/0052—Optical details of the image generation
- G02B21/0076—Optical details of the image generation arrangements using fluorescence or luminescence
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/06—Means for illuminating specimens
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/16—Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Optics & Photonics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Microscoopes, Condenser (AREA)
Abstract
【課題】光シート照明のための適切な照明設定を容易に行うことができる技術を提供する。【解決手段】照明光学系から出射した光シートが照射された試料の画像を取得する。取得した試料の画像に基づいて、照明光学系から出射される光シートの幅方向についての従属光線角度を決定する。さらに、決定した従属光線角度に従って、照明光学系の設定を行う。【選択図】図2
Description
本発明の開示は、照明設定方法、シート照明顕微鏡装置、及びプログラムに関する。
蛍光顕微鏡の分野では、検出光学系の光軸に直交する方向から試料にレーザ光を照射して、試料中に検出光学系の光軸と直交する光シートを形成する技術が知られている。この技術は、試料に与えるダメージを抑えることができる、高い縦分解能を実現できるなどのメリットがあり、近年、注目を集めている。
上記の技術では、試料を検出光学系の光軸方向とは異なる方向から照明するため、試料中に吸収により光が透過しにくい部分や光が散乱する部分(以降、これらをまとめて遮光部分と記す)が含まれている場合には、その遮光部分の後方に光が入射せず、視野内に縞状の影ができてしまう。
関連技術は、例えば、特許文献1に記載されている。特許文献1には、ウォブル板やスイング・ミラーの振動運動により、時間によって異なる角度で標本物質にシート光の放射成分を照射する技術が記載されている。
縞を効果的に抑制し得る照明設定は、縞の原因物質(つまり、遮光部分)の大きさによって異なる。縞を抑制する効果(以降、縞消し効果と記す)に着目すると、大きな原因物質が存在するほど大きな角度で試料が照明されるように、照明設定を行うことが望ましい。一方で、照明設定は基本的な照明性能にも当然に影響する。例えば、大きな角度で試料を照明するほど、照明効率、照明の均一性などが低下する傾向にある。従って、照明設定は、照明性能と縞消し効果のバランスを取りながら、観察対象に応じて適宜設定されることが望ましい。
以上のような実情を踏まえ、本発明の一側面は、光シート照明のための適切な照明設定を容易に行うことができる技術を提供することを目的とする。
本発明の一側面に係る照明設定方法は、照明光学系から出射した光シートが照射された試料の画像を取得することと、取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定することと、決定した前記従属光線角度に従って、前記照明光学系の設定を行うことを含む。
本発明の別の一側面に係る照明設定方法は、照明光学系により光シートが照射された試料の画像を取得することと、取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの主光線が前記試料に入射する入射角度を決定することと、決定した前記入射角度に従って、前記照明光学系の設定又は前記試料の向きの設定の少なくとも一方を行うことを含む。
本発明の更に別の一側面に係る照明設定方法は、コンピュータが、照明光学系により光シートが照射された試料の画像を撮像装置から取得し、前記撮像装置から取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定し、決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を出力する。
本発明の更に別の一側面に係るシート照明顕微鏡装置は、試料に光シートを照射する照明光学系と、前記照明光学系で光シートが照射された前記試料の画像を取得する撮像装置と、前記撮像装置で取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定する制御装置と、前記制御装置で決定した前記従属光線角度に従って、前記照明光学系の設定を行う設定装置と、を備える。
本発明の更に別の一側面に係るプログラムは、コンピュータに、照明光学系により光シートが照射された試料の画像を撮像装置から取得する処理と、前記撮像装置から取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定する処理と、決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を出力する処理と、を実行させる。
本発明の一側面によれば、光シート照明のための適切な照明設定を容易に行うことができる。
[第1の実施形態]
図1は、第1の実施形態に係るシート照明顕微鏡装置1の概略構成を例示した図である。シート照明顕微鏡装置1は、例えば、生体標本などの試料Sからの蛍光を検出する蛍光顕微鏡であり、光シートで試料Sを照明するように構成されている。
図1は、第1の実施形態に係るシート照明顕微鏡装置1の概略構成を例示した図である。シート照明顕微鏡装置1は、例えば、生体標本などの試料Sからの蛍光を検出する蛍光顕微鏡であり、光シートで試料Sを照明するように構成されている。
シート照明顕微鏡装置1は、試料Sに光シートを照射する照明光学系10と、試料Sからの検出光(例えば、蛍光)を撮像装置30へ導く検出光学系20と、試料Sの画像を取得する撮像装置30と、シート照明顕微鏡装置1を制御する制御装置40と、照明光学系10の設定を行う設定装置60を備えている。試料Sは、照明光学系10の光軸と検出光学系20の光軸が交わる位置の辺りに配置される。
照明光学系10は、検出光学系20の光軸と略直交するシート形状を有する光シートを形成し、その光シートを検出光学系20の光軸と略直交する方向から試料Sに照射するように構成されている。照明光学系10の詳細については、後述する。
ここで、光シートとは、シート形状の照明領域を形成する照明光のことである。シート形状とは、照明光の進行方向(照明光学系10の射出側の光軸方向)に対して直交する照明光の断面(以降、光束断面と記す)が、互いに直交する一方向に長く他方向に短い二次元形状を有する形状をいう。以降では、光束断面内での長さが長い方向を光シートの幅方向、短い方向を光シートの厚さ方向と記す。また、検出光学系20の光軸と略直交するシート形状とは、進行方向と幅方向で定義される光シート面が検出光学系20の光軸と略直交するようなシート形状をいう。また、略直交するとは、直交した状態から当業者が設定上又は製造上の誤差と認識し得るような範囲をいう。本実施形態では、進行方向はx軸方向、幅方向はy軸方向、厚さ方向はz軸方向と定義する。この点は他の実施形態でも同様である。
検出光学系20は、試料Sからの光(例えば、蛍光など。以降、検出光と記す)を集光して、試料Sの光学像を撮像装置30の受光面に形成する光学系である。撮像装置30は、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)などの2次元イメージセンサを備えたデジタルカメラであり、照明光学系10によって光シートが照射された試料Sの画像を取得し、試料Sの画像データを制御装置40へ出力する。
制御装置40は、シート照明顕微鏡装置1を制御する顕微鏡コントローラである。制御装置40は、シート照明顕微鏡装置1の顕微鏡本体に設けられた各種電動機構に制御信号を出力するように構成されている。設定装置60は、制御装置40からの制御信号に従って動作する顕微鏡本体の電動機構の一つであり、照明光学系10の設定を行う装置である。
図2は、第1の実施形態に係る照明処理の手順を示すフローチャートである。図2を参照しながら、シート照明顕微鏡装置1が行う照明処理について概説する。
図2は、第1の実施形態に係る照明処理の手順を示すフローチャートである。図2を参照しながら、シート照明顕微鏡装置1が行う照明処理について概説する。
シート照明顕微鏡装置1は、まず、照明光学系10から出射した光シートが照射された試料Sの画像を取得する(ステップS1)。ここでは、照明光学系10が試料Sに光シートを照射し、撮像装置30が試料Sを撮像し試料Sの画像データを生成する。生成された試料Sの画像データは、制御装置40へ出力される。
次に、シート照明顕微鏡装置1は、取得した画像に基づいて、光シートの幅方向についての従属光線角度を決定する(ステップS2)。なお、従属光線角度とは、照明光学系10の射出側の光軸と照明光学系10から出射した光シートの従属光線とがなす最大角度のことである。また、幅の方向についての従属光線角度とは、光シートの幅方向と進行方向を含む断面における従属光線角度のことである。
光シート照明では、試料Sが照明領域内に遮光部分を有していると、その後方に縞状の影ができてしまう。しかしながら、光シートの従属光線角度が0度以上であれば、遮光部分の後方の領域に光が回り込むことができるため、縞状の影を抑制することができる。そして、光シートが大きな従属光線角度を有しているほど、遮光部分により近い領域にまで光が回り込むことができるため、縞状の影をより効果的に抑制することができる。
一方で、図3及び図4に示すように、観察範囲Rに対して均一な照明を実現するためには、従属光線角度が大きな光シートL2を照射する場合には、従属光線角度が小さな光シートL1を照射する場合に比べて、走査幅が広くなってしまう。このため、照明効率が低下し、画像取得に時間がかかってしまう。
従って、従属光線角度は、縞消し効果と照明性能とのバランスを考慮して決定されることが望ましく、縞消し効果を重視する場合であっても、縞状の影を観察者が許容できる程度に抑制する限りにおいて、小さな角度に設定することが望ましい。
ただし、縞状の影の大きさは遮光部分の大きさによって異なり、遮光部分の大きさは試料(より詳細には、試料中の観察部分)によって異なる。このため、観察者の要求を満たすことができる従属光線角度も、試料に応じて異なる。そこで、ステップS2では、制御装置40が、撮像装置30で取得した光シートが照射された試料Sの画像に基づいて、照明光学系10から出射される光シートの幅方向についての従属光線角度を決定する。さらに、制御装置40は、決定した従属光線角度に応じた照明光学系10の設定を指示する制御信号を、設定装置60に出力する。なお、従属光線角度の決定方法の詳細については後述する。
従属光線角度が決定されると、シート照明顕微鏡装置1は、決定した従属光線角度に従って、照明光学系10の設定を行い(ステップS3)、光シートを試料に照射する(ステップS4)。ここでは、設定装置60が、制御装置40から出力された制御信号に従って、照明光学系10の設定を行う。即ち、設定装置60は、制御装置40で決定した従属光線角度に従って、照明光学系10の設定を行う。
シート照明顕微鏡装置1によれば、画像に基づいて従属光線角度を決定することで、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことができる。また、制御装置40が画像に基づいて従属光線角度を決定し、設定装置60が決定した従属光線角度に従って設定を行うため、顕微鏡操作に不慣れな利用者であっても、適切な設定を容易に行うことができる。
以下、図5Aから図9を参照しながら、本実施形態について更に詳細に説明する。図5A及び図5Bは、シート照明顕微鏡装置1の構成を例示した図である。図5A、図5Bには、光シートの厚さ方向(z軸方向)、幅方向(y軸方向)から見たシート照明顕微鏡装置1と照明光束とが示されている。
シート照明顕微鏡装置1は、上述した、照明光学系10、検出光学系20、撮像装置30、制御装置40、及び設定装置60に加えて、制御装置40に接続された表示装置51、及び入力装置(キーボード52、マウス53)を備えている。
照明光学系10は、レーザ11を備えている。レーザ11は、光シートに変換されるレーザ光(照明光)を出射する光源である。照明光学系10は、さらに、レーザ11側から順に、第1の光学系12と、スキャナ16と、走査光学系17を備えている。
第1の光学系12は、レーザ11とスキャナ16との間に配置された、レーザ光をスキャナ16に照射する光学系である。第1の光学系12は、レンズ13、レンズ14、シリンドリカルレンズ15を含んでいる。シリンドリカルレンズ15は、光軸方向に移動自在に配置された移動レンズであり、xy平面内で屈折力を有し、xz平面内で屈折力を有しないように配置されている。
スキャナ16は、光シートで試料Sを光シートの幅方向に走査する走査手段であり、例えば、ガルバノミラー、レゾナントミラーなどの、光を偏向させる偏向面を有する回転自在なミラーである。また、スキャナ16は、例えば、AOD(Acousto-optic deflector)、EOD(Electro-optic deflector)であってもよい。なお、図5A及び図5Bでは、図面を簡略化するために、スキャナ16で偏向される前後の光の光路上の光学素子を一直線上に並べて記載している。
走査光学系17は、シリンドリカルレンズ18とシリンドリカルレンズ19とを含み、スキャナ16で偏向された光を試料に照射する。シリンドリカルレンズ18は、xy平面内で屈折力を有し、xz平面内で屈折力を有しないように配置されている。シリンドリカルレンズ19は、xz平面内で屈折力を有し、xy平面内で屈折力を有しないように配置されている。即ち、シリンドリカルレンズ18とシリンドリカルレンズ19は、シリンドリカルレンズ18が屈折力を有する平面とシリンドリカルレンズ19が屈折力を有する平面とが互いに直交するように配置されている。また、シリンドリカルレンズ19は、シリンドリカルレンズ19の後側焦点位置が検出光学系20の視野の範囲内に位置するように配置されることが望ましく、検出光学系20の光軸上に位置するように配置されることがさらに望ましい。
走査光学系17は、さらに、スキャナ16が走査光学系17の光シート面(xy平面)における前側焦点位置に位置するように、配置されている。これは、スキャナ16が走査光学系17の最も物体側に配置されているシリンドリカルレンズ18の前側焦点位置に位置するように、走査光学系17が配置されている、と言い換えることができる。なお、シリンドリカルレンズ18の前側焦点位置とは、試料側からシリンドリカルレンズ18に平行光束を入射したときに光が直線状に集光する位置のことである。
検出光学系20は、試料S側から順に、対物レンズ21と、波長選択素子22と、結像レンズ23を含んでいる。波長選択素子22は、例えば、レーザ光が撮像装置30に入射することを防止するためのバリアフィルタである。
設定装置60は、照明光学系10の設定を行う装置であり、具体的には、シリンドリカルレンズ15の光軸方向の位置を変更する装置である。設定装置60は、シリンドリカルレンズ15をシリンドリカルレンズ15の光軸方向に動かす構造として、ボールネジ61、ボールネジ61に螺合したナット62、シリンドリカルレンズ15を保持する保持部63、及び、ボールネジ61を回転させるモータ64を備える。設定装置60がシリンドリカルレンズ15を光軸方向に移動することで、第1の光学系12の焦点距離が変化し、図5Aに示すように、照明光学系10から出射される光シートの幅方向についての従属光線角度が変化する。
以上のように構成されたシート照明顕微鏡装置1では、レーザ11から出射したレーザ光は、レンズ13及びレンズ14で光束径(ビーム径)が調整された後、シリンドリカルレンズ15を介してスキャナ16に入射する。その後、スキャナ16で偏向されたレーザ光は、シリンドリカルレンズ18及びシリンドリカルレンズ19を介して試料Sに照射される。
シリンドリカルレンズ15及びシリンドリカルレンズ18は、xz平面内においては、屈折力を有しないためレーザ光に対して実質的に作用しない。また、幅方向に光を偏向するスキャナ16も、xz平面内においてはレーザ光に対して実質的に作用しない。このため、図5Bに示すように、幅方向(y軸方向)から見たとき、レーザ光は、シリンドリカルレンズ15の位置及びスキャナ16の振り角によらず、シリンドリカルレンズ19によって一定の位置に集光する。
また、シリンドリカルレンズ15及びシリンドリカルレンズ18は、xy平面内においては屈折力を有している。このため、図5Aに示すように、厚さ方向(z軸方向)から見たとき、レーザ光は、シリンドリカルレンズ15の位置に応じて幅方向について異なる従属光線角度を有する状態でシリンドリカルレンズ18から出射し、シリンドリカルレンズ19を介して試料Sに照射される。ただし、スキャナ16がシリンドリカルレンズ18の前側焦点位置に配置されているため、レーザ光の主光線の方向は、スキャナ16の角度によらず一定である。
従って、シート照明顕微鏡装置1によれば、シリンドリカルレンズ15の位置に応じて光シートの幅の方向についての従属光線角度を変更することができる。また、主光線の方向を維持しながら試料を走査することができるため、照明範囲を均一に照明することができる。
図6は、制御装置40のハードウェアの構成を例示した図である。制御装置40は、例えば、標準的なコンピュータであり、プロセッサ41、メモリ42、入出力インターフェース43、ストレージ44、及び、可搬記録媒体46が挿入される可搬記録媒体駆動装置45を備え、これらがバス47によって相互に接続されている。なお、図6は、制御装置40のハードウェア構成の一例であり、制御装置40はこの構成に限定されるものではない。
プロセッサ41は、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、DSP(Digital Signal Processor)などであり、プログラムを実行してプログラムされた処理を行う。メモリ42は、例えば、RAM(Random Access Memory)であり、プログラムの実行の際に、ストレージ44または可搬記録媒体46に記録されているプログラムまたはデータを一時的に記憶する。
入出力インターフェース43は、制御装置40以外の装置(例えば、撮像装置30、表示装置51、設定装置60など)と信号をやり取りする回路である。ストレージ44は、例えば、ハードディスク、フラッシュメモリであり、主に各種データやプログラムの記録に用いられる。可搬記録媒体駆動装置45は、光ディスクやコンパクトフラッシュ(登録商標)等の可搬記録媒体46を収容するものである。可搬記録媒体46は、ストレージ44を補助する役割を有する。
図7は、制御装置40の機能構成を例示した図である。制御装置40は、画像取得手段40a、画像比較手段40b、角度決定手段40c、出力手段40dを備える。これらの手段の少なくとも1つは、ストレージ44又は可搬記録媒体46に記録されているプログラムをプロセッサ41がメモリ42にロードして実行することで、メモリ42上に構成されてもよい。または、これらの手段の少なくとも1つは、例えば、FPGA(Field-Programmable Gate Array)、ASIC(Application Specific Integrated Circuit)などの集積回路などのハードウェアで構成されてもよい。
画像取得手段40aは、撮像装置30で取得した試料の画像を撮像装置30から取得する。画像比較手段40bは、撮像装置30で取得した試料の複数の画像を比較する。角度決定手段40cは、画像比較手段40bで比較した結果に基づいて、光シートの幅方向についての従属光線角度を決定する。出力手段40dは、角度決定手段40cで決定した従属光線角度に応じた照明光学系10の設定を指示する制御信号を設定装置60へ出力する。
図8は、照明設定処理の手順を示すフローチャートである。図9は、画像取得処理の手順を示すフローチャートである。以下、図8及び図9を参照しながら、シート照明顕微鏡装置1で行われる照明設定処理について具体的に説明する。
シート照明顕微鏡装置1は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行う(ステップS100)。ここでは、光シートの幅方向についての従属光線角度が既定の角度になるように、制御装置40が設定装置60へ制御信号を出力し、設定装置60が制御信号に従って照明光学系10の設定を行う。既定の角度は、遮光部分の後方に縞が生じるような角度であればよく、例えば、従属光線が光軸と平行になる0度である。
次に、シート照明顕微鏡装置1は、ステップS100で行った設定で、試料Sの画像を取得する(ステップS110)。この画像取得処理では、図9に示すように、シート照明顕微鏡装置1は、スキャナ16を用いて試料Sを照明光学系10から出射した光シートで光シートの幅方向に走査し(ステップS111)、光シートが照射された試料Sを撮像装置30で撮像する(ステップS112)。これにより、撮像装置30が試料Sの画像データを生成し、制御装置40へ出力し、制御装置40が試料Sの画像を取得する。ここで取得される画像は、均一な明るさに照明された試料Sの画像である。これは、スキャナ16が走査光学系17の前側焦点位置に配置されているため、走査期間中、光シートの主光線の向きが維持されて光シートが幅方向に平行移動するからである。
その後、シート照明顕微鏡装置1は、光シートの従属光線角度の設定を変更し(ステップS120)、変更後の設定で試料Sの画像を取得する(ステップS130)。ステップS120では、従属光線角度が現在設定されている角度(以降、現在角度)とは異なる角度になるように、制御装置40が設定装置60へ制御信号を出力し、設定装置60が制御信号に従って照明光学系10の設定を行う。ステップS120で設定する角度は、縞が現在と同じ又は現在よりも小さくなるような角度であればよく、例えば、現在角度よりも既定値だけ大きな角度に設定してもよい。ステップS130については、ステップS110と同様である。
シート照明顕微鏡装置1は、試料Sの複数の画像を比較する(ステップS140)。ここでは、制御装置40が異なる従属光線角度を有する光シートが照射された試料Sの複数の画像を比較し、画像の変化を評価する。具体的には、画像中の画素値を一軸方向(例えば、x軸方向又はy軸方向)に積算した値を比較することで画像の変化を評価してもよい。また、画像中の一軸方向(例えば、y軸方向)に隣接する画素間の差分を積算した値を比較することで画像の変化を評価してもよい。さらに、画像をフーリエ変換して空間周波数分布を比較することで画像の変化を評価してもよい。
その後、シート照明顕微鏡装置1は、画像の変化が小さいかどうかを判定する(ステップS150)。ここでは、制御装置40は、ステップS140での比較結果に基づいて、画像の変化を代表する値が既定値よりも小さいか否かを判定する。画像の変化を代表する値は、例えば、ステップS140において、画像間で比較した値の差分値であってもよく、又は、その差分を従属光線角度の変化量を用いて規格化した値であってもよい。
画像の変化が小さくないと判定されると、シート照明顕微鏡装置1は、再びステップS120からステップS150の処理を行う。そして、ステップS150で画像の変化が小さいと判定されるまでそれらの処理を繰り返す。
画像の変化が小さいと判定されると、シート照明顕微鏡装置1は、従属光線角度を決定する(ステップS160)。ここでは、制御装置40は、例えば、変化が小さいと判定された複数の画像に対応する複数の角度のうちの最も小さな角度を、照明光学系10に設定すべき従属光線角度に決定する。即ち、従属光線角度は、複数の画像を比較した結果に基づいて決定される。
最後に、シート照明顕微鏡装置1は、従属光線角度をステップS160で決定した角度に設定し(ステップS170)、照明設定処理を終了する。ここでは、従属光線角度がステップS160で決定した角度になるように、制御装置40が設定装置60へ制御信号を出力し、設定装置60が制御信号に従って照明光学系10の設定を行う。
その後、観察者は、ステップS170で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
その後、観察者は、ステップS170で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
シート照明顕微鏡装置1が上述した照明設定処理を実行することで、それ以上大きくしても画像に変化が生じない従属光線角度が特定され、照明光学系10から出射する光シートの従属光線角度がその特定された角度になるように照明光学系10の設定が行われる。なお、従属光線角度を変更しても画像に変化が生じない状態は、遮光部分の後方に延びる縞が十分に小さくなり、目立たない状態である。上述した照明設定処理によれば、従属光線角度を過度に大きく設定することがないため、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。
なお、図8に示す照明設定処理では、画像に変化が生じなくなるまで従属光線角度を徐々に大きくする例を示したが、シート照明顕微鏡装置1は、画像に変化が生じるようになるまで従属光線角度を徐々に小さくしてもよい。この場合、従属光線角度の初期設定は、縞が生じないような又は縞が目立たないような十分に大きな角度であることが望ましい。
また、図8に示す照明設定処理では、撮像装置30で取得した画像そのものを比較する例を示したが、蛍光物質の褪色等に起因する画像の変化を排除して従属光線角度の変化に起因する画像の変化を評価してもよい。このため、画像を比較する前に比較する画像を補正してもよい。例えば、複数の画像中における縞が生じていない同一の領域の明るさを揃えるように画像を補正してから、画像を比較してもよい。
[第2の実施形態]
第2の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置70を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
第2の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置70を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
図10は、制御装置70の機能構成を例示した図である。制御装置70は、画像取得手段70a、幅算出手段70b、角度決定手段70c、出力手段70dを備える。なお、制御装置70のハードウェア構成については、制御装置40と同様である。上記の手段の少なくとも1つは、プログラムをプロセッサ41がメモリ42にロードして実行することで、メモリ42上に構成されてもよく、例えば、FPGA、ASICなどの集積回路などのハードウェアで構成されてもよい。
画像取得手段70aは、撮像装置30で取得した試料Sの画像を撮像装置30から取得する。幅算出手段70bは、撮像装置30で取得した試料Sの画像に基づいて、試料Sの画像に表れる縞の幅を算出する。角度決定手段70cは、幅算出手段70bで算出した縞の幅に基づいて、光シートの幅方向についての従属光線角度を決定する。出力手段70dは、角度決定手段70cで決定した従属光線角度に応じた照明光学系10の設定を指示する制御信号を設定装置60へ出力する。なお、縞の幅とは、光シートの幅方向についての縞の長さのことをいう。
図11は、照明設定処理の手順を示すフローチャートである。以下、図11を参照しながら、本実施形態に係るシート照明顕微鏡装置で行われる照明設定処理について、図8に示す照明設定処理との違いに注目して説明する。
シート照明顕微鏡装置は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行い(ステップS200)、初期設定で、試料Sの画像を取得する(ステップS210)。ステップS200とステップS210は、図8に示すステップS100とステップS110と同様である。
画像が取得されると、シート照明顕微鏡装置は、縞の幅を算出する(ステップS220)。ここでは、制御装置70が、ステップS210で取得した画像に基づいて、その画像に表れる縞の幅を算出する。具体的には、画像中の画素値をx軸方向に積算し、積算値が所定値以下となる画像中の画素列を特定する。そして、特定された画素列のうち隣接して存在する列の数から縞の幅を算出する。この算出方法は、縞が生じた列の積算値は縞が生じていない列の積算値に比べて小さくなることを利用したものである。なお、隣接して存在する列の集合が複数存在する場合には、最も多くの列から構成される列の集合を特定し、その集合に含まれる列の数から縞の幅を算出することが望ましい。
縞の幅が算出されると、シート照明顕微鏡装置は、従属光線角度を決定する(ステップS230)。ここでは、制御装置70は、ステップS220で算出した縞の幅に基づいて、従属光線角度を決定する。具体的には、従属光線角度は、例えば、ステップS220で算出した縞の幅と、予め設定された許容される縞の長さに基づいて、幾何学的に算出されてもよい。なお、許容される縞の長さは、照明光学系10の光軸方向についての縞の長さである。
最後に、シート照明顕微鏡装置は、従属光線角度をステップS230で決定した角度に設定し(ステップS240)、照明設定処理を終了する。ステップS240は、図8に示すステップS170と同様である。その後、観察者は、ステップS240で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
シート照明顕微鏡装置が図11に示す照明設定処理を実行することで、画像から縞の幅が算出され、縞の幅に基づいて従属光線角度が決定される。これにより、第1の実施形態と同様に、従属光線角度を過度に大きくすることがないため、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。
また、図11に示す照明設定処理では、画像は1枚あれば十分である。このため、本実施形態によれば、複数の画像を取得して比較を繰り返す第1の実施形態に比べて、より短時間で照明設定を行うことが可能である。また、照明設定のために試料に与えるダメージも抑えることができる。
なお、縞の幅は遮光部分の幅に相当するため、遮光部分の近くではほとんど変化しない。しかしながら、従属光線が光軸に対して角度を持つ場合、遮光部分から離れるほど縞の幅は小さくなる。したがって、画素値をx方向の積算した値で縞の幅を算出するような場合には、従属光線の角度が大きいと縞以外の要因による積算値の低下と縞に起因する積算値の低下とを誤認する可能性がある。これを防止するためには、ステップS200で設定する従属光線角度は、より小さな角度であることが望ましい。特に、従属光線が光軸と平行になる0度に設定することが望ましい。
図12は、照明設定処理の別の手順を示すフローチャートである。図13は、幅算出処理の別の手順を示すフローチャートである。本実施形態に係るシート照明顕微鏡装置は、図11に示す照明設定処理の代わりに、図12及び図13に示す照明設定処理を行ってもよい。
シート照明顕微鏡装置は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行い(ステップS300)、初期設定で、試料Sの画像を取得する(ステップS310)。ステップS300とステップS310は、図11に示すステップS200とステップS210と同様である。
次に、シート照明顕微鏡装置は、光シートの従属光線角度の設定を変更し(ステップS320)、変更後の設定で試料Sの画像を取得する(ステップS330)。ステップS320で設定される角度は、遮光部分の後方に縞が生じにくくなるような角度であればよく、比較的大きな角度に設定することが望ましい。
その後、シート照明顕微鏡装置は、縞の幅を算出する(ステップS340)。ここでは、制御装置70が、ステップS310とステップS330で取得した2画像に基づいて、その画像に表れる縞の幅を算出する。この幅算出処理では、制御装置70は、2画像を比較し(ステップS341)、比較結果に基づいて縞の幅を算出する(ステップS342)。具体的には、画像中の各画素値の差を取り、差が既定値以上の画素の分布から縞の幅を算出してもよい。また、画像中の画素値をx軸方向に積算し、2画像間で積算値の差が所定値以上となる画素列を特定する。そして、特定された画素列のうち隣接して存在する列の数から縞の幅を算出してもよい。
縞の幅が算出されると、シート照明顕微鏡装置は、従属光線角度を決定し(ステップS350)、決定した角度に従属光線角度を設定し(ステップS360)、照明設定処理を終了する。ステップS350、ステップS360は、図11に示すステップS230、ステップS240と同様である。その後、観察者は、ステップS350で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
図12に示す照明設定処理によっても、図11に示す照明設定処理と同様の効果を得ることができる。即ち、従属光線角度を過度に大きくすることなく、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことができる。
[第3の実施形態]
第3の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置80を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
第3の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置80を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
図14は、制御装置80の機能構成を例示した図である。制御装置80は、画像取得手段80a、縞特定手段80b、幅算出手段80c、角度決定手段80d、出力手段80eを備える。なお、制御装置80のハードウェア構成については、制御装置40と同様である。上記の手段の少なくとも1つは、プログラムをプロセッサ41がメモリ42にロードして実行することで、メモリ42上に構成されてもよく、例えば、FPGA、ASICなどの集積回路などのハードウェアで構成されてもよい。
画像取得手段80a、角度決定手段80d、出力手段80eは、第2の実施形態に係る制御装置70の、画像取得手段70a、角度決定手段70c、出力手段70dと同様である。縞特定手段80bは、撮像装置30で取得した試料Sの画像に基づいて、試料Sの画像に表れる縞を特定する。幅算出手段80cは、撮像装置30で取得した試料Sの画像に基づいて、より詳細には、縞特定手段80bから出力される縞情報に基づいて、試料Sの画像に表れる縞の幅を算出する。
図15は、照明設定処理の手順を示すフローチャートである。図16は、縞特定処理の手順を示すフローチャートである。以下、図15及び図16を参照しながら、本実施形態に係るシート照明顕微鏡装置で行われる照明設定処理について、図11に示す照明設定処理との違いに注目して説明する。
シート照明顕微鏡装置は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行う(ステップS400)。ここで設定される角度は、遮光部分の後方に縞が生じるような角度である点は、図11に示すステップS200と同様である。ただし、0度以外の角度に設定される。その後、シート照明顕微鏡装置は、初期設定で、試料Sの画像を取得する(ステップS410)。ステップS410は、図11に示すステップS210と同様である。
画像が取得されると、シート照明顕微鏡装置は、縞を特定する(ステップS420)。こここでは、制御装置80が、ステップS410で取得した画像に基づいて、その画像に表れる縞を特定する。この縞特定処理では、図16に示すように、制御装置80は、まず、画像に基づいて、画素値(即ち、画像信号の強度)が既定値以下の画像中の領域を特定する(ステップS421)。さらに、ステップS421で特定した領域に基づいて縞を特定する(ステップS422)。ステップS422では、例えば、特定した領域のうち、光シートが進む向きに幅が狭くなるテーパー形状を有する領域を、縞として特定してもよい。
縞が特定されると、シート照明顕微鏡装置は、縞の幅を算出する(ステップS430)。ここでは、制御装置80が、ステップS420で特定された縞の幅を画像上で測定することで、縞の幅を算出する。
縞の幅が算出されると、シート照明顕微鏡装置は、従属光線角度を決定し(ステップS440)、決定した角度に従属光線角度を設定し(ステップS450)、照明設定処理を終了する。ステップS440、ステップS450は、図11に示すステップS230、ステップS240と同様である。その後、観察者は、ステップS450で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
シート照明顕微鏡装置が図15に示す照明設定処理を実行することで、画像から縞の幅が算出され、縞の幅に基づいて従属光線角度が決定される。このため、第1の実施形態と同様に、従属光線角度を過度に大きくすることなく、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。また、画像は1枚あれば十分であるので、第2の実施形態と同様に、短時間で照明設定を行うこと、及び、照明設定のために試料に与えるダメージを抑えることができる。
なお、縞を特定する方法として、図16に示す縞特定処理を例示したが、図17に示す縞特定処理が行われてもよい。即ち、制御装置80は、予め設定されている縞パターンに基づいて、画像に対してパターンマッチング処理を行い(ステップS423)、パターンマッチング結果に基づいて縞を特定してもよい(ステップS424)。
[第4の実施形態]
第4の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置90を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
第4の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置90を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、シート照明顕微鏡装置1と同様である。
図18は、制御装置90の機能構成を例示した図である。制御装置90は、画像取得手段90a、縞特定手段90b、画像比較手段90c、角度決定手段90d、出力手段90eを備える。なお、制御装置90のハードウェア構成については、制御装置40と同様である。上記の手段の少なくとも1つは、プログラムをプロセッサ41がメモリ42にロードして実行することで、メモリ42上に構成されてもよく、例えば、FPGA、ASICなどの集積回路などのハードウェアで構成されてもよい。
画像取得手段90a、出力手段90eは、第1の実施形態に係る制御装置40の、画像取得手段40a、出力手段40dと同様である。縞特定手段90bは、撮像装置30で取得した試料Sの画像に基づいて、試料Sの画像に表れる縞を特定する。画像比較手段90cは、撮像装置30で取得した試料の複数の画像を、より詳細には、複数の画像中の特定された縞を含む小領域を、比較する。なお、小領域は画像全体ではなく画像の一部の領域である。角度決定手段90dは、画像比較手段90cで比較した結果に基づいて、より詳細には、上述した小領域を比較した結果に基づいて、光シートの幅方向についての従属光線角度を決定する。
図19は、照明設定処理の手順を示すフローチャートである。以下、図19を参照しながら、本実施形態に係るシート照明顕微鏡装置で行われる照明設定処理について、図8に示す照明設定処理との違いに注目して説明する。
シート照明顕微鏡装置は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行い(ステップS500)、初期設定で、試料Sの画像を取得する(ステップS510)。ステップS500とステップS510は、図8に示すステップS100とステップS110と同様である。
画像が取得されると、シート照明顕微鏡装置は、縞を特定する(ステップS520)。ステップS520は、図15に示すステップS420と同様である。その後、シート照明顕微鏡装置は、光シートの従属光線角度の設定を変更し(ステップS530)、変更後の設定で試料Sの画像を取得する(ステップS540)。ステップS530とステップS540は、図8に示すステップS120とステップS130と同様である。
次に、シート照明顕微鏡装置は、試料Sの複数の画像を比較する(ステップS550)。ここでは、制御装置90が異なる従属光線角度を有する光シートが照射された試料Sの複数の画像のうちの、ステップS520で特定された縞を含む小領域を比較し、画像中のその小領域の変化を評価する。
その後、シート照明顕微鏡装置1は、画像の変化が小さいかどうかを判定する(ステップS560)。ここでは、制御装置90は、ステップS550での小領域の比較結果に基づいて、小領域の変化を代表する値が既定値よりも小さいか否かを判定する。
画像(の小領域)の変化が小さくないと判定されると、シート照明顕微鏡装置は、再びステップS530からステップS560の処理を行う。そして、ステップS560で画像の変化が小さいと判定されるまでそれらの処理を繰り返す。
画像(の小領域)の変化が小さいと判定されると、シート照明顕微鏡装置は、従属光線角度を決定し(ステップS570)、決定した角度に従属光線角度を設定し(ステップS580)、照明設定処理を終了する。ステップS570、ステップS580は、図8に示すステップS160、ステップS170と同様である。その後、観察者は、ステップS580で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
シート照明顕微鏡装置が図19に示す照明設定処理を実行することで、第1の実施形態と同様に、従属光線角度を過度に大きくすることなく、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。また、図19に示す照明設定処理では、縞を含む小領域が比較されるため、縞の変化に起因する画像の変化を感度良く検出することが可能となる。また、画像全体を比較する場合よりも計算量を抑えることもできる。
[第5の実施形態]
第5の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置100を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、対物レンズ1と同様である。
第5の実施形態に係るシート照明顕微鏡装置は、制御装置40の代わりに制御装置100を備える点が、シート照明顕微鏡装置1とは異なる。その他の点は、対物レンズ1と同様である。
図20は、制御装置100の機能構成を例示した図である。制御装置100は、画像取得手段100a、縞特定手段100b、表示制御手段100c、縞指定手段100d、幅算出手段100e、角度決定手段100f、出力手段100gを備える。なお、制御装置100のハードウェア構成については、制御装置40と同様である。上記の手段の少なくとも1つは、プログラムをプロセッサ41がメモリ42にロードして実行することで、メモリ42上に構成されてもよく、例えば、FPGA、ASICなどの集積回路などのハードウェアで構成されてもよい。
画像取得手段100a、出力手段100gは、制御装置40の、画像取得手段40a、出力手段40dと同様である。縞特定手段100bは、撮像装置30で取得した試料Sの画像に基づいて、試料Sの画像に表れる縞を特定する。表示制御手段100cは、表示装置51に、縞特定手段100bで特定された縞の部分に印を付けた試料の画像を表示させる。縞指定手段100dは、観察者からの入力に従って縞消し対象とすべき縞を指定する。幅算出手段100eは、縞指定手段100dで指定された縞の幅を算出する。角度決定手段100fは、制御装置80の角度決定手段80dと同様である。
図21は、照明設定処理の手順を示すフローチャートである。以下、図21を参照しながら、本実施形態に係るシート照明顕微鏡装置で行われる照明設定処理について、図15に示す照明設定処理との違いに注目して説明する。
シート照明顕微鏡装置は、まず、照明光学系10から出射する光シートの従属光線角度の初期設定を行い(ステップS600)、初期設定で、試料Sの画像を取得する(ステップS610)。さらに、取得した画像に基づいて、縞を特定する(ステップS620)。ステップS600からステップS620は、図15に示すステップS400からステップS420と同様である。
縞が特定されると、シート照明顕微鏡装置は、ステップS620で特定された縞の部分に印を付けた画像を表示する(ステップS630)。ここでは、制御装置100は、表示装置51に、特定された縞の部分に印を付けた試料の画像を表示させる。換言すると、試料の画像とともに特定された縞の位置を表示装置51に表示する。例えば、制御装置100は、図22に示すように、表示装置51に表示中の画像を、縞部分に印が付いていない試料の画像51aから縞部分に印(マークM1、マークM2、マークM3)が付いた試料の画像51bに更新する。
その後、観察者は、表示装置51に表示された画像を見ながら、入力装置(キーボード52、マウス53)を用いて縞消し対象とすべき縞を画面上で選択する。なお、観察者は、縞消し対象とすべき縞を全て選択してもよく、縞消し対象とすべき縞のうち最も大きな縞のみを選択してもよい。
画像を表示している間、シート照明顕微鏡装置は、観察者によって縞の指定が行われたかどうかを判定する(ステップS640)。ここでは、制御装置100は、入力装置(キーボード52、マウス53)からの信号に基づいて縞の指定が行われたか否かを判定する。
縞の指定が行われたと判定すると、シート照明顕微鏡装置は、縞の幅を算出する(ステップS650)。ここでは、制御装置100が、ステップS640で指定された縞の幅を画像上で測定することで、縞の幅を算出する。なお、複数の縞が指定されている場合には、各縞の幅を算出する。
縞の幅が算出されると、シート照明顕微鏡装置は、従属光線角度を決定する(ステップS660)。ここでは、制御装置90は、ステップS650で算出した縞の幅に基づいて、従属光線角度を決定する。なお、複数の縞の幅が算出されている場合には、最も大きな縞の幅に基づいて従属光線角度を決定することが望ましい。
最後に、シート照明顕微鏡装置は、決定した角度に従属光線角度を設定し(ステップS670)、照明設定処理を終了する。ステップS670は、図15に示すステップS450と同様である。その後、観察者は、ステップS670で行われた設定で光シートを試料Sに照射し、試料Sの画像を取得することで、試料Sを観察する。
シート照明顕微鏡装置が図21に示す照明設定処理を実行することで、画像から縞の幅が算出され、縞の幅に基づいて従属光線角度が決定される。このため、第1の実施形態と同様に、従属光線角度を過度に大きくすることなく、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。また、画像は1枚あれば十分であるので、第2の実施形態と同様に、短時間で照明設定を行うこと、及び、照明設定のために試料に与えるダメージを抑えることができる。さらに、本実施形態では、少なくとも観察者が選択した縞に対して縞消し効果が得られるように、従属光線角度が決定されるため、観察者の要求を満たす縞消し効果を発揮しつつ、照明性能の低下を更に抑制し得る。
[第6の実施形態]
図23A及び図23Bは、シート照明顕微鏡装置2の構成を例示した図である。シート照明顕微鏡装置2は、シート照明顕微鏡装置1と同様に、例えば、生体標本などの試料Sからの蛍光を検出する蛍光顕微鏡であり、光シートで試料Sを照明するように構成されている。
図23A及び図23Bは、シート照明顕微鏡装置2の構成を例示した図である。シート照明顕微鏡装置2は、シート照明顕微鏡装置1と同様に、例えば、生体標本などの試料Sからの蛍光を検出する蛍光顕微鏡であり、光シートで試料Sを照明するように構成されている。
シート照明顕微鏡装置2は、照明光学系10の代わりに照明光学系200を備える点、制御装置40の代わりに制御装置110を備える点、設定装置60の代わりに設定装置65を備える点が、シート照明顕微鏡装置1とは異なっている。
照明光学系200は、検出光学系20の光軸と略直交するシート形状を有する光シートを形成し、その光シートを検出光学系20の光軸と略直交する方向から試料Sに照射するように構成されている。照明光学系200は、観察範囲Rを一度に照明できるように、照明光学系10に比べて幅の広い光シートを形成する。
照明光学系200は、レーザ201を備えている。レーザ201は、光シートに変換されるレーザ光(照明光)を出射する光源である。照明光学系200は、さらに、レーザ201側から順に、レンズ202、レンズ203、シリンドリカルレンズ204、ミラー205、シリンドリカルレンズ206、シリンドリカルレンズ207を備える。
シリンドリカルレンズ204及びシリンドリカルレンズ206は、xy平面内で屈折力を有し、xz平面内で屈折力を有しないように配置されている。シリンドリカルレンズ207は、xz平面内で屈折力を有し、xy平面内で屈折力を有しないように配置されている。
ミラー205は、z軸周りに回転することで入射光に対する角度を変更可能な回動ミラーであり、ミラー205の角度は、設定装置65によって変更される。なお、ミラー205は、照明光学系200の瞳面内に配置されることが望ましい。
制御装置110は、シート照明顕微鏡装置2を制御する顕微鏡コントローラである。制御装置110は、シート照明顕微鏡装置2の顕微鏡本体に設けられた各種電動機構に制御信号を出力するように構成されていて、例えば、制御装置40と同様のハードウェア構成を有している。
設定装置65は、照明光学系200の設定を行う装置であり、制御装置110からの制御信号に従って動作する顕微鏡本体の電動機構の一つである。設定装置65は、具体的には、ミラー205の角度を変更するモータなどの駆動装置である。設定装置65がミラー205の角度を変更することで、照明光学系200から出射される光シートの主光線の角度が変化する。
以上のように構成されたシート照明顕微鏡装置2では、シリンドリカルレンズ204及びシリンドリカルレンズ206は、xz平面内においては、屈折力を有しないためレーザ光に対して実質的に作用しない。また、z軸回りに回転するミラー205も、xz平面内においてはレーザ光に対して実質的に作用しない。このため、図23Bに示すように、幅方向(y軸方向)から見たとき、レーザ光は、ミラー205の角度によらず、シリンドリカルレンズ207によって一定の位置に集光する。
また、シリンドリカルレンズ204及びシリンドリカルレンズ206は、xy平面内において屈折力を有している。このため、図23Aに示すように、厚さ方向(z軸方向)から見たとき、レーザ光は、レンズ202及びレンズ203の組み合わせで幅が調整され、さらにシリンドリカルレンズ204及びシリンドリカルレンズ206の組み合わせで更に幅が調整される。シリンドリカルレンズ207は、xy平面内においては屈折力を有しないため、シリンドリカルレンズ206から出射したレーザ光は、そのままの幅で試料に照射される。ただし、レーザ光の主光線の向きは、ミラー205の角度に依存する。
従って、シート照明顕微鏡装置2によれば、ミラー205の角度に応じて、照明光学系200から出射する光シートの主光線の向きを変更することができる。このため、ミラー205の角度を変更することで、光シートの主光線が試料に入射する入射角度を変更することができる。そして、撮像装置30の露光時間中に入射角度を変更して様々な方向から試料を照明することで、縞消し効果を得ることができる。
図24は、照明設定処理の手順を示すフローチャートである。図25は、入射角決定処理の手順を示すフローチャートである。以下、図24及び図25を参照しながら、シート照明顕微鏡装置2で行われる照明設定処理について具体的に説明する。
シート照明顕微鏡装置2は、まず、照明光学系200から出射した光シートが照射された試料Sの画像を取得する(ステップS700)。ここでは、照明光学系200が試料Sに光シートを照射し、撮像装置30が試料Sを撮像し試料Sの画像データを生成する。生成された試料Sの画像データは、制御装置110へ出力される。
次に、シート照明顕微鏡装置2は、取得した画像に基づいて、光シートの主光線が試料に入射する入射角度を決定する(ステップS710)。ここでは、制御装置110は、図25に示す入射角度設定処理を実行し、撮像装置30から取得した画像に基づいて、照明光学系200から出射される光シートの主光線が試料に入射する入射角度を決定する。なお、図25のステップS711からステップS714は、図21のステップS620からステップS650と同様である。制御装置110は、算出された縞の幅に基づいて、入射角度を決定する(ステップS715)。入射角度は、例えば、ステップS714で算出した縞の幅と、予め設定された許容される縞の長さに基づいて、幾何学的に決定されてもよい。
入射角度が決定されると、シート照明顕微鏡装置2は、決定した入射角度に従って、照明光学系200の設定を行い(ステップS720)、光シートを試料に照射する(ステップS730)。ここでは、シート照明顕微鏡装置2は、設定装置65が制御装置110から出力された制御信号に従って、照明光学系200の設定を繰り返し行いながら、光シートを試料に照射する。具体的には、シート照明顕微鏡装置2は、0度からステップS710で決定した角度まで入射角度を変更しながら、光シートを照射する。
シート照明顕微鏡装置2が図24に示す照明設定処理を実行することによっても、従属光線角度を過度に大きくすることなく、照明性能の低下を抑制しつつ十分な縞消し効果を得る設定を行うことが可能である。従って、光シート照明のための適切な照明設定を容易に行うことができる。
なお、図24に示す照明設定処理では、決定した入射角度に従って照明光学系200の設定を行う例を示したが、入射角度が制御されればよい。このため、照明光学系200の設定を行う代わりに、試料を載せたステージ等を回転させることによって、試料の向きの設定を行ってもよい。また、これらの少なくとも一方を行えばよいため、照明光学系200の設定と試料の向きの設定の両方を行ってもよい。
上述した実施形態は、発明の理解を容易にするための具体例を示したものであり、本発明の実施形態はこれらに限定されるものではない。照明設定方法、シート照明顕微鏡装置、及びプログラムは、特許請求の範囲に記載された発明を逸脱しない範囲において、さまざまな変形、変更が可能である。
1、2・・・シート照明顕微鏡装置、10、200・・・照明光学系、11、201・・・レーザ、12・・・第1の光学系、13、14、202、203・・・レンズ、15、18、19、204、206、207・・・シリンドリカルレンズ、16・・・スキャナ、17・・・走査光学系、20・・・検出光学系、21・・・対物レンズ、22・・・波長選択素子、23・・・結像レンズ、30・・・撮像装置、40、70、80、90、100、110・・・制御装置、41・・・プロセッサ、42・・・メモリ、43・・・入出力インターフェース、44・・・記憶装置、45・・・可搬記録媒体駆動装置、46・・・可搬記録媒体、47・・・バス、40a、70a、80a、90a、100a・・・画像取得手段、40b、90c・・・画像比較手段、40c、70c、80d、90d、100f・・・角度決定手段、40d、70d、80e、90e、100g・・・出力手段、51・・・表示装置、51a、51b・・・画像、52・・・キーボード、53・・・マウス、60、65・・・設定装置、61・・・ボールネジ、62・・・ナット、63・・・保持部、64・・・モータ、70b、80c、100e・・・幅算出手段、80b、90b、100b・・・縞特定手段、100c・・・表示制御手段、100d・・・縞指定手段、205・・・ミラー、S・・・試料、L1、L2・・・光シート、R・・・観察範囲、M1、M2、M3・・・マーク
Claims (19)
- 照明光学系から出射した光シートが照射された試料の画像を取得することと、
取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定することと、
決定した前記従属光線角度に従って、前記照明光学系の設定を行うことと、を含む
ことを特徴とする照明設定方法。 - 請求項1に記載の照明設定方法において、
前記試料の画像を取得することは、
前記照明光学系から出射した前記光シートで前記試料を前記光シートの幅方向に走査することと、
前記照明光学系から出射した光シートが照射された前記試料を撮像装置で撮像することと、を含む
ことを特徴とする照明設定方法。 - 請求項2に記載の照明設定方法において、
前記走査することは、前記光シートの主光線の向きを維持しながら前記光シートを前記幅方向に平行移動することを含む
ことを特徴とする照明設定方法。 - 請求項1乃至請求項3のいずれか1項に記載の照明設定方法において、
前記従属光線角度を決定することは、
取得した前記試料の画像に基づいて、前記試料の画像に表れる縞の幅を算出することと、
算出した前記縞の幅に基づいて、前記従属光線角度を決定することと、を含む
ことを特徴とする照明設定方法。 - 請求項4に記載の照明設定方法において、
前記従属光線角度を決定することは、さらに、前記縞の幅を算出することの前に、取得した前記試料の画像に表れる縞を特定することを含む
ことを特徴とする照明設定方法。 - 請求項4又は請求項5に記載の照明設定方法において、
前記従属光線角度は、算出した前記縞の幅と許容される縞の長さに基づいて算出される
ことを特徴とする照明設定方法。 - 請求項1乃至請求項3のいずれか1項に記載の照明設定方法において、
前記試料の画像を取得することは、前記試料の複数の画像を取得することであり、
前記複数の画像の各々は、異なる前記従属光線角度を有する光シートが照射された前記試料の画像であり、
前記従属光線角度を決定することは、取得した前記複数の画像を比較することを含み、
前記従属光線角度は、前記複数の画像を比較した結果に基づいて決定される
ことを特徴とする照明設定方法。 - 請求項7に記載の照明設定方法において、
前記従属光線角度を決定することは、さらに、前記複数の画像を比較する前に、前記試料の画像に表れる縞を特定することを含み、
前記複数の画像を比較することは、前記複数の画像中の特定された前記縞を含む小領域を比較することであり、
前記従属光線角度は、前記複数の画像中の前記小領域を比較した結果に基づいて決定される
ことを特徴とする照明設定方法。 - 請求項5又は請求項8に記載の照明設定方法において、
前記縞を特定することは、
前記試料の画像に基づいて、画像信号の強度が既定値以下の領域を特定することと、
特定した前記領域に基づいて、前記縞を特定することと、を含む
ことを特徴とする照明設定方法。 - 請求項5又は請求項8に記載の照明設定方法において、
前記縞を特定することは、
異なる既定の前記従属光線角度を有する光シートが照射された前記試料の複数の画像を比較することと、
前記複数の画像を比較した結果に基づいて、前記縞を特定することと、を含む
ことを特徴とする照明設定方法。 - 請求項5又は請求項8に記載の照明設定方法において、
前記縞を特定することは、前記試料の画像に対してパターンマッチング処理を行うことを含む
ことを特徴とする照明設定方法。 - 請求項5又は請求項8乃至請求項11のいずれか1項に記載の照明設定方法において、さらに、
特定された前記縞の位置を表示装置に表示する
ことを特徴とする照明設定方法。 - 照明光学系により光シートが照射された試料の画像を取得することと、
取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの主光線が前記試料に入射する入射角度を決定することと、
決定した前記入射角度に従って、前記照明光学系の設定又は前記試料の向きの設定の少なくとも一方を行うことと、を含む
ことを特徴とする照明設定方法。 - コンピュータが、
照明光学系により光シートが照射された試料の画像を撮像装置から取得することと、
前記撮像装置から取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定することと、
決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を出力することと、を含む
ことを特徴とする照明設定方法。 - 試料に光シートを照射する照明光学系と、
前記照明光学系で光シートが照射された前記試料の画像を取得する撮像装置と、
前記撮像装置で取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定する制御装置と、
前記制御装置で決定した前記従属光線角度に従って、前記照明光学系の設定を行う設定装置と、を備える
ことを特徴とするシート照明顕微鏡装置。 - 請求項15に記載のシート照明顕微鏡装置において、
前記照明光学系は、
前記光シートで前記試料を前記光シートの幅方向に走査するスキャナと、
前記スキャナが前記光シートの幅方向の前側焦点位置に位置するように配置された、前記スキャナで偏向された光を前記試料に照射する走査光学系と、を備える
ことを特徴とするシート照明顕微鏡装置。 - 請求項15又は請求項16に記載のシート照明顕微鏡装置において、
前記制御装置は、
前記撮像装置で取得した前記試料の画像に基づいて、前記試料の画像に表れる縞の幅を算出する幅算出手段と、
前記幅算出手段で算出した前記縞の幅に基づいて、前記従属光線角度を決定する角度決定手段と、
前記角度決定手段で決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を前記設定装置へ出力する出力手段と、を含む
ことを特徴とするシート照明顕微鏡装置。 - 請求項15又は請求項16に記載のシート照明顕微鏡装置において、
前記制御装置は、
前記撮像装置で取得した、各々が異なる前記従属光線角度を有する光シートが照射された前記試料の画像である、前記試料の複数の画像を比較手段と、
前記比較手段で比較した結果に基づいて、前記従属光線角度を決定する角度決定手段と、
前記角度決定手段で決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を前記設定装置へ出力する出力手段と、を含む
ことを特徴とするシート照明顕微鏡装置。 - コンピュータに、
照明光学系により光シートが照射された試料の画像を撮像装置から取得する処理と、
前記撮像装置から取得した前記試料の画像に基づいて、前記照明光学系から出射される光シートの幅方向についての従属光線角度を決定する処理と、
決定した前記従属光線角度に応じた前記照明光学系の設定を指示する制御信号を出力する処理と、を実行させる
ことを特徴とするプログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016094159A JP2017203822A (ja) | 2016-05-09 | 2016-05-09 | 照明設定方法、シート照明顕微鏡装置、及びプログラム |
| US15/495,294 US10379335B2 (en) | 2016-05-09 | 2017-04-24 | Illumination setting method, light sheet microscope apparatus, and recording medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016094159A JP2017203822A (ja) | 2016-05-09 | 2016-05-09 | 照明設定方法、シート照明顕微鏡装置、及びプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017203822A true JP2017203822A (ja) | 2017-11-16 |
Family
ID=60242934
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016094159A Pending JP2017203822A (ja) | 2016-05-09 | 2016-05-09 | 照明設定方法、シート照明顕微鏡装置、及びプログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US10379335B2 (ja) |
| JP (1) | JP2017203822A (ja) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017203822A (ja) * | 2016-05-09 | 2017-11-16 | オリンパス株式会社 | 照明設定方法、シート照明顕微鏡装置、及びプログラム |
| EP3538941B1 (en) | 2016-11-10 | 2025-04-23 | The Trustees of Columbia University in the City of New York | Rapid high-resolution imaging methods for large samples |
| WO2019008765A1 (ja) | 2017-07-07 | 2019-01-10 | オリンパス株式会社 | 曲がり測定装置、それを用いた撮像装置、投影装置及び投影撮像装置、並びに曲がり測定方法 |
| DE102018102241B4 (de) * | 2018-02-01 | 2022-02-24 | Leica Microsystems Cms Gmbh | Verfahren zum Abbilden einer Probe mittels eines Lichtblattmikroskops sowie ein Lichtblattmikroskop |
| CN109143562B (zh) * | 2018-09-12 | 2020-12-15 | 苏州大学 | 一种基于变焦原理的可变光片照明系统 |
| CN110618532A (zh) * | 2019-08-15 | 2019-12-27 | 南京巨鲨显示科技有限公司 | 一种基于光感应的阅片设备控制方法及装置 |
Family Cites Families (34)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2266366B (en) * | 1992-04-16 | 1996-04-24 | Rank Taylor Hobson Ltd | Angle detection |
| DE10257423A1 (de) * | 2002-12-09 | 2004-06-24 | Europäisches Laboratorium für Molekularbiologie (EMBL) | Mikroskop |
| US8098956B2 (en) * | 2007-03-23 | 2012-01-17 | Vantana Medical Systems, Inc. | Digital microscope slide scanning system and methods |
| DE102007015063B4 (de) | 2007-03-29 | 2019-10-17 | Carl Zeiss Microscopy Gmbh | Optische Anordnung zum Erzeugen eines Lichtblattes |
| DE102007045897A1 (de) * | 2007-09-26 | 2009-04-09 | Carl Zeiss Microimaging Gmbh | Verfahren zur mikroskopischen dreidimensionalen Abbildung einer Probe |
| DE102007047461A1 (de) * | 2007-09-28 | 2009-04-02 | Carl Zeiss Microimaging Gmbh | Verfahren und optische Anordnung zur Untersuchung einer Probe |
| DE102007063274B8 (de) * | 2007-12-20 | 2022-12-15 | Albert-Ludwigs-Universität Freiburg | Mikroskop |
| DE102008009216A1 (de) * | 2008-02-13 | 2009-08-20 | Carl Zeiss Microimaging Gmbh | Vorrichtung und Verfahren zum räumlich hochauflösenden Abbilden einer Struktur einer Probe |
| US9134521B2 (en) * | 2008-07-30 | 2015-09-15 | The Regents Of The University Of California | Multidirectional selective plane illumination microscopy |
| US8711211B2 (en) * | 2010-06-14 | 2014-04-29 | Howard Hughes Medical Institute | Bessel beam plane illumination microscope |
| DE102010060121C5 (de) * | 2010-10-22 | 2023-09-28 | Leica Microsystems Cms Gmbh | SPIM-Mikroskop mit sequenziellem Lightsheet |
| US10908403B2 (en) * | 2011-02-14 | 2021-02-02 | European Molecular Biology Laboratory (Embl) | Light-pad microscope for high-resolution 3D fluorescence imaging and 2D fluctuation spectroscopy |
| DE102012211943A1 (de) * | 2012-07-09 | 2014-06-12 | Carl Zeiss Microscopy Gmbh | Mikroskop |
| JP6029394B2 (ja) * | 2012-09-11 | 2016-11-24 | 株式会社キーエンス | 形状測定装置 |
| DE102012020240A1 (de) * | 2012-10-12 | 2014-04-17 | Carl Zeiss Microscopy Gmbh | Mikroskop und Verfahren zur SPIM Mikroskopie |
| DE102012110077A1 (de) * | 2012-10-23 | 2014-06-26 | Karlsruher Institut für Technologie | Mikroskop mit mindestens einem Beleuchtungsstrahl in Form einer Lichtscheibe |
| JP6086366B2 (ja) * | 2013-04-05 | 2017-03-01 | 国立研究開発法人理化学研究所 | 顕微鏡、焦準器具、流体保持器具、及び光学ユニット |
| JP6318358B2 (ja) * | 2013-04-08 | 2018-05-09 | 株式会社ニューフレアテクノロジー | 照明装置および検査装置 |
| JP6210754B2 (ja) * | 2013-06-24 | 2017-10-11 | オリンパス株式会社 | 走査型光学顕微鏡 |
| US10061111B2 (en) * | 2014-01-17 | 2018-08-28 | The Trustees Of Columbia University In The City Of New York | Systems and methods for three dimensional imaging |
| US9500846B2 (en) * | 2014-03-17 | 2016-11-22 | Howard Hughes Medical Institute | Rapid adaptive optical microscopy over large multicellular volumes |
| US10247672B2 (en) * | 2014-09-29 | 2019-04-02 | Howard Hughes Medical Institute | Non-linear structured illumination microscopy |
| US10181190B2 (en) * | 2014-11-04 | 2019-01-15 | Olympus Corporation | Microscope and microscope image acquisition method |
| US10007100B2 (en) * | 2014-11-04 | 2018-06-26 | Olympus Corporation | Light sheet illumination microscope and light sheet illumination method |
| WO2016138003A1 (en) * | 2015-02-23 | 2016-09-01 | The Research Foundation For The State University Of New York | Method and apparatus for tiling light sheet selective plane illumination microscopy with real-time optimized light sheet |
| WO2016166151A1 (de) * | 2015-04-13 | 2016-10-20 | Leica Microsystems Cms Gmbh | Verfahren und vorrichtung zum untersuchen einer probe |
| JP6417262B2 (ja) * | 2015-04-15 | 2018-11-07 | オリンパス株式会社 | シート照明顕微鏡 |
| DE102015209756A1 (de) * | 2015-05-28 | 2016-12-01 | Carl Zeiss Microscopy Gmbh | Anordnung und Verfahren zur Lichtblattmikroskopie |
| JP6555803B2 (ja) * | 2015-06-09 | 2019-08-07 | オリンパス株式会社 | シート照明顕微鏡、及び、シート照明顕微鏡の照明方法 |
| US10877254B2 (en) * | 2015-07-17 | 2020-12-29 | Leica Microsystems Cms Gmbh | Light sheet microscope for simultaneously imaging a plurality of object planes |
| JP2017090851A (ja) * | 2015-11-17 | 2017-05-25 | オリンパス株式会社 | シート照明顕微鏡、及び、シート照明方法 |
| US10670523B2 (en) * | 2016-04-19 | 2020-06-02 | Intel Corporation | Particulate matter measurement using light sheet generation and scattering analysis |
| JP2017203822A (ja) * | 2016-05-09 | 2017-11-16 | オリンパス株式会社 | 照明設定方法、シート照明顕微鏡装置、及びプログラム |
| US10310246B2 (en) * | 2016-09-28 | 2019-06-04 | SCREEN Holdings Co., Ltd. | Converter, illuminator, and light sheet fluorescence microscope |
-
2016
- 2016-05-09 JP JP2016094159A patent/JP2017203822A/ja active Pending
-
2017
- 2017-04-24 US US15/495,294 patent/US10379335B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US10379335B2 (en) | 2019-08-13 |
| US20170322408A1 (en) | 2017-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2017203822A (ja) | 照明設定方法、シート照明顕微鏡装置、及びプログラム | |
| JP7649648B2 (ja) | 誘導放出抑制を伴う蛍光顕微鏡を使用してサンプルを結像するための方法 | |
| JP6503221B2 (ja) | 3次元情報取得装置、及び、3次元情報取得方法 | |
| US11449964B2 (en) | Image reconstruction method, device and microscopic imaging device | |
| US9134523B2 (en) | Predictive focusing for image scanning systems | |
| JP2020535473A (ja) | リアルタイムオートフォーカス合焦アルゴリズム | |
| CN113366364A (zh) | 载玻片扫描系统中的实时聚焦 | |
| US10642012B2 (en) | Laser scanning microscope, and laser scanning microscope control method | |
| CN121596531A (zh) | 显微镜、用于确定显微镜的视场中的场不均匀性的方法和显微镜学方法 | |
| JP2018521360A (ja) | 光学顕微鏡における画像処理のためのシステムおよび方法 | |
| US20190391381A1 (en) | Imaging system and image construction method | |
| JP5471715B2 (ja) | 合焦装置、合焦方法、合焦プログラム及び顕微鏡 | |
| JP6177000B2 (ja) | レーザ走査型顕微鏡 | |
| JP4197898B2 (ja) | 顕微鏡、三次元画像生成方法、三次元画像を生成する制御をコンピュータに行わせるプログラム、及びそのプログラムを記録した記録媒体 | |
| JP7773351B2 (ja) | 顕微鏡システム、及び、顕微鏡制御装置 | |
| EP3929570A1 (en) | Microscale image capture system | |
| JP2861723B2 (ja) | 共焦点顕微鏡 | |
| JP2010164635A (ja) | 共焦点顕微鏡 | |
| JPH0783844A (ja) | 欠陥検査装置 | |
| JP2015210396A (ja) | アライメント装置、顕微鏡システム、アライメント方法、及びアライメントプログラム | |
| JP7839836B2 (ja) | 光学装置及び光学装置の補正方法 | |
| JP2019035837A (ja) | 顕微鏡システム、顕微鏡システムの制御方法 | |
| CN103399397A (zh) | 用于图像扫描系统的预测聚焦 | |
| JP2006228748A (ja) | 電子顕微鏡 | |
| WO2024124369A1 (en) | Imaging systems for scanning surfaces |