JP7373592B2 - レンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体 - Google Patents

レンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体 Download PDF

Info

Publication number
JP7373592B2
JP7373592B2 JP2021574005A JP2021574005A JP7373592B2 JP 7373592 B2 JP7373592 B2 JP 7373592B2 JP 2021574005 A JP2021574005 A JP 2021574005A JP 2021574005 A JP2021574005 A JP 2021574005A JP 7373592 B2 JP7373592 B2 JP 7373592B2
Authority
JP
Japan
Prior art keywords
optical
imaging
aperture
filters
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021574005A
Other languages
English (en)
Other versions
JPWO2021153473A5 (ja
JPWO2021153473A1 (ja
Inventor
睦 川中子
和佳 岡田
慶延 岸根
友也 平川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2021153473A1 publication Critical patent/JPWO2021153473A1/ja
Publication of JPWO2021153473A5 publication Critical patent/JPWO2021153473A5/ja
Application granted granted Critical
Publication of JP7373592B2 publication Critical patent/JP7373592B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B11/00—Filters or other obturators specially adapted for photographic purposes
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B9/00—Exposure-making shutters; Diaphragms
    • G03B9/02—Diaphragms
    • G03B9/04—Single movable plate with two or more apertures of graded size, e.g. sliding plate or pivoting plate
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/28—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 for polarising
    • G02B27/288—Filters employing polarising elements, e.g. Lyot or Solc filters
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00—Optical elements other than lenses
    • G02B5/20—Filters
    • G02B5/201—Filters in the form of arrays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/006—Filter holders
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B33/00—Colour photography, other than mere exposure or projection of a colour film
    • G03B33/04—Colour photography, other than mere exposure or projection of a colour film by four or more separation records
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B33/00—Colour photography, other than mere exposure or projection of a colour film
    • G03B33/10—Simultaneous recording or projection
    • G03B33/16—Simultaneous recording or projection using colour-pattern screens
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/75—Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Blocking Light For Cameras (AREA)
  • Studio Devices (AREA)
  • Lens Barrels (AREA)
  • Structure And Mechanism Of Cameras (AREA)

Description

本発明は、マルチスペクトル画像を撮像するためのレンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体に関する。
マルチスペクトル画像を撮像するための技術に関し、例えば特許文献１には、偏光センサと瞳分割を用いることでマルチスペクトル撮像を可能とした偏光カラー撮像装置が記載されている。
国際公開２０１４／０２０７９１号公報
本開示の技術に係る一つの実施形態は、良好な画質のマルチスペクトル画像を容易に取得できるレンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体を提供する。
本発明の第１の態様に係るレンズ装置は、被写体の光学像を結像させるレンズを含む撮像光学系と、光軸が撮像光学系の光軸と一致した状態で撮像光学系の瞳近傍に配置された光学部材であって、複数の開口領域を備える枠体と、複数の開口領域の少なくとも１つに配置される複数の光学フィルタであって、少なくとも一部の波長帯域が異なる光を透過させる２つ以上の光学フィルタを含む複数の光学フィルタと、複数の開口領域の少なくとも１つに配置される複数の偏光フィルタであって、偏光方向が異なる複数の偏光フィルタと、を有する光学部材と、を備え、撮像光学系から出射される光の光量が、複数の開口領域について変更可能である。
第２の態様に係るレンズ装置は第１の態様において、少なくとも１つの開口領域に配置されて開口領域の開口面積を調整する調整部材をさらに備える。
第３の態様に係るレンズ装置は第２の態様において、調整部材が複数の開口領域に配置される。
第４の態様に係るレンズ装置は第２または第３の態様において、調整部材は開口面積が可変である。
第５の態様に係るレンズ装置は第１から第４の態様のいずれか１つにおいて、複数の開口領域のうち少なくとも1つの開口領域に配置され、少なくとも１つの開口領域を透過する光を減光する減光フィルタを備える。
第６の態様に係るレンズ装置は第５の態様において、減光フィルタが複数の開口領域にそれぞれ配置される。
第７の態様に係るレンズ装置は第５または第６の態様において、減光フィルタの減光度合いが可変である。
第８の態様に係るレンズ装置は第５から第７の態様のいずれか１つにおいて、光学部材は、複数の開口領域に光学フィルタ、及び偏光フィルタが固定された光学部材であり、複数の開口領域のうち少なくとも１つの開口領域に対して減光フィルタが挿入される。
第９の態様に係るレンズ装置は、被写体の光学像を結像させるレンズを含む撮像光学系と、光軸が撮像光学系の光軸と一致した状態で撮像光学系の瞳近傍に配置された光学部材であって、複数の開口領域を備える枠体と、複数の開口領域の少なくとも１つに配置される複数の光学フィルタであって、少なくとも一部の波長帯域が異なる光を透過させる２つ以上の光学フィルタを含む複数の光学フィルタと、複数の開口領域の少なくとも１つに配置される複数の偏光フィルタであって、偏光方向が異なる複数の偏光フィルタと、を有する光学部材と、を備え、撮像光学系から出射される光の光量が、複数の開口領域について調整されたレンズ装置である。
第１０の態様に係るレンズ装置は第９の態様において、調整は、レンズ装置が撮像素子を有する撮像装置本体に装着された場合に、撮像素子からの出力を波長帯域の間で一定にする調整である。
第１１の態様に係るレンズ装置は第９または第１０の態様において、複数の開口領域のうち少なくとも１つについて開口面積が調整された、かつ／または調整可能である。
第１２の態様に係るレンズ装置は第９から第１１の態様のいずれか１つにおいて、光学部材は、複数の開口領域に光学フィルタ、及び偏光フィルタが固定された光学部材であり、複数の開口領域のうち少なくとも１つの開口領域に対して、透過する光を減光する減光フィルタが挿入される。
第１３の態様に係るレンズ装置は第１から第１２の態様のいずれか１つにおいて、光学部材は撮像光学系に対し挿入及び抜去が可能である。
本発明の第１４の態様に係る撮像装置は、第１から第１３のいずれか１つに係るレンズ装置と、複数の偏光フィルタの偏光方向に対応した偏光方向を有する複数の偏光素子を備え、複数の開口領域のいずれかを透過した光を選択的に受光する複数の画素群を含む撮像素子と、撮像素子から出力される複数の画像信号に基づいて、複数の光学フィルタの波長帯域にそれぞれ対応する複数の画像を生成するプロセッサと、を備える。
第１５の態様に係る撮像装置は第１４の態様において、プロセッサは、複数の画像信号に基づいて、波長帯域の間での光量比を算出する。
第１６の態様に係る撮像装置は第１５の態様において、プロセッサは、光量比がしきい値未満の場合は、ユーザに光量比の改善を促す。
第１７の態様に係る撮像装置は第１５または第１６の態様において、プロセッサは、光量比に基づいて、複数の開口領域から出射される光の光量を調整する。
第１８の態様に係る撮像装置は第１５から第１７の態様のいずれか１つにおいて、複数の開口領域にそれぞれ対応した複数の遮蔽部材であって、複数の開口領域のうち特定の開口領域以外の開口領域を遮蔽する複数の遮蔽部材を備え、プロセッサは、複数の遮蔽部材のうちいずれかがレンズ装置に装着された状態で取得した複数の画像に基づいて、光量比を算出する。
第１９の態様に係る撮像装置は第１４から第１８の態様のいずれか１つにおいて、複数の光学フィルタの波長帯域に対応する波長帯域を有する複数のカラーフィルタが撮像素子に備えられ、プロセッサは複数の画像を合成する。プロセッサは複数の画像信号に対応する複数の画像を全て合成してもよいし、一部の画像を合成してもよい。また、プロセッサは複数の画像を合成してカラー画像を生成してもよい。
本発明の第２０の態様に係る光学部材は、複数の開口領域を備える光学部材であって、複数の開口領域のうち少なくとも１つの開口領域の面積を変更する可変機構を備える。
本発明の第２１の態様に係る撮像方法は、第１から第１３の態様のいずれか１つに係るレンズ装置と、複数の偏光フィルタの偏光方向に対応した偏光方向を有する複数の偏光素子を備え、複数の開口領域のいずれかを透過した光を選択的に受光する複数の画素群を含む撮像素子と、を備える撮像装置の撮像方法であって、撮像素子から出力される複数の画像信号に基づいて、複数の光学フィルタの波長帯域にそれぞれ対応する複数の画像を生成する画像生成工程を有する。
第２２の態様に係る撮像方法は第２１の態様において、複数の画像信号に基づいて波長帯域の間での光量比を算出する情報算出工程をさらに有する。
第２３の態様に係る撮像方法は第２２の態様において、光量比がしきい値未満の場合は、撮像装置のユーザに光量比の改善を促す改善要求工程をさらに有する。
第２４の態様に係る撮像方法は第２２の態様において、光量比に基づいて、複数の開口領域から出射される光の光量を調整する光量調整工程をさらに有する。
本発明の第２５の態様に係る撮像プログラムは、第２１から第２４の態様のいずれか１つに係る撮像方法をコンピュータに実行させる。
図１は、第１の実施形態に係る撮像装置の概略構成を示す図である。 図２は、撮像素子の概略構成を示す図である。 図３は、図２に示した１つ画素（図２の破線部）の概略構成を示す断面図である。 図４は、画像生成部の構成を示す図である。 図５は、レンズ装置の外観斜視図である。 図６は、レンズ装置の光軸方向における断面図である。 図７は、枠体の外観図である。 図８は、光学部材の構成例を示す図である。 図９は、フィルタセットの構成例を示す図である。 図１０は、偏光フィルタの偏光方向の例を示す図である。 図１１は、光学部材の他の構成例を示す図である。 図１２は、減光フィルタの減光度合いが可変である光学部材の構成例を示す図である。 図１３は、調整部材の例を示す図である。 図１４は、調整部材の他の例を示す図である。 図１５は、開口領域の面積を変更する可変機構を備える光学部材の例を示す図である。 図１６は、３波長の場合の開口領域の配置例を示す図である。 図１７は、枠体に遮蔽部材を装着する様子を示す図である。 図１８は、光量比調整及び撮像の処理を示すフローチャートである。 図１９は、光量比調整及び撮像の処理を示す他のフローチャートである。
本発明に係るレンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体の一つの実施形態は以下の通りである。説明においては、必要に応じて添付図面が参照される。
＜第１の実施形態＞
＜撮像装置の構成＞
図１は、第１の実施形態に係る撮像装置の概略構成を示す図である。第１の実施形態に係る撮像装置１０（撮像装置）はマルチスペクトル画像を撮像する撮像装置であり、主としてレンズ装置１００（レンズ装置、撮像光学系）と、撮像装置本体２００（撮像装置、撮像素子、プロセッサ）と、を備える。撮像装置本体２００は、撮像素子２１０（撮像素子）と、信号処理部２３０（信号処理部、プロセッサ）と、を備える。
＜撮像素子の構成＞
図２は、撮像素子２１０の概略構成を示す図であり、図３は、図２に示した１つ画素（図２の破線部）の概略構成を示す断面図である。撮像素子２１０は、ＣＭＯＳ(Complementary Metal-Oxide Semiconductor)型の撮像素子（イメージセンサ）であり、ピクセルアレイ層２１１、偏光フィルタ素子アレイ層２１３、及びマイクロレンズアレイ層２１５を有するモノクローム型の撮像素子である。各層は、像面側から物体側に向かって、ピクセルアレイ層２１１、偏光フィルタ素子アレイ層２１３（複数の偏光素子）、マイクロレンズアレイ層２１５の順で配置される。なお、撮像素子２１０は、ＣＭＯＳ型に限らず、ＸＹアドレス型、またはＣＣＤ（Charge Coupled Device）型のイメージセンサでもよい。
ピクセルアレイ層２１１は、多数のフォトダイオード２１２（複数の画素群）を二次元的に配列して構成される。１つのフォトダイオード２１２は、１つの画素を構成する。各フォトダイオード２１２は、水平方向（ｘ方向）及び垂直方向（ｙ方向）に沿って規則的に配置される。
偏光フィルタ素子アレイ層２１３は、偏光方向（透過させる光の偏光方向）が異なる４種類の偏光フィルタ素子２１４Ａ，２１４Ｂ，２１４Ｃ，２１４Ｄ（複数の偏光素子）を二次元的に配列して構成される。偏光フィルタ素子２１４Ａ，２１４Ｂ，２１４Ｃ，２１４Ｄの偏光方向は、例えば０°，４５°，９０°，１３５°とすることができる。また、これらの偏光方向は、光学部材における偏光フィルタの偏光方向（図１０参照）に対応させることができる。撮像素子２１０は、これら偏光フィルタ素子２１４Ａ～２１４Ｄにより、複数の開口領域を透過した光のいずれかを選択的に受光する複数の画像群を含む。これらの偏光フィルタ素子２１４Ａ～２１４Ｄはフォトダイオード２１２と同じ間隔で配置され、画素ごとに備えられる。
マイクロレンズアレイ層２１５は、各画素に配列されたマイクロレンズ２１６を備える。
＜画像生成部の構成＞
図４は画像生成部の構成を示す図である。信号処理部２３０は、撮像素子から出力される信号にアナログ信号処理を施すアナログ信号処理部２３２と、画像生成部２３４と、係数記憶部２３６と、を備える。画像生成部２３４（プロセッサ）は、本発明に係る撮像方法をコンピュータに実行させる撮像プログラムのコンピュータ読み取り可能なコードを記録したＲＯＭ（Read Only Memory）等の非一時的記録媒体（不図示）及び作業用の一時的記憶領域（不図示）を備え、撮像素子２１０から出力される複数の画像信号（異なる偏光方向に対応する画像信号）に基づいて、レンズ装置１００に配置された複数の光学フィルタ（図８等を参照）の波長帯域にそれぞれ対応する複数の画像を生成する。画像生成部２３４は、波長帯域λ１，λ２，λ３の画像（３バンドのマルチスペクトル画像）を生成することができる。また、画像生成部２３４は、光量比の算出及び／または調整、光量比の調整を促すメッセージの出力等を行う（後述）。
上述した画像生成部２３４の機能は、各種のプロセッサ（processor）及び記録媒体を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。各機能は１つのプロセッサにより実現されてもよいし、同種または異種の複数のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ、またはＣＰＵとＧＰＵの組み合わせ）で実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。
上述したプロセッサあるいは電気回路がソフトウェア（プログラム）を実行する際は、実行するソフトウェアのコンピュータ（例えば、画像生成部２３４を構成する各種のプロセッサや電気回路、及び／またはそれらの組み合わせ）で読み取り可能なコードをＲＯＭ等の非一時的記録媒体に記憶しておき、コンピュータがそのソフトウェアを参照する。
撮像装置１０は、不図示のシャッタレリーズスイッチ等から撮影指示入力を受け付けると、撮像素子２１０における露光制御を行う。この露光制御により撮像素子２１０の受光面に結像された被写体の光学像は、撮像素子２１０により電気信号に変換される。撮像素子２１０の各画素には、フォトダイオード２１２に入射する光の光量に応じた電荷が蓄積され、撮像素子２１０からは各画素に蓄積された電荷量に応じた電気信号が画像信号として読み出され、出力される。
＜レンズ装置の構成＞
図５はレンズ装置１００の外観斜視図であり、図６はレンズ装置１００の光軸Ｌ方向における断面図である。これらの図に示すように、レンズ装置１００はレンズ鏡筒１０２に第１のレンズ１１０（レンズ、撮像光学系）及び第２のレンズ１２０（レンズ、撮像光学系）とから構成される単一の撮像光学系が配置され、これらレンズ群は、それぞれ第１レバー１０４，第２レバー１０６を回動させることにより光軸Ｌの方向に進退して、ズーム及び／またはフォーカスが調整される。第１のレンズ１１０及び第２のレンズ１２０は、複数のレンズから構成されるレンズ群でもよい。また、レンズ鏡筒１０２には、レンズ装置１００の瞳位置（瞳近傍）にスリット１０８が形成されており、このスリット１０８に光学部材１３０（光学部材）が挿入されて、光軸が撮像光学系の光軸Ｌと一致した状態で配置される。
＜光学部材の構成（その１）＞
後述するように、光学部材１３０は、枠体（枠体）と、光学フィルタ（カラーフィルタ、複数の光学フィルタ）と、偏光フィルタ（複数の偏光フィルタ）と、減光フィルタ（減光フィルタ）と、を備える。光学部材１３０はレンズ鏡筒１０２に挿入及び抜去が可能であり、光源（被写体）の特性に合わせて、特性が異なる光学部材を用いることができる。そして、これにより撮像光学系から出射される光の光量が複数の開口領域のそれぞれについて調整され、かつ／または調整可能となる。なお、レンズ装置１００が撮像装置本体２００に装着された場合に、開口領域１３２Ａ～１３２Ｄに対応して撮像素子２１０からの出力（感度）を複数の波長帯域間で一定または指定された範囲にすることを「調整」ということができる。また、被写体（光源）のスペクトル、レンズ（第１のレンズ１１０、第２のレンズ１２０）の分光透過率、フィルタ（光学フィルタ、偏光フィルタ）の透過波長特性、及び波長帯域とイメージセンサ（撮像素子２１０）の出力との関係により定まる特性を「感度」ということができる。
一般に、イメージセンサ単体での感度は製造過程にて決定され、被写体のスペクトルもその物性に依存するから、これらを撮影時に変更することは困難である。このような観点から、本発明ではレンズの瞳を波長帯域ごとに分割し、各波長帯域に紐付けられた偏光情報を元に分光画像（光学フィルタの波長帯域に対応する画像）を生成しており、レンズ瞳（開口領域）ごとに光量を調整することで波長帯域間の光量比を変えることができる。また、光軸（撮像方向）のズレがない分光画像を同時に取得することができ、上述した特許文献１に記載の技術と異なり複数回の撮影を行う必要がない。このため、良好な画質のマルチスペクトル画像を容易に取得することができる（後述する態様の光学部材の場合も同様である）。
図７は枠体１３２の外観図であり、図８は光学部材の構成例を示す図である。具体的には、図７の（ａ）部分～（ｆ）部分は、それぞれ背面図、上面図、左側面図、底面図、斜視図、正面図である。図７の（ｅ）部分及び（ｆ）部分に示すように、枠体１３２は４つの開口領域１３２Ａ～１３２Ｄ（複数の開口領域）を備える。開口領域１３２Ａ～１３２Ｄの形状は扇型に限らず、円形や矩形、多角形等他の形状でもよい（後述する他の態様でも同様である）。これら開口領域（枠体１３２の裏面側）には、図７の（ａ）部分及び図８に示すように、フィルタセット１４０Ａ～１４０Ｄ（光学フィルタ（カラーフィルタ）、偏光フィルタ、減光フィルタ）がそれぞれ配置される。フィルタセット１４０Ａ～１４０Ｄは接着剤で固定してもよい。
図９はフィルタセット１４０の構成例を示す図である。具体的には、図９の（ａ）部分に示すように、フィルタセット１４０Ａは光学フィルタ１４２Ａと、偏光フィルタ１４４Ａと、減光フィルタ１４６Ａと、を重ねて構成される。同様に、図９の（ｂ）部分に示すように、フィルタセット１４０Ｂは光学フィルタ１４２Ｂと、偏光フィルタ１４４Ｂと、減光フィルタ１４６Ｂと、を重ねて構成される。同様に、図９の（ｃ）部分に示すように、フィルタセット１４０Ｃは光学フィルタ１４２Ｃと、偏光フィルタ１４４Ｃと、減光フィルタ１４６Ｃと、を重ねて構成される。同様に、図９の（ｄ）部分に示すように、フィルタセット１４０Ｄは光学フィルタ１４２Ｄと、偏光フィルタ１４４Ｄと、減光フィルタ１４６Ｄと、を重ねて構成される。
光学フィルタ１４２Ａ～１４２Ｄは少なくとも一部の波長帯域が異なる光を透過させる複数の光学フィルタ（バンドパスフィルタ）であり、偏光フィルタ１４４Ａ～１４４Ｃは偏光方向が異なる複数の偏光フィルタであり、減光フィルタ１４６Ａ～１４６Ｄは開口領域１３２Ａ～１３２Ｄを透過する光を減光する減光フィルタである。図１０は偏光フィルタの偏光方向の例を示す図であり、同図の（ａ）部分～（ｄ）部分に例示するように、偏光フィルタ１４４Ａ～１４４Ｄの偏光方向は最大で４方向（開口領域の数と同じ；例えば０°，４５°，９０°，１３５°）とすることができる。なお、偏光フィルタ１４４Ａ～１４４Ｄは偏光フィルムにより偏光するフィルタでもよいし、ワイヤーグリッドあるいは複数のスリットにより偏光するフィルタでもよい。
減光フィルタ１４６Ａ～１４６Ｄは開口領域１３２Ａ～１３２Ｄを透過する光を減光するフィルタであり、例えばＮＤフィルタ（ＮＤ：Neutral Density）を用いることができる。減光フィルタ１４６Ａ～１４６Ｄの減光度合いは一部、または全てのフィルタで違っていてもよく、ユーザは選択した減光度の減光フィルタを用いることにより、開口領域１３２Ａ～１３２Ｄの間での光量比を調整することができる。
図８，９に示す光学部材１３０は、製造工程において光量比を調整できるので、良好な画質のマルチスペクトル画像を取得するのに有効である。また、光学部材の剛性を高くすることができる。さらに、光学部材１３０では開口領域１３２Ａ～１３２Ｄの開口面積を調整していないので、生成される画像の明るさを確保することができ、また被写界深度を浅くしたい場合や小絞りによる像ボケを防止したい場合に有効である。
＜光学部材の構成（その２）＞
図１１は光学部材の他の構成例を示す図である。図８，９等について上述した例では開口領域１３２Ａ～１３２Ｄにフィルタセット１４０Ａ～１４０Ｄがそれぞれ配置されているが、図１１に示す例では、開口領域１３２Ａ～１３２Ｄには光学フィルタ及び偏光フィルタが配置されており、減光フィルタがレンズ鏡筒１０２に別途挿入される。
具体的には、図１１の（ａ）部分に示すように、光学フィルタ１４２Ａ及び偏光フィルタ１４４Ａが開口領域１３２Ａに配置される。同様に、光学フィルタ１４２Ｂ及び偏光フィルタ１４４Ｂが開口領域１３２Ｂに配置され、光学フィルタ１４２Ｃ及び偏光フィルタ１４４Ｃが開口領域１３２Ｃに配置され、光学フィルタ１４２Ｄ及び偏光フィルタ１４４Ｄが開口領域１３２Ｄに配置される。そして、図１１の（ｂ）部分に示すように、光学フィルタ及び偏光フィルタが配置された状態で減光フィルタ１４６Ａ，１４６Ｂが配置（スリット１０８に挿入）されることにより、光学部材１３０Ａが構成される。減光フィルタは４つの開口領域１３２Ａ～１３２Ｄのうち一部の開口領域について挿入してもよいし、全ての開口領域について挿入してもよい。なお、減光フィルタを直接挿入するのではなく枠体１３２に配置（接着等）して挿入してもよい。また、減光フィルタの減光度合いは所望の光量比に応じて選択してよい。
このような態様によれば、ユーザは必要な開口領域について減光フィルタを挿入することで開口領域間の光量比を調整することができる。また、ユーザが光量比のフィードバックを行うことができるので、ユーザごとの使用環境（被写体の種類、光源の特性、画像の使用目的等）に合わせた光量調整ができ、より高い条件数で良好な画質のマルチスペクトル画像を取得することができる。
なお、図１１の（ａ）部分及び（ｂ）部分に示すように減光フィルタ自身を配置するのではなく、減光フィルタを枠体に配置しその枠体を挿入してもよい。例えば、図１１の（ｃ）部分に示すように減光フィルタ１４６Ａ，１４６Ｂを開口領域１３３Ａ，１３３Ｂに配置して枠体１３３を構成し、その枠体１３３を枠体１３２に近接して（瞳近傍に）配置してもよい。これにより光学部材１３０Ｂが形成される。
＜光学部材の構成（その３）＞
本発明において、減光フィルタの減光度合いは可変でもよい。図１２は減光フィルタの減光度合いが可変である光学部材の構成例を示す図であり、光学フィルタ１４２Ａ及び偏光フィルタ１４４Ａに加えて、減光度合いが可変である減光フィルタ１４７Ａ（可変減光フィルタ）により構成されるフィルタセット１４１Ａを示している。このような可変減光フィルタは、一部の開口領域に配置してもよいし、全ての開口領域に配置してもよい。なお、複数の減光フィルタを重ねて可変減光フィルタを構成し、それら複数の減光フィルタを相対的に回転させることで減光度合いを調整することができる。また、液晶表示素子を用いて減光フィルタを構成し、液晶の透過率を変更することにより減光度合いを調整することもできる。
このような態様によれば、光量比をアクティブに調整することができるため、例えば外光のように朝夕と日中でスペクトルが変化する環境でも、ユーザは状況に応じて最適な光量比（条件数）を容易に得ることができ、これにより良好な画質のマルチスペクトル画像を取得することができる。
＜光学部材の構成（その４）＞
上述した態様では開口領域の開口面積は同じであるが、本発明において開口領域間で開口面積が違っていてもよい。図１３は調整部材（各瞳の開口面積が調整された瞳分割枠）の例を示す図であり、このような調整部材をもちいて開口面積を調整（枠体の開口領域を絞る）してもよい。図１３の（ａ）部分に示すように、調整部材１３４は枠体１３２の開口領域１３２Ａ～１３２Ｄの開口面積を調整する開口領域１３４Ａ～１３４Ｄを有する。同図の（ｂ）部分に示すように、調整部材１３４は枠体１３２の前面（背面でもよい）に配置され、枠体１３２に光学フィルタ１４２Ａ～１４２Ｄ及び偏光フィルタ１４４Ａ～１４４Ｄが配置されて、光学部材１３５が形成される。調整部材１３４に光学フィルタ及び偏光フィルタを配置したものを枠体１３２に装着してもよい。
開口領域１３４Ａ～１３４Ｄの開口面積は開口ごとに違っていてもよい。また、調整部材１３４は１つの開口領域について開口面積を調整する部材でもよいし、複数の開口領域に配置されてそれら複数の開口領域ついて開口面積を調整する部材でもよい。なお、調整部材１３４の形状は円形でなく矩形や多角形等他の形状でもよい。
このような態様によれば、開口面積を調整する（絞る）ことができ、被写界深度を深くしたい場合に有効である。
＜光学部材の構成（その５）＞
図１４は調整部材の他の例を示す図である。図１４では、開口領域１３６Ａ，１３６Ｄが設けられた調整部材１３６（光学部材、可変機構）と、開口領域１３７Ｂ，１３７Ｃが設けられた調整部材１３７（光学部材、可変機構）とを示している。これら開口領域の開口面積は違っていてもよく、所望の光量比に応じて異なる開口面積を設定することができる。開口面積の異なる調整部材を複数用意しておき、ユーザが光量比に応じて調整部材を選択してもよい。なお、調整部材は１つの開口領域について開口面積を調整する部材でもよいし、複数の開口領域に配置されてそれら複数の開口領域について開口面積を調整する部材でもよい。また、調整部材は図１４の例のように複数に分割されていてもよいし、１部材として構成されていてもよい。
調整部材１３６，１３７を用いる場合、枠体１３２に光学フィルタ１４２Ａ～１４２Ｄ及び偏光フィルタ１４４Ａ～１４４Ｄを配置しておき、調整部材１３６，１３７をレンズ鏡筒１０２に挿入して、開口領域１３６Ａ，１３７Ｂ，１３７Ｃ，１３６Ｄを枠体１３２の開口領域１３２Ａ～１３２Ｄに対応させる。
＜光学部材の構成（その６）＞
図１５は開口領域の面積を変更する可変機構を備える光学部材の例を示す図である。図１５に示す光学部材１３８（可変機構、光学部材）は複数の開口領域１３８Ａ～１３８Ｄを有し、これら開口領域の開口面積を変更することができる。開口面積の変更は、液晶表示素子（不図示）の遮光領域の面積を調整すること等により電気的に行ってもよいし、羽状部材や板状部材（不図示）等を動かすこと等により機械的に行ってもよい。画像生成部２３４（プロセッサ）は、光量比に応じてこのような変更を行う。
光学部材１３８を用いる場合は、図１４に示す例と同様に、枠体１３２に光学フィルタ及び偏光フィルタを配置し、これに光学部材１３８を配置して、開口領域１３８Ａ～１３８Ｄを開口領域１３２Ａ～１３２Ｄに対応させることができる。光学フィルタ及び偏光フィルタと光学部材１３８とは、枠体１３２の異なる面（物体側と撮像装置本体２００側）に配置されていてもよい。
なお、図１５に示す光学部材１３８は開口領域１３２Ａ～１３２Ｄの開口面積を変更可能な部材であるが、開口領域１３２Ａ～１３２Ｄのうち少なくとも１つの開口領域の面積を変更できる光学部材を用いてもよい。
このような光学部材１３８を用いることにより、上述した「光学部材の構成（その３）」のように光量比をアクティブに変更でき、また「光学部材の構成（その４）」のように開口面積の変更により被写界深度を深くすることができる。
＜光学部材の構成（その他）＞
上述した構成の光学部材では、開口領域（波長帯域）及び偏光方向が４種類である場合について説明しているが、開口領域及び偏光方向は３種類以下でもよい。なぜなら、撮像素子２１０のようにモノクローム型（カラーフィルタなし）で偏光フィルタ素子の偏光方向が４方向の撮像素子を用いた場合、最大でも３つの偏光方向に対応した３つの波長帯域の画像しか分離できないからである。開口領域が３つの場合、４つの開口領域のうち２つに同じ波長帯域の光学フィルタ及び同じ偏光方向の偏光フィルタを配置してもよいし、１つの開口を遮蔽部材で遮蔽してもよい。また、３つの開口領域を備える枠体を用いてもよい。
図１６は３波長の場合の開口領域の配置例を示す図である。図１６の（ａ）部分は４つの開口領域１３１Ａ～１３１Ｄのうち１つ（開口領域１３１Ｄ）を遮蔽部材１３１Ｅで遮蔽した状態の枠体１３１を示しており、同図の（ｂ）部分は３つの開口領域１３３Ａ～１３３Ｃを形成した枠体１３３を示している。なお、開口領域の間で開口面積が異なっていてもよい。これらの態様においても、上述した態様と同様に、光学フィルタ（カラーフィルタ）、偏光フィルタ、及び減光フィルタを開口領域に配置することができる。なお、使用する開口領域が４つである場合も３つ以下である場合も、光学フィルタは複数の開口領域の少なくとも１つに配置されていればよく、一部の開口領域が素通し（光学フィルタなし）でもよい。
＜画像生成処理＞
次に、上述した構成のレンズ装置１００及び撮像装置本体２００を用いた画像生成処理（撮像方法）について説明する。なお、ここでは光学部材において光学フィルタの波長帯域が３種類（λ１～λ３）で偏光方向も３種類（例えば０°，４５°，９０°）、撮像素子２１０の偏光方向は４種類（０°，４５°，９０°，１３５°）であるものとする。この場合、例えば図１６の（ａ）部分に示す枠体１３１（開口領域１３１Ｄを遮蔽）を使用する。
＜混信除去の係数群＞
波長帯域（λ１～λ３）に対応した画像を得るには、撮像素子２１０の各画素から各波長帯域に対応した画素信号を分離して抽出する必要があるが、これらの画像データには混信（クロストーク）が生じている。すなわち、各画素には各波長帯域の光が入射するため、生成される画像は波長帯域λ１～λ３の画像が混合した画像となる。このため、画像生成部２３４は、混信除去処理を行って各波長帯域（λ１～λ３）の画像データを生成する。
レンズ装置１００から出射した各波長帯域λ１～λ３の光が各画素で受光される割合（混信比率）は、光学フィルタ１４２Ａ～１４２Ｃが透過させる光の波長帯域λ１～λ３の設定、偏光フィルタ１４４Ａ～１４４Ｃが透過させる光の偏光方向の設定、撮像素子２１０の各画素が受光する光の偏光方向（４方向）の設定から一意に定まり、事前に求めることができる。画像生成部２３４は、この混信比率を、複数の開口領域のうち特定の開口領域以外の開口領域を遮蔽する複数の遮蔽部材を用いて、複数の遮蔽部材のうちいずれかがレンズ装置に装着された状態で取得した複数の画像から算出することができる。
図１７は、枠体１３２に遮蔽部材を装着する様子を示す図である。図１７の（ａ）部分に示すように、遮蔽部材１３９は、枠体１３２の開口領域１３２Ａ～１３２Ｄのうちいずれかを開放して残りを遮蔽する複数の遮蔽部材を備える。具体的には、遮蔽部材１３９Ａ～１３９Ｄは、それぞれ開口領域１３２Ａ，１３２Ｂ，１３２Ｃ，１３２Ｄ（特定の開口領域）以外の開口領域を遮蔽する。図１７の（ｂ）部分は、遮蔽部材１３９Ａを装着した状態の枠体１３２を示す。なお、上述のように開口領域及び偏光方向が３種類以下である場合（例えば、４つの開口領域のうち１つ以上を遮蔽する場合、あるいは３つ以下の開口領域を有する光学部材を用いる場合）は、遮蔽部材も３種類以下でよい。以下、開口領域及び偏光方向が３種類である場合について説明する。
この場合、遮蔽部材１３９Ａ～１３９Ｃを１つずつ用いて撮像することにより、３つの波長帯域にそれぞれ対応した３つの画像が得られる。画像生成部２３４は、これらの画像から混信除去処理のための係数群（混信除去行列の各要素）を算出し、係数記憶部２３６がこれら係数群を記憶する。また、画像生成部２３４は、これらの画像から光量比及びその最適値を算出することができる。
画像生成部２３４は、係数記憶部２３６から係数群を取得し、各画素から得られる画素信号から、式１によって各波長帯域λ１～λ３に対応した画素信号を算出し、各波長帯域λ１～λ３の画像データを生成する。画像生成部２３４で生成された各波長帯域λ１～λ３の画像データは、外部に出力され、必要に応じて記憶装置（不図示）に記憶される。また、必要に応じてディスプレイ（不図示）に表示される。
＜光量比の調整及び撮像（手動調整の場合）＞
次に、光量比を調整してマルチスペクトル画像を生成する処理（撮像方法の各処理）について説明する。図１８は光量比の調整及び撮像の処理を示すフローチャートである。このフローチャートは、ユーザが自ら光量比を調整する場合の処理である。不図示のシャッターレリーズ等の操作により撮像（または光量比の算出）が指示されると、処理が開始される。なお、上述した遮蔽部材を使用して混信除去の係数群が取得されているものとする。
撮像が指示されると、画像生成部２３４（プロセッサ）は各波長帯域λ１～λ３の画像データ（複数の画像信号）から、波長帯域の間での光量比を算出する（ステップＳ１００：情報算出工程）。以下の式（１）～（５）に現れるL1,L2,L3の比率が光量比である。画像生成部２３４は、光量比を直接算出するのではなく、光量と関係する条件数（コンディションナンバー；下記N1～N3）を算出してもよい。
［数１］
Img0＝L１*cos２(0-θ1)＋L２*cos２(0-θ1)+L3*cos２(0-θ3) （１）
［数２］
Img45＝L１*cos２(45-θ1)＋L２*cos２(45-θ1)+L3*cos２(45-θ3) （２）
［数３］
Img90＝L１*cos２(90-θ1)＋L２*cos２(90-θ1)+L3*cos２(90-θ3) （３）
［数４］
Img135＝L１*cos２(135-θ1)＋L２*cos２(135-θ1)+L3*cos２(135-θ3) （４）
Figure 0007373592000001
なお、式（１）～（５）において、L1～L3は各波長帯域（λ1～λ3）の光量であり、θ1～θ3は各波長に割り当てられた偏光角度（0°，45°，90°）であり、N1～N3は各波長に付与される条件数であり、S1～S3は各波長の信号である。仮にL1≫L2≫L3であるとすると、N1≪N2≪N3（光量が多いと条件数が小さい）となる。
画像生成部２３４（プロセッサ）は、光量比がしきい値以上であるか否か判断する。この場合、上述したL1～L3のうち１または複数の組合せについて判断を行ってもよいし、L1～L3のうち最大のものと最小のものとについて判断を行ってもよい。画像生成部２３４はユーザの操作に基づいてしきい値を設定してもよいし、ユーザの操作によらずに設定してもよい。また、画像生成部２３４は、光量比の最適値との関係（比率等）に基づいてしきい値を設定してもよい。光量比がしきい値以上である場合（ステップＳ１１０でＹＥＳ）、画像生成部２３４は光学フィルタの波長帯域（λ1～λ3）にそれぞれ対応する複数の画像（３波長のマルチスペクトル画像）を生成する（ステップＳ１４０：画像生成工程）。
一方、光量比がしきい値未満である場合（ステップＳ１１０でＮＯ）、画像生成部２３４は、撮像装置１０のユーザに光量比の改善を促すメッセージを出力する（ステップＳ１２０：改善要求工程）。画像生成部２３４は、図示せぬモニタ（表示装置）やスピーカ（音声出力装置）を介して、例えば「開口領域１番の光量を絞って下さい」というメッセージを出力することができる。「開口面積を１段階下げて下さい」、「減光度を１段階上げて下さい」等、具体的な調整方法を出力してもよい。あるいは、絞りすぎ、減光しすぎの場合等に「開口領域３番の光量を上げて下さい」というメッセージを出力してもよい。画像生成部２３４は、モニタやスピーカ等の装置を介して、具体的な光量や光量比の値を示す情報、及び／または条件数を示す情報を出力してもよい。
ユーザは、メッセージに応じて光量比を調整することにより、レンズ装置１００が、撮像素子２１０を有する撮像装置本体２００に装着された場合に、撮像素子２１０からの出力を波長帯域の間で一定（あるいは所望の範囲）にする調整を行うことができる。
ユーザによって光量比の調整がなされたら（ステップＳ１３０でＹＥＳ）、画像生成部２３４は、再度、ステップＳ１１０で調整後の光量比がしきい値以上であるか否か（あるいは、撮像素子２１０からの出力が波長帯域間で一定または指定された範囲であるか否か）を判断する。光量比がしきい値以上である場合は、ステップＳ１４０で撮像（画像生成工程）を行う。
撮像装置１０では、このような処理により、良好な画質のマルチスペクトル画像を容易に取得することができる。
＜光量比の調整及び撮像（自動調整の場合）＞
図１９は光量比の調整及び撮像の処理を示す他のフローチャートである。このフローチャートは、画像生成部２３４がユーザの操作によらずに光量比を調整する場合の処理である。したがって画像生成部２３４は、撮像装置１０が、減光度が可変の減光フィルタ（図１２等を参照）及び／または開口面積が可変の光学部材（図１５等を参照）を備えている場合に、図１９のフローチャートに示す処理を行うことができる。
光量比を手動調整する場合と同様に、不図示のシャッターレリーズ等の操作により撮像（または光量比の算出）が指示されると、処理が開始される。また、上述した遮蔽部材を使用して混信除去の係数群が取得されているものとする。
ステップＳ１００，Ｓ１１０の処理は図１８のフローチャートと同様である。光量比がしきい値未満である場合（ステップＳ１１０でＮＯ）、画像生成部２３４は、１または複数の開口領域について減光フィルタの減光度及び／または光学部材の開口面積を変化させて、光量比を調整する（ステップＳ１１２：光量調整工程）。光量比を手動調整する場合と同様に、画像生成部２３４は、撮像素子２１０からの出力を波長帯域の間で一定（あるいはユーザの操作に応じた範囲）にする調整を行うことができ、また光量比調整の際に光量比や条件数等を示す情報を出力することができる。
撮像装置１０では、このような処理により、良好な画質のマルチスペクトル画像を容易に取得することができる。
＜カラー撮像素子を備える撮像装置の場合＞
本発明において、撮像素子はカラー撮像素子でもよい。カラー撮像素子は、レンズ装置側のカラーフィルタの波長帯域に対応する複数の波長帯域についての、複数カラーフィルタ（複数のカラーフィルタ）から構成されるカラーフィルタ層を備えていてもよい。撮像素子のカラーフィルタの波長帯域は、例えば４種類とすることができ、１種類の波長帯域のカラーフィルタに対して４種類の偏光方向の偏光フィルタを対応させて配置する。このようなカラー撮像素子を、上述のように波長帯域が４種類で偏光方向が４種類の光学部材を有するレンズ装置と組み合わせることにより、４波長について、光量比を調整して良好な画質のマルチスペクトル画像を容易に取得することができる。波長帯域は例えば青色、緑色、赤色、近赤外の４種類とすることができ、画像生成部２３４は、このような波長帯域の４種類の画像を１つの画像に合成することができる。また、画像生成部２３４は、青色、緑色、赤色の波長帯域の画像を合成してカラー画像を生成してもよい。なお、画像の生成に際しては、図１７について上述したのと同様に、遮蔽部材を用いた撮像によりあらかじめ係数群を取得しておくことが好ましい。
以上で本発明の実施形態及び他の例に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。
１０ 撮像装置
１００ レンズ装置
１０２ レンズ鏡筒
１０４ 第１レバー
１０６ 第２レバー
１０８ スリット
１１０ 第１のレンズ
１２０ 第２のレンズ
１３０ 光学部材
１３０Ａ 光学部材
１３０Ｂ 光学部材
１３１ 枠体
１３１Ａ 開口領域
１３１Ｂ 開口領域
１３１Ｃ 開口領域
１３１Ｄ 開口領域
１３１Ｅ 遮蔽部材
１３２ 枠体
１３２Ａ 開口領域
１３２Ｂ 開口領域
１３２Ｃ 開口領域
１３２Ｄ 開口領域
１３３ 枠体
１３３Ａ 開口領域
１３３Ｂ 開口領域
１３３Ｃ 開口領域
１３４ 調整部材
１３４Ａ 開口領域
１３４Ｂ 開口領域
１３４Ｃ 開口領域
１３４Ｄ 開口領域
１３５ 光学部材
１３６ 調整部材
１３６Ａ 開口領域
１３６Ｄ 開口領域
１３７ 調整部材
１３７Ｂ 開口領域
１３７Ｃ 開口領域
１３８ 光学部材
１３８Ａ 開口領域
１３８Ｂ 開口領域
１３８Ｃ 開口領域
１３８Ｄ 開口領域
１３９ 遮蔽部材
１３９Ａ 遮蔽部材
１３９Ｂ 遮蔽部材
１３９Ｃ 遮蔽部材
１３９Ｄ 遮蔽部材
１４０ フィルタセット
１４０Ａ フィルタセット
１４０Ｂ フィルタセット
１４０Ｃ フィルタセット
１４０Ｄ フィルタセット
１４１Ａ フィルタセット
１４２Ａ 光学フィルタ
１４２Ｂ 光学フィルタ
１４２Ｃ 光学フィルタ
１４２Ｄ 光学フィルタ
１４４Ａ 偏光フィルタ
１４４Ｂ 偏光フィルタ
１４４Ｃ 偏光フィルタ
１４４Ｄ 偏光フィルタ
１４６Ａ 減光フィルタ
１４６Ｂ 減光フィルタ
１４６Ｃ 減光フィルタ
１４６Ｄ 減光フィルタ
１４７Ａ 減光フィルタ
２００ 撮像装置本体
２１０ 撮像素子
２１１ ピクセルアレイ層
２１２ フォトダイオード
２１３ 偏光フィルタ素子アレイ層
２１４Ａ 偏光フィルタ素子
２１４Ｂ 偏光フィルタ素子
２１４Ｃ 偏光フィルタ素子
２１４Ｄ 偏光フィルタ素子
２１５ マイクロレンズアレイ層
２１６ マイクロレンズ
２３０ 信号処理部
２３２ アナログ信号処理部
２３４ 画像生成部
２３６ 係数記憶部
Ｌ 光軸
Ｓ１００～Ｓ１４０ 撮像方法の各ステップ

Claims (20)

  1. 被写体の光学像を結像させるレンズを含む撮像光学系と、
    光軸が前記撮像光学系の光軸と一致した状態で前記撮像光学系の瞳近傍に配置された光学部材であって、
    複数の開口領域を備える枠体と、
    前記複数の開口領域の少なくとも１つに配置される複数の光学フィルタであって、少なくとも一部の波長帯域が異なる光を透過させる２つ以上の光学フィルタを含む複数の光学フィルタと、
    前記複数の開口領域の少なくとも１つに配置される複数の偏光フィルタであって、偏光方向が異なる複数の偏光フィルタと、
    を有する光学部材と、
    を備え、
    前記光学部材は、少なくとも前記複数の光学フィルタ及び前記複数の偏光フィルタが前記複数の開口領域に配置された状態で、前記撮像光学系に対し挿入及び抜去が可能であり、
    前記光学部材の挿入または抜去により、前記撮像光学系から出射される光の光量が前記複数の開口領域について変更可能であるレンズ装置。
  2. 前記少なくとも１つの開口領域に配置されて前記開口領域の開口面積を調整する調整部材をさらに備える請求項１に記載のレンズ装置。
  3. 前記調整部材が前記複数の開口領域に配置される請求項２に記載のレンズ装置。
  4. 前記調整部材は前記開口面積が可変である請求項２または３に記載のレンズ装置。
  5. 前記複数の開口領域うち少なくとも１つの開口領域に配置された減光フィルタを備え、
    前記減光フィルタは、前記減光フィルタが配置された開口領域を透過する光を減光する請求項１から４のいずれか１項に記載のレンズ装置。
  6. 前記減光フィルタが前記複数の開口領域にそれぞれ配置される請求項５に記載のレンズ装置。
  7. 前記減光フィルタの減光度合いが可変である請求項５または６に記載のレンズ装置。
  8. 前記光学部材は、前記複数の開口領域に前記光学フィルタ、及び前記偏光フィルタが固定された光学部材であり、
    前記複数の開口領域のうち少なくとも１つの開口領域に対して前記減光フィルタが挿入される請求項５から７のいずれか１項に記載のレンズ装置。
  9. 被写体の光学像を結像させるレンズを含む撮像光学系と、
    光軸が前記撮像光学系の光軸と一致した状態で前記撮像光学系の瞳近傍に配置された光学部材であって、
    複数の開口領域を備える枠体と、
    前記複数の開口領域の少なくとも１つに配置される複数の光学フィルタであって、少なくとも一部の波長帯域が異なる光を透過させる２つ以上の光学フィルタを含む複数の光学フィルタと、
    前記複数の開口領域の少なくとも１つに配置される複数の偏光フィルタであって、偏光方向が異なる複数の偏光フィルタと、
    を有する光学部材と、
    を備え、
    前記光学部材が、少なくとも前記複数の光学フィルタ及び前記複数の偏光フィルタが前記複数の開口領域に配置された状態で前記撮像光学系に対し挿入されたことにより、
    前記撮像光学系から出射される光の光量が、前記複数の開口領域について調整されたレンズ装置。
  10. 前記調整は、前記レンズ装置が撮像素子を有する撮像装置本体に装着された場合に、前記撮像素子からの出力を前記波長帯域の間で一定にする調整である、請求項９に記載のレンズ装置。
  11. 前記複数の開口領域のうち少なくとも１つについて開口面積が調整された、かつ／または調整可能である請求項９または１０に記載のレンズ装置。
  12. 前記光学部材は、前記複数の開口領域に前記光学フィルタ、及び前記偏光フィルタが固定された光学部材であり、
    前記複数の開口領域のうち少なくとも１つの開口領域に対して、透過する光を減光する減光フィルタが挿入される請求項９から１１のいずれか１項に記載のレンズ装置。
  13. 請求項１から１２のいずれか１項に記載のレンズ装置と、
    前記複数の偏光フィルタの偏光方向に対応した偏光方向を有する複数の偏光素子を備え、前記複数の開口領域のいずれかを透過した光を選択的に受光する複数の画素群を含む撮像素子と、
    前記撮像素子から出力される複数の画像信号に基づいて、前記複数の光学フィルタの前記波長帯域にそれぞれ対応する複数の画像を生成するプロセッサと、
    を備え、
    前記プロセッサは、
    前記複数の画像信号に基づいて、前記波長帯域の間での光量比を算出し、
    前記光量比がしきい値未満の場合は、表示装置と音声出力装置とのうち少なくとも一方から、ユーザに前記光量比の改善を促すメッセージを出力させる撮像装置。
  14. 前記プロセッサは、前記光量比に基づいて、前記複数の開口領域から出射される光の光量を調整する請求項１３に記載の撮像装置。
  15. 前記複数の開口領域にそれぞれ対応した複数の遮蔽部材であって、前記複数の開口領域のうち特定の開口領域以外の開口領域を遮蔽する複数の遮蔽部材を備え、
    前記プロセッサは、前記複数の遮蔽部材のうちいずれかが前記レンズ装置に装着された状態で取得した前記複数の画像に基づいて、前記光量比を算出する請求項１３または１４に記載の撮像装置。
  16. 前記複数の光学フィルタの前記波長帯域に対応する波長帯域を有する複数のカラーフィルタが前記撮像素子に備えられ、
    前記プロセッサは前記複数の画像を合成する請求項１３から１５のいずれか１項に記載の撮像装置。
  17. 請求項１から１２のいずれか１項に記載のレンズ装置と、前記複数の偏光フィルタの偏光方向に対応した偏光方向を有する複数の偏光素子を備え、前記複数の開口領域のいずれかを透過した光を選択的に受光する複数の画素群を含む撮像素子と、を備える撮像装置の撮像方法であって、
    前記撮像素子から出力される複数の画像信号に基づいて、前記複数の光学フィルタの前記波長帯域にそれぞれ対応する複数の画像を生成する画像生成工程と、
    前記複数の画像信号に基づいて前記波長帯域の間での光量比を算出する情報算出工程と、
    前記光量比がしきい値未満の場合は、前記撮像装置に設けられた表示装置と音声出力装置とのうち少なくとも一方が、前記撮像装置のユーザに前記光量比の改善を促すメッセージを出力する改善要求工程と、
    を有する撮像方法。
  18. 前記光量比に基づいて、前記複数の開口領域から出射される光の光量を調整する光量調整工程をさらに有する請求項１７に記載の撮像方法。
  19. 請求項１７または１８に記載の撮像方法をコンピュータに実行させる撮像プログラム。
  20. 非一時的かつコンピュータ読取可能な記録媒体であって、請求項１９に記載の撮像プログラムが記録された記録媒体。
JP2021574005A 2020-01-31 2021-01-25 レンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体 Active JP7373592B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020015551 2020-01-31
JP2020015551 2020-01-31
PCT/JP2021/002356 WO2021153473A1 (ja) 2020-01-31 2021-01-25 レンズ装置、撮像装置、光学部材、撮像方法、及び撮像プログラム

Publications (3)

Publication Number Publication Date
JPWO2021153473A1 JPWO2021153473A1 (ja) 2021-08-05
JPWO2021153473A5 JPWO2021153473A5 (ja) 2023-01-23
JP7373592B2 true JP7373592B2 (ja) 2023-11-02

Family

ID=77079100

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021574005A Active JP7373592B2 (ja) 2020-01-31 2021-01-25 レンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体

Country Status (4)

Country Link
US (2) US11726389B2 (ja)
JP (1) JP7373592B2 (ja)
CN (1) CN115039008A (ja)
WO (1) WO2021153473A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7261192B2 (ja) * 2020-02-27 2023-04-19 富士フイルム株式会社 レンズ装置、撮像装置、撮像方法、及び撮像プログラム
WO2022092007A1 (ja) * 2020-10-30 2022-05-05 富士フイルム株式会社 光学部材、レンズ装置及び撮像装置
JP7787108B2 (ja) * 2021-01-19 2025-12-16 富士フイルム株式会社 レンズ装置、フィルタユニット及び撮像装置
CN117957849A (zh) * 2021-09-22 2024-04-30 富士胶片株式会社 信息处理方法、信息处理装置、信息处理程序及信息处理系统
WO2023053766A1 (ja) * 2021-09-29 2023-04-06 富士フイルム株式会社 画像データ処理装置及び方法
US12489874B2 (en) * 2023-05-31 2025-12-02 Apple Inc. Stereoscopic capture using cameras with different fields of view

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009284188A (ja) 2008-05-22 2009-12-03 Panasonic Corp カラー撮像装置
JP2012247645A (ja) 2011-05-27 2012-12-13 Fujifilm Corp 撮像装置
JP2014003461A (ja) 2012-06-19 2014-01-09 Sony Corp 撮像装置
WO2014020791A1 (ja) 2012-08-02 2014-02-06 パナソニック株式会社 偏光カラー撮像装置
JP2016036024A (ja) 2014-08-01 2016-03-17 パナソニックＩｐマネジメント株式会社 撮像装置および分析装置
JP2016082325A (ja) 2014-10-14 2016-05-16 株式会社ニコン 撮像装置、画像処理装置および画像処理プログラム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD250338S (en) 1976-10-07 1978-11-21 Lapierre Howard N Combined spool and bobbin holder
USD278359S (en) 1982-02-25 1985-04-09 Daiwa Seiko, Inc. Fishing reel spool
USD307153S (en) 1987-04-20 1990-04-10 Rejan, Inc. Viewer for a door
JPH0678938A (ja) 1992-09-03 1994-03-22 Hitachi Metals Ltd 義歯固定用磁性アタッチメント
USD369370S (en) 1995-02-13 1996-04-30 Wray James D Telescope
GB2416218B (en) * 2003-05-29 2007-03-21 Nihon Seimitsu Sokki Co Ltd Diaphragm device
USD527070S1 (en) 2005-06-08 2006-08-22 Svs Engineering Llc Spool for fly fishing reel
JP5381590B2 (ja) 2009-10-05 2014-01-08 リコーイメージング株式会社 差込フィルタホルダ
JP2012003080A (ja) * 2010-06-17 2012-01-05 Olympus Corp 撮像装置
USD666228S1 (en) 2011-03-16 2012-08-28 Satisloh North America, Inc. Optic device securing structure
USD666229S1 (en) 2011-03-16 2012-08-28 Satisloh North America, Inc. Optic device securing structure
US9658463B2 (en) 2012-02-03 2017-05-23 Panasonic Intellectual Property Management Co., Ltd. Imaging device and imaging system
USD719598S1 (en) 2013-02-26 2014-12-16 Hon Hai Precision Industry Co., Ltd. Binocular image-taking lens
USD741448S1 (en) 2014-06-13 2015-10-20 Robin Hancock Spool winder
USD836423S1 (en) 2014-11-17 2018-12-25 Mark Kulik Film spool
USD776737S1 (en) 2015-02-10 2017-01-17 Sellmark Corporation Lens cap
US10523850B2 (en) * 2015-12-30 2019-12-31 Sintai Optical (Shenzhen) Co., Ltd. Camera device with adjustable aperture
JP7290742B2 (ja) * 2019-10-30 2023-06-13 富士フイルム株式会社 光学素子、光学装置、及び撮像装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009284188A (ja) 2008-05-22 2009-12-03 Panasonic Corp カラー撮像装置
JP2012247645A (ja) 2011-05-27 2012-12-13 Fujifilm Corp 撮像装置
JP2014003461A (ja) 2012-06-19 2014-01-09 Sony Corp 撮像装置
WO2014020791A1 (ja) 2012-08-02 2014-02-06 パナソニック株式会社 偏光カラー撮像装置
JP2016036024A (ja) 2014-08-01 2016-03-17 パナソニックＩｐマネジメント株式会社 撮像装置および分析装置
JP2016082325A (ja) 2014-10-14 2016-05-16 株式会社ニコン 撮像装置、画像処理装置および画像処理プログラム

Also Published As

Publication number Publication date
WO2021153473A1 (ja) 2021-08-05
US20240019762A1 (en) 2024-01-18
CN115039008A (zh) 2022-09-09
US11960200B2 (en) 2024-04-16
JPWO2021153473A1 (ja) 2021-08-05
US11726389B2 (en) 2023-08-15
US20220350225A1 (en) 2022-11-03

Similar Documents

Publication Publication Date Title
JP7373592B2 (ja) レンズ装置、撮像装置、撮像方法、撮像プログラム、及び記録媒体
JP7261192B2 (ja) レンズ装置、撮像装置、撮像方法、及び撮像プログラム
JP7441313B2 (ja) レンズ装置、撮像装置、及び撮像方法
US10681286B2 (en) Image processing apparatus, imaging apparatus, image processing method, and recording medium
CN103039066B (zh) 成像装置、图像处理装置以及图像处理方法
JPWO2021153473A5 (ja)
WO2016143139A1 (ja) 画像処理装置、画像処理方法およびプログラム
US11796722B2 (en) Optical element, optical device, and imaging apparatus for acquiring multispectral images
CN113966605A (zh) 摄像装置
CN114041085A (zh) 摄像装置
JP5942984B2 (ja) 画像処理装置、撮像装置および画像処理プログラム
US12197109B2 (en) Lens device and imaging apparatus
JP2009021683A (ja) 撮像装置
CN112492194B (zh) 图像处理方法和图像处理装置
US20230319385A1 (en) Optical member, lens device, and imaging apparatus
WO2016052101A1 (ja) 撮像装置および画像データ生成プログラム
JP7522198B2 (ja) 撮像装置、調整方法、及び調整プログラム
JP6929511B2 (ja) 撮像素子、及び、撮像装置
CN114514447B (zh) 光学元件、光学装置、摄像装置及光学元件的制造方法
JP7824307B2 (ja) 情報処理方法、情報処理装置、情報処理プログラム、及び情報処理システム
JPWO2022024917A5 (ja)
JP7316966B2 (ja) 撮像装置
CN117322002A (zh) 固态成像装置和电子设备
WO2023053767A1 (ja) データ処理装置、方法及びプログラム並びにマルチスペクトルカメラ
JP7399194B2 (ja) 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230104

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230104

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231023

R150 Certificate of patent or registration of utility model

Ref document number: 7373592

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150