WO2023090191A1 - 撮像装置 - Google Patents

撮像装置 Download PDF

Info

Publication number
WO2023090191A1
WO2023090191A1 PCT/JP2022/041425 JP2022041425W WO2023090191A1 WO 2023090191 A1 WO2023090191 A1 WO 2023090191A1 JP 2022041425 W JP2022041425 W JP 2022041425W WO 2023090191 A1 WO2023090191 A1 WO 2023090191A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
optical member
imaging device
imaging
reflecting surface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2022/041425
Other languages
English (en)
French (fr)
Inventor
俊 菅原
佑介 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Priority to CN202280075623.8A priority Critical patent/CN118265949A/zh
Priority to US18/710,226 priority patent/US20240430553A1/en
Priority to EP22895473.1A priority patent/EP4435513A4/en
Publication of WO2023090191A1 publication Critical patent/WO2023090191A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B17/00—Systems with reflecting surfaces, with or without refracting elements
    • G02B17/08—Catadioptric systems
    • G02B17/0804—Catadioptric systems using two curved mirrors
    • G02B17/0808—Catadioptric systems using two curved mirrors on-axis systems with at least one of the mirrors having a central aperture
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/02—Bodies
    • G03B17/17—Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Definitions

  • the present disclosure relates to imaging devices.
  • FIG. 1 and 2 are diagrams illustrating the configuration of an imaging device 10 according to one embodiment.
  • FIG. 1 is a block diagram illustrating the logical configuration.
  • 2 is a cross-sectional view showing components arranged in the imaging device 10.
  • an imaging device 10 according to an embodiment of the present disclosure is configured with an imaging optical system 11 and an imaging device 12 .
  • the imaging device 10 may further include a controller 13 .
  • the first optical member 111 has a lens 113 with a semi-transmissive reflecting surface 111a and an opening (region R) on the image side.
  • Lens 113 is transparent, but is not limited to being transparent.
  • the lens 113 is a so-called donut lens.
  • the region R is not limited to an aperture as long as it does not block the light from the secondary mirror of the Cassegrain optical system to the imaging device 12 .
  • the lens 113 may include, for example, a lens having a curvature different from that of other portions in the region R, or may include a transparent plate, a filter, or the like in the region R.
  • the subject light flux corresponding to the telephoto image reaches the imaging element 12 through the optical paths L1 and L2, and at the same time, the subject light flux corresponding to the wide-angle image also reaches the imaging element 12 through the optical path L0. Then, a plurality of images on the light receiving surface 12a, that is, an image formed via the Cassegrain optical system and an image formed via the lens 113 without passing through the second optical member 112, which is a secondary mirror, imaged. In other words, a plurality of images with different focal lengths are formed on the same light receiving surface 12a of the imaging element 12.
  • the controller 13 separates the superimposed image olim into a telephoto image im1 and a wide-angle image im2 by image processing.
  • the controller 13 separates the superimposed image olim by applying image processing methods such as independent component analysis, wavelet method, and image separation model.
  • the image separation model is, for example, a model constructed by creating a superimposed image by superimposing a plurality of images in advance and subjecting the superimposed image to machine learning using the plurality of images as correct answers.
  • a generator that generates images like the Encoder-Decoder model competes with a discriminator that determines whether the generated image is a fake image, and a Pix-to model that generates a pair of images that reflects the relationship between them. - It may be a model to which Pix is applied.
  • a storage unit is one or more memories.
  • the memory is, for example, a semiconductor memory, a magnetic memory, or the like, but is not limited to these, and can be any memory.
  • the storage unit may be built in the controller 13 or may be provided outside the controller 13, for example.
  • the controller 13 separates the telephoto image im1 by extracting components determined to be the telephoto image im1 using the image separation model from the image signal of the superimposed image olim (step S2).
  • the controller 13 separates the wide-angle image im2 by subtracting the component of the telephoto image im1 from the image signal of the superimposed image olim (step S3).
  • the dichroic coated mirror provided on the reflecting surface 111a reflects the G component of RGB
  • the antireflection film provided on the image-side surface of the lens 113 transmits the R component and the B component with high transmittance.
  • an image corresponding to the telephoto image im1 having G components and an image corresponding to the wide-angle image im2 having R and B components are superimposed and formed on the light receiving surface 12a.
  • the antireflection film transmits only one of the R component and the B component with a high transmittance, and the telephoto image im1 having the G component and the wide-angle image im2 having only one of the R component and the B component are superimposed.
  • FIG. 5 is a cross-sectional view illustrating another configuration of the imaging device 10. As shown in FIG. In FIG. 5, the same components as in FIG. 2 are given the same reference numerals. An imaging apparatus 10 according to this modification includes the same components as those of the above-described embodiment, but as shown in FIG. have.
  • the imaging optical system 11 of the imaging device 10 at least part of the reflecting surface 111a of the first optical member 111 and the reflecting surface 112a of the second optical member 112 face each other, and the first A second optical member 112 is provided closer to the object side than the optical member 111 of the second optical member 111 .
  • the region R may be an aperture as shown in FIG.
  • a plurality of images formed on the light-receiving surface 12a are formed by the images transmitted through the first optical member 111 and formed by the reflecting surface 111a of the first optical member 111 and the reflecting surface 112a of the second optical member 112. and an image formed by reflection.
  • f1 in FIG. 5 is the focal length of the lens 113 provided on the image side of the first optical member 111 .
  • the imaging apparatus 10 can obtain a telephoto image and a wide-angle image with high resolution by the above configuration.
  • the image processing by the controller 13 is the same as in the above embodiment.
  • Embodiments according to the present disclosure are not limited to any specific configuration of the embodiments described above. Embodiments of the present disclosure extend to all novel features or combinations thereof described in the present disclosure or to all novel method or process steps or combinations thereof described. be able to.
  • Descriptions such as “first” and “second” in this disclosure are identifiers for distinguishing the configurations. Configurations that are differentiated in descriptions such as “first” and “second” in this disclosure may interchange the numbers in that configuration. The exchange of identifiers is done simultaneously. The configurations are still distinct after the exchange of identifiers. Identifiers may be deleted. Configurations from which identifiers have been deleted are distinguished by codes. The description of identifiers such as “first” and “second” in this disclosure should not be used as a basis for interpreting the order of the configuration or the existence of lower numbered identifiers.
  • Imaging device 11 imaging optical system 12 imaging element 12a light receiving surface 13 controller 111 first optical member 111a reflecting surface 111b rear surface 112 second optical member 112a reflecting surface 113 lens 114 another lens

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Lenses (AREA)
  • Studio Devices (AREA)
  • Optical Elements Other Than Lenses (AREA)
  • Structure And Mechanism Of Cameras (AREA)
  • Cameras In General (AREA)

Abstract

望遠画像と広角画像とを高い解像度で得ることが可能な撮像装置が提供される。撮像装置（１０）は、半透過性の反射面を有する第１の光学部材（１１１）と、反射面を有する第２の光学部材（１１２）と、を含んで構成される撮像光学系（１１）と、撮像光学系を介して結像する像を撮像する撮像素子（１２）と、を備え、焦点距離の異なる複数の像が撮像素子の同一の受光面に結像される。撮像装置（１０）は、撮像素子（１２）から画像信号を取得し、複数の像を画像処理によって分離するコントローラ（１３）を備えてよい。

Description

撮像装置 関連出願の相互参照
　本出願は、日本国特許出願２０２１－１８６５０８号（２０２１年１１月１６日出願）の優先権を主張するものであり、当該出願の開示全体を、ここに参照のために取り込む。
　本開示は、撮像装置に関する。
　観察対象を結像させる撮像光学系は、焦点距離、画角等の多様な物性を有する。焦点距離が長くなると、観察対象が拡大化された像が形成されるので、遠方の観察対象の詳細な光学情報、言換えると拡大された光学情報が得られる。画角は広角化するほど、広範囲に位置する観察対象の光学情報が得られる。しかし、焦点距離と画角とはトレードオフの関係があり、焦点距離が長くなると画角が狭角化し、焦点距離が短くなると画角が広角化する。
　それゆえ、状況に応じて望まれる光学情報を得られるように焦点距離の調整が行われている。例えば、撮像光学系に含まれるズームレンズを変位させることにより、焦点距離の調整が行われる。又、複数の単焦点レンズを切替えることにより、焦点距離の調整が行われる（特許文献１、２参照）。
特開平１１―３１１８３２号公報 特開２００４―２７９５５６号公報
　本開示の一実施形態に係る撮像装置は、
　半透過性の反射面を有する第１の光学部材と、反射面を有する第２の光学部材と、を含んで構成される撮像光学系と、
　前記撮像光学系を介して結像する像を撮像する撮像素子と、を備え、
　焦点距離の異なる複数の像が前記撮像素子の同一の受光面に結像される。
図１は、一実施形態に係る撮像装置の構成を例示するブロック図である。 図２は、一実施形態に係る撮像装置の構成を例示する断面図である。 図３は、重畳画像並びに重畳画像から生成される望遠画像及び広角画像を説明するための図である。 図４は、コントローラが実行する画像処理を説明するためのフローチャートである。 図５は、一実施形態に係る撮像装置の別の構成を例示する断面図である。
　以下、図面を参照して本開示の一実施形態に係る撮像装置が説明される。以下の図面に示す構成要素において、同じ構成要素には同じ符号が付されている。実施形態について説明する図は模式的なものである。図面上の寸法比率等は、現実のものと必ずしも一致していない。
　図１及び図２は、一実施形態に係る撮像装置１０の構成を例示する図である。図１は論理的な構成を例示するブロック図である。また、図２は撮像装置１０において配置された構成要素を示す断面図である。まず、撮像装置１０の構成の概要が説明される。図１に示すように、本開示の実施形態に係る撮像装置１０は、撮像光学系１１、撮像素子１２を備えて構成される。撮像装置１０は、さらにコントローラ１３を備えて構成されてよい。
　撮像光学系１１は、第１の光学部材１１１と、第２の光学部材１１２と、を含んで構成される。第１の光学部材１１１及び第２の光学部材１１２は、それぞれ１つの光学素子又は複数の光学素子を組み合わせて構成される。光学素子は例えばレンズ、ミラー又は絞り等であってよい。第１の光学部材１１１は半透過性の反射面１１１ａを有する。また、第２の光学部材１１２は反射面１１２ａを有する。
　撮像光学系１１は、第１の光学部材１１１を透過して、撮像素子１２に入射する被写体光束を結像させる。また、撮像光学系１１は、第１の光学部材１１１の反射面１１１ａ及び第２の光学部材１１２の反射面１１２ａで反射して、撮像素子１２に入射する被写体光束を結像させる。以下、被写体光束を単に光と表現することがある。
　撮像素子１２は、撮像光学系１１を介して受光面１２ａに結像する像を撮像する。撮像素子１２は、可視光による像を撮像可能であってよいし、赤外線又は紫外線等の不可視光による像を撮像可能であってよいし、可視光及び不可視光による像を撮像可能であってよい。撮像素子１２は、例えば、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサ、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ－Ｏｘｉｄｅ－Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等である。撮像素子１２は、カラーイメージセンサであってよい。換言すると、撮像素子１２の受光面１２ａに配置される複数の画素は、例えばＲＧＢのカラーフィルタによって覆われてよい。撮像素子１２は、受光する画像に相当する画像信号を生成する。撮像素子１２は、例えば３０ｆｐｓ等の所定のフレームレートで画像信号を生成してよい。
　コントローラ１３は、少なくとも１つのプロセッサ、少なくとも１つの専用回路又はこれらの組み合わせを含んで構成される。プロセッサは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）等の汎用プロセッサ又は特定の処理に特化した専用プロセッサである。専用回路は、例えば、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）等であってよい。コントローラ１３は、撮像素子１２から画像信号を取得し、画像信号に画像処理を施す。画像処理は複数の像を分離する処理を含む。画像処理の詳細については後述する。
　次に、撮像装置１０の構成要素の配置が説明される。ここで、図２に示すように、撮像装置１０に対して被写体が存在する側を物体側又は前方と表現することがある。また、物体側と反対の側を像側又は後方と表現することがある。図２は、撮像装置１０を撮像素子１２が含まれる位置で切った断面図を示している。
　図２に示すように、撮像光学系１１は、第１の光学部材１１１を主鏡とし、第２の光学部材１１２を副鏡とするカセグレン光学系を含むように構成される。本実施形態において、第１の光学部材１１１の反射面１１１ａが凹面鏡であって、第２の光学部材１１２の反射面１１２ａが凸面鏡になる。遠方の被写体からの被写体光束は、反射面１１１ａで反射されて反射面１１２ａに向かい（光路Ｌ１）、反射面１１２ａで反射されて、第１の光学部材１１１の領域Ｒを通って、撮像素子１２に至る（光路Ｌ２）。本実施形態において、光路Ｌ１及び光路Ｌ２を経た被写体光束が受光面１２ａで結像して得られる画像が望遠画像である。また、領域Ｒは開口である。
　また、第１の光学部材１１１は、反射面１１１ａが半透過性であって、開口（領域Ｒ）を有するレンズ１１３を像側に有する。レンズ１１３は透明であるが、透明に限定されない。本実施形態においてレンズ１１３はいわゆるドーナツレンズである。ただし、領域Ｒは、上記のカセグレン光学系の副鏡から撮像素子１２への光を妨げなければ、開口に限定されない。レンズ１１３は、例えば領域Ｒの部分に他の部分と曲率が異なるレンズを含んでよいし、領域Ｒに透明板、フィルタなどを含んでよい。広角画像に対応する被写体光束は、反射面１１１ａを透過し、レンズ１１３を介して、撮像素子１２に至る（光路Ｌ０）。レンズ１１３を介して光が受光面１２ａで結像するように、レンズ１１３の曲率などが定められる。反射面１１１ａの曲率とレンズ１１３の像側の面の曲率が異なっていてよい。つまり、第１の光学部材１１１の表面（反射面１１１ａ）と裏面１１１ｂの曲率は同じでなくてよい。ここで、広角画像は、望遠画像に比べて広い画角を撮像するものであればよく、特定画角以上の画像に限定されるものでない。また、望遠画像は、広角画像に比べて像倍率が高いものであればよく、特定の像倍率以上の画像に限定されるものでない。
　望遠画像に対応する被写体光束が、光路Ｌ１及び光路Ｌ２を通って撮像素子１２に至ると同時に、広角画像に対応する被写体光束も、光路Ｌ０を通って撮像素子１２に至る。そして、受光面１２ａに複数の像、すなわち、カセグレン光学系を介して結像する像と、副鏡である第２の光学部材１１２を経ずにレンズ１１３を介して結像する像とが、結像される。換言すると、焦点距離の異なる複数の像が撮像素子１２の同一の受光面１２ａに結像される。
　ここで、図２のように、第２の光学部材１１２の物体側の面に別のレンズ１１４が設けられていてよい。別のレンズ１１４は、第２の光学部材１１２の位置を固定する支持部としての機能も有してよい。
　図３は、重畳画像ｏｌｉｍ並びに重畳画像ｏｌｉｍから生成される望遠画像ｉｍ１及び広角画像ｉｍ２を説明するための図である。図３の例において、望遠画像ｉｍ１は、広角画像ｉｍ２の中心部分にある遠方の路上の被写体を高い解像度で撮像した画像に対応する。受光面１２ａに結像する像の画像は、望遠画像ｉｍ１と広角画像ｉｍ２との重畳画像ｏｌｉｍ（図３の上図）になる。重畳画像ｏｌｉｍは望遠画像ｉｍ１及び広角画像ｉｍ２の光学情報を含む。撮像素子１２は、重畳画像ｏｌｉｍの画像信号を生成し、コントローラ１３に出力する。
　コントローラ１３は、画像処理によって、重畳画像ｏｌｉｍを望遠画像ｉｍ１と広角画像ｉｍ２とに分離する。コントローラ１３は、例えば、独立成分分析、ウェーブレット法、画像分離モデル等の画像処理方法の適用により、重畳画像ｏｌｉｍを分離する。画像分離モデルは、例えば、事前に、複数の画像を重ねた重畳画像を作成し、当該重畳画像に対して、複数の画像を正解として機械学習させることにより構築されるモデルである。画像分離モデルは、Ｅｎｃｏｄｅｒ－Ｄｅｃｏｄｅｒモデルのように画像を生成するｇｅｎｅｒａｔｏｒと、生成された画像が偽画像かどうか判定するｄｉｓｃｒｉｍｉｎａｔｏｒとを競わせて、その関係を反映したペア画像を生成するＰｉｘ－ｔｏ－Ｐｉｘを適用したモデルであってよい。
　ここで、コントローラ１３が、事前に機械学習によって構築された画像分離モデルを用いて、画像を分離する画像処理を実行する場合に、画像分離モデルはコントローラ１３がアクセス可能な記憶部に記憶されていてよい。記憶部は１つ以上のメモリである。メモリは、例えば半導体メモリ、磁気メモリ等であるが、これらに限られず任意のメモリとすることができる。記憶部は、例えばコントローラ１３に内蔵されてよいし、コントローラ１３の外部に設けられてよい。
　図４は、コントローラ１３が実行する画像処理を説明するためのフローチャートである。本実施形態において、コントローラ１３は、事前に機械学習によって構築された画像分離モデルを用いて、重畳画像ｏｌｉｍを望遠画像ｉｍ１と広角画像ｉｍ２とに分離する。
　コントローラ１３は、撮像素子１２から重畳画像ｏｌｉｍの画像信号を取得する（ステップＳ１）。
　コントローラ１３は、重畳画像ｏｌｉｍの画像信号から、画像分離モデルを用いて望遠画像ｉｍ１と判定される成分を抽出することによって、望遠画像ｉｍ１を分離する（ステップＳ２）。
　コントローラ１３は、重畳画像ｏｌｉｍの画像信号から、望遠画像ｉｍ１の成分を差し引くことによって、広角画像ｉｍ２を分離する（ステップＳ３）。
　コントローラ１３は、分離した望遠画像ｉｍ１及び広角画像ｉｍ２を、例えば各種のディスプレイのような表示装置に対して出力する（ステップＳ４）。
　ここで、ステップＳ２及びステップＳ３における望遠画像ｉｍ１と広角画像ｉｍ２の対応は逆であってよい。つまり、別の例として、ステップＳ２において広角画像ｉｍ２が分離されて、ステップＳ３において重畳画像ｏｌｉｍの画像信号から広角画像ｉｍ２の成分が差し引かれて、望遠画像ｉｍ１が分離されてよい。
　また、コントローラ１３は、機械学習によって生成された画像分離モデルを用いることによって、重畳画像ｏｌｉｍを望遠画像ｉｍ１と広角画像ｉｍ２とを精度よく分離できるが、さらに分離の精度を高めるために、少なくとも一方の画像の色成分を制限してよい。例えば、撮像装置１０は、第１の色成分を有する第１の像と、第１の色成分と異なる第２の色成分を有する第２の像とが、複数の像として、重畳して受光面１２ａに結像される構成であってよい。第１の像、第２の像は、受光面１２ａに結像される複数の像であって、それぞれ望遠画像ｉｍ１、広角画像ｉｍ２に対応する。また、例えば第１の色成分がＲＧＢの一部であって、第２の色成分が第１の色成分として選択されなかった残りの色成分であってよい。
　このような色成分を制限した像を結像させるために、撮像装置１０は、第１の光学部材１１１及び第２の光学部材１１２の少なくとも１つにカラーフィルタを備える構成であってよい。例えば、第１の光学部材１１１は、反射面１１１ａが、特定の色の光だけを反射又は透過するダイクロイックコートミラーであってよい。また、第１の光学部材１１１は、反射面１１１ａを表面としたときの裏面１１１ｂに反射防止膜が設けられていてよい。図２の例では、反射防止膜はレンズ１１３の像側の面に設けられ、反射防止膜によって特定の色の光の透過率を向上させることができる。
　例えば反射面１１１ａに設けられるダイクロイックコートミラーがＲＧＢのうちのＧ成分を反射させて、レンズ１１３の像側の面に設けられる反射防止膜がＲ成分及びＢ成分を高い透過率で透過させるとする。このとき、Ｇ成分を有する望遠画像ｉｍ１に対応する像と、Ｒ成分及びＢ成分を有する広角画像ｉｍ２に対応する像とが、重畳して受光面１２ａに結像される。別の組み合わせとして、反射防止膜がＲ成分、Ｂ成分の一方だけを高い透過率で透過させて、Ｇ成分を有する望遠画像ｉｍ１とＲ成分、Ｂ成分の一方だけを有する広角画像ｉｍ２とが重畳して受光面１２ａに結像されてよい。また、別の組み合わせとして、ダイクロイックコートミラーがＧ成分及びＢ成分を反射させて、Ｇ成分及びＢ成分を有する望遠画像ｉｍ１とＲ成分を有する広角画像ｉｍ２とが重畳して受光面１２ａに結像されてよい。
　コントローラ１３は、重畳画像ｏｌｉｍの画像信号から、画像分離モデルの使用とともに、又は、画像分離モデルの使用に代えて、色成分に基づく望遠画像ｉｍ１又は広角画像ｉｍ２の分離を実行してよい。画像分離モデルと色成分とが併用される場合に、例えばコントローラ１３は、画像分離モデルを用いて分離した望遠画像ｉｍ１又は広角画像ｉｍ２の候補画像から、さらに含まれる特定の色成分だけを抽出した画像を、望遠画像ｉｍ１又は広角画像ｉｍ２として分離してよい。
　以上のように、本実施形態に係る撮像装置１０は、上記の構成によって、望遠画像と広角画像とを高い解像度で得ることができる。
　本開示の実施形態について、図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形又は修正を行うことが容易であることに注意されたい。従って、これらの変形又は修正は本開示の範囲に含まれることに留意されたい。例えば、各構成部などに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の構成部などを１つに組み合わせたり、或いは分割したりすることが可能である。
　例えば、上記の実施形態は撮像光学系１１がカセグレン光学系を含むように構成されるが、このような構成に限定されない。図５は、撮像装置１０の別の構成を例示する断面図である。図５において、図２と同じ構成要素には同じ符号が付されている。本変形例に係る撮像装置１０は、上記の実施形態と同じ構成要素を含むが、図５に示すように第１の光学部材１１１でなく、第２の光学部材１１２が光を通す領域Ｒを有している。詳細に説明すると、本変形例に係る撮像装置１０の撮像光学系１１は、第１の光学部材１１１の反射面１１１ａの少なくとも一部と第２の光学部材１１２の反射面１１２ａが向き合い、第１の光学部材１１１より物体側に第２の光学部材１１２が設けられるように構成される。第１の光学部材１１１は、物体側から第２の光学部材１１２の領域Ｒを通った光の一部が第１の光学部材１１１の反射面１１１ａで反射し、光の一部が第１の光学部材１１１を透過する位置に設けられている。ここで、領域Ｒは図５のように開口であってよいが、レンズ、透明板、フィルタなどの光学素子が設けられてよい。受光面１２ａに結像する複数の像は、第１の光学部材１１１を透過して結像する像と、第１の光学部材１１１の反射面１１１ａ及び第２の光学部材１１２の反射面１１２ａで反射して結像する像と、を含む。
　ここで、図５のｆ１は、第１の光学部材１１１の像側に設けられたレンズ１１３の焦点距離である。
　本変形例に係る撮像装置１０は、上記の構成によって、望遠画像と広角画像とを高い解像度で得ることができる。ここで、コントローラ１３による画像処理は、上記の実施形態と同じである。
　本開示に記載された構成要件の全て、及び／又は、開示された全ての方法、又は、処理の全てのステップについては、これらの特徴が相互に排他的である組合せを除き、任意の組合せで組み合わせることができる。また、本開示に記載された特徴の各々は、明示的に否定されない限り、同一の目的、同等の目的又は類似する目的のために働く代替の特徴に置換することができる。したがって、明示的に否定されない限り、開示された特徴の各々は、包括的な一連の同一、又は、均等となる特徴の一例にすぎない。
　さらに、本開示に係る実施形態は、上述した実施形態のいずれの具体的構成にも制限されるものではない。本開示に係る実施形態は、本開示に記載された全ての新規な特徴、又は、それらの組合せ、あるいは記載された全ての新規な方法、又は、処理のステップ、又は、それらの組合せに拡張することができる。
　本開示において「第１」及び「第２」等の記載は、当該構成を区別するための識別子である。本開示における「第１」及び「第２」等の記載で区別された構成は、当該構成における番号を交換することができる。識別子の交換は同時に行われる。識別子の交換後も当該構成は区別される。識別子は削除してよい。識別子を削除した構成は、符号で区別される。本開示における「第１」及び「第２」等の識別子の記載のみに基づいて、当該構成の順序の解釈、小さい番号の識別子が存在することの根拠に利用してはならない。
　１０　撮像装置
　１１　撮像光学系
　１２　撮像素子
　１２ａ　受光面
　１３　コントローラ
　１１１　第１の光学部材
　１１１ａ　反射面
　１１１ｂ　裏面
　１１２　第２の光学部材
　１１２ａ　反射面
　１１３　レンズ
　１１４　別のレンズ

Claims (11)

  1. 　半透過性の反射面を有する第１の光学部材と、反射面を有する第２の光学部材と、を含んで構成される撮像光学系と、
    　前記撮像光学系を介して結像する像を撮像する撮像素子と、を備え、
    　焦点距離の異なる複数の像が前記撮像素子の同一の受光面に結像される、撮像装置。
  2. 　前記撮像素子から画像信号を取得し、前記複数の像を画像処理によって分離するコントローラを備える、請求項１に記載の撮像装置。
  3. 　前記コントローラは、事前に機械学習によって構築された画像分離モデルを用いて、前記画像処理を実行する、請求項２に記載の撮像装置。
  4. 　第１の色成分を有する第１の像と、前記第１の色成分と異なる第２の色成分を有する第２の像とが、前記複数の像として、重畳して前記受光面に結像される、請求項１から３のいずれか一項に記載の撮像装置。
  5. 　前記第１の光学部材は、前記半透過性の反射面がダイクロイックコートミラーであって、前記半透過性の反射面を表面としたときの裏面に反射防止膜が設けられている、請求項１から４のいずれか一項に記載の撮像装置。
  6. 　前記半透過性の反射面の曲率と前記裏面の曲率とが異なる、請求項５に記載の撮像装置。
  7. 　前記撮像光学系は、前記第１の光学部材を主鏡とし、前記第２の光学部材を副鏡とするカセグレン光学系を含むように構成され、
    　前記第１の光学部材は、前記副鏡から前記撮像素子への光を通す領域を有するレンズを像側に有し、
    　前記複数の像は、前記カセグレン光学系を介して結像する像と、前記副鏡を経ずに前記レンズを介して結像する像と、を含む、請求項１から６のいずれか一項に記載の撮像装置。
  8. 　前記領域は開口である、請求項７に記載の撮像装置。
  9. 　前記レンズは透明である、請求項７又は８に記載の撮像装置。
  10. 　前記撮像光学系は、前記第１の光学部材の反射面の少なくとも一部と前記第２の光学部材の反射面が向き合い、前記第１の光学部材より物体側に前記第２の光学部材が設けられるように構成され、
    　前記第１の光学部材は、物体側から前記第２の光学部材の開口を通った光の一部が前記第１の光学部材の反射面で反射し、前記光の一部が前記第１の光学部材を透過する位置に設けられ、
    　前記複数の像は、前記第１の光学部材を透過して結像する像と、前記第１の光学部材の反射面及び前記第２の光学部材の反射面で反射して結像する像と、を含む、請求項１から６のいずれか一項に記載の撮像装置。
  11. 　前記第１の光学部材は、レンズを像側に有する、請求項１０に記載の撮像装置。
PCT/JP2022/041425 2021-11-16 2022-11-07 撮像装置 Ceased WO2023090191A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202280075623.8A CN118265949A (zh) 2021-11-16 2022-11-07 拍摄装置
US18/710,226 US20240430553A1 (en) 2021-11-16 2022-11-07 Imaging apparatus
EP22895473.1A EP4435513A4 (en) 2021-11-16 2022-11-07 IMAGING DEVICE

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021186508A JP7710963B2 (ja) 2021-11-16 2021-11-16 撮像装置
JP2021-186508 2021-11-16

Publications (1)

Publication Number Publication Date
WO2023090191A1 true WO2023090191A1 (ja) 2023-05-25

Family

ID=86396941

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/041425 Ceased WO2023090191A1 (ja) 2021-11-16 2022-11-07 撮像装置

Country Status (5)

Country Link
US (1) US20240430553A1 (ja)
EP (1) EP4435513A4 (ja)
JP (1) JP7710963B2 (ja)
CN (1) CN118265949A (ja)
WO (1) WO2023090191A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024068499A (ja) * 2022-11-08 2024-05-20 京セラ株式会社 光学装置及び撮像装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1054939A (ja) * 1996-06-07 1998-02-24 Mitsubishi Electric Corp 反射式画角変換光学装置及びこれを用いた光学システム
JPH11311832A (ja) 1998-04-28 1999-11-09 Sony Corp 多焦点カメラ
JP2004279556A (ja) 2003-03-13 2004-10-07 Olympus Corp 撮像装置
JP2009122379A (ja) * 2007-11-14 2009-06-04 Canon Inc 光学装置及びその制御方法、撮像装置、並びにプログラム
JP2016054487A (ja) * 2015-10-13 2016-04-14 株式会社 清原光学 撮像装置および結像レンズ

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5161051A (en) * 1990-12-13 1992-11-03 Hughes Aircraft Company Simultaneous dual field of view sensor
GB9507671D0 (en) * 1995-04-13 1995-11-08 Barr & Stroud Ltd Dual waveband optical system
JP4438641B2 (ja) * 2005-02-25 2010-03-24 三菱電機株式会社 内視鏡
US9207433B2 (en) * 2012-06-21 2015-12-08 Broadcom Corporation Imaging enhancements for mobile devices using optical path folding
US20220080902A1 (en) * 2019-01-23 2022-03-17 Sony Semiconductor Solutions Corporation Vehicle-mounted camera
JP2025040503A (ja) * 2023-09-12 2025-03-25 キヤノン株式会社 光学系および撮像装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1054939A (ja) * 1996-06-07 1998-02-24 Mitsubishi Electric Corp 反射式画角変換光学装置及びこれを用いた光学システム
JPH11311832A (ja) 1998-04-28 1999-11-09 Sony Corp 多焦点カメラ
JP2004279556A (ja) 2003-03-13 2004-10-07 Olympus Corp 撮像装置
JP2009122379A (ja) * 2007-11-14 2009-06-04 Canon Inc 光学装置及びその制御方法、撮像装置、並びにプログラム
JP2016054487A (ja) * 2015-10-13 2016-04-14 株式会社 清原光学 撮像装置および結像レンズ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4435513A4

Also Published As

Publication number Publication date
EP4435513A4 (en) 2025-10-29
JP7710963B2 (ja) 2025-07-22
JP2023073816A (ja) 2023-05-26
CN118265949A (zh) 2024-06-28
EP4435513A1 (en) 2024-09-25
US20240430553A1 (en) 2024-12-26

Similar Documents

Publication Publication Date Title
US8953084B2 (en) Plural focal-plane imaging
US9414045B2 (en) Stereo camera
TWI531852B (zh) 影像擷取裝置及數位變焦方法
CN101937168B (zh) 一种光学立体成像装置及立体摄像方法
US9110368B2 (en) Anamorphic stereoscopic optical apparatus and related methods
JP2001238229A (ja) 立体画像撮影装置及び立体画像表示装置並びに立体画像撮影表示システム
JP7331222B2 (ja) 光学装置及び撮像装置
JP2016046772A (ja) 車載カメラ
WO2023090191A1 (ja) 撮像装置
JP2010134617A (ja) パノラマ撮像装置
CN111258166B (zh) 摄像模组及其潜望式摄像模组和图像获取方法及工作方法
JPWO2017028848A5 (ja)
JP2005130360A (ja) 画像表示における歪補正機能を有する画像表示装置
KR100485442B1 (ko) 일안식 입체 카메라 및 이를 이용한 입체 영상 시스템
JP2016048282A (ja) 撮像装置
CN112866550A (zh) 相位差获取方法和装置、电子设备、计算机可读存储介质
JP2016048824A (ja) 追尾装置、追尾システム、及び表示装置
JP2011182041A (ja) 撮像装置
JP2000092517A (ja) ２、３次元映像取り込み装置
CN109698897B (zh) 动态变焦透镜的多合一光学系统
JP2018007110A (ja) 表示装置およびスクリーン
EP4700330A1 (en) Imaging device and information processing method
EP4618572A1 (en) Optical device and imaging device
JP2023164764A (ja) 画像処理装置、撮像装置及び画像処理方法
WO2024101256A1 (ja) 光学装置及び撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22895473

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 202280075623.8

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 18710226

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2022895473

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2022895473

Country of ref document: EP

Effective date: 20240617