JP7672048B2 - 撮像素子および測距装置 - Google Patents

撮像素子および測距装置 Download PDF

Info

Publication number
JP7672048B2
JP7672048B2 JP2023557982A JP2023557982A JP7672048B2 JP 7672048 B2 JP7672048 B2 JP 7672048B2 JP 2023557982 A JP2023557982 A JP 2023557982A JP 2023557982 A JP2023557982 A JP 2023557982A JP 7672048 B2 JP7672048 B2 JP 7672048B2
Authority
JP
Japan
Prior art keywords
charge
light receiving
signal
receiving element
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023557982A
Other languages
English (en)
Other versions
JPWO2023080044A5 (ja
JPWO2023080044A1 (ja
Inventor
裕 廣瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of JPWO2023080044A1 publication Critical patent/JPWO2023080044A1/ja
Publication of JPWO2023080044A5 publication Critical patent/JPWO2023080044A5/ja
Application granted granted Critical
Publication of JP7672048B2 publication Critical patent/JP7672048B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters
    • H04N25/773Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters comprising photon counting circuits, e.g. single photon detection [SPD] or single photon avalanche diodes [SPAD]
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/894Three-dimensional [3D] imaging with simultaneous measurement of time-of-flight at a two-dimensional [2D] array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4861Circuits for detection, sampling, integration or read-out
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4861Circuits for detection, sampling, integration or read-out
    • G01S7/4863Detector arrays, e.g. charge-transfer gates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • G01S7/4865Time delay measurement, e.g. time-of-flight measurement, time of arrival measurement or determining the exact position of a peak
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Description

本開示は、撮像素子および測距装置に関する。
複数のシングルフォトンアバランシェダイオード(SPAD,Single Photon Avalanche Diode)を備える受光アレイを用いて、被写体までの距離を計測する測距装置や測距システムが存在する。
例えば、特許文献1の測距装置は、制御部と距離算出部とを備える。制御部は、距離測定を実施する距離範囲を決定し、この距離範囲に対応する時間範囲を複数の区間に分割する。制御部は、時間範囲ごとにパルス光の出射と、受光部の露光が行なわれるように測距装置を制御する。そして、距離算出部が受光部の露光結果に応じて、被写体までの距離を算出する。このときの測距精度は、発光部が照射するパルス光のパルス幅によって決定される。
特許第6910010号公報
ところで、特許文献1のような測距装置には、1の露光期間に複数のパルス光を照射して、被写体に反射した光(フォトン)が計数するフォトンカウンティングを行う受光部が用いられることがある。このような受光部では、画素内に容量を備えており、受光したフォトン数に対応する電荷量が容量に蓄積される。
このような受光部は、フォトンカウンティング数値と対応する実物理量(電荷量)の非線形圧縮率が不十分であるため、背景光が強い環境下において高いダイナミックレンジでのフォトカウンティングが困難となる。
本開示は、高いダイナミックレンジでのフォトカウンティングが可能となる撮像素子および測距装置を提供することを目的とする。
前記課題を解決するために、本開示の一実施形態に係る撮像素子は、複数の画素を備え、前記各画素は、受光素子と、第1蓄電素子と、前記各画素内に設けられ、前記受光素子が光源によって照射され被写体で反射された光を検出した場合、前記第1蓄積素子に一定時間電荷を放出する電荷放出装置とを備える、撮像素子。
本開示によると、高いダイナミックレンジでのフォトカウンティングが可能となる。
第1実施形態に係る画素の構成を示すブロック図。 第1実施形態に係る電荷放出装置の動作原理を説明するための図。 第1実施形態に係る電荷放出装置のポテンシャルダイアグラムの概略図。 第1実施形態に係る受光センサの構成を示すブロック図。 第1実施形態に係る画素に構成される回路例を説明するための図。 第1実施形態に係る画素の1フレーム期間中の測距動作に関するタイミングチャート。 第2実施形態に係る測距装置の全体構成の一例を示すブロック図である。 第2実施形態に係る測距装置の距離測定の原理を説明するための図。 第2実施形態に係るサブレンジ画像の生成方法を説明するための図。 第2実施形態に係る画素の1フレーム期間中の測距動作に関するタイミングチャート。
以下、本発明の実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものではない。
(第1実施形態)
-画素の構成-
図1は、第1実施形態に係る画素の構成を示すブロック図である。図1に示す画素30は、後述する測距装置の受光センサ2(撮像素子)に配置されるものである。
図1に示すように、画素30は、受光素子31と、リセットトランジスタ32と、フォトカウント制御回路33と、電荷放出装置34と、ソースフォロアトランジスタ35と、選択トランジスタ36と、第1容量37(第1蓄電素子)とを備える。なお、リセットタイミング制御装置38および電荷供給装置39は、画素30外に配置される。
受光素子31は、例えば、SPADやアバランシェフォトダイオード(APD)などのフォトダイオード(PD)である。
リセットトランジスタ32は、ソース(またはドレイン)にリセットタイミング制御装置38の出力端子が接続され、ドレイン(またはソース)に受光素子31のカソード端子およびフォトカウント制御回路33の入力端子が接続され、ゲートにリセット信号VRSTを受ける。リセットタイミング制御装置38は、リセットトランジスタ32が受光素子31などのリセットを行うための電圧を、リセットトランジスタ32に供給する。
フォトカウント制御回路33は、出力端子に、電荷放出装置34の入力端子が接続される。フォトカウント制御回路33は、受光素子31のカソード端子からの出力に応じて、フォトカウンティング動作を行い、その結果を出力端子から出力する。例えば、フォトカウント制御回路33は、受光素子31が光(フォトン)を検出した場合に、パルス電圧を電荷放出装置34に出力する。
電荷放出装置34は、フォトカウント制御回路33および電荷供給装置39からの信号を受け、フローティングディフュージョンFDに電荷を出力する。例えば、電荷放出装置34は、フォトカウント制御回路33がパルス電圧を出力した場合に、所定の電荷をFDに出力する。電荷供給装置39は、電荷放出装置34に出力するための電荷を供給する。
ソースフォロアトランジスタ35は、ソース(またはドレイン)に画素電源バイアス信号Vcを受け、ドレイン(またはソース)に選択トランジスタ36のソース(またはドレイン)が接続され、ゲートにFDが接続される。
選択トランジスタ36は、ドレイン(またはソース)に出力線26が接続され、ゲートに選択信号VSELを受ける。
第1容量37は、一端がFDに接続され、他端が接地電圧(アース)に接続される。第1容量37は、電荷放出装置34がFDに出力した電荷を蓄積する。
ソースフォロアトランジスタ35は、選択トランジスタ36がオン状態となった場合、第1容量37に蓄積された電荷に応じた画素信号を、出力線26に出力する。
ここで、特許文献1における、FDの容量をC、蓄積用容量の容量をC、両者の比をr=C/(C+C)とし、各フォトン検出時にFDに飽和電荷量Qが転送されるものとすると、i個目のフォトン検出時において、蓄積用容量に追加蓄積される電荷量はr である。したがって、フォトンm個を検出した場合に蓄積用容量に蓄積される総電荷量は
となる。ここで、rが1に近いほど高いフォトン計数値を得ることが可能である。しかし、画素サイズ5μm程度の実用的に高解像度が可能な条件においては、r=0.9が限界値であり、画素内に蓄積可能なフォトン数の最高計数値は15程度に留まる。
本実施形態において、フォトン数の最小計数値1から30程度までの高ダイナミックレンジを得るためには、電荷放出装置34からFDに出力される電荷量が少ないこと好ましい。ところで、電荷放出装置34からFDに出力される電荷量の最小値は、第1容量37を充放電する際に発生するkTCノイズで規定されており、典型的な値としてC=15fF、室温で約63電子となる。本実施形態において、有効なS/N比を2と仮定した場合、画素信号を出力するために必要な電荷量は約125電子となる。このような微小な電荷量をフォトン計数毎に蓄積制御する場合、電荷放出装置34には、(1)微小電流(典型的には10nA)を、(2)超短時間(典型的には2ns)だけ流す精密な回路が必要となる。しかしながら、(1)、(2)を同時に満たすことは、量産工程で発生する寄生成分のばらつきを考慮すると、実現は極めて困難である。そこで、第1容量37に微小電流を流入させ、フォトン計数値の増分に従って、第1容量37に一定比率の電荷量を蓄積する(減少させる)ことが可能であれば、高計数値領域において信号電荷量が圧縮されるため、実電圧値を変えることなく、撮像素子のダイナミックレンジを高い値に広げることが可能となる。
図2は、第1実施形態に係る電荷放出装置の動作原理を説明するための図である。電荷放出装置34は、例えば、ソース(またはドレイン)に容量(ここでは、第2容量343とする)が接続され、ドレイン(またはソース)に第1容量37が接続されたMOSFETである。第2容量343に一定量の電荷を充電しておき、MOSFETをサブスレッショルド領域で動作させるによって、電荷放出装置34はドレイン(第1容量37)に微小電流を出力する。例えば、受光素子31がフォトンを1個検出するたびに、MOSFETのゲートに所定のバイアス電圧が印加されると、電荷放出装置34は、ソースからドレインに電荷を一定時間、放出する。
図3は、第1実施形態に係る電荷放出装置34のポテンシャルダイアグラムの概略図である。図3において、n,kは初期状態から起算して、第2容量343から放出された電子数を表すパラメータである。図3では、第2容量343からk個の電子を放出した状態にあり、ゲートに所定のバイアス電圧が印加されているときのMOSFETの状態をSと称する。MOSFETが状態Sにあるときの第2容量343からの電荷の平均放出レートをλとする。第2容量343が1個も電荷を放出していない初期状態Sにおける平均放出レートをλとする。このとき、MOSFETのソースが浮遊状態、チャネルに所定のバイアス電圧が印加されると、MOSFETが状態Sにあるときソース-チャネル間の電圧障壁は初期状態よりもV=kq/C高い。したがって、このときの電荷放出レートはボルツマンファクターを考慮して、
となる。
ここで、受光素子31が1フォトンを検出するたびに、一定時間ΔT、電荷放出装置34のゲートに所定のバイアス電圧が印加されるものとする。受光素子31の1個目のフォトン検出時に、電荷放出装置34のソースからドレインに放出される電荷をk(1)個とすると、電子がk(1)個放出されるのに要する時間tk(1)=ΔTとなることから、
となる。同様に、m個目のフォトン検出時に放出される電荷をk(m)個とすると、
となる。したがって、m個のフォトンを計数する間に、電荷放出装置34のソースからドレインに電荷が放出される期間は、動作の設定条件から、m・ΔTである。そこで、tk(1)からtk(m)までの総和をとることによって、電荷放出装置34の電荷放出数の関数が
となる。そして、式(4)をk(m)について解けば、
となり、MOSFETの電荷放出量がフォトン計数値の関数として求まる。式(5)からわかるように、電荷放出装置34はフォトンの計数値mに対して、電荷放出量k(m)が対数的に圧縮される。したがって、mの値に対して、k(m)の増加が抑圧され、高いm値の計数が可能となる。
図3は、第1実施形態に係る電荷放出装置のフォトンカウント値と電荷放出量との関係を示している。図3は、第2容量343の容量をC=15fF、時間ΔT=10ns、初期バイアス電流1μAの場合、電荷放出量k(m)と各カウント値における時間ΔT内に電荷放出装置34から放出される電荷量k(m)-k(m-1)をカウント値mの関数として表示したものである。上述したように、k(m)はmに対して対数的に増加する。C=15fFの値から電荷量k(m)-k(m-1)がノイズフロアに交差するのはm=35以上である。一定のマージンをとり、本実施例では、m=30までの計数が可能であり、従来の2倍のダイナミックレンジを実現している。
-受光センサの構成-
図4は、第1実施形態に係る受光センサの構成を示すブロック図である。図2に示すように、受光センサ2は、バイアス発生回路20、画素アレイ21、読出回路22、水平出力回路23、垂直駆動回路24、センサタイミング発生器25を備える。
バイアス発生回路20は、受光センサ2を駆動するために必要なバイアス信号(詳細は省略する)を供給する。なお、バイアス信号は、外部から供給する構成としてもよい。
画素アレイ21は、アレイ状に配置された複数の画素30を備える。複数の画素30は、行ごとに、選択信号VSEL、リセット信号VRST、PDバイアス制御信号V、電荷充電信号V、充電制御信号VR、画素電源バイアス信号Vcおよびインバータバイアス信号VINVが供給されている。各画素30は、供給された選択信号VSEL、リセット信号VRST、PDバイアス制御信号V、電荷充電信号V、充電制御信号V、画素電源バイアス信号Vcおよびインバータバイアス信号VINVに応じて、検出結果を示す画素信号を、出力線26に出力する。
読出回路22は、複数の列回路221を備える。列回路221は、増幅器とADコンバータとを備え、複数の画素30の列ごとに設けられる。読出回路22は、出力線26を介して各画素30から出力される信号を、列回路221によって読み出す。
水平出力回路23は、読出回路22から出力された信号を、出力信号として順次出力する。
垂直駆動回路24は、選択信号VSEL、リセット信号VRST、PDバイアス制御信号V、電荷充電信号V、充電制御信号VR、画素電源バイアス信号Vcおよびインバータバイアス信号VINVを生成し、所定のタイミングで各画素30に出力する。
センサタイミング発生器25は、水平出力回路23および垂直駆動回路24の駆動タイミングを示す駆動タイミング信号を出力する。
-画素に構成される回路例について-
図5(a)は、第1実施形態に係る画素に構成される回路例を示す図である。図5(a)は図1の画素に構成される回路の一例である。図5に示すように、画素30は、受光素子31と、リセットトランジスタ32と、反転アンプトランジスタ331と、負荷トランジスタ332と、充電用トランジスタ341と、電荷放出源トランジスタ342と、第2容量343(第2蓄電素子)と、ソースフォロアトランジスタ35と、選択トランジスタ36と、第1容量37とを備える。図1のフォトカウント制御回路33は、反転アンプトランジスタ331およびデプレション型トランジスタ332で構成されている。図1の電荷放出装置34は、充電用トランジスタ341、電荷放出源トランジスタ342および第2容量343で構成されている。
受光素子31は、アノード端子に所定の電圧が入力されている。露光時には、リセットトランジスタ32がオン状態となり、リセットトランジスタ32のドレイン(PDバイアス制御信号V)と受光素子31のアノード端子との間の電圧が所定のブレークダウン電圧以上に保たれる。一方、非露光時には、リセットトランジスタ32のドレイン(PDバイアス制御信号V)は0Vに設定され、ソースとして機能し、受光素子31のカソード端子とアノード端子との間の電圧はブレークダウン電圧以下に設定される。これにより、非露光時には、受光素子31にフォトンが入射してもガイガーモードパルスは発生しない。
反転アンプトランジスタ331は、ソース(またはドレイン)が負荷トランジスタ332のドレイン(またはソース)および電荷放出源トランジスタ342のゲートに接続され、ドレインが接地電圧(アース)に接続され、ゲートがリセットトランジスタ32のドレイン(またはソース)および受光素子31のカソード端子に接続されている。
負荷トランジスタ332は、ソース(またはドレイン)にインバータバイアス信号VINVを受ける。反転アンプトランジスタ331はデプレション型トランジスタ332を負荷とすることで反転アンプ(インバータ)を構成している。
充電用トランジスタ341は、ソース(またはドレイン)に電荷充電信号Vを受け、ゲートに充電制御信号Vを受け、ドレイン(またはソース)に電荷放出源トランジスタ342のソース(またはドレイン)および第2容量343の一端が接続される。電荷放出源トランジスタ342は、ドレイン(またはソース)にFD(図に明示されていない)およびこれと並列に接続された第1容量37(CM)が接続される。第2容量343は他端に接地電圧が接続される。充電用トランジスタ341は、充電制御信号Vにしたがって、第2容量343を所定の電圧に充電する。
ここで、露光時に受光素子31にフォトンが1個入射し、アバランシェ増倍によってガイガーモードパルスが発生すると、受光素子31のカソード端子の電圧は瞬時に低下する。そして、受光素子31のカソード端子の電圧は、時定数R・C(Cは受光素子31と配線の容量、Rはとリセットトランジスタ32のチャネルおよび配線の総抵抗(クエンチング抵抗に相当))経過後、リセットトランジスタ32のソース(PDバイアス制御信号V)から供給される電圧に自動的に復帰する(図5(b)参照)。すなわち、受光素子31は、セルフクエンチングかつセルフリカバリ動作を行う。この受光素子31のアノード端子の電圧をインバータ(フォトカウント制御回路33:反転アンプトランジスタ331およびデプレション型トランジスタ332)に入力することによって、インバータは、インバータの閾値によって決まる一定時間ΔTの幅を持つ矩形波信号を生成する(図5(c)参照)。具体的には、受光素子31のアノード端子の電圧を、反転アンプトランジスタ331のゲートに入力することにより、前記矩形波信号が電荷放出源トランジスタ342のゲートに出力される。すなわち、一定時間ΔTは、aをパラメータとして
と定まる。すなわち、画素30内に、容量C、抵抗Rおよびインバータによって一定時間ΔTだけ高電圧となる矩形波信号を生成する回路が構成される。この矩形波信号を電荷放出源トランジスタ342のゲートに入力することによって、一定時間ΔTだけ電荷放出源トランジスタ342がオン状態となる。すなわち、受光素子31がフォトンを受光すると、電荷放出源トランジスタ342は、一定時間ΔTの間に、所定の電圧で充電された第2容量343から、第1容量37に電子を放出することとなる。
ここで、第2容量343の充電電圧が電荷放出源トランジスタ342のサブスレッショルド電圧以下となるように設定することで、電荷放出源トランジスタ342の電荷放出レートを式(1)で表される状態に設定することができる。これにより、画素30は、式(5)に従う電荷蓄積量k(m)をフォトン計数mに対して得ることが可能となるため、フォトン計数値が30程度までの高い値を得ることが可能となる。この電荷蓄積量に対応した電圧が、ソースフォロアトランジスタ35および選択トランジスタ36によって、画素30から読み出され、列増幅回路40(逆対数変換回路)によって増幅されて出力される。列増幅回路40には、逆対数変換回路が構成されており、式(5)で表される電荷量に対応する電圧をフォトン計数mに対して線形な関数として出力する。
-画素の動作について-
図6は、第1実施形態に係る画素の1フレーム期間中の測距動作に関するタイミングチャートを示す。図6では、上から順に、リセット信号VRST、PDバイアス制御信号V、電荷放出源トランジスタ342のゲート電圧VEG、充電制御信号V、電荷充電信号V、第2容量343の充電電圧VCF、第1容量の充電電圧VCMをそれぞれ示す。なお、光源1の駆動信号は、タイミング信号発生器4からの信号を受けた垂直駆動回路24が生成する。また、受光素子31は、露光時には、カソード端子に、リセットトランジスタ32がソースに受けるPDバイアス制御信号Vが入力され、アノード端子に入力される所定の電圧との差によって生じる電圧がブレークダウン電圧を1V程度超過する、ガイガーモードにバイアスされるものとする。
初期時刻t0に、リセット信号VRSTがハイレベル(H)となり、リセットトランジスタ32がオン状態となる。また、PDバイアス制御信号Vがローレベル(L)となるため、受光素子31のカソード端子の電圧および反転アンプトランジスタ331のゲート電圧がローレベルとなる。このとき、反転アンプトランジスタ331(インバータ)は、ハイレベルの電圧を電荷放出源トランジスタ342のゲートに出力する。これにより、電荷放出源トランジスタ342は、オン状態となる。また、充電制御信号Vおよび電荷充電信号Vがハイレベルとなる。これにより、充電用トランジスタ341がオン状態となり、第1容量37および第2容量343がハイレベル(H’)に充電される。このとき、第1容量37および第2容量343は、時刻t1以降で設定される電荷充電信号Vのミドルレベルよりも0.5~1.0V程度高い電圧に充電される。
時刻t1において、PDバイアス制御信号Vがハイレベルとなり、受光素子31のカソード端子の電圧および反転アンプトランジスタ331のゲート電圧がハイレベルとなる。これにより、受光素子31が受光可能となる。このとき、反転アンプトランジスタ331(インバータ)は、ローレベルの電圧を電荷放出源トランジスタ342のゲートに出力するため、電荷放出源トランジスタ342がオフ状態となる。このため、第1容量37は、受光素子31がフォトンを検出するまで、ハイレベルの電圧を維持する。また、電荷充電信号Vが中間電圧であるミドルレベル(M)となり、第2容量343がミドルレベルに充電される。
時刻t2において、リセット信号VRSTおよび電荷充電信号Vがローレベルとなり、受光素子31、第1容量37および第2容量343の初期化が完了する。
時刻t3において、リセット信号VRSTがハイレベルとなり、リセットトランジスタ32がオン状態となる。これにより、受光素子31のカソード端子にハイレベルの電圧が印加されるため、受光素子31のカソード端子とアノード端子との間にブレーク電圧よりも高い電圧が印加された状態となり、露光が開始される。
本実施形態では、露光期間は、時刻t3からt10までの間である。図6では、時刻t4,t6,t8の直前に、受光素子31が1個のフォトンを検出している。時刻t4、t6、t8において、受光素子31は1個のフォトンを受光した後、ガイガーモードパルスを発生し、さらに、セルフクエンチングかつセルフリカバリすることで、図5(b)の矩形信号を出力する。そして、反転アンプトランジスタ331(インバータ)は、式(6)に従って、一定時間ΔTの矩形パルス(図5(c))を出力する。これにより、ゲート電圧VEGが一定時間ΔTだけハイレベルとなり、電荷放出源トランジスタ342が一定時間ΔTだけオン状態となる。これにより、各期間t4~t5,t6~t7,t8~t9間に、電荷放出源トランジスタ342は、式(5)に従って、第2容量343から第1容量37に、電子を放出する。したがって、第2容量343の充電電圧VCFの電圧が徐々に高くなり、第1容量の充電電圧VCMが徐々に低くなる。各期間t4~t5,t6~t7,t8~t9の電圧の変化は式(5)に示すようにフォトン数に対して対数的に(非線形に)変化する。
時刻t10において、リセット信号VRSTおよびPDバイアス制御信号Vがローレベルとなり、露光期間を終了する。そして、読み出し期間へ移行し、全画素の読み出しが終了した後、次のフレームに移行する。
(第2実施形態)
-測距装置の全体構成-
図7は、第2実施形態に係る測距装置の全体構成の一例を示すブロック図である。図7に示すように、本実施形態に係る測距装置は、光源1と、受光センサ2と、信号処理装置3と、タイミング信号発生器4とを備える。なお、受光センサ2には、第1実施形態の撮像素子(受光センサ2)が用いられる。
受光センサ2は、光源1によって照射され、被写体で反射された光を受光する。受光センサ2は、受光結果を示す出力信号を信号処理装置3に出力する。
信号処理装置3は、受光センサ2から受信した信号に基づいて、被写体までの距離を算出する。信号処理装置3は、算出結果を示す信号を出力する。
タイミング信号発生器4は、光源1、受光センサ2、信号処理装置3に、それぞれの駆動タイミングを示す信号を出力する。具体的には、タイミング信号発生器4は、光源1、受光センサ2、信号処理装置3が全画素同時撮像(グローバルシャッター)動作をするように、受光センサ2のフレームレートに位相が同期した信号を出力する。なお、タイミング信号発生器4が出力する信号の周波数は互いに異なってもよい。
-サブレンジ画像について-
図8は、第2実施形態に係る測距装置の距離測定の原理を説明するための図である。第2実施形態に係る測距装置は、サブレンジ(SR)画像SR1~SR5と、サブレンジ画像SR1~SR5からなるフルレンジ(FR)画像FR1とを生成可能である。なお、以下の説明において、上記実施形態と同様の構成については同じ符号を付し、詳細な説明を省略する場合がある。
例えば、光源1から被写体までの間の距離により、飛行時間(光が、光源1から照射されてから、被写体によって反射され、受光センサ2に戻ってくるまでの時間)が異なる。飛行時間に基づいて、受光センサ2の露光時間を設定することにより、所定の距離における被写体を検出することができる。
第2実施形態では、各サブレンジにおける露光時間が、光源が発光してから、前後のサブレンジ(例えば、サブレンジ画像SR3であれば、サブレンジ画像SR2,SR4)との間の中央位置に相当する距離の往復飛行時間だけ遅れたタイミングに設定される。露光時間による露光を繰り返す(戻ってくる光(フォトン)を計数する)ことで、各サブレンジに対応する位置におけるフォトン計数値を得ることができる。受光センサ2は、計数値が一定の閾値を超えた場合に被写体があるものとして、所定の出力レベルの信号を出力し、当該サブレンジの画像を生成する。また、受光センサ2は、得られた複数のサブレンジ画像(図8では、サブレンジ画像SR1~SR5)を重ね合わせることによりフルレンジ画像FR1を生成する。
図9は、第2実施形態に係るサブレンジ画像の生成方法を説明するための図である。図9では、サブレンジ画像SR3の生成タイミングを示している。
図9に示すように、第2実施形態では、光源1から光(パルス)が発射されてから、サブレンジ画像SR3に対応する飛行時間に相当する時間τ3(測距期間)だけ遅れたタイミングで、露光+露光終了パルス(立ち上がりが露光開始および立下りが露光終了に相当するパルス)が発生する。すなわち、受光センサ2は、サブレンジ画像SR3を生成する場合、露光+露光終了パルスがハイである期間に露光を行う。受光センサ2は、サブレンジ画像SR3を作成するために、この露光動作を複数回(本実施例ではn回としている)行い、被写体に反射して戻ってきたフォトン数を計数する。
ここで、サブレンジ画像SR1,SR2,SR3のように被写体までの距離が近い場合における測距では、被写体からの反射光量が多いため、より多数のフォトン数(典型的には20以上)を計数しなければならない。これに対して、サブレンジ画像SR4,SR5のように被写体までの距離が遠い場合における測距では、被写体からの反射光量が少ないため、計数に必要なフォトン数は少なくてよい(典型的には2以下)。従来の技術では、このような、測定距離レンジ毎に異なる広いダイナミックレンジが要求されるフォトン計数値を同一の画素回路で同一フレーム内に測距撮像することは困難であった。
-画素の動作について-
図10は、第2実施形態に係る画素の1フレーム期間中の測距動作に関するタイミングチャートを示す。なお、第2実施形態では、図5の撮像素子(受光センサ2)および図4(a)の画素30が用いられる。ここで、第2実施形態では、タイミング信号発生器4がセンサタイミング発生器25に、光源1の発光タイミングを示す発光信号を入力する。センサタイミング発生器25は、発光信号に応じて、各信号を出力する。本実施形態では、距離の近い測距を行う場合(例えば、サブレンジ画像SR1,SR2,SR3など)、被写体からの反射光量が多いため、より多数のフォトン数を計数するために、図10の動作(時減少電流源モード)を行う。
時刻t0から時刻t2までの動作は図6と同様である。
タイミング信号発生器4が発光信号を出力した後(図10には不図示)、各サブレンジの中央までの飛行距離に対応した遅延時間(サブレンジ画像SR3では、τ3)の後に露光を開始する。図10では、時刻t3,t6、t9において露光が開始され、時刻t5,t8,t10において露光が終了する。これらの露光周期は光源1の発光周期と同一である。このときの露光終了時刻は、露光期間が式(6)で決められる電荷放出時間ΔTよりも長い、時間ΔT’となるように設定される。すなわち、露光期間の後半にフォトンを検出した場合におけるクエンチング時間を考慮して、電荷放出源トランジスタ342の露光時間が設定されている。
一方、距離が長い測距(例えば、サブレンジ画像SR4,SR5など)では、写体からの反射光量が少ないため、図10の動作は不要である。具体的には、電荷放出源トランジスタ342は、ソースを常に固定バイアス電圧を印加することによって、定電流モードで動作する。これにより、電荷容量の線形性を保ちつつ、少ないフォトン数の計数を行うことができる。
以上に説明したように、第2実施形態に係る測距装置は、近距離から遠方まで、検出すべきフォトン数の多少に応じて、電荷放出源トランジスタ342を、時減少電流源モードと定電流源モードに切り替えられるため、高いダイナミックレンジのフォトン計数による高精度測距を実現している。
以上のように、本出願において開示する技術の例示として、実施形態について説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。
1 光源
2 受光センサ(撮像素子)
4 タイミング発生器
26 出力線
30 画素
31 受光素子
34 電荷放出装置
37 第1容量(第1蓄電素子)
343 第2容量(第2蓄電素子)
40 列増幅回路(逆対数変換回路)

Claims (7)

  1. 光源と、
    複数の画素とを備え
    前記各画素は、
    受光素子と、
    第1蓄電素子と、
    前記各画素内に設けられ、前記受光素子が前記光源によって照射され被写体で反射された光を検出した場合に入力される一定時間の幅を持つ矩形波信号に応じて、前記第1蓄電素子に一定時間電荷を放出する電荷放出装置と、
    を備える、撮像素子。
  2. 前記一定時間は、前記受光素子が光を検出してから、セルフクエンチングするまでの時間である、請求項1に記載の撮像素子。
  3. 前記電荷放出装置は、
    第2蓄電素子を備え、
    前記受光素子が光を検出した場合、前記第2蓄電素子から前記第1蓄電素子に前記一定時間、前記電荷を放出し、
    前記電荷を放出する前には、前記第2蓄電素子に所定量の前記電荷を蓄積する、請求項1に記載の撮像素子。
  4. 前記画素の出力線には、画素信号を逆対数に変換する逆対数変換回路が接続されている、請求項1に記載の撮像素子。
  5. 前記電荷放出装置は、前記受光素子が検出するフォトン数に応じて、前記第1蓄電素子に前記一定時間、前記電荷を放出するとき減少電流源モード、および、前記第1蓄電素子に定電流を出力する定電流モードのいずれか一方で動作する、請求項1に記載の撮像素子。
  6. 前記受光素子は、アバランシェフォトダイオードである、請求項1に記載の撮像素子。
  7. 請求項1から6のいずれか1項に記載の撮像素子と、
    前記複数の画素に対して、露光開始のタイミングを示す露光開始信号を出力するタイミング信号発生器と、
    前記複数の画素から出力される画素信号から、被写体までの距離を算出する信号処理装置とを備える、測距装置。
JP2023557982A 2021-11-02 2022-10-27 撮像素子および測距装置 Active JP7672048B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021179342 2021-11-02
JP2021179342 2021-11-02
PCT/JP2022/040046 WO2023080044A1 (ja) 2021-11-02 2022-10-27 撮像素子および測距装置

Publications (3)

Publication Number Publication Date
JPWO2023080044A1 JPWO2023080044A1 (ja) 2023-05-11
JPWO2023080044A5 JPWO2023080044A5 (ja) 2024-03-25
JP7672048B2 true JP7672048B2 (ja) 2025-05-07

Family

ID=86241042

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023557982A Active JP7672048B2 (ja) 2021-11-02 2022-10-27 撮像素子および測距装置

Country Status (4)

Country Link
US (1) US20240284072A1 (ja)
JP (1) JP7672048B2 (ja)
CN (1) CN118160320A (ja)
WO (1) WO2023080044A1 (ja)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021106521A1 (ja) 2019-11-29 2021-06-03 パナソニックIpマネジメント株式会社 光検出器、固体撮像装置、及び、距離測定装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6910010B2 (ja) * 2016-02-17 2021-07-28 パナソニックIpマネジメント株式会社 距離測定装置
WO2018216400A1 (ja) * 2017-05-25 2018-11-29 パナソニックIpマネジメント株式会社 固体撮像素子、及び撮像装置
JP7033739B2 (ja) * 2018-03-28 2022-03-11 パナソニックIpマネジメント株式会社 固体撮像素子、固体撮像装置、固体撮像システム、固体撮像素子の駆動方法
US11506765B2 (en) * 2018-12-05 2022-11-22 Sense Photonics, Inc. Hybrid center of mass method (CMM) pixel
US20230078828A1 (en) * 2020-03-31 2023-03-16 Panasonic Intellectual Property Management Co., Ltd. Information processing system, sensor system, information processing method, and program

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021106521A1 (ja) 2019-11-29 2021-06-03 パナソニックIpマネジメント株式会社 光検出器、固体撮像装置、及び、距離測定装置

Also Published As

Publication number Publication date
US20240284072A1 (en) 2024-08-22
CN118160320A (zh) 2024-06-07
WO2023080044A1 (ja) 2023-05-11
JPWO2023080044A1 (ja) 2023-05-11

Similar Documents

Publication Publication Date Title
US10498991B2 (en) High dynamic range pixel and a method for operating it
US11405577B2 (en) Distance image measurement device and distance image measurement method
US20180246214A1 (en) Solid-state imaging device, distance measurement device, and distance measurement method
US12211881B2 (en) Pixel circuit and method of operating the same in an always-on mode
CN109709531B (zh) 光传感器、距离测量装置及电子设备
US20170187939A1 (en) Solid-state imaging device
US8338773B2 (en) High-speed analog photon counter and method
TW202112122A (zh) 距離影像攝像裝置及距離影像攝像方法
US20130248689A1 (en) Time-delay integration imaging method and apparatus using a high-speed in-pixel analog photon counter
CN112653854A (zh) 具有带有用于高动态范围的子曝光的单光子雪崩二极管的成像设备
EP3848965A1 (en) Solid-state imaging element, imaging system, method for driving solid-state imaging element, and photodetector
US11169270B2 (en) Solid-state imaging device
CN111048540B (zh) 一种门控式像素单元以及3d图像传感器
JP7672048B2 (ja) 撮像素子および測距装置
US20200408910A1 (en) Distance measuring method and distance measuring device
US9848138B2 (en) Electronic charge injection circuit for radiation detector
CN109889735B (zh) 像素电路及图像传感器
JP7689346B2 (ja) 撮像素子および測距装置
US11553150B2 (en) In pixel time amplifier for LIDAR applications
JP2022191793A (ja) 距離画像撮像装置及び距離画像撮像方法
JP2020081664A (ja) 放射線撮像装置および放射線撮像の制御方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231219

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241008

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20250204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250324

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250401

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250408

R150 Certificate of patent or registration of utility model

Ref document number: 7672048

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150