JPH0690032B2 - 距離画像取得装置 - Google Patents

距離画像取得装置

Info

Publication number
JPH0690032B2
JPH0690032B2 JP62195379A JP19537987A JPH0690032B2 JP H0690032 B2 JPH0690032 B2 JP H0690032B2 JP 62195379 A JP62195379 A JP 62195379A JP 19537987 A JP19537987 A JP 19537987A JP H0690032 B2 JPH0690032 B2 JP H0690032B2
Authority
JP
Japan
Prior art keywords
ratio
image
distance
function
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP62195379A
Other languages
English (en)
Other versions
JPS6439513A (en
Inventor
讓二 田島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP62195379A priority Critical patent/JPH0690032B2/ja
Priority to DE3850715T priority patent/DE3850715T2/de
Priority to EP88112787A priority patent/EP0302512B1/en
Priority to US07/229,460 priority patent/US4864395A/en
Publication of JPS6439513A publication Critical patent/JPS6439513A/ja
Publication of JPH0690032B2 publication Critical patent/JPH0690032B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/46Indirect determination of position data
    • G01S17/48Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of Optical Distance (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、三次元視覚装置に利用されるレンジファイン
ダを用いる距離画像取得装置に関する。
〔従来の技術〕
物体などの三次元装置をテレビカメラから入力された画
像により求める装置として、レンジファインダが提案さ
れている(特願昭59-197414号明細書)。このレンジフ
ァインダによりカメラから物体までの距離を求める方法
の一例を、第2図を参照して簡単に説明する。
光源1からレンズ2を通り平行にされた白色光源が、回
折格子3により赤から青紫のスペクトル光に分光され物
体4に投写される。波長λの光が法線からθの角度(Z
軸方向からαの角度)で物体表面上の点P(Z軸方向か
らβの角度の位置にある)に投影され、これがカメラ5
によって撮像され、センサ上の位置xでセンスされる。
このとき点Pの座標を(X,Z)とすると、カメラから物
体までの距離Zは式(1)により求められる。
Z=(X0−Z0tanα)/(tanβ−tanα) (1) ただし、X0は放射の中心のX座標 Z0は放射の中心のZ座標 角度βの値は撮像センサ上の位置xから知ることができ
るが、角度αの値はセンスされている光の波長λを知
り、 sinθ−sinθ=±nλ/d (2) ここで、θは回折格子に入射する光が法線となす角 dは回折格子の間隔 nは次数で通常は1 により角度θを求め、回折格子3とZ軸の角度を知るこ
とにより求めることができる。
物体の各点が反射している光の波長は、カメラ5をカラ
ーカメラと考え、その内の2つのセンサが異なる分光感
度σ(λ),σ(λ)を持ち、点Pが撮像された画
素の出力がそれぞれI1,I2であったとき、出力の比 R≡I1/(I1+I2) =σ(λ)/(σ(λ)+σ(λ)) ・・・
(3) が成り立つため、函数 f(λ)≡σ(λ)/(σ(λ)+σ(λ))・
・・(4) がλの単調函数となるようにσ(λ),σ(λ)を
定めることにより、出力の比Rから波長λを求めること
ができる。このようにして得られた波長λが、角度のα
を得るのに用いられる。以上のようにして、2つの同時
に撮像された画像から距離Zを得ることができる。
〔発明が解決しようとする問題点〕
以上に述べた従来技術によると、2つのセンサにより入
力された画像から各画素における物体までの距離Zを求
めるには、 (i)式(4)を波長λについて解き、 (ii)式(2)を角度θについて解き、 (iii)式(1)により距離Zを得る、 のように手順を踏む必要がある。その際、2つのセンサ
の分光感度σ(λ),σ(λ)、角度θと角度αの
関係、位置xと角度βの関係、X0,Z0などが正確に知ら
れている必要があり、センサ用のフィルタ,回折格子の
位置,カメラなどを変更した場合には関係をすべて計算
し直さねばならない。
本発明の目的は、上記のような構成要素の位置関係など
について、正確に測定することを一切必要とせず、事前
に画像を入力するだけで、各画素で距離Zを得ることの
できる距離画像取得装置を提供することにある。
〔問題点を解決するための手段〕
本発明は、分光されたスペクトルパターンを物体に投写
し、この画像を異なる分光感度のセンサを有するカメラ
によって撮像し、各画素について、物体までの距離を求
めるレンジファインダのセンサ出力から距離画像を得る
距離画像取得装置であって、 センサの複数の出力をディジタル値に変換する複数のA/
D変換手段と、 これらA/D変換手段の出力から比を計算する比画像演算
手段と、 前記センサを有するカメラから一定の距離に平面物体を
置き、前記比画像演算手段の出力である比のデータと画
素位置とから、画素位置を比の函数として求める函数演
算手段と、 この函数演算手段で2つの距離に関して得られた2つの
函数から分光位置を較正する分光位置較正手段と、 距離測定の場合において、前記比画像演算手段の出力と
前記分光位置較正手段により得られた分光位置と前記函
数演算手段により得られた函数とから各画素に対して物
体までの距離を演算する距離演算手段とを備えることを
特徴としている。
〔作用〕
第3図に本発明における較正データ入力時の配置を示
す。光源1,レンズ2,回折格子3,カメラ5の配置は第2図
と同様である。物体の存在する空間に、距離Zaにある平
面6,距離Zbにある平面7の2つの面を考える。まず、平
面6の位置に白板を置き、画像を撮像し、各画素につい
て式(3)の比Rを求める。平面6のZ座標はZaである
ので、式(1)は、 Za=(X0−Z0tanα)/(tanβ−tanα) (5) となる。角度αは比Rの函数であり、カメラ5での撮像
位置のxa座標は、レンズ中心から撮像画までの距離cを
定数として、角度βと式(6)の関係にあるので、 xa=c・tanβ (6) となる。平面6に関してのxaはRの函数として式(7)
のものが画像から求まり、xa(R)と書くことができ
る。
全く同様に、次に平面7の位置に白板を置き、画像を撮
像すると、Rとxb(R)の関係として式(8)が得られ
る。
ところで、すべての単色光は、回折格子3の一点から空
間に放射していると考えることができる。そのため、波
長に対応するある比Rの光線が平面6と交差する位置
(xa,Za)と平面7と交差する位置(xb,Zb)から定ま
る直線は、すべて放射の中心(X0,Z0)を通るはずであ
る。これが、上記の較正画像の入力で多数求まってお
り、その式を、 Z=aRX+bR(R=R1,R2,・・・)(9)とすれば、X
0,Z0は最小自乗法により、式(10)のように求められ
る。
以上から、任意の位置の物体上で比Rの点が撮像面でx
の位置に検知されたとき、そのZは、式(11)および
(12)を解いて式(13)で求められる。
ここで、(xa,Za)の代わりに(xb,Zb)を用いても全
く同様であるので式(13′)によってもZを求めること
ができる。
第3図に示したように光線の投光方向とカメラの撮像方
向の関係から、平面6の位置で撮像される比Rの範囲
と、平面7の位置で撮像される比Rの範囲は異なるか
ら、測距の時に得られたRが存在する方のデータにより
式(13)と式(13′)を使い分けることにより広い範囲
の測距を行うことができる。
以上により、2回の較正画像入力によりX0,Z0が求ま
り、これにより、実際の物体に対する画像取得と測距は
可能のはずであるが、実際には、較正画像入力によって
求まるのは実空間におけるxa,xbではなく、撮像面にお
けるxa,xbであり、これらは式(14)により結びつけら
れる。
通常cは正確には求まらない。しかし、cとして正確で
ない値が代わりに用いられても、式(10)の最小自乗
法によって求められる回折位置 は、式(15)のようになり、 を式(13)または式(13′)のX0,Z0に代入して距離を
求めてもZは正しく求まることが示されるので、cは適
当な値(例えばレンズの焦点距離f)として、以上の処
理を実行することができる。
以上により、予めX0,Z0,cを知ることなしに、2回の較
正画像入力により、これを近似的に推定しておくことに
よって、レンジファインダを実現することができる。
〔実施例〕
上記作用に基づいた本発明の実施例を第1図を参照して
説明する。
第1図は、実施例である距離画像取得装置のブロック図
である。この装置は、異なる分光感度のセンサを有する
カメラ5と、カメラ5の2つのセンサで得られた画像デ
ータをディジタル値に変換する2個のA/D変換器8,9と、
これらA/D変換器の出力をそれぞれ格納する画像メモリ1
0,11と、画像メモリ10,11の各画素毎に比を計算する比
画像演算回路12と、比画像演算回路の出力を格納する比
画像メモリ13と、比画像メモリからの読み出しデータの
流れを切り換えるスイッチ14と、第3図の平面6に白板
を置いて、第1の較正画像を取得した場合、比画像メモ
リ13から読み出された比画像から平面6における比Rの
函数xa(R)を求め保持する函数演算部15と、平面7に
白板を置いて第2の較正画像を取得した場合、比画像メ
モリ13から読み出された比画像から平面7における比R
の函数xb(R)を求め保持する函数演算部15,16と、較
正された回折位置を求め保持する回折位置較正部17と、
距離Zを求める距離演算部18と、距離Zを格納する距離
画像メモリ19とを備えている。
次に、本実施例の動作を説明する。
カメラ5の異なる分光感度を持つ2つのセンサで取得さ
れた画像データは、A/D変換器8,9を介して2つの画像メ
モリ10および11に格納される。比画像演算回路12は、画
像メモリ10および11の各画素毎に比Rを式(3)に従っ
て演算し、比画像を比画像メモリ13に格納する。
平面6に白板を置いて、第1の較正画像を取得した場
合、函数演算部15は、スイッチ14を介し、比画像メモリ
13に格納されている比画像から平面6における比Rの函
数xa(R)を求め、保持する。函数xa(R)は、観測さ
れたRa1≦R≦Ra2の範囲で値を持つ。同様に、平面7に
白板を置いて、第2の較正画像を取得した場合、函数演
算部16は、スイッチ14を介し、比画像メモリ13に格納さ
れている比画像から平面7における比Rの函数xb(R)
を求め、保持する。函数xb(R)は、Rb1≦R≦Rb2の範
囲で値を持つ。
回折位置較正部17は、函数xa(R)およびxb(R)につ
いて、双方のRの定義域の重複部分のRについて、式
(14)により、適当な定数cを用いて、(xa,Za)、
(xb,Zb)のペアを求め、式(9)および式(10)によ
り回折位置(X0,Z0)を求める。較正された回折位置
(X0,Z0)は回折位置較正部17に保持される。
実際の物体までの距離を測定する場合、実景が全く同様
に画像メモリ10および11に得られ、比画像が比画像メモ
リ13に得られる。距離演算部18は、比画像メモリ13か
ら、画素毎に比RをX座標値と共にスイッチ14を介して
読み出し、回折位置較正部17に保持されている回折位置
(X0,Z0)と函数演算部15,16に保持されている函数xa
(R),xb(R)を用いて式(13)または式(13′)に
より、距離Zを求め、距離画像メモリ19に書き込む。以
上の一連の動作の結果、距離画像メモリ19の各画素に
は、カメラ5から物体4までの距離Zが得られる。
なお、本実施例では、分光デバイスとして回折格子が用
いられているが、特願昭59-197414号明細書に示された
レンジファインダでは、プリズムを利用することもでき
る。その場合、本発明で較正する回折位置は、プリズム
中に仮想的に想定される分光位置として実行される。
〔発明の効果〕
以上に詳しく述べたように、本発明を利用することによ
り、特願昭59-197414号明細書に示したレンジファイン
ダから、各画素に対する距離を得る際に必要な種々のパ
ラメータを測定することなく、2回の画像入力により得
られる較正データにより、簡便に距離画像を得ることが
できる。
【図面の簡単な説明】
第1図は、本発明の実施例を示すブロック図、 第2図は、レンジファインダの説明図、 第3図は、本発明の較正を行う場合の配置を示す説明図
である。 1……光源 2……レンズ 3……回折格子 4……物体 5……カメラ 6,7……較正に用いる平面 8,9……A/D変換器 10,11……画像メモリ 12……比画像演算回路 13……比画像メモリ 14……スイッチ 15,16……函数演算部 17……回折位置較正部 18……距離演算部 19……距離画像メモリ

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】分光されたスペクトルパターンを物体に投
    写し、この画像を異なる分光感度のセンサを有するカメ
    ラによって撮像し、各画素について、物体までの距離を
    求めるレンジファインダのセンサ出力から距離画像を得
    る距離画像取得装置であって、 センサの複数の出力をディジタル値に変換する複数のA/
    D変換手段と、 これらA/D変換手段の出力から比を計算する比画像演算
    手段と、 前記センサを有するカメラから一定の距離に平面物体を
    置き、前記比画像演算手段の出力である比のデータと画
    素位置とから、画素位置を比の函数として求める函数演
    算手段と、 この函数演算手段で2つの距離に関して得られた2つの
    函数から分光位置を較正する分光位置較正手段と、 距離測定の場合において、前記比画像演算手段の出力と
    前記分光位置較正手段により得られた分光位置と前記函
    数演算手段により得られた函数とから各画素に対して物
    体までの距離を演算する距離演算手段とを備えることを
    特徴とするレンジファインダのセンサ出力から距離画像
    を得る距離画像取得装置。
JP62195379A 1987-08-06 1987-08-06 距離画像取得装置 Expired - Lifetime JPH0690032B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP62195379A JPH0690032B2 (ja) 1987-08-06 1987-08-06 距離画像取得装置
DE3850715T DE3850715T2 (de) 1987-08-06 1988-08-05 Vereinfachte Kalibrierung für eine Entfernungsinformationserwerbungsvorrichtung.
EP88112787A EP0302512B1 (en) 1987-08-06 1988-08-05 Simplified calibration for a distance information obtaining device
US07/229,460 US4864395A (en) 1987-08-06 1988-08-08 Simplified calibration for a distance information obtaining device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP62195379A JPH0690032B2 (ja) 1987-08-06 1987-08-06 距離画像取得装置

Publications (2)

Publication Number Publication Date
JPS6439513A JPS6439513A (en) 1989-02-09
JPH0690032B2 true JPH0690032B2 (ja) 1994-11-14

Family

ID=16340189

Family Applications (1)

Application Number Title Priority Date Filing Date
JP62195379A Expired - Lifetime JPH0690032B2 (ja) 1987-08-06 1987-08-06 距離画像取得装置

Country Status (4)

Country Link
US (1) US4864395A (ja)
EP (1) EP0302512B1 (ja)
JP (1) JPH0690032B2 (ja)
DE (1) DE3850715T2 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2704958B2 (ja) * 1988-02-27 1998-01-26 キヤノン株式会社 測距装置
FR2637694B1 (fr) * 1988-10-07 1991-10-18 Electr Et Entreprises Dispositif de detection de la position d'un mobile, notamment d'un aeronef, dans un plan
US5200792A (en) * 1989-08-31 1993-04-06 Nec Corporation Device for obtaining distance information from an object by instantaneously illuminating the object by a light beam
JP2641945B2 (ja) * 1989-08-31 1997-08-20 日本電気株式会社 距離画像取得方法及び装置
JPH0711420B2 (ja) * 1990-05-23 1995-02-08 日本電気株式会社 距離画像取得方法及び装置
JP2927916B2 (ja) * 1990-09-04 1999-07-28 三菱電機株式会社 距離検出装置
US6147760A (en) * 1994-08-30 2000-11-14 Geng; Zheng Jason High speed three dimensional imaging method
US6603561B2 (en) 2001-02-20 2003-08-05 Thomas D. Ditto Chromatic diffraction range finder
US8090194B2 (en) 2006-11-21 2012-01-03 Mantis Vision Ltd. 3D geometric modeling and motion capture using both single and dual imaging
EP2618102A2 (en) 2006-11-21 2013-07-24 Mantisvision Ltd. 3d geometric modeling and 3d video content creation
US8520191B2 (en) * 2008-09-05 2013-08-27 3Dewitt, Llc Slit aperture for diffraction range finding system
US10928489B2 (en) 2017-04-06 2021-02-23 Microsoft Technology Licensing, Llc Time of flight camera
US10215856B1 (en) 2017-11-27 2019-02-26 Microsoft Technology Licensing, Llc Time of flight camera
US10901087B2 (en) 2018-01-15 2021-01-26 Microsoft Technology Licensing, Llc Time of flight camera
US10942274B2 (en) 2018-04-11 2021-03-09 Microsoft Technology Licensing, Llc Time of flight and picture camera
US10895925B2 (en) 2018-10-03 2021-01-19 Microsoft Technology Licensing, Llc Touch display alignment
US11435476B2 (en) 2018-10-12 2022-09-06 Microsoft Technology Licensing, Llc Time-of-flight RGB-IR image sensor
CN110308117B (zh) * 2019-07-22 2021-08-24 中国科学院大学 衍射距离校准方法及系统和图像重建方法及系统
US11079515B2 (en) 2019-12-18 2021-08-03 Microsoft Technology Licensing, Llc Micro lens time-of-flight sensor having micro lens heights that vary based on image height

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4329060A (en) * 1980-04-14 1982-05-11 Sangamo Weston, Inc. Non-contacting workpiece gauging system
US4310227A (en) * 1981-01-05 1982-01-12 Polaroid Corporation Diffracted energy auto-ranging system for a camera
JPS5810605A (ja) * 1981-07-10 1983-01-21 Canon Inc 距離測定装置
US4601053A (en) * 1983-11-21 1986-07-15 Grumman Aerospace Corporation Automatic TV ranging system
JPS61116611A (ja) * 1984-11-12 1986-06-04 Canon Inc 距離測定方法
US4761546A (en) * 1985-11-25 1988-08-02 Matsushita Electric Works, Ltd. Optical displacement measuring system with nonlinearity correction
FR2602057B1 (fr) * 1986-07-22 1988-11-04 Matra Procede et dispositif de mesure de distance par voie optique
US4786815A (en) * 1987-02-12 1988-11-22 K. J. Law Engineers, Inc. Non-contact sensor with particular utility for measurement of road profile
JPH06175210A (ja) * 1992-12-02 1994-06-24 Fuji Photo Film Co Ltd カメラ用情報記録装置

Also Published As

Publication number Publication date
EP0302512A3 (en) 1991-05-29
EP0302512A2 (en) 1989-02-08
JPS6439513A (en) 1989-02-09
EP0302512B1 (en) 1994-07-20
DE3850715D1 (de) 1994-08-25
DE3850715T2 (de) 1994-10-27
US4864395A (en) 1989-09-05

Similar Documents

Publication Publication Date Title
JPH0690032B2 (ja) 距離画像取得装置
US8243286B2 (en) Device and method for the contactless detection of a three-dimensional contour
US6538751B2 (en) Image capturing apparatus and distance measuring method
Schneider et al. Validation of geometric models for fisheye lenses
CN108650447B (zh) 图像传感器、深度数据测量头及测量系统
US20210150744A1 (en) System and method for hybrid depth estimation
Zhang et al. A novel 3D multispectral vision system based on filter wheel cameras
JPS62226009A (ja) 写真測量的被写体検出方法
CN119342363B (zh) 多光谱深度相机及深度测量方法
JP6645140B2 (ja) 画像のキャリブレーション装置及びキャリブレーション方法
JP2002517742A (ja) 軸方向照明による形状の光電獲得方法および装置
JPH0352001B2 (ja)
JPH04503866A (ja) 対象物を写真測量するための装置
JP2970835B2 (ja) 三次元座標計測装置
JP2001304821A (ja) 画像撮像装置及び距離測定方法
JPS6256814A (ja) 3次元位置計測カメラ較正方式
JPH0711420B2 (ja) 距離画像取得方法及び装置
JP2629926B2 (ja) 距離画像取得装置
JP3608305B2 (ja) カメラ姿勢の検出装置
JP2641945B2 (ja) 距離画像取得方法及び装置
JPH0585846B2 (ja)
JP2500660B2 (ja) 距離・色彩画像取得方法及び装置
JPH09211316A (ja) 像信号処理装置
JPH0658755A (ja) 距離画像取得装置
JP4003274B2 (ja) 距離測定装置