WO2007097444A1 - ステレオカメラ - Google Patents
ステレオカメラ Download PDFInfo
- Publication number
- WO2007097444A1 WO2007097444A1 PCT/JP2007/053470 JP2007053470W WO2007097444A1 WO 2007097444 A1 WO2007097444 A1 WO 2007097444A1 JP 2007053470 W JP2007053470 W JP 2007053470W WO 2007097444 A1 WO2007097444 A1 WO 2007097444A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- camera
- stay
- mounting
- stereo camera
- stereo
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B35/00—Stereoscopic photography
- G03B35/08—Stereoscopic photography by simultaneous recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/10—Measuring distances in line of sight; Optical rangefinders using a parallactic triangle with variable angles and a base of fixed length in the observation station, e.g. in the instrument
- G01C3/18—Measuring distances in line of sight; Optical rangefinders using a parallactic triangle with variable angles and a base of fixed length in the observation station, e.g. in the instrument with one observation point at each end of the base
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/12—Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/56—Accessories
Definitions
- the present invention relates to a stereo camera that calculates a distance to an object ahead by processing parallax between two images taken from left and right cameras.
- Two cameras are arranged with their optical axes separated by a predetermined distance (baseline length) toward the front of the vehicle, and by processing the parallax between the two images taken from the left and right cameras, Stereo cameras that calculate the distance to an object are known.
- This stereo camera is installed in a vehicle as a distance measurement device for measuring the distance to an object, and is used in a collision prevention system that issues an inter-vehicle distance alarm and an obstacle alarm.
- FIG. 7 is a perspective view of a conventional stereo camera.
- the conventional stereo camera fixes the right camera 21, the left camera 22, the force melasti 23 that holds the right camera 21 and the left camera 22 in place, and the camera stay 23 to the body mounting part 25. It consists of a mounting part 24.
- the stereo camera is fixed to the vehicle body attachment portion 25 with three screws using attachment holes 26, 27, and 28 provided in the attachment portion 24.
- the measurement distance error depends on the placement accuracy of the two left and right cameras of the stereo camera. Therefore, if the distance between the two cameras changes or the optical axis of the camera deviates from a predetermined direction, an error in the measurement distance occurs and the reliability of the collision prevention system decreases (for example, see Patent Document 1). ).
- the vehicle body mounting portion 25 of the automobile on which the stereo camera is mounted becomes hot due to direct sunlight shining during parking, for example. Since the conventional stereo camera is attached to the side close to the camera stay 23 with two screws, it is fixed to the mounting part of the vehicle body using the mounting holes 26 and 27 provided in the mounting part 24. The part is restrained by the distance between the attachment hole 29 and the attachment hole 30 of the vehicle body attachment part 25. On the other hand, since the camera stay 23 is not directly fixed to the vehicle body, the camera stay 23 expands freely. In this case, the base line length of the left and right cameras and the optical axis shift, resulting in a decrease in distance measurement accuracy.
- Patent Document 1 JP 2001-88623 A
- the present invention provides a stereo camera that can maintain distance measurement accuracy by preventing a shift in the base line length and the optical axis of the camera even in a harsh environment.
- the stereo camera of the present invention includes a right camera and a left camera, a camera stay that holds the right camera and the left camera at predetermined positions, and an attachment portion that has an attachment hole for fixing the camera stay to the vehicle.
- the center of the mounting hole is arranged on a plurality of virtual lines parallel to the base line connecting the right camera and the left camera, and the number of mounting holes arranged on the virtual parallel lines is the camera sticker distance.
- the number of mounting holes arranged on the virtual parallel line closer to the camera sticker than the far virtual parallel line is one.
- the number of the plurality of mounting holes is two, and the one mounting hole forms an isosceles triangle, and the isosceles triangle is equal.
- the center of one mounting hole is placed at the apex of the two sides.
- the center position of one mounting hole is the center of the base line length connecting the right camera and the left camera.
- the left and right cameras can be held evenly, so that stability against vibration and impact during traveling can be ensured.
- the camera stay and the mounting portion are integrally formed.
- FIG. 1 is a perspective view of a stereo camera according to an embodiment of the present invention.
- FIG. 2 is a diagram showing a state in which the stereo camera is attached to the vehicle body in the embodiment of the present invention.
- FIG. 3 is a diagram showing a stereo camera mounting portion according to the embodiment of the present invention.
- FIG. 4 is a diagram showing the amount of angular displacement of the left and right cameras when the stereo camera according to the embodiment of the present invention is used.
- FIG. 5 is a view showing a mounting portion of a stereo camera of a comparative example.
- FIG. 6 is a diagram showing the amount of angular displacement of the left and right cameras when the stereo camera of the comparative example is used.
- FIG. 7 is a perspective view of a conventional stereo camera.
- FIG. 1 is a perspective view of a stereo camera according to an embodiment of the present invention.
- the stereo camera of the present invention includes a right camera 1, a left camera 2, a camera stay 3 that holds the right camera 1 and the left camera 2 at predetermined positions, and an attachment that fixes the camera stay 3 to the vehicle.
- mounting portion 4 having a hole.
- the center of the mounting holes 5, 6 and 7 are arranged on a plurality of virtual lines parallel to the base line connecting the right camera 1 and the left camera 2 (two broken lines AA in Fig. 1). Has been. Then, it is placed on a virtual parallel line AA 'far from camera stay 3.
- the number of mounting holes placed is two (2 in Fig. 1), and the mounting holes are located on the virtual parallel line BB 'closer to the camera stay 3 than the far virtual parallel line AA'.
- the camera stay 3 is a rectangular plate, and a mounting portion 4 is provided so as to protrude from the rear end face force of the central portion.
- the camera stay 3 and the mounting portion 4 are lightweight, have high rigidity, have good thermal conductivity, and are integrally formed of an aluminum alloy.
- Pitch indicates rotation about the base line connecting the right camera 1 and the left camera 2 as an axis.
- Roll indicates the rotation of the right camera 1 and the left camera 2 in the optical axis direction.
- Yaw shows rotation about the plane perpendicular to the plane composed of the baseline and optical axis of right camera 1 and left camera 2
- the attachment portion 4 is provided with attachment holes 5, 6, and 7 for passing screws.
- the attachment holes 6 and 7 are arranged with a predetermined interval, and the attachment hole 5 is arranged at the center of the attachment hole 6 and the attachment hole 7 in the base line direction.
- the mounting holes 5, 6, and 7 are arranged so as to form an isosceles triangle with the center of the mounting hole 5 being the same two vertexes.
- the centers of the mounting holes 5, 6, 7 are arranged on two virtual lines parallel to the base line connecting the right camera 1 and the left camera 2.
- the number of mounting holes arranged on the virtual parallel line AA ′ far from the camera stay 3 is two, and the mounting holes are arranged on the virtual parallel line BB ′ closer to the camera stay 3 than the virtual parallel line far from the camera stay 3.
- the number of mounting holes is one Yes.
- the mounting hole portion 5 closer to the camera stay 3 is formed. Since there is only one place, the mounting portion 4 is not restricted by the mounting pitch on the vehicle body side mounting portion 11 side, and is not affected by expansion and contraction due to thermal expansion of the vehicle body side mounting portion 11 described later. Therefore, since the camera stay 3 expands as a unit and the camera stay 3 is not distorted, the mounting section 4 does not distort, so that the base line length of the left and right cameras and the optical axis are not displaced, and the distance measurement accuracy is maintained. Is possible.
- the position in the camera base length direction of the center of the mounting hole 5 on the camera stay 3 side is provided at the center position of the right camera 1 and the left camera 2 on the camera base line.
- FIG. 2 is a diagram showing an attachment state of the stereo camera to the vehicle body in the embodiment of the present invention.
- the vehicle body side attachment portion 11 is provided with vehicle body side attachment holes 12, 13, and 14.
- the stereo camera is fastened and fixed to the vehicle body side mounting portion 11 by three screws 8, 9, 10 through mounting holes 5, 6, 7 provided in the mounting portion 4.
- a stereo camera mounted on a vehicle takes an image of an object in front from the image sensors inside the right camera 1 and the left camera 2, respectively.
- the image processing board (not shown) mounted inside the camera stay 3 captures images at a predetermined timing from the two image sensors in the left and right cameras, and processes the shift between the captured left and right images. Calculate the distance to the object.
- the stereo camera can detect the inter-vehicle distance from the preceding vehicle and can detect the distance to the obstacle ahead. If the vehicle is within a preset distance, the driver is warned by sound or light.
- FIG. 3 shows a stereo camera mounting portion in the embodiment of the present invention used in the experiment.
- FIG. 4 is a layout view of 4 mounting holes 5.
- the mounting hole 5 is arranged at a position close to the camera stay 3, and the mounting holes 6 and 7 are arranged at a position away from the camera stay 3. Also, the mounting holes 6 and 7 are arranged with a space therebetween, and the mounting hole 5 is arranged at the center position of the mounting holes 6 and 7 in the baseline direction.
- FIG. 5 is an arrangement view of the mounting holes 15 to 18 of the mounting portion 14 of the stereo camera of the comparative example.
- the shape and size of the attachment portion 14 are the same as those of the attachment portion 4 that is useful in the embodiment of the present invention.
- the attachment holes 17 and 18 are provided at the same positions as the attachment holes 6 and 7 of the attachment part 4 which is effective in the embodiment of the present invention.
- the mounting holes 15 and 16 on the side close to the camera stay are provided at two places, and all other conditions are the same.
- FIG. 4 is a diagram showing the relationship between the ambient temperature and the angular displacement amounts of the left and right cameras when the stereo camera according to the embodiment of the present invention shown in FIG. 3 is attached to a vehicle.
- the horizontal axis represents the ambient temperature of the stereo camera.
- the vertical axis shows the amount of angular displacement in the Yaw, Pitch, and Roll directions with the left camera 2 relative to the position of the right camera 1.
- the stereo camera according to the embodiment of the present invention uses the imaging device 1 having a 1Z3 size and 400,000 pixels.
- the pitch of one pixel is 6.35 m, and in order to ensure the accuracy of distance measurement, the difference between the two images incorporating the left and right camera forces corresponds to the pitch of one pixel of image sensor 1. 6. 35 / zm It is necessary to keep it below.
- the angle of view of the left and right cameras used for the stereo camera in the embodiment of the present invention is 43 ° and the light receiving surface length of the image sensor 1 is 4.9 mm, the focal length of the lens is 6.2 mm. It becomes. Therefore When the pitch for one pixel is converted into an angle in the Yaw direction, the pitch 6.35 m is divided by the focal distance of the lens 6.2 mm to be 0.06 °.
- the distance measurement accuracy can be adjusted within a range of -40 ° C to 85 ° C in consideration of the use in sunlight or in cold weather. It is necessary to secure the degree. Therefore, as shown by the dotted line in Fig. 4, it is necessary to keep the amount of angular displacement in the Yaw direction below 0.06 ° in the range of -40 ° C to 85 ° C.
- the relationship between the ambient temperature and the amount of angular displacement is based on 25 ° C, so that the amount of angular displacement is adjusted to 0 ° at this time.
- the left camera 2 has a rotation angle in the direction of the arrow in the Yaw direction in FIG. 1 (the axis direction perpendicular to the plane composed of the base line of the stereo camera and the optical axis). It changes in the direction of increasing.
- the left camera 2 changes in the direction in which the rotation angle in the direction opposite to the arrow in the Yaw direction in FIG.
- the right and left angular displacements have linear characteristics that change at a constant rate with respect to the ambient temperature.
- the amount of rotation displacement in the Yaw direction at an ambient temperature of 40 ° C is 0.0464 ° as shown in FIG.
- the angle variable has a linear relationship that changes at a constant rate with respect to the ambient temperature. Therefore, it can be estimated that the Yaw angular displacement of the left and right cameras will be the same even at 85 ° C where the temperature change from 25 ° C is symmetrical.
- FIG. 6 is a diagram showing the relationship between the ambient temperature and the amount of angular displacement of the left and right cameras when the stereo camera in the comparative example of FIG. 5 is attached to the vehicle.
- the horizontal and vertical axes in FIG. 6 are the same as those in FIG.
- the expansion coefficient due to the surrounding heat is determined by the vehicle body side attachment portion 11 and the attachment portion 4. Even if they differ, there is only one mounting hole close to the camera stay 3, so the mounting part 4 is not constrained by the mounting pitch on the car body side mounting part 11 and the thermal expansion of the car body side mounting part 11 Not affected by expansion and contraction. Accordingly, since the mounting portion 4 and the camera stay 3 are expanded integrally, and the camera stay 3 is not distorted, the amount of angular displacement of the left and right cameras can be kept small.
- the stereo camera in the comparative example when the stereo camera in the comparative example is attached to the vehicle, it is close to the camera stay 3 when the expansion coefficient due to the surrounding heat differs between the vehicle body side attachment portion 11 and the attachment portion 4. Since there are two mounting holes, the mounting portion 4 is restrained by the mounting pitch on the vehicle body side mounting portion 11 side, and is affected by expansion and contraction due to thermal expansion of the vehicle body side mounting portion 11. On the other hand, since the camera stay 3 is free, the camera stay 3 is distorted due to the difference in the extension of the mounting portion 4 and the camera stay 3, and the amount of angular displacement between the left and right cameras increases.
- the center of the mounting hole is arranged on a plurality of virtual lines parallel to the base line connecting the right camera and the left camera, and the force
- the number of mounting holes on the far virtual parallel line AA 'to 2 and the camera sticker on the virtual parallel line close to 1 the number of mounting holes is one. It is possible to reduce the occurrence of camera position shifts and realize highly accurate distance measurement.
- the stereo camera that is effective in the present invention prevents the camera rusty from being distorted due to the difference in expansion between the mounting portion and the camera stay, thereby causing the base line length and the optical axis of the left and right cameras to be shifted, thereby improving the ranging accuracy. Can be maintained. Therefore, it is useful as a stereo camera that calculates the distance to the object ahead by processing the parallax between the two images taken from the left and right cameras.
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Electromagnetism (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Measurement Of Optical Distance (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Accessories Of Cameras (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
右カメラ(1)と左カメラ(2)と、右カメラ(1)と左カメラ(2)とを所定の位置で保持したカメラステイ(3)と、カメラステイ(3)を車両に固定する取り付け穴部(5),(6),(7)を有する取り付け部(4)とを備え、これらの取り付け穴部は右カメラ(1)と左カメラ(2)とを結ぶ基線に対し平行な複数の仮想線上に配置されており、カメラステイ(3)から遠い仮想の平行線上に配置された取り付け穴部の数を複数個とし、遠い仮想の平行線よりもカメラステイ(3)から近い仮想の平行線上に配置された取り付け穴部の数を1個とした構成とする。このような構成により、取り付け部(4)とカメラステイ(3)の膨張の違いによりカメラステイ(3)が歪んで左右のカメラ(1)、(2)の基線長や光軸のずれが生じる事を防止し、周囲温度が変化しても高い測距精度を有するステレオカメラを提供する。
Description
明 細 書
ステレオカメラ
技術分野
[0001] 本発明は、左右のカメラから取り入れた 2つの画像の視差を処理して前方の物体ま での距離を算出するステレオカメラに関する。
背景技術
[0002] 2個のカメラがそれらの光軸を所定の間隔 (基線長)だけ離して車両前方に向けて 配置され、左右のカメラから取り入れた 2つの画像の視差を処理することにより、前方 の物体までの距離を算出するステレオカメラが知られている。このステレオカメラは、 対象物までの距離を測定するための距離測定装置として車両に搭載され、車間距離 警報、障害物警報を発する衝突防止システムに利用されている。
[0003] 図 7は従来のステレオカメラの斜視図である。図 7において、従来のステレオカメラ は、右カメラ 21、左カメラ 22と、右カメラ 21と左カメラ 22とを所定の位置で保持した力 メラスティ 23と、カメラスティ 23を車体取り付け部 25に固定する取り付け部 24とから 構成されている。そしてステレオカメラは、取り付け部 24に設けられた取り付け穴部 2 6、 27、 28を利用して 3本のビスにより車体取り付け部 25に固定されている。
[0004] 一般的に測定距離の誤差は、ステレオカメラの左右 2個のカメラの配置精度に依存 する。従って、 2個のカメラの距離が変わったり、カメラの光軸が所定の方向よりずれ たりした場合には、測定距離の誤差が生じ衝突防止システムの信頼性が低下する( 例えば、特許文献 1参照)。
[0005] し力しながら、ステレオカメラが搭載された自動車の車体取り付け部 25は、例えば 駐車中に直射日光が照り付け高温になる。従来のステレオカメラは、カメラスティ 23 に近い側を 2個のビスにより取り付けていたために、取り付け部 24に設けられた取り 付け穴部 26、 27を利用して車体の取り付け部に固定されている部分が車体取り付け 部 25の取り付け穴部 29と取り付け穴部 30間隔に拘束される。これに対しカメラスティ 23は直接車体に固定されていないため自由に膨張するので、一体構造で構成され る取り付け部 24とカメラスティ 23の間の膨張の違いによりカメラスティ 23の部分が歪
んで左右のカメラの基線長や光軸のずれが生じ距離測定の精度が低下する。
特許文献 1 :特開 2001— 88623号公報
発明の開示
[0006] 本発明は、過酷な環境下においても基線長やカメラの光軸のずれを防止して測距 精度を維持できるステレオカメラを提供する。
[0007] 本発明のステレオカメラは、右カメラおよび左カメラと、右カメラと左カメラとを所定の 位置で保持したカメラスティと、カメラスティを車両に固定する取り付け穴部を有する 取り付け部とを備え、取り付け穴部の中心は、右カメラと左カメラとを結ぶ基線に対し 平行な複数の仮想線上に配置されており、カメラスティカ 遠 、仮想の平行線上に 配置された取り付け穴部の数を複数個とし、遠い仮想の平行線よりもカメラスティカ 近い仮想の平行線上に配置された取り付け穴部の数を 1個とした構成としている。
[0008] この構成により、取り付け部とカメラスティの膨張の違いによりカメラスティが歪んで 左右のカメラの基線長や光軸のずれが生じることを防止し、測定精度を維持する。
[0009] また、本発明のステレオカメラは、上記の複数個の取り付け穴部の数は 2個であり、 上記の 1個の取り付け穴部とで 2等辺三角形を構成し、 2等辺三角形の等しい 2辺の 頂点の位置に 1個の取り付け穴部の中心を配置している。
[0010] この構成により、カメラスティの回転を防止し左右のカメラの基線長や光軸のずれが 生じることを防止し、測定精度を維持することができる。
[0011] また、本発明のステレオカメラは、 1個の取り付け穴部の中心位置は、前記右カメラ と前記左カメラとを結ぶ基線長の中心としている。
[0012] この構成により、左右のカメラを均等に保持することができるので、走行中の振動や 衝撃に対して安定性を確保することができる。
[0013] さらに、本発明のステレオカメラは、カメラスティと取り付け部は一体で形成している
[0014] この構成により、組み立て時の取り付けによる誤差をなくし取り付け精度を向上する ことができる。
図面の簡単な説明
[0015] [図 1]図 1は本発明の実施の形態におけるステレオカメラの斜視図である。
[図 2]図 2は本発明の実施の形態におけるステレオカメラの車体への取り付け状態を 示した図である。
[図 3]図 3は本発明の実施の形態におけるステレオカメラの取り付け部を示す図であ る。
[図 4]図 4は本発明の実施の形態におけるステレオカメラを用いた場合の左右カメラ の角度変位量を示す図である。
[図 5]図 5は比較例のステレオカメラの取り付け部を示す図である。
[図 6]図 6は比較例のステレオカメラを用いた場合の左右カメラの角度変位量を示す 図である。
[図 7]図 7は従来のステレオカメラの斜視図である。
符号の説明
[0016] 1 右カメラ
2 左カメラ
3 カメラスティ
4, 14 取り付け部
5, 6, 7, 15, 16, 17, 18 取り付け穴部
8, 9, 10 ビス
11 車体側取り付け部
12, 13, 14 車体側取り付け穴部
発明を実施するための最良の形態
[0017] 以下、本発明の実施の形態におけるステレオカメラについて、図面を用いて説明す る。
[0018] 図 1は、本発明の実施の形態におけるステレオカメラの斜視図である。図 1において 、本発明のステレオカメラは、右カメラ 1と、左カメラ 2と、右カメラ 1と左カメラ 2とを所定 の位置で保持したカメラスティ 3と、カメラスティ 3を車両に固定する取り付け穴部を有 する取り付け部 4とを備える。また、取り付け穴部 5、 6、 7の中心は、右カメラ 1と左カメ ラ 2とを結ぶ基線に対し平行な複数本(図 1においては、破線 AA の 2本)の仮 想線上に配置されている。そして、カメラスティ 3から遠い仮想の平行線 AA'上に配
置された取り付け穴部の数を複数個(図 1においては、 2個)とし、遠い仮想の平行線 AA'よりもカメラスティ 3から近い仮想の平行線 BB'上に配置された取り付け穴部の 数を 1個とした構成として 、る。
[0019] カメラスティ 3は長方形状の板で、中央部の後部端面力 突出して取り付け部 4が 設けられている。カメラスティ 3と取り付け部 4は軽量で高い剛性を有し、かつ熱伝導 率の良 、アルミニウム合金により一体で構成されて 、る。
[0020] このように一体で構成することによりカメラスティ 3と取り付け部 4を別の部材で構成 する場合に比べ、組み立て時の取り付けによる誤差をなくし取り付け精度の良いステ レオカメラを実現することができる。また、熱伝導率の良いアルミニウム合金を使用す ることによりステレオカメラの軽量ィ匕を実現できる。さらに、カメラスティ 3の内部に実装 された撮像処理回路基板からの熱を放熱効果が高 ヽので信頼性の高 ヽステレオカメ ラを実現することがでさる。
[0021] 図 1に示した座標軸において、 Pitchは右カメラ 1と左カメラ 2を結ぶ基線を軸とする 回転を示す。 Rollは右カメラ 1と左カメラ 2の光軸方向の回転を示す。 Yawは右カメラ 1と左カメラ 2の基線および光軸で構成される平面と垂直方向を軸とする回転を示す
[0022] 取り付け部 4にはビスを通すための取り付け穴部 5、 6、 7が設けられている。
[0023] 取り付け穴部 6と 7は所定の間隔を持って配置され、取り付け穴部 5は基線方向に おいて取り付け穴部 6と取り付け穴部 7の中心位置に配置されている。取り付け穴部 5、 6、 7は、取り付け穴部 5の中心を等しい 2辺の頂点とする 2等辺 3角形を構成する ように配置されている。
[0024] このように取り付け穴部を配置してカメラスティ 3に取り付け部 4を固定することにより 、 Pitch, Roll, Yaw3方向の回転を防止し、左右のカメラの基線長や光軸のずれが 生じる事を防止し、測定精度を維持することができる。
[0025] また、取り付け穴部 5、 6、 7の中心は、右カメラ 1と左カメラ 2とを結ぶ基線に対し平 行な 2本の仮想線上に配置されている。そして、カメラスティ 3から遠い仮想の平行線 AA'上に配置された取り付け穴部の数を 2個とし、遠い仮想の平行線 よりもカメ ラスティ 3から近い仮想の平行線 BB'上に配置された取り付け穴部の数を 1個として
いる。
[0026] このような配置にすることにより、車外の熱による膨張率が車体側取り付け部 11と取 り付け部 4の間で異なったとしても、カメラスティ 3に近い方の取り付け穴部 5が 1箇所 のみなので、取り付け部 4は車体側取り付け部 11側の取り付けピッチに拘束されず、 後述する車体側取り付け部 11の熱膨張による伸縮の影響を受けない。従って、取り 付け部 4はカメラスティ 3は一体となって膨張し、カメラスティ 3は歪まないので、左右 のカメラの基線長や光軸のずれが生じることはなく距離測定の精度を維持することが できる。
[0027] さらに、カメラスティ 3側の取り付け穴部 5の中心のカメラ基線長方向の位置はカメラ 基線上で右カメラ 1と左カメラ 2の中心位置に設けている。この配置により、右カメラ 1 と左カメラ 2を均等に保持することが出来るので、走行中の振動や衝撃に対して安定 性を確保することができる。
[0028] 図 2は、本発明の実施の形態におけるステレオカメラの車体への取り付け状態を示 した図である。図 2において、車体側取り付け部 11には、車体側取り付け穴部 12、 1 3、 14が設けられている。ステレオカメラは取り付け部 4に設けられた取り付け穴部 5、 6、 7を通して 3本のビス 8、 9、 10によって車体側取り付け部 11に締め付け固定され る。
[0029] 車両に搭載されたステレオカメラは、前方の物体の画像を右カメラ 1、左カメラ 2それ ぞれの内部の撮像素子から取り入れる。カメラスティ 3の内部に実装された画像処理 基板(図示せず)では、左右のカメラ内の 2つの撮像素子より所定のタイミングで画像 を取り入れ、取り入れた左右の画像のずれを処理することにより前方の物体までの距 離を算出する。
[0030] これにより、ステレオカメラは前方車両との車間距離を検知し、また前方にある障害 物までの距離を検知することができる。そしてあら力じめ設定された距離に入った場 合には音や光により運転者にその旨の警告を発する。
[0031] 次に、図 3から図 6までを用いて本発明の実施の形態におけるステレオカメラと、比 較例のステレオカメラを使用して実験を行った結果について説明する。
[0032] 図 3は、実験に使用した本発明の実施の形態におけるステレオカメラの取り付け部
4の取り付け穴部 5の配置図である。取り付け穴部 5はカメラスティ 3から近い位置に 配置し、取り付け穴部 6と 7はカメラスティ 3から離れた位置に配置されている。また、 取り付け穴部 6と 7は間隔を持って配置され、取り付け穴部 5は基線方向において取 り付け穴部 6、 7の中心位置に配置されている。
[0033] 図 5は、比較例のステレオカメラの取り付け部 14の取り付け穴部 15から 18の配置 図である。取り付け部 14の形状、大きさは、本発明の実施の形態に力かる取り付け部 4と同じである。また、取り付け穴部 17と 18は本発明の実施の形態に力かる取り付け 部 4の取り付け穴部 6と 7と同じ位置に設けられている。カメラスティに近い側の取り付 け穴部 15、 16が 2箇所設けられていることが本発明の実施の形態に力かる取り付け 部 4と異なり、他の条件は全て同じである。
[0034] 図 4は、図 3の本発明の実施の形態におけるステレオカメラを車両に取り付けた場 合の、周囲温度と左右のカメラの角度変位量との関係を示した図である。図 4におい て、横軸はステレオカメラの周囲温度を示している。また、縦軸は右カメラ 1の位置を 基準とした左カメラ 2との Yaw、 Pitch, Roll方向の角度変位量を示している。
[0035] 左右のカメラの基線方向や光軸方向の位置関係において左右のカメラが同じ方向 に回転することは相対的な位置関係において基線や光軸のずれを生じない。一方で 、左右のカメラの回転方向が異なり角度変位量が生じると、基線や光軸のずれを生じ 距離測定精度の低下の原因となる。そこで、左右カメラの角度変位量をパラメータと して距離測定精度を評価する。
[0036] Yaw, Pitch, Rollの回転の 3方向の中で、特に右カメラ 1と左カメラ 2の Yaw方向 の回転方向が異なると、距離測定の対象物の方向に向力う左右のカメラの光軸がず れる。このずれがステレオカメラの距離測定の精度低下に大きく影響する。
[0037] ここで、本発明の実施の形態におけるステレオカメラは 1Z3サイズで 40万画素の 撮像素子 1を用いている。 1画素ピッチは 6. 35 mであり、距離測定の精度を確保 するためには、左右のカメラ力 取り入れた 2つの画像のずれを撮像素子 1の 1画素 のピッチに相当する 6. 35 /z m以下に抑える必要がある。また、本発明の実施の形態 におけるステレオカメラに使用する左右のカメラの画角は 43° であり、撮像素子 1の 受光面長さが 4. 9mmであることからレンズの焦点距離は 6. 2mmとなる。したがって
、 1画素分のピッチを Yaw方向の角度に換算すると、ピッチ 6. 35 mをレンズの焦 点距離 6. 2mmで割って 0. 06° となる。
[0038] また、ステレオカメラを車両に搭載した場合、寒冷地や夏季における太陽光の照射 下での使用を考慮すると、周囲温度が—40°Cから 85°Cまでの範囲で距離測定の精 度を確保する必要がある。よって、図 4の点線に示すように— 40°Cから 85°Cの範囲 で Yaw方向の角度変位量を 0. 06° 以下に抑えることが必要になる。
[0039] 図 4に示すとおり、周囲温度と角度変位量の関係は、 25°Cを基準としているのでこ のときに角度変位量を 0° に合わせている。そして、周囲温度の低下と共に、右カメラ 1を基準として左カメラ 2が図 1の Yaw方向(ステレオカメラの基線と光軸で構成される 平面状に垂直な軸方向)の矢印向きの回転角度の大きくなる方向に変化する。逆に 、周囲温度の上昇した場合には、右カメラ 1を基準として左カメラ 2が図 1の Yaw方向 の矢印の逆向きの回転角度の大きくなる方向に変化する。このように左右の角度変 位量は周囲温度に対し一定の割合で変化する線形の特性を有する。
[0040] 本発明の実施の形態における取り付け部 4を用いて車両に取り付けた場合には、 図 4に示すように周囲温度 40°Cにおける Yaw方向の回転の変位量は、 0. 0464 ° であり実用上問題のない値となった。また、上述のとおり周囲温度に対し角度変量 は一定の割合で変化する線形の関係にある。従って、 25°Cからの温度変化が対称 の位置にある 85°Cにお 、ても左右カメラの Yawの角度変位量が同程度となることが 推定されうる。
[0041] 図 6は、図 5の比較例におけるステレオカメラを車両に取り付けた場合の周囲温度と 左右のカメラの角度変位量との関係を示した図である。図 6における横軸および縦軸 、それぞれの軸のスケールは図 4と同様である。
[0042] 従来の取り付け部を用いて車両に取り付けた場合には、—40°Cにおける右カメラ 1 の位置を基準とした右カメラ 1と左カメラ 2の Yaw方向の角度変位量は、 0. 0605° と なった。この値は、本発明の実施の形態におけるステレオカメラを車両に取り付けた 場合に比べて角度変位量は約 1. 3倍であり、測定精度が大幅に低下する。
[0043] 以上の結果を分析すると、本発明の実施の形態におけるステレオカメラを車両に取 り付けた場合には、周囲の熱による膨張率が車体側取り付け部 11と取り付け部 4の
間で異なったとしても、カメラスティ 3に近い取り付け穴部が 1箇所のみなので、取り付 け部 4は車体側取り付け部 11側の取り付けピッチに拘束されず、車体側取り付け部 1 1の熱膨張による伸縮の影響を受けない。従って、取り付け部 4はとカメラスティ 3は 一体で膨張し、カメラスティ 3は歪まないので、左右のカメラの角度変位量を小さく押 さ免ることがでさる。
[0044] 一方、比較例におけるステレオカメラを車両に取り付けた場合には、周囲の熱によ る膨張率が車体側取り付け部 11と取り付け部 4の間で異なった場合に、カメラスティ 3に近い取り付け穴部が 2箇所あるので、取り付け部 4は車体側取り付け部 11側の取 り付けピッチに拘束され、車体側取り付け部 11の熱膨張による伸縮の影響を受ける。 これに対しカメラスティ 3は自由であるので、取り付け部 4とカメラスティ 3の伸びの違 いによりカメラスティ 3が歪み、左右のカメラの角度変位量が大きくなる。
[0045] 以上説明したように本発明の実施の形態におけるステレオカメラは、取り付け穴部 の中心を右カメラと左カメラとを結ぶ基線に対し平行な複数の仮想線上に配置し、力 メラスティカゝら遠い仮想の平行線 AA'上に配置された取り付け穴部の数を 2個とし、 カメラスティカも近い仮想の平行線 上に配置された取り付け穴部の数を 1個とし たことにより、 2つのカメラの位置のずれの発生を少なくし精度の高い距離測定を実 現することができる。
産業上の利用可能性
[0046] 本発明に力かるステレオカメラは、取り付け部とカメラスティの膨張の違いによりカメ ラスティが歪んで左右のカメラの基線長や光軸のずれが生じる事を防止し、測距精 度を維持することができる。よって、左右のカメラから取り入れた 2つの画像の視差を 処理して前方の物体までの距離を算出するステレオカメラとして有用である。
Claims
[1] 右カメラと、
左カメラと、
前記右カメラと前記左カメラとを所定の位置で保持したカメラスティと、
前記カメラスティを車両に固定する取り付け穴部を有する取り付け部と、を備え、 前記取り付け穴部の中心は、前記右カメラと前記左カメラとを結ぶ基線に対し平行な 複数の仮想線上に配置されており、
前記カメラスティカゝら遠い仮想の平行線上に配置された取り付け穴部の数を複数個 とし、
前記遠 、仮想の平行線よりもカメラスティカ 近 、仮想の平行線上に配置された取り 付け穴部の数を 1個とした
ステレオカメラ。
[2] 前記複数個の取り付け穴部の数は 2個であり、前記 1個の取り付け穴部とで 2等辺三 角形を構成し、前記 2等辺三角形の等しい 2辺の頂点の位置に前記 1個の取り付け 穴部の中心を配置した
請求項 1に記載のステレオカメラ。
[3] 前記 1個の取り付け穴部の中心位置は、前記右カメラと前記左カメラとを結ぶ基線長 の中心である
請求項 1または請求項 2のいずれか一つに記載のステレオカメラ。
[4] 前記カメラスティと前記取り付け部は一体で形成した
請求項 1から請求項 3までのいずれか一つに記載のステレオカメラ。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP07714902A EP1990606B1 (en) | 2006-02-27 | 2007-02-26 | Stereo camera |
| CN200780000561XA CN101326424B (zh) | 2006-02-27 | 2007-02-26 | 立体摄像机 |
| US11/915,672 US20090135246A1 (en) | 2006-02-27 | 2007-02-26 | Stereo camera |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006049673A JP4848795B2 (ja) | 2006-02-27 | 2006-02-27 | ステレオカメラ |
| JP2006-049673 | 2006-02-27 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2007097444A1 true WO2007097444A1 (ja) | 2007-08-30 |
Family
ID=38437479
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2007/053470 Ceased WO2007097444A1 (ja) | 2006-02-27 | 2007-02-26 | ステレオカメラ |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20090135246A1 (ja) |
| EP (1) | EP1990606B1 (ja) |
| JP (1) | JP4848795B2 (ja) |
| KR (1) | KR100917514B1 (ja) |
| CN (1) | CN101326424B (ja) |
| WO (1) | WO2007097444A1 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013014717A1 (ja) * | 2011-07-26 | 2013-01-31 | パナソニック株式会社 | 撮像装置 |
| CN103140379A (zh) * | 2010-10-04 | 2013-06-05 | Tk控股公司 | 相机系统 |
| JP2016014564A (ja) * | 2014-07-01 | 2016-01-28 | 株式会社リコー | 撮像ユニット |
Families Citing this family (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20080001727A1 (en) * | 2004-11-15 | 2008-01-03 | Hitachi, Ltd. | Stereo Camera |
| JP2009068906A (ja) * | 2007-09-11 | 2009-04-02 | Panasonic Corp | 距離測定装置 |
| DE102009031650B4 (de) * | 2009-07-03 | 2024-05-29 | Volkswagen Ag | Verfahren zur Erweiterung eines Kamerasystems, Kamerasystem, Fahrerassistenzsysem und entsprechendes Fahrzeug |
| JP5440927B2 (ja) * | 2009-10-19 | 2014-03-12 | 株式会社リコー | 測距カメラ装置 |
| JP2011221506A (ja) * | 2010-03-26 | 2011-11-04 | Panasonic Corp | 撮像装置 |
| WO2012132086A1 (ja) * | 2011-03-25 | 2012-10-04 | 三洋電機株式会社 | 情報取得装置及び情報取得装置を搭載する物体検出装置 |
| CN103052915B (zh) * | 2011-07-26 | 2015-09-30 | 松下电器产业株式会社 | 摄像装置 |
| JP5792126B2 (ja) * | 2012-06-21 | 2015-10-07 | 住友建機株式会社 | 建設機械 |
| JP5793122B2 (ja) | 2012-07-31 | 2015-10-14 | 日立オートモティブシステムズ株式会社 | 車載画像処理装置 |
| DE102013104163A1 (de) * | 2013-04-24 | 2014-10-30 | Conti Temic Microelectronic Gmbh | Stereokamerasystem |
| CN104570574A (zh) * | 2013-10-18 | 2015-04-29 | 宁夏先锋软件有限公司 | 一种利用2d图像自动成像的3d成像仪 |
| KR101698783B1 (ko) * | 2013-12-16 | 2017-01-23 | 엘지전자 주식회사 | 스테레오 카메라 및 이를 구비한 차량 |
| KR101668834B1 (ko) * | 2014-10-02 | 2016-10-25 | 씨제이씨지브이 주식회사 | 다중 카메라 촬영용 리그 |
| JP6158258B2 (ja) * | 2015-08-07 | 2017-07-05 | 日立オートモティブシステムズ株式会社 | 車載画像処理装置 |
| KR102316448B1 (ko) | 2015-10-15 | 2021-10-25 | 삼성전자주식회사 | 이미지 장치 및 그것의 뎁쓰 계산 방법 |
| JP6621716B2 (ja) * | 2016-08-02 | 2019-12-18 | 日立オートモティブシステムズ株式会社 | ステレオカメラ |
| JP6776997B2 (ja) * | 2017-04-19 | 2020-10-28 | いすゞ自動車株式会社 | 車載用カメラ |
| JP7020844B2 (ja) | 2017-09-29 | 2022-02-16 | 株式会社デンソー | 車載カメラ装置 |
| JP6939353B2 (ja) | 2017-09-29 | 2021-09-22 | 株式会社デンソー | 車載カメラ装置 |
| JP7027844B2 (ja) | 2017-11-29 | 2022-03-02 | 株式会社デンソー | カメラモジュール |
| JP1610727S (ja) | 2018-03-21 | 2018-08-06 | ||
| JP1610726S (ja) * | 2018-03-21 | 2018-08-06 | ||
| JP1613901S (ja) * | 2018-03-21 | 2018-09-18 | ||
| JP2021103268A (ja) * | 2019-12-25 | 2021-07-15 | 株式会社リコー | 支持装置及び撮像装置 |
| US11740078B2 (en) * | 2020-07-21 | 2023-08-29 | Argo AI, LLC | Enhanced sensor alignment |
| CN113306497B (zh) * | 2021-05-27 | 2023-08-01 | 新石器慧通(北京)科技有限公司 | 一种摄像头固定支架和无人车 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11301365A (ja) * | 1998-04-17 | 1999-11-02 | Kyocera Corp | 車載用ステレオカメラの支持装置 |
| JP2003335180A (ja) * | 2002-05-17 | 2003-11-25 | Fuji Heavy Ind Ltd | センサの支持構造およびその組付方法 |
| JP2004032793A (ja) * | 2003-07-02 | 2004-01-29 | Fuji Heavy Ind Ltd | 車載カメラの取り付け構造 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN2157530Y (zh) * | 1993-02-13 | 1994-02-23 | 江门雄霸立体光学器材有限公司 | 小型四镜头立体照相机 |
| CN1176403A (zh) * | 1996-09-06 | 1998-03-18 | 稻叶稔 | 立体摄影机 |
| JP3877475B2 (ja) * | 1999-09-22 | 2007-02-07 | 富士重工業株式会社 | 車載カメラの取付構造 |
| DE10237481A1 (de) * | 2002-08-16 | 2004-04-01 | Hella Kg Hueck & Co. | Kameraanordnung für Kraftfahrzeuge |
-
2006
- 2006-02-27 JP JP2006049673A patent/JP4848795B2/ja not_active Expired - Fee Related
-
2007
- 2007-02-26 KR KR1020077029733A patent/KR100917514B1/ko not_active Expired - Fee Related
- 2007-02-26 WO PCT/JP2007/053470 patent/WO2007097444A1/ja not_active Ceased
- 2007-02-26 CN CN200780000561XA patent/CN101326424B/zh not_active Expired - Fee Related
- 2007-02-26 US US11/915,672 patent/US20090135246A1/en not_active Abandoned
- 2007-02-26 EP EP07714902A patent/EP1990606B1/en not_active Ceased
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11301365A (ja) * | 1998-04-17 | 1999-11-02 | Kyocera Corp | 車載用ステレオカメラの支持装置 |
| JP2003335180A (ja) * | 2002-05-17 | 2003-11-25 | Fuji Heavy Ind Ltd | センサの支持構造およびその組付方法 |
| JP2004032793A (ja) * | 2003-07-02 | 2004-01-29 | Fuji Heavy Ind Ltd | 車載カメラの取り付け構造 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103140379A (zh) * | 2010-10-04 | 2013-06-05 | Tk控股公司 | 相机系统 |
| WO2013014717A1 (ja) * | 2011-07-26 | 2013-01-31 | パナソニック株式会社 | 撮像装置 |
| JPWO2013014717A1 (ja) * | 2011-07-26 | 2015-02-23 | パナソニック株式会社 | 撮像装置 |
| JP2016014564A (ja) * | 2014-07-01 | 2016-01-28 | 株式会社リコー | 撮像ユニット |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4848795B2 (ja) | 2011-12-28 |
| EP1990606B1 (en) | 2012-01-25 |
| JP2007225543A (ja) | 2007-09-06 |
| CN101326424A (zh) | 2008-12-17 |
| EP1990606A1 (en) | 2008-11-12 |
| CN101326424B (zh) | 2010-06-09 |
| EP1990606A4 (en) | 2010-09-22 |
| US20090135246A1 (en) | 2009-05-28 |
| KR100917514B1 (ko) | 2009-09-16 |
| KR20080009761A (ko) | 2008-01-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4848795B2 (ja) | ステレオカメラ | |
| JP2009068906A (ja) | 距離測定装置 | |
| EP3054348B1 (en) | Stereo camera for a vehicle | |
| JP6627471B2 (ja) | 撮像ユニット、車両制御ユニットおよび撮像ユニットの伝熱方法 | |
| EP3495770B1 (en) | Stereo camera | |
| JP5961506B2 (ja) | ステレオカメラ装置 | |
| US20160006911A1 (en) | Imaging unit | |
| JP2008286527A (ja) | 複眼測距装置 | |
| JP3603929B2 (ja) | 車載用ステレオカメラの支持装置 | |
| JP2014065393A (ja) | ステレオカメラ装置 | |
| JP2013050352A (ja) | ステレオカメラの取り付け調整方法及びステレオカメラ | |
| JP6114617B2 (ja) | 車載ステレオカメラ | |
| JP7084328B2 (ja) | カメラ装置 | |
| JP7685045B2 (ja) | 取付装置および取付方法 | |
| JP7788520B1 (ja) | 撮像装置 | |
| JP2013127598A (ja) | ステレオカメラ | |
| JP2008261974A (ja) | 撮像システム | |
| JP7358313B2 (ja) | 撮像装置 | |
| JP2021021939A (ja) | 撮像ユニットおよび車両制御ユニット | |
| WO2023276232A1 (ja) | 撮像装置 | |
| EP4589970A1 (en) | Control apparatus, image pickup apparatus, control system, moving apparatus, control method, and program | |
| JP7548786B2 (ja) | カメラ装置 | |
| CN215474901U (zh) | 传感器组合装置及无人驾驶设备 | |
| JP2025109630A (ja) | 撮像装置 | |
| US20230044834A1 (en) | Micro-electromechanical inertial measurement unit |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WWE | Wipo information: entry into national phase |
Ref document number: 200780000561.X Country of ref document: CN |
|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application | ||
| WWE | Wipo information: entry into national phase |
Ref document number: 2007714902 Country of ref document: EP |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 11915672 Country of ref document: US |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 1020077029733 Country of ref document: KR |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |