JP4019182B2 - 視覚装置 - Google Patents
視覚装置 Download PDFInfo
- Publication number
- JP4019182B2 JP4019182B2 JP21389495A JP21389495A JP4019182B2 JP 4019182 B2 JP4019182 B2 JP 4019182B2 JP 21389495 A JP21389495 A JP 21389495A JP 21389495 A JP21389495 A JP 21389495A JP 4019182 B2 JP4019182 B2 JP 4019182B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- illumination light
- light source
- vehicle
- illumination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Description
【０００１】
【産業上の利用分野】
本発明は、カメラによって撮像した画像によって撮像領域を認識する視覚装置に関する。
【０００２】
【従来の技術】
従来、ビデオカメラを車両に搭載して、前方領域をビデオカメラにより撮像して、その撮像画像から障害物を認識するようにしている（特開平６−２１５３００号公報参照）。
【０００３】
しかし、ビデオカメラによるのでは、霧中などでは車両のヘッドライトを点灯しても前方領域の撮像をなすことができない。
【０００４】
すなわち、例えば、図８に示すように、照明光ＬＬの開き角度６が比較的広いヘッドライト４により前方の領域を照明し、その照明領域からの反射光ＲＬをビデオカメラ２によって受光して照明領域の撮像をなす場合、照明領域に霧、煙、粉塵等のエアロゾルＺが存在すると、照明光ＬＬがそのエアロゾルＺによって散乱されてしまい、その散乱光のなかのビデオカメラ２の受光部に向かう光Ｎがビデオカメラ２にノイズとなって受光される。また、エアロゾルＺを通過した照明光ＬＬの一部が照明領域にある物体３を照射するが、その反射光ＲＬもさらにエアロゾルＺによって散乱されて減衰し、反射光ＲＬのうちのわずかな光しかビデオカメラ２によって受光されなくなる。
【０００５】
したがって、照明領域におけるエアロゾルＺの量が多くなるにしたがって、ノイズが増えて、照明領域からの反射光ＲＬの受光量が減り、照明光ＬＬの光強度を上げてもビデオカメラ２によって照明領域の撮像をなすことが困難になってしまう。
【０００６】
また、従来、赤外線カメラを車両に搭載して、前方領域を赤外線カメラにより撮像して、その撮像画像から障害物を認識するようにしている（特開昭５４−９２１１７号公報参照）。
【０００７】
しかし、赤外線カメラによるのでは、夜間や霧中などでも人間や自動車などの赤外線の放射量の多い物体を比較的良好に認識することはできても、前方道路を認識しようとする場合、赤外線の放射量の少ない路面や道路構造物を明瞭に認識することができず、特に道路上の白線などの認識をなすことが困難である。
【０００８】
【発明が解決しようとする課題】
解決しようとする問題点は、従来のビデオカメラを用いた視覚装置では、霧、煙、粉塵等のエアロゾル中では前方領域を撮像することができない。また、赤外線カメラを用いた視覚装置では、赤外線の放射量の少ない物体を認識することができないということである。
【０００９】
【課題を解決するための手段】
本発明は、車両に搭載したカメラによって車両の前方領域を撮像するに際して、霧、煙、粉塵等のエアロゾル中にあっても良好な撮像画像を得ることができるようにするべく、照明用光源によって照明される領域を撮像する路面撮像用の第１のカメラと、その第１のカメラとは感度が異なる波長帯域で同一方を撮像する障害物撮像用の第２のカメラとをそなえ、第１および第２の各カメラによってそれぞれ撮像された画像の合成画像を得る手段をとるようにしている。
【００１０】
その際、特に本発明では、第１のカメラに可視光または近赤外線の周波数帯域に感度を示すものを用いたうえで、照明用光源から発せられろ照明光の開き角および第１のカメラの１画素の視野角が、照明光の光軸とその照明光が照射される物体からの第１のカメラへの反射光の光軸とのなす角よりも小さくなるように、照明用光源と第１のカメラとを設置する際の相対的な関係を工夫して、霧、煙、粉塵等のエアロゾル中にあっても、第１のカメラによりエアロゾルによる散乱ノイズに対してＳＮ比の高い反射光を得て照明領域の撮像を行わせることができるようにしている。
【００１１】
そして、第２のカメラに１０μｍ前後の赤外線の周波数帯域に感度を示すものを用いて、霧、煙、粉塵等のエアロゾル中にあっても、赤外線を放射する人間や自動車などの障害物の認識を比較的広い範囲にわたって明瞭に行うことができるようにしている。
【００１２】
【実施例】
図５は、照明用光源１とビデオカメラ２との間の設置間隔Ｄを可変にしながら、照明光ＬＬの開き角度θ１を種々に変えたときの反射光ＲＬのＳＮ比を測定するシュミレーションモデルを示しており、Ｌ＝５０ｍ先で可視光による照明光ＬＬの透過率が約５％に低下する霧中で、５０ｍ先に置いた反射率１の物体３からの反射光ＲＬをビデオカメラ２によって受光するようにしている。
【００１３】
図６は、そのときのシュミレーション結果の特性を示している。その特性図は、横軸に照明用光源１とビデオカメラ２との間の設置間隔Ｄをとり、縦軸にＳＮ比をとっている。また、照明光ＬＬの開き角度θ１として、０．５ｍｒａｄ（ミリフラジアン）、ｌｍｒａｄ、５ｍｒａｄ、１７ｍｒａｄ、８５ｍｒａｄの各パラメータをとっている。
【００１４】
このシュミレーション結果をみれば、照明用光源１から発せられる照明光ＬＬの開き角度θ１を小さくするほどＳＮ比が良くなることがわかる。このことは、ビデオカメラ２における１画素の受光の開き角度（視野角）θ２を小さくしても同様である。また、照明用光源１とビデオカメラ２との間の設置間隔Ｄが大きいほどＳＮ比が良くなることがわがる。
【００１５】
このことは、照明光ＬＬの開き角度θ１またはビデオカメラ２における視野角θ２を小さくし、また、照明用光源１と光センサ２との間の設置間隔Ｄを大きくすると、照明光ＬＬの照明領域Ａと反射光ＲＬの反射領域Ｂとの重合領域Ｃの大きさが小さくなり、霧により照明光ＬＬが散乱したときのビデオカメラ２の受光部に向かうノイズ光の量が抑制されるためと考えられる。
【００１６】
照明用光源１から発せられる照明光ＬＬとしては、霧、煙、粉塵等のエアロゾル中での透過性の良い赤外線を用いることが考えられるが、以下の理由からして、可視光か近赤外線を用いるのが適当である。
【００１７】
すなわち、照明用光源１およびビデオカメラ２を車両に搭載して前方の道路を撮像するような場合など、物体に照明光ＬＬを斜めに照射したときにも物体からの反射光を充分に得ることができるようにするために、物体の表面の凹凸よりも小さな波長をもった照明光を用いるのがよく、赤外線よりも波長の短い可視光か近赤外線のほうが適している。
【００１８】
また、図７は、平均粒径を１〜１０μｍの範囲で変えた人工の霧中での電磁波の透過率を同一条件下で測定したときの特性図であり、その測定が果からして、１０μｍ前後（５〜２０μｍの範囲）の赤外線の透過率が高いことがわかる。
【００１９】
そして、物体は自ら電磁波を放射しており、常温では１０μｍ付近の赤外線が最も多く放射されていることがわかっている。
【００２０】
したがって、特に１０μｍ前後の周波数帯域に感度を示す赤外線カメラを用いれば、霧、煙、粉塵等のエアロゾル中にあっても物体を撮像することができ、特に、道路環境を想定する場合、人間や自動車などの周囲に比べて温度が高くて赤外線の放射量の多い物体を認識することができるようになる。
【００２１】
図１は、以上の検討結果を考慮したうえで構成された本発明による視覚装置の一実施例を示すもので、ここでは、その視覚装置を車両に搭載して、霧、煙、粉塵等のエアロゾル中にあっても、主として、ビデオカメラ２によって照明用光源１による車両前方における道路の照明領域の撮像を可能とし、また、赤外線カメラ５によって車両の前方領域に存在する人間や自動車などの障害物の撮像を広範囲にわたって行わせて、その各撮像画像を画像合成器（図示せず）によって合成するようにしている。
【００２２】
照明用光源１とビデオカメラ２は、車両７の前部の上下方向に、照明用光源１における照明光ＬＬの開き角度θおよびビデオカメラ２の視野角θが、前方の路面８を照射する照明光ＬＬの光軸と路面８からの反射光ＲＬの光軸とのなす角αよりも小さくなるような関係（θ，θ＜α）をもって配設されている。
【００２３】
しかして、θ１，θ２＜αの関係を満足するように照明用光源１とビデオカメラ２とを車両７の前部に配設することにより、照明領域に霧、煙、粉塵等のエアロゾルが存在しても、そのエアロゾルにより照明光ＬＬが散乱したときのビデオカメラ２の受光部に向かうノイズ光量が最小限に抑制されたＳＮ比の高い反射光ＲＬをビデオカメラ２によって受光することができるようになり、車両前方の路面８の撮像を有効に行わせることができるようになる。
【００２４】
その際、例えば、霧中走行時の前方視界を必要最小限に確保するべく、車両７の前方数ｍほど先の路面８上を照明できるように照明用光源１およびビデオカメラ２をセットする。そして、その路面８を充分な幅をもって撮像することができるようにするべく、照明用光源１にそれから発せられる照明光ＬＬが左右方向に広がるようなアパーチャーをもたせるとともに、ビデオカメラ２の受光部も同様に左右方向の広がりをもたせるようにする。
【００２５】
図２は、このようにして照明用光源１およびビデオカメラ２を車両７の前部に取り付けたときのビデオカメラ２による路面８の撮像画像の一例を示しており、ここでは路面８上に引かれた道路端および中央線の白線９が明瞭に撮像されている。
【００２６】
なお、その際、車両７のヘッドライト４を点灯することにより見える手前の路面８をもビデオカメラ２によって同時に撮像することができるようになる。
【００２７】
照明用光源１にもヘッドライト４にも照明されない部分は、両者のデータから予測する。また、照明用光源１を１ラインではなく、複数ライン走査することでデータを増やすことができるようになる。
【００２８】
また、赤外線カメラ５は、車両の前方領域を広範囲にわたって撮像することができるように、車両７の前部に設置されている。
【００２９】
図３は、赤外線カメラ５による撮像画像の一例を示しており、ここでは車両の前方の照明用光源１による照明領域外にいる人間１０が明瞭に撮像されている。
【００３０】
しかして、霧中などの車両７の走行時にあっても、このようなビデオカメラ２による撮像画像と赤外線カメラ５による撮像画像とを画像合成器によって合成することにより、図４に示すように、照明用光源１によって照明されている車両前方の路面８とその照明領域外にいる人間１０とが一体となった実際に即した画像が得られるようになる。
【００３１】
そして、その合成画像を、例えばヘッドアップディスプレイを用いて運転席側のフロントガラス方に写し出すようにすれば、見通しのきかない濃い霧中での車両走行時にあっても、運転者は前方の道路状態を認識し、また、前方に人間や自動車などの障害物があることを認識することができるようになる。
【００３２】
また、その合成画像のデータを自動走行装置に与えて、障害物を避けながら道路上を自動走行するような制御を行わせるようにすることも可能である。
【００３３】
さらに、本発明は車載用に限らず、自動走行ロボットの視覚装置として、また、一般の監視用の視覚装置などとして広く用いられることはいうまでもない。
【００３４】
【効果】
以上、本発明による視覚装置によれば、車両の上部に設置されて車両の前方領域を照明する照明用光源と、車両における前記照明用光源の下方に設置され、その光源によって照明される領域を撮像する可視光または近赤外線の周波数帯域に感度を示す路面撮像用の第１のカメラと、車両に設置されて第１のカメラと同一方を撮像する１０μｍ前後の赤外線の周波数帯域に感度を示す赤外線を放射する人間などの障害物撮像用の第２のカメラと、第１および第２の各カメラによってそれぞれ撮像された画像の合成画像を得る手段とをそなえ、照明用光源から発せられる照明光の開き角および第１のカメラの視野角が、照明光の光軸と照明領域から第１のカメラへの反射光の光軸とのなす角よりも小さくなるような関係をもって、照明用光源と第１のカメラとを配設することにより、視界のきかないエアロゾル中にあっても車両前方の路面およびその前方領域に存在する人間などの障害物に係る実際に即した明瞭な撮像画像を得ることができ、運転視界を確保することができるようになる。
【図面の簡単な説明】
【図１】本発明による視覚装置の一実施例を示す概略構成図である。
【図２】同実施例において照明用光源による照明領域をビデオカメラによって撮像した画像の一例を示す図である。
【図３】同実施例において赤外線カメラによって撮像した画像の一例を示す図である。
【図４】ビデオカメラによる撮像画像と赤外線カメラによる撮像画像とを合成した画像の一例を示す図である。
【図５】照明用光源による照明領域をビデオカメラにより撮像する際の反射光のＳＮ比を測定するシュミレーションモデルの概略構成図である。
【図６】照明光の開き角をパラメータにとり、横軸に照明用光源とビデオカメラとの間隔をとり、縦軸にＳＮ比をとったシュミレーション結果の特性図である。
【図７】粒径を１〜１０μｍの範囲で変えた人工の霧中での電磁波の透過率を同一条件下で測定したときの特性図である。
【図８】従来の車両のヘッドライトによる照明領域をビデオカメラによって撮像するときの状態を示す概略構成図である。
【符号の説明】
１ 照明用光源
２ ビデオカメラ
４ ヘッドライト
５ 赤外線カメラ
７ 車両
８ 路面
【産業上の利用分野】
本発明は、カメラによって撮像した画像によって撮像領域を認識する視覚装置に関する。
【０００２】
【従来の技術】
従来、ビデオカメラを車両に搭載して、前方領域をビデオカメラにより撮像して、その撮像画像から障害物を認識するようにしている（特開平６−２１５３００号公報参照）。
【０００３】
しかし、ビデオカメラによるのでは、霧中などでは車両のヘッドライトを点灯しても前方領域の撮像をなすことができない。
【０００４】
すなわち、例えば、図８に示すように、照明光ＬＬの開き角度６が比較的広いヘッドライト４により前方の領域を照明し、その照明領域からの反射光ＲＬをビデオカメラ２によって受光して照明領域の撮像をなす場合、照明領域に霧、煙、粉塵等のエアロゾルＺが存在すると、照明光ＬＬがそのエアロゾルＺによって散乱されてしまい、その散乱光のなかのビデオカメラ２の受光部に向かう光Ｎがビデオカメラ２にノイズとなって受光される。また、エアロゾルＺを通過した照明光ＬＬの一部が照明領域にある物体３を照射するが、その反射光ＲＬもさらにエアロゾルＺによって散乱されて減衰し、反射光ＲＬのうちのわずかな光しかビデオカメラ２によって受光されなくなる。
【０００５】
したがって、照明領域におけるエアロゾルＺの量が多くなるにしたがって、ノイズが増えて、照明領域からの反射光ＲＬの受光量が減り、照明光ＬＬの光強度を上げてもビデオカメラ２によって照明領域の撮像をなすことが困難になってしまう。
【０００６】
また、従来、赤外線カメラを車両に搭載して、前方領域を赤外線カメラにより撮像して、その撮像画像から障害物を認識するようにしている（特開昭５４−９２１１７号公報参照）。
【０００７】
しかし、赤外線カメラによるのでは、夜間や霧中などでも人間や自動車などの赤外線の放射量の多い物体を比較的良好に認識することはできても、前方道路を認識しようとする場合、赤外線の放射量の少ない路面や道路構造物を明瞭に認識することができず、特に道路上の白線などの認識をなすことが困難である。
【０００８】
【発明が解決しようとする課題】
解決しようとする問題点は、従来のビデオカメラを用いた視覚装置では、霧、煙、粉塵等のエアロゾル中では前方領域を撮像することができない。また、赤外線カメラを用いた視覚装置では、赤外線の放射量の少ない物体を認識することができないということである。
【０００９】
【課題を解決するための手段】
本発明は、車両に搭載したカメラによって車両の前方領域を撮像するに際して、霧、煙、粉塵等のエアロゾル中にあっても良好な撮像画像を得ることができるようにするべく、照明用光源によって照明される領域を撮像する路面撮像用の第１のカメラと、その第１のカメラとは感度が異なる波長帯域で同一方を撮像する障害物撮像用の第２のカメラとをそなえ、第１および第２の各カメラによってそれぞれ撮像された画像の合成画像を得る手段をとるようにしている。
【００１０】
その際、特に本発明では、第１のカメラに可視光または近赤外線の周波数帯域に感度を示すものを用いたうえで、照明用光源から発せられろ照明光の開き角および第１のカメラの１画素の視野角が、照明光の光軸とその照明光が照射される物体からの第１のカメラへの反射光の光軸とのなす角よりも小さくなるように、照明用光源と第１のカメラとを設置する際の相対的な関係を工夫して、霧、煙、粉塵等のエアロゾル中にあっても、第１のカメラによりエアロゾルによる散乱ノイズに対してＳＮ比の高い反射光を得て照明領域の撮像を行わせることができるようにしている。
【００１１】
そして、第２のカメラに１０μｍ前後の赤外線の周波数帯域に感度を示すものを用いて、霧、煙、粉塵等のエアロゾル中にあっても、赤外線を放射する人間や自動車などの障害物の認識を比較的広い範囲にわたって明瞭に行うことができるようにしている。
【００１２】
【実施例】
図５は、照明用光源１とビデオカメラ２との間の設置間隔Ｄを可変にしながら、照明光ＬＬの開き角度θ１を種々に変えたときの反射光ＲＬのＳＮ比を測定するシュミレーションモデルを示しており、Ｌ＝５０ｍ先で可視光による照明光ＬＬの透過率が約５％に低下する霧中で、５０ｍ先に置いた反射率１の物体３からの反射光ＲＬをビデオカメラ２によって受光するようにしている。
【００１３】
図６は、そのときのシュミレーション結果の特性を示している。その特性図は、横軸に照明用光源１とビデオカメラ２との間の設置間隔Ｄをとり、縦軸にＳＮ比をとっている。また、照明光ＬＬの開き角度θ１として、０．５ｍｒａｄ（ミリフラジアン）、ｌｍｒａｄ、５ｍｒａｄ、１７ｍｒａｄ、８５ｍｒａｄの各パラメータをとっている。
【００１４】
このシュミレーション結果をみれば、照明用光源１から発せられる照明光ＬＬの開き角度θ１を小さくするほどＳＮ比が良くなることがわかる。このことは、ビデオカメラ２における１画素の受光の開き角度（視野角）θ２を小さくしても同様である。また、照明用光源１とビデオカメラ２との間の設置間隔Ｄが大きいほどＳＮ比が良くなることがわがる。
【００１５】
このことは、照明光ＬＬの開き角度θ１またはビデオカメラ２における視野角θ２を小さくし、また、照明用光源１と光センサ２との間の設置間隔Ｄを大きくすると、照明光ＬＬの照明領域Ａと反射光ＲＬの反射領域Ｂとの重合領域Ｃの大きさが小さくなり、霧により照明光ＬＬが散乱したときのビデオカメラ２の受光部に向かうノイズ光の量が抑制されるためと考えられる。
【００１６】
照明用光源１から発せられる照明光ＬＬとしては、霧、煙、粉塵等のエアロゾル中での透過性の良い赤外線を用いることが考えられるが、以下の理由からして、可視光か近赤外線を用いるのが適当である。
【００１７】
すなわち、照明用光源１およびビデオカメラ２を車両に搭載して前方の道路を撮像するような場合など、物体に照明光ＬＬを斜めに照射したときにも物体からの反射光を充分に得ることができるようにするために、物体の表面の凹凸よりも小さな波長をもった照明光を用いるのがよく、赤外線よりも波長の短い可視光か近赤外線のほうが適している。
【００１８】
また、図７は、平均粒径を１〜１０μｍの範囲で変えた人工の霧中での電磁波の透過率を同一条件下で測定したときの特性図であり、その測定が果からして、１０μｍ前後（５〜２０μｍの範囲）の赤外線の透過率が高いことがわかる。
【００１９】
そして、物体は自ら電磁波を放射しており、常温では１０μｍ付近の赤外線が最も多く放射されていることがわかっている。
【００２０】
したがって、特に１０μｍ前後の周波数帯域に感度を示す赤外線カメラを用いれば、霧、煙、粉塵等のエアロゾル中にあっても物体を撮像することができ、特に、道路環境を想定する場合、人間や自動車などの周囲に比べて温度が高くて赤外線の放射量の多い物体を認識することができるようになる。
【００２１】
図１は、以上の検討結果を考慮したうえで構成された本発明による視覚装置の一実施例を示すもので、ここでは、その視覚装置を車両に搭載して、霧、煙、粉塵等のエアロゾル中にあっても、主として、ビデオカメラ２によって照明用光源１による車両前方における道路の照明領域の撮像を可能とし、また、赤外線カメラ５によって車両の前方領域に存在する人間や自動車などの障害物の撮像を広範囲にわたって行わせて、その各撮像画像を画像合成器（図示せず）によって合成するようにしている。
【００２２】
照明用光源１とビデオカメラ２は、車両７の前部の上下方向に、照明用光源１における照明光ＬＬの開き角度θおよびビデオカメラ２の視野角θが、前方の路面８を照射する照明光ＬＬの光軸と路面８からの反射光ＲＬの光軸とのなす角αよりも小さくなるような関係（θ，θ＜α）をもって配設されている。
【００２３】
しかして、θ１，θ２＜αの関係を満足するように照明用光源１とビデオカメラ２とを車両７の前部に配設することにより、照明領域に霧、煙、粉塵等のエアロゾルが存在しても、そのエアロゾルにより照明光ＬＬが散乱したときのビデオカメラ２の受光部に向かうノイズ光量が最小限に抑制されたＳＮ比の高い反射光ＲＬをビデオカメラ２によって受光することができるようになり、車両前方の路面８の撮像を有効に行わせることができるようになる。
【００２４】
その際、例えば、霧中走行時の前方視界を必要最小限に確保するべく、車両７の前方数ｍほど先の路面８上を照明できるように照明用光源１およびビデオカメラ２をセットする。そして、その路面８を充分な幅をもって撮像することができるようにするべく、照明用光源１にそれから発せられる照明光ＬＬが左右方向に広がるようなアパーチャーをもたせるとともに、ビデオカメラ２の受光部も同様に左右方向の広がりをもたせるようにする。
【００２５】
図２は、このようにして照明用光源１およびビデオカメラ２を車両７の前部に取り付けたときのビデオカメラ２による路面８の撮像画像の一例を示しており、ここでは路面８上に引かれた道路端および中央線の白線９が明瞭に撮像されている。
【００２６】
なお、その際、車両７のヘッドライト４を点灯することにより見える手前の路面８をもビデオカメラ２によって同時に撮像することができるようになる。
【００２７】
照明用光源１にもヘッドライト４にも照明されない部分は、両者のデータから予測する。また、照明用光源１を１ラインではなく、複数ライン走査することでデータを増やすことができるようになる。
【００２８】
また、赤外線カメラ５は、車両の前方領域を広範囲にわたって撮像することができるように、車両７の前部に設置されている。
【００２９】
図３は、赤外線カメラ５による撮像画像の一例を示しており、ここでは車両の前方の照明用光源１による照明領域外にいる人間１０が明瞭に撮像されている。
【００３０】
しかして、霧中などの車両７の走行時にあっても、このようなビデオカメラ２による撮像画像と赤外線カメラ５による撮像画像とを画像合成器によって合成することにより、図４に示すように、照明用光源１によって照明されている車両前方の路面８とその照明領域外にいる人間１０とが一体となった実際に即した画像が得られるようになる。
【００３１】
そして、その合成画像を、例えばヘッドアップディスプレイを用いて運転席側のフロントガラス方に写し出すようにすれば、見通しのきかない濃い霧中での車両走行時にあっても、運転者は前方の道路状態を認識し、また、前方に人間や自動車などの障害物があることを認識することができるようになる。
【００３２】
また、その合成画像のデータを自動走行装置に与えて、障害物を避けながら道路上を自動走行するような制御を行わせるようにすることも可能である。
【００３３】
さらに、本発明は車載用に限らず、自動走行ロボットの視覚装置として、また、一般の監視用の視覚装置などとして広く用いられることはいうまでもない。
【００３４】
【効果】
以上、本発明による視覚装置によれば、車両の上部に設置されて車両の前方領域を照明する照明用光源と、車両における前記照明用光源の下方に設置され、その光源によって照明される領域を撮像する可視光または近赤外線の周波数帯域に感度を示す路面撮像用の第１のカメラと、車両に設置されて第１のカメラと同一方を撮像する１０μｍ前後の赤外線の周波数帯域に感度を示す赤外線を放射する人間などの障害物撮像用の第２のカメラと、第１および第２の各カメラによってそれぞれ撮像された画像の合成画像を得る手段とをそなえ、照明用光源から発せられる照明光の開き角および第１のカメラの視野角が、照明光の光軸と照明領域から第１のカメラへの反射光の光軸とのなす角よりも小さくなるような関係をもって、照明用光源と第１のカメラとを配設することにより、視界のきかないエアロゾル中にあっても車両前方の路面およびその前方領域に存在する人間などの障害物に係る実際に即した明瞭な撮像画像を得ることができ、運転視界を確保することができるようになる。
【図面の簡単な説明】
【図１】本発明による視覚装置の一実施例を示す概略構成図である。
【図２】同実施例において照明用光源による照明領域をビデオカメラによって撮像した画像の一例を示す図である。
【図３】同実施例において赤外線カメラによって撮像した画像の一例を示す図である。
【図４】ビデオカメラによる撮像画像と赤外線カメラによる撮像画像とを合成した画像の一例を示す図である。
【図５】照明用光源による照明領域をビデオカメラにより撮像する際の反射光のＳＮ比を測定するシュミレーションモデルの概略構成図である。
【図６】照明光の開き角をパラメータにとり、横軸に照明用光源とビデオカメラとの間隔をとり、縦軸にＳＮ比をとったシュミレーション結果の特性図である。
【図７】粒径を１〜１０μｍの範囲で変えた人工の霧中での電磁波の透過率を同一条件下で測定したときの特性図である。
【図８】従来の車両のヘッドライトによる照明領域をビデオカメラによって撮像するときの状態を示す概略構成図である。
【符号の説明】
１ 照明用光源
２ ビデオカメラ
４ ヘッドライト
５ 赤外線カメラ
７ 車両
８ 路面
Claims (1)
- 車両の上部に設置されて車両の前方領域を照明する照明用光源と、車両における前記照明用光源の下方に設置され、その光源によって照明される領域を撮像する可視光または近赤外線の周波数帯域に感度を示す路面撮像用の第１のカメラと、車両に設置されて第１のカメラと同一方を撮像する１０μｍ前後の赤外線の周波数帯域に感度を示す赤外線を放射する人間などの障害物撮像用の第２のカメラと、第１および第２の各カメラによってそれぞれ撮像された画像の合成画像を得る手段とをそなえ、照明用光源から発せられる照明光の開き角および第１のカメラの視野角が、照明光の光軸と照明領域から第１のカメラへの反射光の光軸とのなす角よりも小さくなるような関係をもって、照明用光源と第１のカメラとを配設したことを特徴とする視覚装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21389495A JP4019182B2 (ja) | 1995-07-19 | 1995-07-19 | 視覚装置 |
| US08/675,163 US6067110A (en) | 1995-07-10 | 1996-07-03 | Object recognizing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21389495A JP4019182B2 (ja) | 1995-07-19 | 1995-07-19 | 視覚装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0937147A JPH0937147A (ja) | 1997-02-07 |
| JP4019182B2 true JP4019182B2 (ja) | 2007-12-12 |
Family
ID=16646781
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP21389495A Expired - Fee Related JP4019182B2 (ja) | 1995-07-10 | 1995-07-19 | 視覚装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4019182B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160138965A1 (en) * | 2013-06-04 | 2016-05-19 | Petra Sonja Biedermann | Method and device for detecting infrasound |
Families Citing this family (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4103179B2 (ja) * | 1998-06-30 | 2008-06-18 | マツダ株式会社 | 環境認識装置 |
| JP2000127850A (ja) * | 1998-10-22 | 2000-05-09 | Matsushita Electric Ind Co Ltd | 車両外情報検知装置 |
| JP3972722B2 (ja) * | 2002-04-24 | 2007-09-05 | 株式会社エクォス・リサーチ | 車載画像処理装置 |
| JP3879739B2 (ja) * | 2004-02-09 | 2007-02-14 | 日産自動車株式会社 | 歩行者報知装置、歩行者報知方法及び歩行者報知用プログラム |
| US7608825B2 (en) | 2006-12-14 | 2009-10-27 | Sumitomo Electric Industries, Ltd. | Image pickup device, vision enhancement apparatus, night-vision apparatus, navigation support apparatus, and monitoring apparatus |
| JP2009302828A (ja) * | 2008-06-12 | 2009-12-24 | Nippon Telegr & Teleph Corp <Ntt> | 監視方法および装置 |
| JP5233535B2 (ja) | 2008-09-11 | 2013-07-10 | 住友電気工業株式会社 | 撮像装置、視界支援装置、暗視装置、航海支援装置および監視装置 |
| WO2012032916A1 (ja) * | 2010-09-09 | 2012-03-15 | 株式会社日立国際電気 | 監視システム |
| JP5633503B2 (ja) * | 2011-11-29 | 2014-12-03 | 株式会社リコー | 画像処理システム、画像処理システムを備えた車両、画像処理方法及びプログラム |
| JP6661268B2 (ja) * | 2015-01-08 | 2020-03-11 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
| RU2672767C1 (ru) * | 2015-02-19 | 2018-11-19 | Конинклейке Филипс Н.В. | Устройство инфракрасного лазерного освещения |
| JP7450163B2 (ja) * | 2018-09-18 | 2024-03-15 | パナソニックＩｐマネジメント株式会社 | 奥行取得装置、奥行取得方法およびプログラム |
| JP7681405B2 (ja) * | 2021-01-29 | 2025-05-22 | 株式会社小松製作所 | 表示システム及び表示方法 |
-
1995
- 1995-07-19 JP JP21389495A patent/JP4019182B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160138965A1 (en) * | 2013-06-04 | 2016-05-19 | Petra Sonja Biedermann | Method and device for detecting infrasound |
| US10180348B2 (en) * | 2013-06-04 | 2019-01-15 | Petra Sonja Biedermann | Method and device for detecting infrasound |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH0937147A (ja) | 1997-02-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4019182B2 (ja) | 視覚装置 | |
| US6067110A (en) | Object recognizing device | |
| US8004394B2 (en) | Camera system for large vehicles | |
| JP2005195601A (ja) | 自動車のための運転条件を検出するシステムおよび方法 | |
| JP3822154B2 (ja) | 車両検出装置 | |
| US20030001955A1 (en) | Device for improving visibility in vehicles | |
| WO2006118076A1 (ja) | 車両周辺監視システム | |
| JP2001060403A (ja) | 可視光カット遮光シェードを用いたヘッドランプおよび該ヘッドランプを照明源とする車両用暗視装置 | |
| JP2003002138A (ja) | 車載後方監視方法およびその装置 | |
| JP6246932B2 (ja) | カメラを用いた窓ガラス上にある雨滴を検出するための照明 | |
| CN111885347B (zh) | 用于车辆的观察系统 | |
| JP4566121B2 (ja) | 車両用照明装置 | |
| CN113246859A (zh) | 具有驾驶辅助系统警示的电子后视镜 | |
| TW200838743A (en) | Alarm system for a vehicle | |
| JPH07329636A (ja) | 車両周辺監視装置 | |
| JP5045974B2 (ja) | 車両運転支援装置 | |
| KR20060088988A (ko) | 후방 카메라 및 광원을 이용한 거리 인식 방법 | |
| JP4175196B2 (ja) | 車両用撮像装置 | |
| JPH10230805A (ja) | 自動車用運転支援装置 | |
| CN221293242U (zh) | 一种用于电子外后视镜的亮度调整装置 | |
| US12134354B2 (en) | Vehicle tracking for a camera wing system | |
| JP2007050749A (ja) | 自動車周囲監視装置 | |
| JP2002012080A (ja) | 車両用撮像装置 | |
| JP2000071874A (ja) | 車両用左右両側確認装置におけるカメラ装置 | |
| CN110949239A (zh) | 车辆及其智能车灯系统以及智能车灯系统的灯光交互方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040109 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040120 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040318 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041005 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041130 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050308 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050331 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20050519 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20050610 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070907 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101005 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040318 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101005 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111005 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111005 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121005 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131005 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |