JP3201037B2 - 運転者撮影装置 - Google Patents
運転者撮影装置Info
- Publication number
- JP3201037B2 JP3201037B2 JP00650693A JP650693A JP3201037B2 JP 3201037 B2 JP3201037 B2 JP 3201037B2 JP 00650693 A JP00650693 A JP 00650693A JP 650693 A JP650693 A JP 650693A JP 3201037 B2 JP3201037 B2 JP 3201037B2
- Authority
- JP
- Japan
- Prior art keywords
- driver
- photographing
- face
- image
- characteristic region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
Description
【０００１】
【産業上の利用分野】この発明は、例えば車両運転者の
居眠りや脇見状態を判別するために、車両などの運転者
を撮影する運転者撮影装置に関するものである。
居眠りや脇見状態を判別するために、車両などの運転者
を撮影する運転者撮影装置に関するものである。
【０００２】
【従来の技術】従来、運転者を撮影する装置としては、
例えば特開昭６０−１５８３０３号公報，特開昭６０−
１５８３０４号公報、特開平３−５３３号公報などに掲
載されたものがある。図５は、従来の運転者撮影装置を
例えば車両の運転者に用いた場合の、要部の配置を斜め
後方から示す説明図である。図において、１は運転者、
２は運転席、３はダッシュボード内のインスツルメント
パネル、９はインスツルメントパネル３内に設置された
撮影装置であり、例えばカメラである。このカメラ９
は、例えばＣＣＤなどの撮像装置とその信号処理回路を
含んでいるものとする。また、１０はカメラ９で撮影さ
れた運転者１の眼の位置を認識する眼の位置認識装置で
あり、例えばマイクロコンピュータなどの電子回路で構
成される。
例えば特開昭６０−１５８３０３号公報，特開昭６０−
１５８３０４号公報、特開平３−５３３号公報などに掲
載されたものがある。図５は、従来の運転者撮影装置を
例えば車両の運転者に用いた場合の、要部の配置を斜め
後方から示す説明図である。図において、１は運転者、
２は運転席、３はダッシュボード内のインスツルメント
パネル、９はインスツルメントパネル３内に設置された
撮影装置であり、例えばカメラである。このカメラ９
は、例えばＣＣＤなどの撮像装置とその信号処理回路を
含んでいるものとする。また、１０はカメラ９で撮影さ
れた運転者１の眼の位置を認識する眼の位置認識装置で
あり、例えばマイクロコンピュータなどの電子回路で構
成される。
【０００３】次に動作について説明する。カメラ９は例
えば運転者１の正面の顔を含む上半身を撮影している。
カメラ９の画像出力は眼の位置認識装置１０に送られ
て、眼の位置認識装置１０で画像中より目や顔が認識さ
れ、抽出される。眼を認識した後、例えば上記公報の場
合、この認識した眼の位置から車内のミラーの角度を調
節したり、車両運転者の居眠り、脇見状態などを判定し
ている。
えば運転者１の正面の顔を含む上半身を撮影している。
カメラ９の画像出力は眼の位置認識装置１０に送られ
て、眼の位置認識装置１０で画像中より目や顔が認識さ
れ、抽出される。眼を認識した後、例えば上記公報の場
合、この認識した眼の位置から車内のミラーの角度を調
節したり、車両運転者の居眠り、脇見状態などを判定し
ている。
【０００４】
【発明が解決しようとする課題】従来の運転者撮影装置
では、運転者の身長が変わったり、運転者の姿勢が変わ
ると、運転者の姿勢によって撮影される運転者の顔画像
が左右に動いてしまう。また、極端な場合、顔画像が画
面上からはみだしてしまったり、正面顔画像を撮影して
いる場合に、顔の側面画像しか撮れず目の抽出が難しく
なったり、片目しか抽出出来ないので脇見判定が出来な
いなどの問題があった。
では、運転者の身長が変わったり、運転者の姿勢が変わ
ると、運転者の姿勢によって撮影される運転者の顔画像
が左右に動いてしまう。また、極端な場合、顔画像が画
面上からはみだしてしまったり、正面顔画像を撮影して
いる場合に、顔の側面画像しか撮れず目の抽出が難しく
なったり、片目しか抽出出来ないので脇見判定が出来な
いなどの問題があった。
【０００５】この発明は、かかる問題点を解決するため
になされたもので、運転者の姿勢がが変わっても撮影さ
れる運転者の顔画像が左右に動かず、運転者の特定な顔
画像を常時撮影できる運転者撮影装置を得ることを目的
としている。
になされたもので、運転者の姿勢がが変わっても撮影さ
れる運転者の顔画像が左右に動かず、運転者の特定な顔
画像を常時撮影できる運転者撮影装置を得ることを目的
としている。
【０００６】
【課題を解決するための手段】請求項１の発明に係る運
転者撮影装置は、運転者をそれぞれ異なる方向より撮影
する複数の運転者撮影手段、運転者撮影手段により撮影
された運転者の画像から運転者の特徴領域を抽出する特
徴領域抽出手段、この特徴領域抽出手段によって抽出さ
れた運転者の特徴領域から顔の向きを検出する向き検出
手段、及び向き検出手段で検出した運転者の顔の向きに
基づいて、運転者の顔画像を撮影するのに適切な撮影手
段を複数の運転者撮影手段の中から選択する顔画像撮影
制御手段を備えたものである。
転者撮影装置は、運転者をそれぞれ異なる方向より撮影
する複数の運転者撮影手段、運転者撮影手段により撮影
された運転者の画像から運転者の特徴領域を抽出する特
徴領域抽出手段、この特徴領域抽出手段によって抽出さ
れた運転者の特徴領域から顔の向きを検出する向き検出
手段、及び向き検出手段で検出した運転者の顔の向きに
基づいて、運転者の顔画像を撮影するのに適切な撮影手
段を複数の運転者撮影手段の中から選択する顔画像撮影
制御手段を備えたものである。
【０００７】また、請求項２の発明に係る運転者撮影装
置は、運転者に光を照射する発光手段、発光手段からの
照射による運転者の反射光を受光し、運転者をそれぞれ
異なる方向より撮影する複数の運転者撮影手段、運転者
撮影手段により撮影された運転者の画像から運転者の特
徴領域を抽出する特徴領域抽出手段、この特徴領域抽出
手段によって抽出された運転者の特徴領域から顔の向き
を検出する向き検出手段、及び向き検出手段で検出した
運転者の顔の向きに基づいて、運転者の顔画像を撮影す
るのに適切な撮影手段を複数の運転者撮影手段の中から
選択する顔画像撮影制御手段を備えたものである。
置は、運転者に光を照射する発光手段、発光手段からの
照射による運転者の反射光を受光し、運転者をそれぞれ
異なる方向より撮影する複数の運転者撮影手段、運転者
撮影手段により撮影された運転者の画像から運転者の特
徴領域を抽出する特徴領域抽出手段、この特徴領域抽出
手段によって抽出された運転者の特徴領域から顔の向き
を検出する向き検出手段、及び向き検出手段で検出した
運転者の顔の向きに基づいて、運転者の顔画像を撮影す
るのに適切な撮影手段を複数の運転者撮影手段の中から
選択する顔画像撮影制御手段を備えたものである。
【０００８】
【作用】上記のように構成された運転者撮影装置では、
運転者をさまざまな方向から撮影する複数の撮影手段を
備え、向き検出手段で運転者の画像から顔の向きを検出
し、顔画像撮影制御手段により顔の向きに応じて最適な
撮影手段に切り換えるので、運転者の最適な顔画像を常
時撮影できる。
運転者をさまざまな方向から撮影する複数の撮影手段を
備え、向き検出手段で運転者の画像から顔の向きを検出
し、顔画像撮影制御手段により顔の向きに応じて最適な
撮影手段に切り換えるので、運転者の最適な顔画像を常
時撮影できる。
【０００９】
【実施例】実施例１．図１はこの発明の実施例１による
運転者撮影装置の要部の配置を上面から示す説明図であ
る。図１において、１〜３は従来例と同様であるので、
説明を省略する。４ａ，４ｂ，４ｃは運転者を撮影する
運転者撮影手段で、例えば３台のカメラである。この実
施例ではカメラ４ａ，４ｂ，４ｃはインスツルメントパ
ネル３内に設置され、それぞれ異なる方向から運転者１
を撮影する位置に配置されている。カメラ４ａ，４ｂ，
４ｃはＣＣＤなどの撮像素子とその信号処理回路などを
含んでいる。またカメラ４ａ，４ｂ，４ｃはほぼ水平に
設置され、運転者２の正面を中心線として左右対象に配
置されるのが望ましく、それぞれの撮影範囲があまり重
ならないように配置した方がよい。
運転者撮影装置の要部の配置を上面から示す説明図であ
る。図１において、１〜３は従来例と同様であるので、
説明を省略する。４ａ，４ｂ，４ｃは運転者を撮影する
運転者撮影手段で、例えば３台のカメラである。この実
施例ではカメラ４ａ，４ｂ，４ｃはインスツルメントパ
ネル３内に設置され、それぞれ異なる方向から運転者１
を撮影する位置に配置されている。カメラ４ａ，４ｂ，
４ｃはＣＣＤなどの撮像素子とその信号処理回路などを
含んでいる。またカメラ４ａ，４ｂ，４ｃはほぼ水平に
設置され、運転者２の正面を中心線として左右対象に配
置されるのが望ましく、それぞれの撮影範囲があまり重
ならないように配置した方がよい。
【００１０】また、５は画像信号切り換え手段であり、
画像信号切り換えスイッチとその駆動回路などで構成さ
れ、カメラ４ａ，４ｂ，４ｃからの画像出力信号をそれ
ぞれ受け、いずれか１つの画像信号を選択して出力す
る。６は例えば、顔の輪郭、目、黒目、鼻、眉、口など
顔の特徴領域や、例えば、目尻、目頭、口の両端など特
徴点を抽出する顔の特徴領域抽出手段である。従来例に
おける眼の位置認識装置１０に加えて、抽出する顔の特
徴点が拡張されている。顔の特徴領域抽出手段６は例え
ばマイクロコンピュータなどで構成され、画像処理機能
と、処理した画像から顔の特徴点、特徴領域を抽出する
機能を備えている。
画像信号切り換えスイッチとその駆動回路などで構成さ
れ、カメラ４ａ，４ｂ，４ｃからの画像出力信号をそれ
ぞれ受け、いずれか１つの画像信号を選択して出力す
る。６は例えば、顔の輪郭、目、黒目、鼻、眉、口など
顔の特徴領域や、例えば、目尻、目頭、口の両端など特
徴点を抽出する顔の特徴領域抽出手段である。従来例に
おける眼の位置認識装置１０に加えて、抽出する顔の特
徴点が拡張されている。顔の特徴領域抽出手段６は例え
ばマイクロコンピュータなどで構成され、画像処理機能
と、処理した画像から顔の特徴点、特徴領域を抽出する
機能を備えている。
【００１１】７は向き検出手段であり、例えばマイクロ
コンピュータなどで構成され、顔の特徴領域抽出手段６
より送られた顔の特徴領域のデータから、運転者１の顔
の向きが左、右、中央のどちらに向いているかを検出す
る。８は顔画像撮影制御手段であり、例えばマイクロコ
ンピュータなどで構成され、向き検出手段７で求められ
た顔の向きより、正面からの顔画像を撮影するのに最適
なカメラがカメラ４ａ，４ｂ，４ｃの内いずれであるか
を判定する。この結果、最適と判定されたカメラからの
画像信号が顔の特徴領域抽出手段６に送られるように画
像信号切り換え手段５に指令を行う。画像信号切り換え
手段５はこの指令に従い、画像信号を切り換える。顔画
像撮影制御手段８の出力は、さらに脇見判定装置（図示
せず）などにも送られ、脇見が判定される。
コンピュータなどで構成され、顔の特徴領域抽出手段６
より送られた顔の特徴領域のデータから、運転者１の顔
の向きが左、右、中央のどちらに向いているかを検出す
る。８は顔画像撮影制御手段であり、例えばマイクロコ
ンピュータなどで構成され、向き検出手段７で求められ
た顔の向きより、正面からの顔画像を撮影するのに最適
なカメラがカメラ４ａ，４ｂ，４ｃの内いずれであるか
を判定する。この結果、最適と判定されたカメラからの
画像信号が顔の特徴領域抽出手段６に送られるように画
像信号切り換え手段５に指令を行う。画像信号切り換え
手段５はこの指令に従い、画像信号を切り換える。顔画
像撮影制御手段８の出力は、さらに脇見判定装置（図示
せず）などにも送られ、脇見が判定される。
【００１２】次に動作について説明する。カメラ４ａ，
４ｂ，４ｃの撮影動作は従来の実施例と同様であるので
説明を省略する。顔の特徴領域抽出手段６、向き検出手
段７、及び顔画像撮影制御手段８は、この実施例ではマ
イクロコンピュータ等で実現している。この処理の一例
を図２のフローチャートに示す。ステップ１１では、い
ま画像信号切り換え手段５がカメラ４ｂからの画像出力
信号を選択して出力しているとする。特徴領域抽出手段
６はこの顔画像をステップ１２で入力し、例えば、顔の
輪郭、目、黒目、鼻、眉、口など顔の特徴領域や、例え
ば、目尻、目頭、口の両端など特徴点を抽出する（ステ
ップ１３）。この顔の特徴点を抽出する方法について
は、例えば画像処理ハンドブック、第５７４頁〜第５７
９頁に掲載されている。この方法は顔の輪郭抽出から始
めて、目、鼻、口の順にその位置を求めていく方法であ
る。これは顔の特徴領域の抽出の一例であり、これに限
るものではない。
４ｂ，４ｃの撮影動作は従来の実施例と同様であるので
説明を省略する。顔の特徴領域抽出手段６、向き検出手
段７、及び顔画像撮影制御手段８は、この実施例ではマ
イクロコンピュータ等で実現している。この処理の一例
を図２のフローチャートに示す。ステップ１１では、い
ま画像信号切り換え手段５がカメラ４ｂからの画像出力
信号を選択して出力しているとする。特徴領域抽出手段
６はこの顔画像をステップ１２で入力し、例えば、顔の
輪郭、目、黒目、鼻、眉、口など顔の特徴領域や、例え
ば、目尻、目頭、口の両端など特徴点を抽出する（ステ
ップ１３）。この顔の特徴点を抽出する方法について
は、例えば画像処理ハンドブック、第５７４頁〜第５７
９頁に掲載されている。この方法は顔の輪郭抽出から始
めて、目、鼻、口の順にその位置を求めていく方法であ
る。これは顔の特徴領域の抽出の一例であり、これに限
るものではない。
【００１３】次にステップ１４では、向き検出手段７に
よって特徴領域抽出手段６から送られた顔の特徴領域の
データより、運転者１の顔の向きが左、右、中央のどち
らに向いているかを検出する。この検出方法としては、
電子情報通信学会論文誌ＤーＩＩ、Ｖｏｌ．Ｊ７２−Ｄ
−ＩＩ、Ｎｏ９、第１４４１頁〜第１４４７頁、１９８
９年９月に記載されたものがある。これは、顔上の３個
の特徴点の間の距離を既知情報として、３点を単眼でと
らえたときの２次元画像平面への投影像からの顔の位置
と向きを検出する手法を提案したものである。例えばこ
の手法を用い、真正面からの顔の向きの角度θを得て、
ステップ１５で右、正面、左のどこを向いているかを判
定する。
よって特徴領域抽出手段６から送られた顔の特徴領域の
データより、運転者１の顔の向きが左、右、中央のどち
らに向いているかを検出する。この検出方法としては、
電子情報通信学会論文誌ＤーＩＩ、Ｖｏｌ．Ｊ７２−Ｄ
−ＩＩ、Ｎｏ９、第１４４１頁〜第１４４７頁、１９８
９年９月に記載されたものがある。これは、顔上の３個
の特徴点の間の距離を既知情報として、３点を単眼でと
らえたときの２次元画像平面への投影像からの顔の位置
と向きを検出する手法を提案したものである。例えばこ
の手法を用い、真正面からの顔の向きの角度θを得て、
ステップ１５で右、正面、左のどこを向いているかを判
定する。
【００１４】上記判定の結果、顔画像撮影制御手段８
で、正面からの顔画像を撮影するのに最適なカメラがカ
メラ４ａ，４ｂ，４ｃの内いずれであるかをステップ１
６，１８で判定する。これは、あらかじめ、カメラ４
ａ，４ｂ，４ｃのそれぞれに対して、撮影できる向きの
範囲を記憶しておけば良い。この最適と判定されたカメ
ラからの画像信号が顔の特徴領域抽出手段６に送られる
ように画像信号切り換え手段５に指令を行う（ステップ
１７，ステップ１９）。画像信号切り換え手段５はこの
指令に従い、画像信号を切り換える。顔画像撮影制御手
段８の出力は、さらに脇見判定装置（図示せず）などに
も送られ、脇見が判定される。
で、正面からの顔画像を撮影するのに最適なカメラがカ
メラ４ａ，４ｂ，４ｃの内いずれであるかをステップ１
６，１８で判定する。これは、あらかじめ、カメラ４
ａ，４ｂ，４ｃのそれぞれに対して、撮影できる向きの
範囲を記憶しておけば良い。この最適と判定されたカメ
ラからの画像信号が顔の特徴領域抽出手段６に送られる
ように画像信号切り換え手段５に指令を行う（ステップ
１７，ステップ１９）。画像信号切り換え手段５はこの
指令に従い、画像信号を切り換える。顔画像撮影制御手
段８の出力は、さらに脇見判定装置（図示せず）などに
も送られ、脇見が判定される。
【００１５】上記のように構成された運転者撮影装置で
は、運転者をさまざまな方向から撮影する複数のカメラ
を備え、向き検出手段７で運転者の画像から顔の向きを
検出し、顔画像撮影制御手段８により顔の向きに応じて
最適なカメラに切り換えるので、運転者の身長が変わっ
たり、運転者の姿勢が変わっても、運転者の姿勢によっ
て撮影される運転者の顔画像が左右に動いてしまった
り、顔画像が画面上からはみだしてしまったりするのを
防止でき、運転者の最適な顔画像を常時撮影できる。
は、運転者をさまざまな方向から撮影する複数のカメラ
を備え、向き検出手段７で運転者の画像から顔の向きを
検出し、顔画像撮影制御手段８により顔の向きに応じて
最適なカメラに切り換えるので、運転者の身長が変わっ
たり、運転者の姿勢が変わっても、運転者の姿勢によっ
て撮影される運転者の顔画像が左右に動いてしまった
り、顔画像が画面上からはみだしてしまったりするのを
防止でき、運転者の最適な顔画像を常時撮影できる。
【００１６】なお、撮影手段の台数は上記実施例に限る
ことなく何台でも良い。また、撮影手段を横に一列をな
すように設置する必要はなく、上下に幅を持たせてもよ
く、さらに、一部の撮影手段を、ハンドルやミラー内に
設置しても良い。運転者を異なる方向から撮影できるよ
うに構成されていれば良く、設置場所を限定するもので
はない。また、顔の特徴点として、目の位置を検出し、
顔の向きを判定するように構成しているが、これに限る
ものではなく、頭の形を検出して顔の角度を知ることも
できるし、また、顔の輪郭で顔の角度を判定したり、横
顔でその向きを判定しても良い。また、撮影手段を用い
て顔の向きを判定しなくても良く、例えば、運転者の頭
などに磁界発生装置を付けるなどしてもその向きを判定
できる。
ことなく何台でも良い。また、撮影手段を横に一列をな
すように設置する必要はなく、上下に幅を持たせてもよ
く、さらに、一部の撮影手段を、ハンドルやミラー内に
設置しても良い。運転者を異なる方向から撮影できるよ
うに構成されていれば良く、設置場所を限定するもので
はない。また、顔の特徴点として、目の位置を検出し、
顔の向きを判定するように構成しているが、これに限る
ものではなく、頭の形を検出して顔の角度を知ることも
できるし、また、顔の輪郭で顔の角度を判定したり、横
顔でその向きを判定しても良い。また、撮影手段を用い
て顔の向きを判定しなくても良く、例えば、運転者の頭
などに磁界発生装置を付けるなどしてもその向きを判定
できる。
【００１７】実施例２．図３は、この発明の実施例２に
よる運転者撮影装置の要部の配置を上面から示す説明図
である。図３において、１〜３、４ａ、４ｂ、４ｃ、５
〜８は実施例１と同様であるので説明を省略する。さら
に、２０は発光手段であり、可視光または赤外光を発光
する。発光手段２０は、例えばＬＥＤなどの発光器と、
発光器をある設定光量で発光させる駆動装置を含んでい
る。この実施例による運転者撮影装置では顔の正面画像
を特定な顔画像として用いているので、発光手段２０は
運転者１の正面に設置するのが望ましい。２１は発光手
段２０の電源であり、発光器に電気を供給し、発光させ
ている。
よる運転者撮影装置の要部の配置を上面から示す説明図
である。図３において、１〜３、４ａ、４ｂ、４ｃ、５
〜８は実施例１と同様であるので説明を省略する。さら
に、２０は発光手段であり、可視光または赤外光を発光
する。発光手段２０は、例えばＬＥＤなどの発光器と、
発光器をある設定光量で発光させる駆動装置を含んでい
る。この実施例による運転者撮影装置では顔の正面画像
を特定な顔画像として用いているので、発光手段２０は
運転者１の正面に設置するのが望ましい。２１は発光手
段２０の電源であり、発光器に電気を供給し、発光させ
ている。
【００１８】次に動作について説明する。画像信号切り
換え手段５、顔の特徴領域抽出手段６、向き検出手段
７、顔画像撮影制御手段８の動作は、実施例１と同様で
あるので説明を省略する。発光手段２０の発光器は一般
に素子によって指向角が決まっているので、発光範囲に
運転者が入るような指向角の素子を選ぶ。
換え手段５、顔の特徴領域抽出手段６、向き検出手段
７、顔画像撮影制御手段８の動作は、実施例１と同様で
あるので説明を省略する。発光手段２０の発光器は一般
に素子によって指向角が決まっているので、発光範囲に
運転者が入るような指向角の素子を選ぶ。
【００１９】この実施例では、発光手段２０を備えてお
り、発光手段２０からの発光光が運転者１で反射され、
カメラ４ａ，４ｂ，４ｃはその反射光によって運転者１
を撮影している。従って、上記実施例の効果に加えて、
太陽光の得られる昼間だけではなく、夜間や雨天時など
でも運転者１の顔画像が得られる効果がある。
り、発光手段２０からの発光光が運転者１で反射され、
カメラ４ａ，４ｂ，４ｃはその反射光によって運転者１
を撮影している。従って、上記実施例の効果に加えて、
太陽光の得られる昼間だけではなく、夜間や雨天時など
でも運転者１の顔画像が得られる効果がある。
【００２０】また、発光手段２０と撮影手段４を同一構
造や一体に構成しても、上記実施例と同様の効果が得ら
れる。また、１つの発光手段２０では光量が不十分な場
合、複数の発光手段を、例えば、カメラのまわりに同心
円上に設ければ、取扱いや設置が簡単である。
造や一体に構成しても、上記実施例と同様の効果が得ら
れる。また、１つの発光手段２０では光量が不十分な場
合、複数の発光手段を、例えば、カメラのまわりに同心
円上に設ければ、取扱いや設置が簡単である。
【００２１】また、上記実施例は、車両の運転者を撮影
する装置について説明したが、これに限るものではな
く、船舶の運転者や飛行機のパイロットなどを撮影する
装置に適用することもできる。さらに、プラントなどを
運転監視する人を撮影する装置に適用すれば、監視員の
顔画像を正確に撮影できる。
する装置について説明したが、これに限るものではな
く、船舶の運転者や飛行機のパイロットなどを撮影する
装置に適用することもできる。さらに、プラントなどを
運転監視する人を撮影する装置に適用すれば、監視員の
顔画像を正確に撮影できる。
【００２２】実施例３．図４は、この発明の実施例３に
よる運転者撮影装置の要部の配置を上面から示す説明図
である。図において、１〜３、４ａ、４ｂ、４ｃ、５〜
８、２１は実施例２と同様であるので説明を省略する。
さらに２０ａ，２０ｂ，２０ｃはそれぞれ発光手段であ
り、可視光または赤外光を発光するものであり、例えば
ＬＥＤなどの発光器と、発光器をある設定光量で発光さ
せる駆動装置を含んでいる。この実施例では発光手段２
０ａ，２０ｂ，２０ｃはそれぞれカメラ４ａ，４ｂ，４
ｃの近くのインスツルメントパネル３内に設置されてそ
れぞれ違う方向から運転者１を投光する位置に配置され
ている。発光手段２０ａ，２０ｂ，２０ｃとカメラ４
ａ，４ｂ，４ｃはそれぞれ一対で対応しているのが望ま
しい。２２は発光器切り換え手段であり、画像信号切り
換え手段５によるカメラ４の選択と同期して、そのカメ
ラ４の近くの発光器２０を切り換えて発光させる。この
切り換え信号は画像信号切り換え手段５に与えられる切
り換え信号と同じく顔画像撮影制御手段８により送られ
る。
よる運転者撮影装置の要部の配置を上面から示す説明図
である。図において、１〜３、４ａ、４ｂ、４ｃ、５〜
８、２１は実施例２と同様であるので説明を省略する。
さらに２０ａ，２０ｂ，２０ｃはそれぞれ発光手段であ
り、可視光または赤外光を発光するものであり、例えば
ＬＥＤなどの発光器と、発光器をある設定光量で発光さ
せる駆動装置を含んでいる。この実施例では発光手段２
０ａ，２０ｂ，２０ｃはそれぞれカメラ４ａ，４ｂ，４
ｃの近くのインスツルメントパネル３内に設置されてそ
れぞれ違う方向から運転者１を投光する位置に配置され
ている。発光手段２０ａ，２０ｂ，２０ｃとカメラ４
ａ，４ｂ，４ｃはそれぞれ一対で対応しているのが望ま
しい。２２は発光器切り換え手段であり、画像信号切り
換え手段５によるカメラ４の選択と同期して、そのカメ
ラ４の近くの発光器２０を切り換えて発光させる。この
切り換え信号は画像信号切り換え手段５に与えられる切
り換え信号と同じく顔画像撮影制御手段８により送られ
る。
【００２３】実施例２に加えてこの実施例では、発光手
段２０を切り換えているので、顔を横に向けた場合など
に生じる、鼻柱による影が発生せず、一様な明るさの顔
画像が得られる効果がある。
段２０を切り換えているので、顔を横に向けた場合など
に生じる、鼻柱による影が発生せず、一様な明るさの顔
画像が得られる効果がある。
【００２４】また、実施例２、３においては、発光手段
２０と運転者撮影手段４をインスツルメントパネル内に
設置する例を示したが、これにこだわることはなく、ル
ームミラー位置など運転者を撮影できる位置であればど
こでもよい。
２０と運転者撮影手段４をインスツルメントパネル内に
設置する例を示したが、これにこだわることはなく、ル
ームミラー位置など運転者を撮影できる位置であればど
こでもよい。
【００２５】
【発明の効果】以上のように、請求項１の発明によれ
ば、運転者をそれぞれ異なる方向より撮影する複数の運
転者撮影手段、運転者撮影手段により撮影された運転者
の画像から運転者の特徴領域を抽出する特徴領域抽出手
段、この特徴領域抽出手段によって抽出された運転者の
特徴領域から顔の向きを検出する向き検出手段、及び向
き検出手段で検出した運転者の顔の向きに基づいて、運
転者の顔画像を撮影するのに適切な撮影手段を複数の運
転者撮影手段の中から選択する顔画像撮影制御手段を備
えたことにより、運転者の特定の顔画像が常時撮影で
き、画像処理をするのに適した顔画像が撮影できる運転
者撮影装置が得られる効果がある。
ば、運転者をそれぞれ異なる方向より撮影する複数の運
転者撮影手段、運転者撮影手段により撮影された運転者
の画像から運転者の特徴領域を抽出する特徴領域抽出手
段、この特徴領域抽出手段によって抽出された運転者の
特徴領域から顔の向きを検出する向き検出手段、及び向
き検出手段で検出した運転者の顔の向きに基づいて、運
転者の顔画像を撮影するのに適切な撮影手段を複数の運
転者撮影手段の中から選択する顔画像撮影制御手段を備
えたことにより、運転者の特定の顔画像が常時撮影で
き、画像処理をするのに適した顔画像が撮影できる運転
者撮影装置が得られる効果がある。
【００２６】また、請求項２の発明によれば、運転者に
光を照射する発光手段、発光手段からの照射による運転
者の反射光を受光し、運転者をそれぞれ異なる方向より
撮影する複数の運転者撮影手段、運転者撮影手段により
撮影された運転者の画像から運転者の特徴領域を抽出す
る特徴領域抽出手段、この特徴領域抽出手段によって抽
出された運転者の特徴領域から顔の向きを検出する向き
検出手段、及び向き検出手段で検出した運転者の顔の向
きに基づいて、運転者の顔画像を撮影するのに適切な撮
影手段を複数の運転者撮影手段の中から選択する顔画像
撮影制御手段を備えたことにより、上記効果に加えて、
太陽光の得られる昼間だけではなく、夜間や雨天時など
でも運転者の顔画像が撮影できる運転者撮影装置が得ら
れる効果がある。
光を照射する発光手段、発光手段からの照射による運転
者の反射光を受光し、運転者をそれぞれ異なる方向より
撮影する複数の運転者撮影手段、運転者撮影手段により
撮影された運転者の画像から運転者の特徴領域を抽出す
る特徴領域抽出手段、この特徴領域抽出手段によって抽
出された運転者の特徴領域から顔の向きを検出する向き
検出手段、及び向き検出手段で検出した運転者の顔の向
きに基づいて、運転者の顔画像を撮影するのに適切な撮
影手段を複数の運転者撮影手段の中から選択する顔画像
撮影制御手段を備えたことにより、上記効果に加えて、
太陽光の得られる昼間だけではなく、夜間や雨天時など
でも運転者の顔画像が撮影できる運転者撮影装置が得ら
れる効果がある。
【図１】この発明の実施例１による運転者撮影装置の要
部の配置を上面から示す説明図である。
部の配置を上面から示す説明図である。
【図２】この発明の実施例１に係わる特徴領域抽出手段
６、向き検出手段７、及び顔画像撮影制御手段８の処理
を示すフローチャートである。
６、向き検出手段７、及び顔画像撮影制御手段８の処理
を示すフローチャートである。
【図３】この発明の実施例２による運転者撮影装置の要
部の配置を上面から示す説明図である。
部の配置を上面から示す説明図である。
【図４】この発明の実施例３による運転者撮影装置の要
部の配置を上面から示す説明図である。
部の配置を上面から示す説明図である。
【図５】従来の運転者撮影装置の要部の配置を斜め後方
から示す説明図である。
から示す説明図である。
１ 運転者 ２ 運転席 ４ａ，４ｂ，４ｃ 運転者撮影手段 ６ 特徴領域抽出手段 ７ 向き検出手段 ８ 顔画像撮影制御手段 ２０ 発光手段 ２２ 発光器切り換え手段
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平３−255793（ＪＰ，Ａ) 特開 平３−254291（ＪＰ，Ａ) 特開 平３−194661（ＪＰ，Ａ) 特開 昭63−118473（ＪＰ，Ａ) 特開 平３−533（ＪＰ，Ａ) 特開 昭60−158304（ＪＰ，Ａ) 特開 昭60−158303（ＪＰ，Ａ) 特開 平２−50691（ＪＰ，Ａ) (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 7/18 B60K 28/06 G01B 11/00
Claims (2)
- 【請求項１】 運転者をそれぞれ異なる方向より撮影す
る複数の運転者撮影手段、上記運転者撮影手段により撮
影された上記運転者の画像から上記運転者の特徴領域を
抽出する特徴領域抽出手段、この特徴領域抽出手段によ
って抽出された上記運転者の特徴領域から顔の向きを検
出する向き検出手段、及び上記向き検出手段で検出した
運転者の顔の向きに基づいて、上記運転者の顔画像を撮
影するのに適切な撮影手段を上記複数の運転者撮影手段
の中から選択する顔画像撮影制御手段を備えた運転者撮
影装置。 - 【請求項２】 運転者に光を照射する発光手段、上記発
光手段からの照射による上記運転者の反射光を受光し、
上記運転者をそれぞれ異なる方向より撮影する複数の運
転者撮影手段、上記運転者撮影手段により撮影された上
記運転者の画像から上記運転者の特徴領域を抽出する特
徴領域抽出手段、この特徴領域抽出手段によって抽出さ
れた上記運転者の特徴領域から顔の向きを検出する向き
検出手段、及び上記向き検出手段で検出した運転者の顔
の向きに基づいて、上記運転者の顔画像を撮影するのに
適切な撮影手段を上記複数の運転者撮影手段の中から選
択する顔画像撮影制御手段を備えた運転者撮影装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00650693A JP3201037B2 (ja) | 1993-01-19 | 1993-01-19 | 運転者撮影装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00650693A JP3201037B2 (ja) | 1993-01-19 | 1993-01-19 | 運転者撮影装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH06217314A JPH06217314A (ja) | 1994-08-05 |
| JP3201037B2 true JP3201037B2 (ja) | 2001-08-20 |
Family
ID=11640321
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP00650693A Expired - Lifetime JP3201037B2 (ja) | 1993-01-19 | 1993-01-19 | 運転者撮影装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3201037B2 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3355076B2 (ja) * | 1995-09-14 | 2002-12-09 | 三菱電機株式会社 | 顔画像処理装置 |
| JP3612220B2 (ja) * | 1998-09-18 | 2005-01-19 | 株式会社東芝 | 人物監視方法 |
| JP4708491B2 (ja) * | 2007-03-29 | 2011-06-22 | 富士通株式会社 | 撮影制御装置、そのプログラム及び方法、撮影装置 |
| US8340368B2 (en) | 2008-06-11 | 2012-12-25 | Hyundai Motor Company | Face detection system |
| JP2021026701A (ja) * | 2019-08-08 | 2021-02-22 | 株式会社慶洋エンジニアリング | 居眠り運転防止装置 |
-
1993
- 1993-01-19 JP JP00650693A patent/JP3201037B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPH06217314A (ja) | 1994-08-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US12146963B2 (en) | Imaging device and electronic device | |
| US20230394813A1 (en) | Imaging apparatus, imaging system, imaging method, and imaging program | |
| US6304187B1 (en) | Method and device for detecting drowsiness and preventing a driver of a motor vehicle from falling asleep | |
| US20050084179A1 (en) | Method and apparatus for performing iris recognition from an image | |
| JP2937030B2 (ja) | 画像処理装置及び人物状態判定装置 | |
| JP3228086B2 (ja) | 運転操作補助装置 | |
| JPH06247184A (ja) | 車上表示装置 | |
| JP3898816B2 (ja) | 位置検出機能付きヘッドマウントディスプレイ | |
| CN111086451A (zh) | 一种平视显示系统、显示方法和汽车 | |
| JP3201037B2 (ja) | 運転者撮影装置 | |
| JP2023065494A (ja) | 撮影装置、制御方法、プログラム及び記憶媒体 | |
| JP3774448B2 (ja) | 車載用画像処理装置 | |
| JP3342810B2 (ja) | 虹彩画像取得装置 | |
| JPH04174309A (ja) | 運転車の眼位置検出装置及び状態検出装置 | |
| JPH06178302A (ja) | 運転者撮影装置 | |
| JPS6184509A (ja) | 車両運転者判別装置 | |
| JPH07167618A (ja) | 運転者位置認識装置 | |
| US20250086982A1 (en) | Imaging and display system for modifying color video stream by detecting objects in ir video stream | |
| KR20200107167A (ko) | 자연광 환경에서 적외선을 이용하여 얼굴 인식이 가능한 이미지를 생성할 수 있는 얼굴인식장치 및 그 인식방법 | |
| CN118306301A (zh) | 一种车灯控制方法、装置、车辆和存储介质 | |
| JPS6177705A (ja) | 車両運転者の目の位置認識装置 | |
| JPS6145911A (ja) | 車両運転者の目の位置認識装置 | |
| JP3351386B2 (ja) | 観察者の観察位置検出方法およびその装置 | |
| JPH0757199A (ja) | 物体認識装置 | |
| JP2025086702A (ja) | 画像処理システム及び画像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080622 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080622 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090622 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100622 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100622 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110622 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120622 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130622 Year of fee payment: 12 |
|
| EXPY | Cancellation because of completion of term | ||
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130622 Year of fee payment: 12 |