JP7555895B2 - 注意喚起システム、及び制御用プログラム - Google Patents

注意喚起システム、及び制御用プログラム Download PDF

Info

Publication number
JP7555895B2
JP7555895B2 JP2021159821A JP2021159821A JP7555895B2 JP 7555895 B2 JP7555895 B2 JP 7555895B2 JP 2021159821 A JP2021159821 A JP 2021159821A JP 2021159821 A JP2021159821 A JP 2021159821A JP 7555895 B2 JP7555895 B2 JP 7555895B2
Authority
JP
Japan
Prior art keywords
attention
display
recognition unit
recognized
windshield
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021159821A
Other languages
English (en)
Other versions
JP2023049832A (ja
Inventor
雅紀 丸山
実 樋口
雄也 岸本
俊明 妹尾
培仁 田中
一樹 ▲高▼野
英裕 武田
美咲 小関
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2021159821A priority Critical patent/JP7555895B2/ja
Priority to CN202211136262.1A priority patent/CN115871454B/zh
Priority to US17/951,466 priority patent/US12252149B2/en
Publication of JP2023049832A publication Critical patent/JP2023049832A/ja
Application granted granted Critical
Publication of JP7555895B2 publication Critical patent/JP7555895B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/178Warnings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/188Displaying information using colour changes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77Instrument locations other than the dashboard
    • B60K2360/785Instrument locations other than the dashboard on or in relation to the windshield or windows
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Instrument Panels (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Description

本発明は、注意喚起システム、及び制御用プログラムに関する。
従来、自車両の周辺を走行する他車両をカメラ又はレーダーにより検出し、HUD(Head Up Display)により、他車両のマーキング画像を、運転者から視認される他車両と重なるようにフロントウインドウに表示させる車両用画像表示システムが提案されている(例えば、特許文献1参照)。
特開2017-021546号公報
上述したように、自車両等の移動体の周辺に存在する他車両等の対象物が検出されたときには、操縦者の注意が速やかに対象物に向けられることが望まれる。
本発明はかかる背景に鑑みてなされたものであり、対象物に対して、操縦者の注意が速やかに向けられることを支援する注意喚起システム、及び制御用プログラムを提供することを目的とする。
上記目的を達成するための第1態様として、移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置と、前記投光装置により、前記視覚表示として、所定の注意喚起表示を前記フロントガラスに出力させる表示制御部と、前記移動体の前方に存在する対象物を認識する対象物認識部と、を備え、前記表示制御部は、前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を、前記投光装置により前記フロントガラスに出力させ、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起表示の長さが、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記投光装置により前記注意喚起表示を前記フロントガラスに出力させる注意喚起システムが挙げられる。
上記注意喚起システムにおいて、前記表示制御部は、前記対象物認識部により前記対象物が認識されていない状態が所定時間以上継続したときに、前記投光装置による前記注意喚起表示の出力態様を変化させる構成としてもよい。
上記注意喚起システムにおいて、前記対象物認識部により前記対象物が認識されているときに、前記移動体に対する前記対象物の影響度合を認識する影響度合認識部を備え、前記表示制御部は、前記影響度合に応じて、前記投光装置による前記注意喚起表示の出力態様を設定する構成としてもよい。
上記注意喚起システムにおいて、前記移動体に備えられた複数のスピーカーの出力態様を制御して、前記操縦者により知覚される所定の注意喚起音の音像の位置を変更する音像定位制御部を備え、前記音像定位制御部は、前記対象物認識部により前記対象物が認識されていないときは、前記注意喚起音の音像の位置を前記操縦者の周囲の所定範囲とし、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起音の音像の位置の範囲を、前記所定範囲から、前記操縦者から前記対象物への方向に向かって漸減させる構成としてもよい。
上記目的を達成するための第2態様として、移動体の前方に存在する対象物を認識する対象物認識部での認識結果を取得し、移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置に対して、前記視覚表示として前記認識結果に応じた所定の注意喚起表示を表示させる命令を出力するコントローラに実行させるプログラムであって、前記コントローラに、前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を表示させる命令を前記投光装置に出力し、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、線状の前記注意喚起表示の長さが、前記所定長さから、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記注意喚起表示を表示させる命令を、前記投光装置に出力する処理を実行させる制御用プログラムが挙げられる。
上記車両制御システムによれば、対象物に対して、操縦者の注意が速やかに向けられることを支援することができる。
図1は、注意喚起システム、及び注意喚起システムが搭載された車両の構成図である。 図2は、車両における投光装置とスピーカーの配置態様の説明図である。 図3は、投光装置によるフロントガラスへの注意喚起表示の出力態様の説明図である。 図4は、注意喚起処理の第1のフローチャートである。 図5は、注意喚起処理の第2のフローチャートである。 図6は、注意喚起処理の第3のフローチャートである。 図7は、車両の前方に存在する一つの対象物が認識された場合に、注意喚起表示の長さを漸減させる処理の説明図である。 図8は、車両の前方に存在する二つの対象物が認識された場合に、注意喚起表示の長さを漸減させる処理の説明図である。 図9は、車両の前方に存在する一つの対象物が認識された場合に、注意喚起音の音像の位置を変位させる処理の説明図である。 図10は、対象物の影響度合のレベルに応じた注意喚起表示の設定表である。
[1.注意喚起システムと車両の構成]
図1~図3を参照して、車両100、及び車両100に搭載された注意喚起システム1の構成について説明する。車両100は、本開示の移動体に相当する。図1に示したように、注意喚起システム1は、コントローラ2と投光装置30を備えている。
コントローラ2は、プロセッサ10、メモリ20、図示しないインターフェース回路等を備えた制御ユニットである。投光装置30は、車両100のフロントガラス40に、図2に示した運転者(操縦者)Pが視認可能な視覚表示である注意喚起表示50を出力する。図2,図3を参照して、投光装置30は、車両100の幅方向に連続して配置された複数の光源で構成された光源アレイである。
投光装置30の各光源は、例えば、複数の色を切り替えて発光可能なLEDである。投光装置30は、フロントガラス40の下方のダッシュボード等に、フロントガラス40と対向して配置されている。投光装置30は、各光源の点灯と消灯及び点灯色の切り替えが個別に可能に構成されている。本実施形態では、各光源の点灯色を、白色、黄色、オレンジ色、赤色に切り替えることが可能となっている。
車両100には、注意喚起システム1の他に、フロントカメラ31、レーダー32、及び複数のスピーカー33a~33dが備えられている。図2に示したように、フロントカメラ31は、フロントガラス40の上部等に設けられて、車両100の前方を撮影して撮影画像をコントローラ2に出力する。
レーダー32は、図2に示したように、車両100の前部に設けられて、車両100の前方に存在する物体の位置を検出して、位置検出信号をコントローラ2に出力する。スピーカー33a~33dは、図2に示したように、例えば、車両100の運転席ドア35a、助手席ドア35b、右後席ドア35c、及び左後席ドア35dに、それぞれ設けられている。
プロセッサ10は、メモリ20に保存された注意喚起システム1の制御用プログラム21を読み込んで実行することにより、対象物認識部11、表示制御部12、音像定位制御部13、及び影響度合認識部14として機能する。制御用プログラム21は、記録媒体(磁気ディスク、光学ディスク、フラッシュメモリ等)から読み出されてメモリ20に保存されてもよく、外部のサーバー等からダウンロードされてメモリ20に保存されてもよい。
対象物認識部11は、フロントカメラ31による撮影画像、及びレーダー32による物体の位置検出信号に基づいて、車両100の前方に存在する対象物(歩行者、他車両等)を認識する。表示制御部12は、投光装置30による注意喚起表示50の出力態様を制御する。音像定位制御部13は、スピーカー33a~33dの出力態様(出力レベル、出力タイミング等)を制御して、運転者Pにより知覚される所定の注意喚起音の音像の位置を変更する。なお、スピーカーの数は複数であればよく、3個以下或いは5個以上であってもよい。
影響度合認識部14は、対象物認識部11による対象物の認識状況に応じて、車両100に対する対象物の影響度合を、レベル0~レベル3の4段階で認識する。レベル0は、対象物認識部11により対象物が認識されていない状況である。レベル1~3は、対象物認識部11により対象物が認識されている状況に対応し、影響度合認識部14は、対象物と車両100との距離が短くなるに従って、影響度合をレベル1→レベル2→レベル3と切り替えて認識する。
なお、影響度合認識部14が、対象物が車両100に接近する速度も考慮して、影響度合を認識するようにしてもよい。この場合は、対象物が車両100に接近する速度が速くなるに従って、影響度合認識部14は、影響度合をレベル1→レベル2→レベル3と切り替えて認識する。また、表示制御部12は、図10に示した注意喚起表示の設定表示に従って、対象物の影響度合に応じて注意喚起表示の表示態様(表示色、表示範囲)を設定する。
[2.注意喚起処理]
図7~図10に示した説明図を参照しつつ、図4~図6に示したフローチャートに従って、対象物認識部11、表示制御部12、音像定位制御部13、及び影響度合認識部14により実行される注意喚起処理について説明する。
図4のステップS1で、音像定位制御部13は、注意喚起音の出力を開始する。音像定位制御部13は、注意喚起音の音像の位置が、運転者Pの全周囲(本開示の操縦者の周囲の所定範囲に相当する)となるように、スピーカー33a~33dの出力態様を制御する。これにより、図9のC1に示したように、注意喚起音の音像の位置60が運転者Pの全周囲となり、運転者Pが全周囲からの注意喚起音を知覚する状況となる。この場合の注意喚起音は、リスクレベル0に対応した、安心感を醸成させる穏やかな音に設定される。
続くステップS2で、表示制御部12は、投光装置30の光源を全点灯させて、投光装置30による注意喚起表示を開始する。表示制御部12は、投光装置30による表示範囲(投光範囲)の全域に亘る注意喚起表示50をフロントガラス40に出力する。この場合、コントローラ2から投光装置30に対して、光源を全点灯させる命令が出力される。これにより、図7のA1に示したように、フロントガラス40の車幅方向のほぼ全域に線状の注意喚起表示50が表示された状態となる。この場合の注意喚起表示50は、リスクレベル0に対応した白色の表示となり、運転者Pに対して、広範囲に注意を向けることを促すことができる。
次のステップS3で、対象物認識部11は、フロントカメラ31の撮影画像及びレーダー32による位置検出信号に基づいて、車両100の前方に存在する対象物を探索する。続くステップS4で、対象物認識部11は、車両100の前方に存在する対象物を認識したときは図5のステップS20に処理を進める。一方、車両100の前方に存在する対象物を認識しなかったときには、対象物認識部11は、ステップS5に処理を進める。
ステップS5で、表示制御部12は、車両100の前方に存在する対象物が認識されない状態の継続を確認するためのタイマをスタートさせる。タイマの設定時間は、例えば3秒に設定される。続くステップS6~S8のループ処理により、対象物認識部11は、ステップS8でタイマがタイムアップするまで、ステップS6で車両100の前方に存在する対象物を探索する。そして、ステップS7で、対象物認識部11は、車両100の前方に存在する対象物を認識したときは図5のステップS20に処理を進め、車両100の前方に存在する対象物を認識しなかったときにはステップS8に処理を進める。
ステップS9で、表示制御部12は、注意喚起表示50を点滅表示に切り替える。表示制御部12は、例えば、数秒に1回のペースで点滅させる注意喚起表示50を行う。これにより、対象物認識部11により対象物が認識されていない状況であっても、安全とは見なさずに、運転者Pに対して注意範囲を広げることを促すことができる。次のステップS10で、対象物認識部11は、フロントカメラ31の撮影画像及びレーダー32の検出信号に基づいて、車両100の前方に存在する対象物を探索する。続くステップS11で、対象物認識部11は、車両100の前方に存在する対象物を認識したときは図5のステップS20に処理を進め、車両100の前方に存在する対象物を認識しなかったときにはステップS10に処理を進める。
図5のステップS20で、影響度合認識部14は、上述したように、車両100に対する対象物の影響度合をレベル0~レベル3の4段階で認識する。次のステップS21で、影響度合認識部14は、対象物認識部11により認識されている対象物が単数であり、且つ対象物の影響度合がレベル1であるか否かを判断する。
そして、影響度合認識部14は、対象物認識部11により認識されている対象物が単数であり、且つ対象物の影響度合がレベル1であるときは、図6のステップS40に処理を進める。一方、対象物認識部11により認識されている対象物が複数であるか、又は対象物の影響度合がレベル2以上であるときには、影響度合認識部14は、ステップS22に処理を進める。
ステップS22で、影響度合認識部14は、対象物認識部11により認識されている対象物が複数であり、且つ少なくともいずれか一つの対象物の影響度合がレベル3であるか否かを判断する。そして、影響度合認識部14は、対象物認識部11により認識されている対象物が複数であり、且つ少なくともいずれか一つの対象物の影響度合がレベル3であるときは、図6のステップS50に処理を進める。一方、対象物認識部11により認識されている対象物が単数であるか、又は全ての対象物の影響度合がレベル2以下であるときには、影響度合認識部14は、ステップS23に処理を進める。ステップS23で、表示制御部12は、図10に示した注意喚起表示の設定表に従って、対象物の数及び影響度合のレベルに応じて注意喚起表示の色を設定する。
続くステップS24で、表示制御部12は、図7のA2,A3に示したように、運転者Pから対象物T1への方向Gとフロントガラス40が交差する位置51に向かって、注意喚起表示50の長さを漸減させ、ステップS25に処理を進める。この場合、コントローラ2から投光装置30に対して、注意喚起表示50の長さを位置51に向かって漸減させるように光源を点灯させる命令が出力される。ここで、注意喚起表示50の長さの漸減は、段階的に行ってもよく、連続的に行ってもよい。図7のA2,A3では、対象物認識部11により、歩行者が対象物T1として認識されている状況を示している。図7のA1に示したように、注意喚起表示50を、投光装置30の光源を全点灯させて、注意喚起表示50を表示範囲の全域にわたって表示した状態から、A2,A3に示したように、位置51に向かって漸減させることにより、運転者Pの視線を対象物T1への方向Gに誘導するよう作用することが期待できる。
また、図8は、対象物認識部11により二つの対象物T2,T3が認識された場合に、表示制御部12により実行される注意喚起表示50の長さの漸減の処理を例示している。図8のB1~B3においては、運転者Pから対象物T2への方向とフロントガラス40が交差する位置52と、運転者Pから対象物T3への方向とフロントガラス40が交差する位置53を示している。
表示制御部12は、図8のB2,B3に示したように、注意喚起表示50を二つに分割し、左側の注意喚起表示50aについては、位置52に向かって長さを漸減させる。また、表示制御部12は、右側の注記喚起表示50bについては、位置53に向かって長さを漸減させる。これにより、運転者Pの視線を対象物T2,T3の方向に誘導する効果が生じることが期待できる。
また、音像定位制御部13は、表示制御部12によるステップS23,S24の処理と同じタイミングで、ステップS30,S31の処理を実行する。音像定位制御部13は、ステップS30で、対象物の影響度合に応じて注意喚起音を変更して、ステップS25に処理を進める。この場合、音像定位制御部13は、対象物の影響度合のレベルが高いほど、より報知効果が高い注意喚起音を出力する。例えば、音像定位制御部13は、図4のステップS1で出力を開始した注意喚起音に所定の属性サウンド(エンジンの擬音等)を重畳させた注記喚起音を出力してもよい。
次のステップS31で、音像定位制御部13は、図9のC2,C3に示したように、注意喚起音の音像の位置60の範囲を、C1に示した運転者Pの全周囲とした状態から、運転者Pから対象物T1への方向Gに向かって漸減させる。これにより、運転者Pが、対象物の方向からのみの注意喚起音を知覚する状況となり、運転者Pの注意が対象物に向けられることが期待できる。
図6のステップS40で、表示制御部12は、図10の注意喚起表示の設定表に従って、レベル1に対応した注意喚起表示50を出力する。すなわち、表示制御部12は、投光装置30の全ての光源を点灯させて、全域にわたる注意喚起表示50を出力する。続くステップS41,S42により、音像定位制御部13は、上述した図5のステップS30,S31と同様に、対象物の影響度合に応じた注意喚起音を出力し、注意喚起音の音像の位置60の範囲を、運転者Pから対象物への方向に向かって変位させる。そして、音像定位制御部13は、図5のステップS25に処理を進める。
図6のステップS50で、表示制御部12は、図10の注意喚起表示の設定表に従って、レベル3に対応した、全域にわたる赤色の注意喚起表示を投光装置30により出力し、図5のステップS25に処理を進める。これにより、車両100の前方に存在する複数の対象物に対する注意を、運転者Pに促すことができる。
[3.他の実施形態]
上記実施形態では、運転者Pに対する注意喚起処理として、表示制御部12による注意喚起表示50の長さを漸減させる処理と、音像定位制御部13による注意喚起音の音像の位置の範囲を漸減させる処理とを行った。他の実施形態として、音像定位制御部13を省略して、表示制御部12による注意喚起表示50の長さを漸減させる処理のみを行うようにしてもよい。
上記実施形態では、本開示の移動体として四輪の車両100を示したが、本開示の移動体は、操縦者により操縦される移動体であればよく、例えば、二輪車両、飛行体、船舶等であってもよい。
上記実施形態において、表示制御部12は、図10に示した注意喚起表示設定表により、影響度合認識部14により認識される対象物の影響度合に応じて、注意喚起表示の表示態様を変更した。他の実施形態として、影響度合認識部14を省略して、対象物の影響度合に応じて注意喚起表示の表示態様を変更する処理を行わない構成としてもよい。
上記実施形態において、表示制御部12は、図4のステップS5~S9の処理により、対象物認識部11により対象物が認識されない状況が所定時間以上継続したときに、注意喚起表示50を点滅表示に切り替えた。他の構成として、点滅表示以外の表示態様に切り替えてもよい。例えば、明るさを変更する、色を変更する等により、注意喚起表示50の表示態様を切り替えてもよい。また、図4のステップS5~S9の処理を省略してもよい。
なお、図1は、本願発明の理解を容易にするために、注意喚起システム1の構成を、主な処理内容により区分して示した概略図であり、注意喚起システム1の構成を他の区分によって構成してもよい。また、各構成要素の処理は、1つのハードウェアユニットにより実行されてもよいし、複数のハードウェアユニットにより実行されてもよい。また、図4~図6に示した各構成要素による処理は、1つのプログラムにより実行されてもよいし、複数のプログラムにより実行されてもよい。
[4.上記実施形態によりサポートされる構成]
上記実施形態は、以下の構成の具体例である。
(構成1)移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置と、前記投光装置により、前記視覚表示として、所定の注意喚起表示を前記フロントガラスに出力させる表示制御部と、前記移動体の前方に存在する対象物を認識する対象物認識部と、を備え、前記表示制御部は、前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を、前記投光装置により前記フロントガラスに出力させ、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起表示の長さが、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記投光装置により前記注意喚起表示を前記フロントガラスに出力させる注意喚起システム。
構成1の注意喚起システムによれば、対象物に対して、操縦者の注意が速やかに向けられることを支援することができる。
(構成2)前記表示制御部は、前記対象物認識部により前記対象物が認識されていない状態が所定時間以上継続したときに、前記投光装置による前記注意喚起表示の出力態様を変化させる構成1に記載の注意喚起システム。
構成2の注意喚起システムによれば、対象物認識部により対象物が認識されていない状態が所定時間以上継続したときに、安全な状態と見なさずに、操縦者に対して注意範囲を広げるように促すことができる。
(構成3)前記対象物認識部により前記対象物が認識されているときに、前記移動体に対する前記対象物の影響度合を認識する影響度合認識部を備え、前記表示制御部は、前記影響度合に応じて、前記投光装置による前記注意喚起表示の出力態様を設定する構成1又は構成2に記載の注意喚起システム。
構成3の注意喚起システムによれば、移動体に対する対象物の影響度合を、注意喚起表示の表示態様の違いによって、操縦者に報知することができる。
(構成4)前記移動体に備えられた複数のスピーカーの出力態様を制御して、前記操縦者により知覚される所定の注意喚起音の音像の位置を変更する音像定位制御部を備え、前記音像定位制御部は、前記対象物認識部により前記対象物が認識されていないときは、前記注意喚起音の音像の位置を前記操縦者の周囲の所定範囲とし、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起音の音像の位置の範囲を、前記所定範囲から、前記操縦者から前記対象物への方向に向かって漸減させる構成1から構成3のうちいずれか一つの構成に記載の注意喚起システム。
構成4の注意喚起システムによれば、注意喚起音の音像の位置の範囲を、操縦者から対象物への方向に向かって漸減させることにより、操縦者の注意を対象物に向ける効果を高めることができる。
(構成5)移動体の前方に存在する対象物を認識する対象物認識部での認識結果を取得し、移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置に対して、前記視覚表示として前記認識結果に応じた所定の注意喚起表示を表示させる命令を出力するコントローラに実行させるプログラムであって、前記コントローラに、前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を表示させる命令を前記投光装置に出力し、前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、線状の前記注意喚起表示の長さが、前記所定長さから、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記注意喚起表示を表示させる命令を、前記投光装置に出力する処理を実行させる制御用プログラム。
構成5の制御用プログラムをコントローラにより実行させることによって、構成1の注意喚起システムと同様の作用効果を得ることができる。
1…注意喚起システム、2…コントローラ、10…プロセッサ、11…対象物認識部、12…表示制御部、13…音像定位制御部、14…影響度合認識部、20…メモリ、21…制御用プログラム、30…投光装置、31…フロントカメラ、32…レーダー、33a~33d…スピーカー、40…フロントガラス、50…注意喚起表示、60…注意喚起音の音像の位置、P…運転者(操縦者)、T1~T3…対象物。

Claims (5)

  1. 移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置と、
    前記投光装置により、前記視覚表示として、所定の注意喚起表示を前記フロントガラスに出力させる表示制御部と、
    前記移動体の前方に存在する対象物を認識する対象物認識部と、を備え、
    前記表示制御部は、
    前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を、前記投光装置により前記フロントガラスに出力させ、
    前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起表示の長さが、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記投光装置により前記注意喚起表示を前記フロントガラスに出力させる
    注意喚起システム。
  2. 前記表示制御部は、前記対象物認識部により前記対象物が認識されていない状態が所定時間以上継続したときに、前記投光装置による前記注意喚起表示の出力態様を変化させる
    請求項1に記載の注意喚起システム。
  3. 前記対象物認識部により前記対象物が認識されているときに、前記移動体に対する前記対象物の影響度合を認識する影響度合認識部を備え、
    前記表示制御部は、前記影響度合に応じて、前記投光装置による前記注意喚起表示の出力態様を設定する
    請求項1又は請求項2に記載の注意喚起システム。
  4. 前記移動体に備えられた複数のスピーカーの出力態様を制御して、前記操縦者により知覚される所定の注意喚起音の音像の位置を変更する音像定位制御部を備え、
    前記音像定位制御部は、
    前記対象物認識部により前記対象物が認識されていないときは、前記注意喚起音の音像の位置を前記操縦者の周囲の所定範囲とし、
    前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、前記注意喚起音の音像の位置の範囲を、前記所定範囲から、前記操縦者から前記対象物への方向に向かって漸減させる
    請求項1から請求項3のうちいずれか1項に記載の注意喚起システム。
  5. 移動体の前方に存在する対象物を認識する対象物認識部での認識結果を取得し、
    移動体のフロントガラスに、前記移動体の操縦者により視認可能な視覚表示を出力する投光装置に対して、前記視覚表示として前記認識結果に応じた所定の注意喚起表示を表示させる命令を出力するコントローラに実行させるプログラムであって、
    前記コントローラに、
    前記対象物認識部により前記対象物が認識されていないときは、前記移動体の幅方向に前記フロントガラスの幅に応じた所定長さを有する線状の前記注意喚起表示を表示させる命令を前記投光装置に出力し、
    前記対象物認識部により前記対象物が認識されていない状態から、前記対象物認識部により前記対象物が認識されている状態に移行したときに、線状の前記注意喚起表示の長さが、前記所定長さから、前記操縦者から前記対象物への方向と前記フロントガラスが交差する位置に向かって漸減するように、前記注意喚起表示を表示させる命令を、前記投光装置に出力する
    処理を実行させる制御用プログラム。
JP2021159821A 2021-09-29 2021-09-29 注意喚起システム、及び制御用プログラム Active JP7555895B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2021159821A JP7555895B2 (ja) 2021-09-29 2021-09-29 注意喚起システム、及び制御用プログラム
CN202211136262.1A CN115871454B (zh) 2021-09-29 2022-09-19 注意提醒系统以及记录介质
US17/951,466 US12252149B2 (en) 2021-09-29 2022-09-23 Alert system and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021159821A JP7555895B2 (ja) 2021-09-29 2021-09-29 注意喚起システム、及び制御用プログラム

Publications (2)

Publication Number Publication Date
JP2023049832A JP2023049832A (ja) 2023-04-10
JP7555895B2 true JP7555895B2 (ja) 2024-09-25

Family

ID=85769881

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021159821A Active JP7555895B2 (ja) 2021-09-29 2021-09-29 注意喚起システム、及び制御用プログラム

Country Status (3)

Country Link
US (1) US12252149B2 (ja)
JP (1) JP7555895B2 (ja)
CN (1) CN115871454B (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003291688A (ja) 2002-04-03 2003-10-15 Denso Corp 表示方法、運転支援装置、プログラム
WO2013011588A1 (ja) 2011-07-21 2013-01-24 トヨタ自動車株式会社 車両用情報伝達装置
JP2016196289A (ja) 2015-04-03 2016-11-24 株式会社デンソー 情報提示装置
WO2019166102A1 (en) 2018-03-02 2019-09-06 Toyota Motor Europe Driver attention system
JP2020154795A (ja) 2019-03-20 2020-09-24 パナソニックIpマネジメント株式会社 出力制御装置、出力制御方法、および出力制御プログラム

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008062762A (ja) * 2006-09-06 2008-03-21 Fujitsu Ten Ltd 運転支援装置および運転支援方法
JP2009217682A (ja) * 2008-03-12 2009-09-24 Yazaki Corp 車両用表示装置
WO2013088535A1 (ja) * 2011-12-14 2013-06-20 トヨタ自動車株式会社 車両用情報伝達装置
WO2015037117A1 (ja) * 2013-09-13 2015-03-19 日立マクセル株式会社 情報表示システム及び情報表示装置
CN106660495B (zh) * 2014-07-01 2020-02-18 日产自动车株式会社 车辆用显示装置以及车辆用显示方法
CN106470877B (zh) * 2014-07-01 2019-12-27 日产自动车株式会社 车辆用显示装置以及车辆用显示方法
JP6379779B2 (ja) * 2014-07-16 2018-08-29 日産自動車株式会社 車両用表示装置
JP6528139B2 (ja) * 2014-10-29 2019-06-12 パナソニックIpマネジメント株式会社 表示制御装置及び表示制御プログラム
JP2017021546A (ja) 2015-07-10 2017-01-26 田山 修一 車輌用画像表示システム及び方法
WO2017022047A1 (ja) * 2015-08-03 2017-02-09 三菱電機株式会社 表示制御装置、表示装置及び表示制御方法
JP2017056747A (ja) * 2015-09-14 2017-03-23 三菱電機株式会社 表示制御装置、表示装置および音像位置制御方法
JP6551377B2 (ja) * 2016-12-15 2019-07-31 トヨタ自動車株式会社 車両用注意喚起装置
CN116620019A (zh) * 2017-11-14 2023-08-22 麦克赛尔株式会社 平视显示装置和车辆
US10448180B1 (en) * 2018-11-01 2019-10-15 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for vehicle external audio volume indication and control of the same
JP7354649B2 (ja) * 2019-07-26 2023-10-03 株式会社アイシン 周辺監視装置
US11104269B2 (en) * 2019-10-17 2021-08-31 Zoox, Inc. Dynamic vehicle warning signal emission
JP6979096B2 (ja) * 2020-02-28 2021-12-08 本田技研工業株式会社 注意喚起装置、及び注意喚起方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003291688A (ja) 2002-04-03 2003-10-15 Denso Corp 表示方法、運転支援装置、プログラム
WO2013011588A1 (ja) 2011-07-21 2013-01-24 トヨタ自動車株式会社 車両用情報伝達装置
JP2016196289A (ja) 2015-04-03 2016-11-24 株式会社デンソー 情報提示装置
WO2019166102A1 (en) 2018-03-02 2019-09-06 Toyota Motor Europe Driver attention system
JP2020154795A (ja) 2019-03-20 2020-09-24 パナソニックIpマネジメント株式会社 出力制御装置、出力制御方法、および出力制御プログラム

Also Published As

Publication number Publication date
CN115871454B (zh) 2025-12-23
CN115871454A (zh) 2023-03-31
US20230112294A1 (en) 2023-04-13
JP2023049832A (ja) 2023-04-10
US12252149B2 (en) 2025-03-18

Similar Documents

Publication Publication Date Title
US20160082840A1 (en) Information display system and information display device
JP5121737B2 (ja) 画像データにおいて重要対象物を識別するためのバーチャルスポットライト
JP5742937B2 (ja) 車両用視界支援装置
CN106794792B (zh) 车辆用路面绘制系统
US8009977B2 (en) On-vehicle lighting apparatus
KR102071155B1 (ko) 차량용 표시 장치 및 차량용 표시 방법
US10189402B2 (en) Illumination apparatus for vehicle
US9815408B2 (en) Method for operating a rearview camera system of a motor vehicle after detection of a headlight flasher, rearview camera system and motor vehicle
US20110301846A1 (en) Vehicle perimeter monitor
US9262920B2 (en) Methods and devices for outputting information in a motor vehicle
WO2018008061A1 (ja) 表示制御方法および表示制御装置
KR20160136722A (ko) 헤드램프 눈부심 방지 장치 및 이를 이용한 눈부심 방지 방법
KR20200013521A (ko) 차량 및 차량의 제어방법
CN108349424A (zh) 扫描车头灯、扫描车头灯的控制方法及程序
US11447139B2 (en) Driving assistance apparatus
JP2019011051A (ja) 自動車向けの光システム
US12337862B2 (en) Visual guidance device, attention calling system, attention calling method, and program
JP2011087006A (ja) 車両用表示装置
JP7555895B2 (ja) 注意喚起システム、及び制御用プログラム
US10102826B2 (en) Method for operating a display device for a vehicle
JP7584382B2 (ja) 注意喚起システム、及び制御用プログラム
JP6187775B2 (ja) ヘッドライトの制御装置
JP2006226682A (ja) 車両の赤外線撮影表示装置及び赤外線撮影表示方法
JP2016005923A (ja) 車両用投射装置
JP2013171390A (ja) 運転支援装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211215

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20231221

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20231221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240724

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240820

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240911

R150 Certificate of patent or registration of utility model

Ref document number: 7555895

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150