JP2005296570A - System and device for guiding visually impaired person - Google Patents
System and device for guiding visually impaired person Download PDFInfo
- Publication number
- JP2005296570A JP2005296570A JP2004144209A JP2004144209A JP2005296570A JP 2005296570 A JP2005296570 A JP 2005296570A JP 2004144209 A JP2004144209 A JP 2004144209A JP 2004144209 A JP2004144209 A JP 2004144209A JP 2005296570 A JP2005296570 A JP 2005296570A
- Authority
- JP
- Japan
- Prior art keywords
- guidance
- guide line
- guide
- color
- visually impaired
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000001771 impaired effect Effects 0.000 title claims abstract description 89
- 238000001514 detection method Methods 0.000 claims description 16
- 239000003086 colorant Substances 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims 1
- 238000010191 image analysis Methods 0.000 description 11
- 238000000034 method Methods 0.000 description 11
- 230000005236 sound signal Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000010355 oscillation Effects 0.000 description 2
- 206010047571 Visual impairment Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 208000029257 vision disease Diseases 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
Images
Landscapes
- Navigation (AREA)
- Image Input (AREA)
- Image Processing (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
この発明は、視覚障害者案内システムおよび視覚障害者案内装置に関し、特に、視覚障害者を所定の案内開始地点から所望の案内目的地点まで安全かつ適切に案内することができるようにした視覚障害者案内システムおよび視覚障害者案内装置に関する。 The present invention relates to a visually handicapped person guidance system and a visually handicapped person guidance device, and in particular, a visually handicapped person capable of safely and appropriately guiding a visually handicapped person from a predetermined guidance start point to a desired guidance destination point. The present invention relates to a guidance system and a visually impaired person guidance apparatus.
従来、視覚障害者等を安全に案内する視覚障害者案内システムとしては、特許文献1、特許文献2、特許文献3に開示されたもの等が知られている。
ここで、特許文献1には、天井に設けた受信装置により杖部から同時に送信される赤外線信号および超音波信号をそれぞれ受信して杖部の位置を検出し、誘導案内サーバーは検出した杖部の位置に基づく誘導案内情報を送受信装置から携帯端末部へ送信し、利用者は携帯端末部のイヤフォンから音声出力される誘導案内情報に従って目的の場所まで移動することができるようにした誘導案内システムが記載されている。
また、特許文献2には、センタ装置によって、各情報提供装置の案内情報を更新させながら、各視覚障害者が各情報提供装置の通信範囲内に入っているとき、各情報提供装置によって、各視覚障害者の携帯端末装置に案内情報を供給させ、音声形式で、各視覚障害者に案内情報を伝えさせるとともに、誘導ブロック装置によって、各視覚障害者に現在位置、進行方向などを知らせるようにした歩行者支援システムが記載されている。
また、特許文献3には、固有の位置情報データが保存された電子式データキャリア装置であるトランスポンダを所定間隔で地面に連続的に埋設配列しておき、それぞれのトランスポンダから発信される位置情報データを、リーダを介して前記トランスポンダと非接触状態で受信するPFIDシステムにより、前記リーダで受信された前記位置情報データを、携帯情報端末からヘッドホンを介して音声出力し、視覚障害者に提供するようにした視覚障害者誘導システムが記載されている。
Here, in Patent Document 1, an infrared signal and an ultrasonic signal that are simultaneously transmitted from the wand unit by a receiving device provided on the ceiling are received to detect the position of the wand unit, and the guidance guide server detects the detected wand unit. Guide guidance information based on the position of the user is transmitted from the transmission / reception device to the portable terminal unit, and the user can move to the target location according to the guidance guidance information output from the earphone of the portable terminal unit. Is described.
Further, in Patent Literature 2, when each visually handicapped person is within the communication range of each information providing device while the guide information of each information providing device is updated by the center device, each information providing device The guidance information is supplied to the visually impaired person's mobile terminal device, and the guidance information is transmitted to each visually impaired person in a voice format, and the current position, the traveling direction, etc. are notified to each visually impaired person by the guidance block device. A pedestrian support system is described.
Further, in Patent Document 3, transponders that are electronic data carrier devices storing unique position information data are continuously embedded in the ground at predetermined intervals, and position information data transmitted from the respective transponders. In a non-contact state with the transponder via a reader, the position information data received by the reader is output as audio from a portable information terminal via headphones and provided to a visually impaired person A visually impaired person guidance system is described.
しかしながら、特許文献1に開示された誘導案内システムにおいては、杖部の位置を検出するために、杖部から送信される赤外線信号および超音波信号をそれぞれ受信する受信装置を天井に複数設ける必要があり、また、この検出した杖部の位置に基づく誘導案内情報を送受信装置から携帯端末部へ送信するための構成が必要になるので、システム全体が複雑かつ高価になる。
また、特許文献2に開示された歩行者支援システムにおいては、各視覚障害者が各情報提供装置の通信範囲内に入っているとき各視覚障害者の携帯端末装置に案内情報を供給させる情報提供装置を複数配置する必要があるとともに、各視覚障害者に現在位置、進行方向などを知らせるようにした誘導ブロック装置も複数配置する必要がありこのシステムも安価には構成できない。
また、特許文献3に記載の視覚障害者誘導システムにおいては、固有の位置情報データが保存された電子式データキャリア装置であるトランスポンダを所定間隔で地面に連続的に埋設配列して、それぞれのトランスポンダから発信される位置情報データをPFIDシステムにより非接触状態で受信することにより、位置情報データを視覚障害者に携帯情報端末からヘッドホンを介して音声出力することで、視覚障害者を誘導するもので、このシステムも、複数のトランスポンダを埋設配列する必要があり、システムが高価になる。
また、特許文献1乃至3に記載されたものは、いずれも視覚障害者が予め選択した目的地に対しての選択的な案内はできない。
そこで、この発明は、非常に安価な構成で、視覚障害者を所定の案内開始地点から視覚障害者が選択した所望の案内目的地点まで安全かつ適切に案内することができるようにした視覚障害者案内システムおよび視覚障害者案内装置を提供することを目的とする。However, in the guidance and guidance system disclosed in Patent Document 1, in order to detect the position of the cane part, it is necessary to provide a plurality of receiving devices on the ceiling for receiving the infrared signal and the ultrasonic signal transmitted from the cane part, respectively. In addition, since a configuration for transmitting the guidance information based on the detected position of the cane from the transmission / reception device to the portable terminal is required, the entire system becomes complicated and expensive.
In addition, in the pedestrian support system disclosed in Patent Document 2, when each visually handicapped person is within the communication range of each information providing apparatus, information is provided to supply guidance information to the mobile terminal device of each visually handicapped person. It is necessary to arrange a plurality of devices, and it is also necessary to arrange a plurality of guidance block devices that inform each visually handicapped person of the current position, the traveling direction, etc. This system cannot be configured at low cost.
In the visually impaired person guidance system described in Patent Document 3, transponders, which are electronic data carrier devices storing unique position information data, are continuously embedded in the ground at predetermined intervals, and the respective transponders are arranged. The position information data transmitted from the mobile phone is received in a non-contact state by the PFID system, and the position information data is output to the visually handicapped person from the portable information terminal through headphones, thereby guiding the visually handicapped person. This system also requires a plurality of transponders to be embedded and the system becomes expensive.
In addition, any of those described in Patent Documents 1 to 3 cannot provide selective guidance to a destination previously selected by a visually impaired person.
Accordingly, the present invention provides a visually impaired person who can guide a visually handicapped person safely and appropriately from a predetermined guidance start point to a desired guidance destination point selected by the visually handicapped person with a very inexpensive configuration. An object is to provide a guidance system and a visually impaired person guidance apparatus.
上記目的を達成するため、請求項1の発明の視覚障害者案内システムは、所定の案内開始地点から所望の案内目的地点までの間の通行可能な経路上に所定の色の案内ラインを描くとともに、視覚障害者は、前記案内ラインの所定の色を選択的に識別する色識別手段を有する視覚障害者案内装置を携帯し、前記視覚障害者案内装置により前記経路上の所定の色の案内ラインを選択的に識別しながら該所定の色の案内ラインに沿って進行することにより前記視覚障害者を前記案内開始地点から前記所望の案内目的地点まで案内することを特徴とする。
また、請求項2の発明は、請求項1の発明において、前記視覚障害者案内装置は、前記案内ラインの所定の色を設定する案内ライン色設定手段と、前記案内ライン色設定手段で設定された所定の色の前記案内ラインを選択的に検出する案内ライン検出手段と、前記案内ライン検出手段の検出出力に基づき前記案内ラインからの外れを前記視覚障害者に報知することにより前記視覚障害者を前記特定の色の案内ラインに沿って案内する案内手段とを具備することを特徴とする。
また、請求項3の発明は、請求項1または2の発明において、前記案内ライン上の特定の位置に所定の案内情報を発生する1または複数の案内情報発生手段を配置し、前記視覚障害者案内装置は、前記案内情報発生手段から発生される前記案内情報を該特定の位置の近傍において取得し、該取得した前記案内情報を前記視覚障害者に報知することを特徴とする
また、請求項4の発明は、請求項1乃至3のいずれかの発明において、所定の案内開始地点から複数の所望の案内目的地点までの間の通行可能な経路上にそれぞれ異なる色の案内ラインを描き、前記視覚障害者案内装置は、前記経路上の特定の色の案内ラインを選択的に識別しながら該特定の色の案内ラインに沿って進行することにより前記視覚障害者を前記案内開始地点から前記特定の色の案内ラインに対応する所望の案内目的地点まで案内することを特徴とする。
また、請求項5の発明は、所定の案内開始地点から複数の所望の案内目的地点までの間の通行可能な経路上に描かれた所定の色の案内ラインに沿って視覚障害者を案内する視覚障害者が携帯可能な視覚障害者案内装置であって、前記案内ラインの所定の色を設定する案内ライン色設定手段と、前記案内ライン色設定手段で設定された所定の色の前記案内ラインを選択的に検出する案内ライン検出手段と、前記案内ライン検出手段の検出出力に基づき前記案内ラインからの外れを前記視覚障害者に報知することにより前記視覚障害者を前記特定の色の案内ラインに沿って案内する案内手段とを具備することを特徴とする。
また、請求項6の発明は、請求項5の発明において、前記案内ライン上の特定の位置に配設された所定の案内情報を発生する案内情報発生手段から該特定の位置の近傍において取得する案内情報取得手段と、前記案内情報取得手段で取得した案内情報を前記視覚障害者に報知する案内情報報知手段とを更に具備することを特徴とする。
また、請求項7の発明は、請求項6の発明において、前記案内情報発生手段は、前記案内ライン上の特定の位置に前記所定の色若しくは他の色で描かれた光学的に読み取り可能なコード情報を含み、前記案内情報報知手段は、前記特定の位置において前記コード情報を読み取ることにより該コード情報に対応する前記所定の案内情報を前記視覚障害者に報知することを特徴とする。
また、請求項8の発明は、請求項5乃至7のいずれかの発明において、所定の案内開始地点から複数の所望の案内目的地点までの間の通行可能な経路上にそれぞれ異なる色の案内ラインが描かれ、前記案内ライン色設定手段は、前記案内ラインの特定の色を設定し、前記案内ライン検出手段は、前記案内ライン色設定手段で設定された特定の色の案内ラインを選択的に検出することを特徴とする。In order to achieve the above object, the visually impaired person guidance system according to the first aspect of the present invention draws a guide line of a predetermined color on a passable route from a predetermined guidance start point to a desired guidance destination point. The visually handicapped person carries a visually impaired person guidance device having color identification means for selectively identifying a prescribed color of the guidance line, and the visually impaired person guidance device guides the prescribed color on the route. The visually impaired person is guided from the guidance start point to the desired guidance destination point by proceeding along the guide line of the predetermined color while selectively identifying.
According to a second aspect of the present invention, in the first aspect of the invention, the visually impaired person guidance device is set by a guide line color setting means for setting a predetermined color of the guide line and the guide line color setting means. The guide line detecting means for selectively detecting the guide line of a predetermined color, and the visually impaired person by notifying the visually impaired person of the deviation from the guide line based on the detection output of the guide line detecting means. And guiding means for guiding the guide along the guide line of the specific color.
The invention of claim 3 is the invention of claim 1 or 2, wherein one or more guide information generating means for generating predetermined guide information is arranged at a specific position on the guide line, and the visually impaired person The guide device acquires the guide information generated from the guide information generating unit in the vicinity of the specific position, and notifies the acquired guide information to the visually impaired person. According to a fourth aspect of the present invention, in the invention according to any one of the first to third aspects, the guide lines of different colors are drawn on the accessible routes from a predetermined guidance start point to a plurality of desired guidance destination points. The visually-impaired person guidance device moves the visually-impaired person from the guidance start point to the special-purpose person by proceeding along the guidance line of the particular color while selectively identifying the guidance line of the particular color on the route. Guide to a desired guide destination point corresponding to a guide line of a fixed color.
Further, the invention of claim 5 guides a visually impaired person along a guide line of a predetermined color drawn on a passable route from a predetermined guide start point to a plurality of desired guide destination points. A visually-impaired person guidance device that can be carried by a visually-impaired person, the guide line color setting means for setting a predetermined color of the guide line, and the guide line of the predetermined color set by the guide line color setting means A guide line detecting means for selectively detecting the visually impaired person based on a detection output of the guide line detecting means, and notifying the visually impaired person of the visually impaired person by the notice line. And guiding means for guiding along the line.
According to a sixth aspect of the present invention, in the fifth aspect of the present invention, the information is obtained in the vicinity of the specific position from the guide information generating means for generating predetermined guide information arranged at the specific position on the guide line. It further comprises guide information acquisition means and guide information notification means for notifying the visually impaired of the guide information acquired by the guide information acquisition means.
Further, the invention according to claim 7 is the invention according to claim 6, wherein the guide information generating means is optically readable drawn in the predetermined color or another color at a specific position on the guide line. The guide information notification means includes code information, and reads the code information at the specific position to notify the visually impaired person of the predetermined guide information corresponding to the code information.
The invention of claim 8 is the invention according to any one of claims 5 to 7, wherein guide lines of different colors are provided on a route that can be passed from a predetermined guidance start point to a plurality of desired guidance destination points. The guide line color setting means sets a specific color of the guide line, and the guide line detection means selectively selects the guide line of the specific color set by the guide line color setting means. It is characterized by detecting.
この発明によれば、所定の案内開始地点から所望の案内目的地点までの間の通行可能な経路上に所定の色の案内ラインを描くとともに、視覚障害者は、案内ラインの所定の色を選択的に識別する色識別手段を有する視覚障害者案内装置を携帯し、視覚障害者案内装置により経路上の所定の色の案内ラインを選択的に識別しながら該所定の色の案内ラインに沿って進行することにより視覚障害者を案内開始地点から所望の案内目的地点まで案内するように構成したので、非常に安価な構成で視覚障害者を安全かつ適切に案内することができるシステムを構築することができるという効果を奏する。 According to the present invention, the guide line of the predetermined color is drawn on the route that can be passed from the predetermined guide start point to the desired guide destination point, and the visually impaired person selects the predetermined color of the guide line. A visually-impaired person guidance device having color identifying means for visually identifying is carried along the guide line of the predetermined color while selectively identifying the guide line of the predetermined color on the route by the visually-impaired person guidance device. Since it is configured to guide a visually handicapped person from a guidance start point to a desired guidance destination point by proceeding, a system that can guide a visually handicapped person safely and appropriately with a very inexpensive configuration is constructed. There is an effect that can be.
以下、この発明に係わる視覚障害者案内システムおよび視覚障害者案内装置の実施例を添付図面を参照して詳細に説明する。
図1は、この発明に係わる視覚障害者案内システムによる案内エリアの一例を示す図である。
図1に示す案内エリアは、例えば、大規模店舗内の案内エリアを示している。
この実施例に係わる視覚障害者案内システムにおいては、視覚障害者を複数の商品販売ゾーン12−1〜12−6の間の通路を経て目的の商品販売場等の地点A,B,C…等に案内するもので、大規模店舗の床100には、視覚障害者を案内するための、例えば白の案内ライン10が描かれている。
そして、この白の案内ライン10上には、視覚障害者に所定の案内情報を提供するための複数のポイントP0〜P27が設けられている。
ここで、ポイントP0〜P27は、案内ライン10が分岐する地点若しくは商品販売ゾーン12−1〜12−6に関連して商品販売情報等を視覚障害者に提供する地点等に設けられており、この実施例においては、図2に示すように、このポイントP0〜P27に視覚障害者に所定の案内情報を提供するための識別コードがバーコードBCで描かれている。
このバーコードBCは、案内ライン10の色と同色の白で描かれていているが、白以外の光学的に識別可能な他の色で描かれていてもよいし、バーコードBC以外の他の識別手法で描かれたものでもよい。
また、このポイントP0〜P27には、所定の識別情報を発生する発振コイル、超音波発振器等が埋め込まれていてもよい。
さて、この実施例の視覚障害者案内システムにおいては、案内カウンタ11で視覚障害者に貸与された図3に示すような色識別ステッキ30を用いて視覚障害者を案内開始地点から案内目的地点まで案内する。
図3に示す色識別ステッキ30は、電池32を電源として駆動され、視覚障害者が携帯することで、図1に示した白の案内ライン10に沿った歩行を可能にするもので、その先端にカメラ部31が埋め込まれており、このカメラ部31の撮像画像を案内制御部33で処理して出力部34から音声案内信号を無線で出力するように構成されている。
この出力部34から無線で出力された音声案内信号は、視覚障害者が装着した無線機で受信されイヤホンから視覚障害者に所定の案内情報を音声で提供する。
図4は、図3に示した色識別ステッキ30の内部構成を示すブロック図である。
図4において、カメラ部31は、白の案内ライン10が描かれた床100を照明する照明部312、この照明部312で照明された白の案内ライン10を含む画像を撮像するカメラ311から構成される。ここで、カメラ311は、例えば、カラーCCDカメラを用いることができる。
カメラ311で撮像された白の案内ライン10を含む画像は、案内制御部33に入力される。
案内制御部33は、このカメラ311で撮像された画像に基づき視覚障害者に提供する所定の音声案内情報を形成するもので、目的地設定部331、ルート決定部332、画像解析部333、案内ライン検出部334、コード情報読取部335、音声信号生成部336を具備して構成される。
ここで、目的地設定部331は、視覚障害者を案内する案内目的地点、例えば、図1に示した地点A、地点B、地点C等を設定するものである。この案内目的地点の設定は、図3に示した色識別ステッキ30に設けられた図示しない入力部を用いて設定することができる。なお、色識別ステッキ30に設けらた入力部を用いて直接設定する代わりに、案内カウンタ11でこの色識別ステッキ30を視覚障害者に貸与するときにオペレータが視覚障害者の目的地を聴取して設定するようにしてもよい。
ルート決定部332は、目的地設定部331で設定された案内目的地点に対応して案内開始地点から案内目的地点までのルートを決定する。このルート決定部332は、例えば、図5に示すようなルート決定テーブルを用いて行われる。
図5に示すルート決定テーブルは、目的地点A,B,C…に対応して案内開始地点から目的地点までのルートを通過ポイント情報で表している。例えば、目的地が地点Aであると、このルート決定テーブルにより決定される案内開始地点から目的地点までのルートは、図1に示すポイントP0を案内開始地点としてポイントP1,P5,P9,P13,P12を通過してポイントP16を案内目的地点とするルートとなる。
ここで、図5に示すルート決定テーブルは、視覚障害者の安全を考慮して視覚障害者にとって通行が容易でかつ最短のルートが予め設定されている。
画像解析部333は、カメラ311で撮像した画像を解析して、案内ライン10の画像を抽出するとともに各ポイントPの配置地点においてはこのポイントPに描かれたバーコードBCの画像を抽出する。
ここで、画像解析部333による案内ライン10の抽出は、予め設定されている案内ライン10の色情報に基づき行われる。
また、ポイントPに描かれたバーコードBCの画像の抽出も、予め設定されている案内ライン10の色情報若しくはバーコードBCに用いられている特定の色情報に基づき行われる。
案内ライン検出部334は、画像解析部333で解析抽出された案内ライン10の画像に基づき案内ライン10上にいる否か、案内ライン10から右方向に外れたか、案内ライン10から左方向に外れたか等の検出を行う。
ここで、案内ライン10から右方向に外れたかの検出は、カメラ311で撮像した画面上で案内ライン10の画像が右端になった場合に検出され、案内ライン10から左方向に外れたかの検出は、カメラ311で撮像した画面上で案内ライン10の画像が左端になった場合に検出される。
コード情報読取部335は、画像解析部333で解析抽出された各ポイントPに描かれたバーコードBCの画像からコード情報を読み取る。
このコード情報は、各ポイントPに対応するもので、このコード情報および設定された案内目的地点の情報に対応して所定の案内情報が予め設定されている。
音声信号生成部336は、案内ライン検出部334の検出出力に基づき、視覚障害者を案内ライン10に沿って歩行させるための音声案内信号を形成するとともに、ルート決定部332で決定された案内開始地点から案内目的地点までのルートおよびコード情報読取部335で読み取ったコード情報に基づき各ポイントPで視覚障害者に有用な案内情報を提供するための音声信号を形成する。
例えば、視覚障害者を案内ライン10に沿って歩行させるための音声案内信号としては、「左移動を指示する音声」、「右移動を指示する音声」、「直進を指示する音声」、「案内ライン10から外れたことを報知する音声」等に対応するものである。
また、各ポイントPで視覚障害者に有用な案内情報を提供するための音声信号とは、「案内開始を報知する音声」、「案内目的地点到着を報知する音声」、「各ポイントにおいて視覚障害者が歩行できるようにするための警告を行う音声」、「各ポイントの近傍の販売商品の広告情報に関する音声」等に対応するものである。
出力部34は、音声信号生成部336で生成された音声信号を増幅する増幅器341、増幅器341の出力無線で送出する無線送信部342を具備して構成される。
無線機40は、この色識別ステッキ30を用いて案内される視覚障害者に装着されるもので、無線送信部342から無線送信された音声信号を受信する無線受信部41、無線受信部41で受信された音声信号に対応する音声をこの色識別ステッキ30を用いて案内される視覚障害者に提供するイヤホン42を具備して構成される。
なお、図4に示した構成においては、色識別ステッキ30と無線機40との間を無線接続するように構成したが、出力部34の増幅器34の出力を直接イヤホン42に接続するように構成してもよい。
また、上記構成においては、音声により視覚障害者を案内するように構成したが、振動、光等により所定の案内情報を視覚障害者に提供するように構成してもよい。
また、各ポイントPにおける案内情報は、各ポイントに描かれたバーコードBCに基づき取得するように構成したが、各ポイントに埋め込まれた発振コイル、超音波発振器等の出力に基づき取得するように構成してもよい。
上記構成において、視覚障害者を案内開始地点であるポイントP0から案内目的地点である地点Bまでの案内を行う場合を考えると、まず、案内開始地点の近傍の案内カウンタ11で、案内目的地点が地点Bであることを告げて、色識別ステッキ30の貸与を受ける。この状態で、色識別ステッキ30の目的地設定部331には、案内目的地点が地点Bであると設定される。
この色識別ステッキ30を携帯する視覚障害者は、まず、ポイントP0において、ポイントP0に描かれたバーコードBCを色識別ステッキ30を用いて取得する。これにより色識別ステッキ30は、このバーコードBCに基づき案内目的地点Bへの案内を開始する旨の音声を視覚障害者に提供する。
そして、視覚障害者は、貸与された色識別ステッキ30を携帯して、その音声案内にしたがって案内ライン10上を歩行する。
そして、ポイントP1に達すると、ポイントP1に描かれたバーコードBCを色識別ステッキ30を用いて取得する。これにより色識別ステッキ30は、視覚障害者に対して右に曲がる旨の指示を音声により行う。
その後、ポイントP5およびP9を通過するが、ここでは、各ポイントで取得したバーコードBCに基づき視覚障害者に対して安全な歩行を確保するための情報、例えば、「段差があります」等の情報を報知する。
視覚障害者が、ポイントP13に達すると、ポイントP13に描かれたバーコードBCを色識別ステッキ30を用いて取得し、これにより色識別ステッキ30は、視覚障害者に対して左に曲がる旨の指示を音声により行う。
次に、視覚障害者が、ポイントP14に達すると、ポイントP14に描かれたバーコードBCを色識別ステッキ30を用いて取得し、これにより色識別ステッキ30は、視覚障害者に対して右に曲がる旨の指示を音声により行う。
そして、視覚障害者が、ポイントP18を通過してポイントP22に達すると、ポイントP22に描かれたバーコードBCを色識別ステッキ30を用いて取得し、これにより視覚障害者に対して案内目的地点に達したことおよび案内目的地点はこの地点の右側であることを音声により報知して案内を終了する。
図6は、色識別ステッキ30を用いて案内ライン10に沿って歩行する場合の音声案内処理を示すフローチャートである。
図6において、まず、画像解析部333でカメラ311の撮像画像の解析を行い、案内ライン311の画像を抽出する(ステップ601)。
次に、画像解析部333で抽出した画像に案内ライン10の画像が含まれているかを判別する(ステップ602)。ここで、案内ライン10の画像が含まれていると判別されると(ステップ602でYES)、次に、案内ラインは右外れか、すなわち、カメラ311の撮像画面で案内ライン10の画像が右端にあるかを判断する(ステップ603)。
ここで、案内ラインは右外れであると判断された場合は(ステップ603でYES)、この色識別ステッキ30を携帯する視覚障害者を案内ライン10上に復帰させるべく左移動を指示し(ステップ604)、この処理を終了する。
また、ステップ603で、案内ラインは右外れでないと判断されると(ステップ603でNO)、次に、案内ラインは左外れか、すなわち、カメラ311の撮像画面で案内ライン10の画像が左端にあるかを判断する(ステップ605)。
ここで、案内ラインは左外れであると判断された場合は(ステップ605でYES)、この色識別ステッキ30を携帯する視覚障害者を案内ライン10上に復帰させるべく右移動を指示し(ステップ606)、この処理を終了する。
また、ステップ605で、案内ラインは左外れでないと判断されると(ステップ605でNO)、この場合は、視覚障害者が案内ライン10上にいるので、直進を指示し(ステップ507)、この処理を終了する。
また、ステップ602で、画像解析部333で抽出した画像に案内ライン10の画像が含まれていないと判断された場合は(ステップ602でNO)、案内ライン外れを報知して(ステップ508)、この色識別ステッキ30を携帯する視覚障害者を案内ライン10上に復帰するように促し、この処理を終了する。
上記処理は、所定の時間間隔で繰り返し実行され、これによりこの色識別ステッキ30を携帯する視覚障害者を案内ライン10に沿って歩行させることができる。
図7は、案内ライン10上に設けられたポイントPを用いた案内処理を示すフローチャートである。
図7において、まず、案内目的地点が設定されると(ステップ701)、この設定された案内目的地点に対応するN個の通過ポイント情報を図5に示したルート決定テーブルから取得する(ステップ702)。ここで、設定された案内目的地点が図1に示す地点Cである場合、通過ポイントがP0,P1,P2,P3,P7,P11であるので、N=6である。
次に、n=1に設定して(ステップ603)、ポイント検出かを調べる(ステップ604)、そして、案内開始地点の最初のポイントP0を検出すると(ステップ604でYES)、カメラ311で撮像した画像情報からコード情報を読み取り(ステップ605)、この読み取ったコード情報に対応する案内情報を報知する(ステップ606)。
その後、n=n+1にインクリメントし(ステップ607)、nが案内目的地点までに通過するポイントの数Nに達したかを調べ(ステップ608)、達していないと(ステップ608でNO)、ステップ604に戻り、ステップ604からステップ608の処理を繰り返す。
そして、ステップ608で、nが案内目的地点までに通過するポイントの数Nに達したと判断されると(ステップ608でYES)、案内目的地点に達したので、目的地点到達の旨の報知を行い(ステップ609)、この処理を終了する。
なお上記実施例においては、所定の一色の案内ライン10を用いて視覚障害者を案内開始地点から案内目的地点まで案内する構成を示したが、各案内目的地点に対応してそれぞれ異なる色の案内ラインを用いて案内を行うように構成してもよい。
図8は、このように構成した場合の案内エリアの一例を示す図である。
図8に示す案内エリアも、例えば、大規模店舗内の案内エリアを示しており、この実施例に係わる視覚障害者案内システムにおいても、視覚障害者を複数の商品販売ゾーン22−1〜22−8の間の通路を経て目的の地点AA,BB,CC…等に案内するものである。
ただし、この実施例においては、床200に、視覚障害者を案内するための、目的の地点AA,BB,CC…にそれぞれ対応するそれぞれ異なる色の案内ライン20−1、20−2、20−3…が描かれている。
この構成によると、図4に示した目的地設定部331で設定した案内目的地点に対応して、この案内目的地点までの案内に用いる案内ラインの色を設定する。
そして、画像解析処理部333では、この設定した色に対応する案内ラインの色情報に基づき案内ラインを抽出する。
例えば、案内目的地点がAAである場合は、案内ライン20−1の色、例えば、黄色を設定し、画像解析処理部333では、この設定した黄色の案内ラインを抽出する。
このような構成によると、案内ラインの色の指定だけで、視覚障害者を案内目的地点まで案内することが可能になる。
なお、図8においては、異なる色の複数の案内ライン20−1、20−2、20−3…とともに、各案内ライン上に複数のポイントP01〜P43を設けているが、このポイントP01〜P43はこれらので得られる案内情報を用いることにより更に安全に視覚障害者の案内をすることができるようにするためで、これらのポイントP01〜P43を設けなくとも、視覚障害者を案内開始地点から案内目的地点まで案内することが可能になる。
なお、上記実施例においては、色識別ステッキを用いて案内を行うように構成したが、この色識別ステッキの代わりに色識別機能を有する携帯若しくは装着可能な装置を用いても同様に構成することができる。
また、上記実施例においては、いずれも案内エリアが大規模店舗内である場合について示したが、この発明は、病院内、空港内、各種展示会場内等の案内にも同様に適用可能である。Embodiments of a visually handicapped person guidance system and a visually handicapped person guidance apparatus according to the present invention will be described below in detail with reference to the accompanying drawings.
FIG. 1 is a diagram showing an example of a guidance area by the visually impaired person guidance system according to the present invention.
The guidance area shown in FIG. 1 indicates a guidance area in a large-scale store, for example.
In the visually-impaired person guidance system according to this embodiment, the visually-impaired person passes through the passages between the plurality of product sales zones 12-1 to 12-6, and the points A, B, C,... For example, a
On the
Here, the points P0 to P27 are provided at points where the
The barcode BC is drawn in white of the same color as the color of the
In addition, at the points P0 to P27, an oscillation coil that generates predetermined identification information, an ultrasonic oscillator, or the like may be embedded.
In the visually impaired person guidance system of this embodiment, the visually impaired person is guided from the guidance start point to the guidance destination point by using a
The
The voice guidance signal output wirelessly from the
FIG. 4 is a block diagram showing the internal configuration of the
In FIG. 4, the
An image including the
The
Here, the destination setting unit 331 sets guidance destination points for guiding visually impaired persons, for example, the points A, B, and C shown in FIG. This guidance destination point can be set using an input unit (not shown) provided in the
The
The route determination table shown in FIG. 5 represents the route from the guidance start point to the destination point corresponding to the destination points A, B, C. For example, if the destination is the point A, the route from the guidance start point to the destination point determined by this route determination table is the points P1, P5, P9, P13, with the point P0 shown in FIG. The route passes through P12 and the point P16 is a guidance destination point.
Here, in the route determination table shown in FIG. 5, the shortest route that is easy for the visually impaired to pass is set in advance in consideration of the safety of the visually impaired.
The
Here, the extraction of the
Further, the extraction of the image of the barcode BC drawn at the point P is also performed based on the preset color information of the
The guide
Here, detection of whether or not the
The code
The code information corresponds to each point P, and predetermined guide information is set in advance corresponding to the code information and information on the set guide destination point.
The voice
For example, as a voice guidance signal for walking a visually handicapped person along the
The audio signals for providing guidance information useful to visually impaired persons at each point P include “audio for informing the start of guidance”, “audio for informing arrival at the guidance destination”, and “visual impairment at each point”. This corresponds to “sound that gives a warning for a person to walk”, “sound about advertisement information of sales products in the vicinity of each point”, and the like.
The
The wireless device 40 is worn by a visually handicapped person guided by using the
In the configuration shown in FIG. 4, the
In the above configuration, the visually impaired person is guided by voice. However, predetermined guidance information may be provided to the visually impaired person by vibration, light, or the like.
Further, the guide information at each point P is obtained based on the bar code BC drawn at each point, but it is obtained based on the output of an oscillation coil, an ultrasonic oscillator, etc. embedded at each point. It may be configured.
In the above-described configuration, considering that a visually impaired person is guided from point P0, which is a guidance start point, to point B, which is a guidance destination point, first, the
A visually handicapped person carrying the
The visually handicapped person carries the lent
When the point P1 is reached, the barcode BC drawn at the point P1 is acquired using the
After that, it passes through points P5 and P9. Here, information for ensuring a safe walking for visually impaired persons based on the barcode BC acquired at each point, for example, information such as “There is a step” Is notified.
When the visually handicapped person reaches the point P13, the bar code BC drawn at the point P13 is acquired by using the
Next, when the visually handicapped person reaches the point P14, the bar code BC drawn at the point P14 is acquired by using the
When the visually handicapped person passes the point P18 and reaches the point P22, the bar code BC drawn at the point P22 is obtained using the
FIG. 6 is a flowchart showing a voice guidance process when walking along the
In FIG. 6, first, the
Next, it is determined whether the image extracted by the
Here, if it is determined that the guide line is off-right (YES in step 603), the visually impaired person carrying this
If it is determined in
Here, if it is determined that the guide line is off-left (YES in step 605), the visually-impaired person carrying the
If it is determined in
If it is determined in
The above process is repeatedly executed at predetermined time intervals, whereby a visually handicapped person carrying the
FIG. 7 is a flowchart showing the guidance process using the point P provided on the
In FIG. 7, first, when a guidance destination point is set (step 701), N pieces of passing point information corresponding to the set guidance destination point are acquired from the route determination table shown in FIG. 5 (step 702). ). Here, when the set guidance destination point is point C shown in FIG. 1, since the passing points are P0, P1, P2, P3, P7, and P11, N = 6.
Next, n = 1 is set (step 603), and it is checked whether the point is detected (step 604). When the first point P0 at the guidance start point is detected (YES in step 604), the image is taken by the
Thereafter, n is incremented to n + 1 (step 607), and it is checked whether or not n has reached the number N of points passing to the guidance destination point (step 608). If not reached (NO in step 608),
If it is determined in
In the above-described embodiment, the configuration in which the visually impaired person is guided from the guidance start point to the guidance destination point using the predetermined one-
FIG. 8 is a diagram showing an example of a guidance area in the case of such a configuration.
The guidance area shown in FIG. 8 also shows, for example, a guidance area in a large-scale store. Even in the visually impaired person guidance system according to this embodiment, visually impaired persons are assigned to a plurality of product sales zones 22-1 to 22-. It guides to the target points AA, BB, CC,...
However, in this embodiment, different colored guide lines 20-1, 20-2, 20- corresponding to target points AA, BB, CC,... 3 ... is drawn.
According to this configuration, the color of the guide line used for guidance to the guidance destination point is set corresponding to the guidance destination point set by the destination setting unit 331 shown in FIG.
Then, the image
For example, when the guidance destination point is AA, the color of the guide line 20-1, for example, yellow is set, and the image
According to such a configuration, it becomes possible to guide a visually impaired person to a guidance destination point only by specifying the color of the guidance line.
In FIG. 8, a plurality of points P01 to P43 are provided on each guide line together with a plurality of guide lines 20-1, 20-2, 20-3,... Of different colors. In order to guide the visually handicapped person more safely by using the guidance information obtained from these, the visually handicapped person is guided from the guidance start point without providing these points P01 to P43. It is possible to guide to the destination point.
In the above-described embodiment, the color identification stick is used for guidance. However, instead of this color identification stick, a portable or wearable device having a color identification function may be used in the same manner. Can do.
Further, in the above-described embodiments, the case where the guidance area is in a large-scale store has been shown. However, the present invention is also applicable to guidance in hospitals, airports, various exhibition halls, and the like. .
この発明は、大規模店舗内、病院内、空港内、各種展示会場内等の案内に利用可能である。この発明によれば、所定の案内開始地点から所望の案内目的地点までの間の通行可能な経路上に所定の色の案内ラインを描くとともに、視覚障害者は、案内ラインの所定の色を選択的に識別する色識別手段を有する視覚障害者案内装置を携帯し、視覚障害者案内装置により経路上の所定の色の案内ラインを選択的に識別しながら該所定の色の案内ラインに沿って進行することにより視覚障害者を案内開始地点から所望の案内目的地点まで案内する。これによって、非常に安価な構成で視覚障害者を安全かつ適切に案内することができるシステムを構築することができる。 The present invention can be used for guidance in large-scale stores, hospitals, airports, various exhibition halls, and the like. According to the present invention, the guide line of the predetermined color is drawn on the route that can be passed from the predetermined guide start point to the desired guide destination point, and the visually impaired person selects the predetermined color of the guide line. A visually-impaired person guidance device having color identifying means for visually identifying is carried along the guide line of the predetermined color while selectively identifying the guide line of the predetermined color on the route by the visually-impaired person guidance device. By proceeding, the visually impaired person is guided from the guidance start point to the desired guidance destination point. As a result, it is possible to construct a system capable of safely and appropriately guiding a visually impaired person with a very inexpensive configuration.
10 案内ライン
11 案内カウンタ
12−1〜12−6 商品販売ゾーン
30 色識別ステッキ
31 カメラ部
32 電池
33 案内制御部
34 出力部
40 無線機
41 無線受信部
42 イヤホン
311 カメラ
312 照明部
331 目的地設定部
332 ルート決定部
333 画像解析部
334 案内ライン検出部
335 コード情報読取部
336 音声信号生成部DESCRIPTION OF
Claims (8)
視覚障害者は、前記案内ラインの所定の色を選択的に識別する色識別手段を有する視覚障害者案内装置を携帯し、
前記視覚障害者案内装置により前記経路上の所定の色の案内ラインを選択的に識別しながら該所定の色の案内ラインに沿って進行することにより前記視覚障害者を前記案内開始地点から前記所望の案内目的地点まで案内する
ことを特徴とする視覚障害者案内システム。Draw a guide line of a predetermined color on a route that can be passed from a predetermined guide start point to a desired guide destination point,
The visually handicapped person carries a visually handicapped person guidance apparatus having color identifying means for selectively identifying a predetermined color of the guide line,
The visually impaired person guides the visually impaired person from the guidance start point to the desired by proceeding along the predetermined color guide line while selectively identifying the predetermined color guide line on the route. Guide system for visually handicapped persons, characterized by guiding to the guidance destination point.
前記案内ラインの所定の色を設定する案内ライン色設定手段と、
前記案内ライン色設定手段で設定された所定の色の前記案内ラインを選択的に検出する案内ライン検出手段と、
前記案内ライン検出手段の検出出力に基づき前記案内ラインからの外れを前記視覚障害者に報知することにより前記視覚障害者を前記特定の色の案内ラインに沿って案内する案内手段と
を具備することを特徴とする請求項1記載の視覚障害者案内システム。The visually impaired guidance device
Guide line color setting means for setting a predetermined color of the guide line;
Guide line detection means for selectively detecting the guide line of a predetermined color set by the guide line color setting means;
Guiding means for guiding the visually handicapped person along the guide line of the specific color by notifying the visually handicapped person of deviation from the guide line based on the detection output of the guide line detecting means. The visually impaired person guidance system according to claim 1.
前記視覚障害者案内装置は、前記案内情報発生手段から発生される前記案内情報を該特定の位置の近傍において取得し、
該取得した前記案内情報を前記視覚障害者に報知する
ことを特徴とする請求項1または2記載の視覚障害者案内システム。Arranging one or a plurality of guide information generating means for generating predetermined guide information at a specific position on the guide line;
The visually handicapped person guidance device acquires the guidance information generated from the guidance information generating means in the vicinity of the specific position,
The visually impaired person guidance system according to claim 1 or 2, wherein the acquired guidance information is notified to the visually impaired person.
前記視覚障害者案内装置は、
前記経路上の特定の色の案内ラインを選択的に識別しながら該特定の色の案内ラインに沿って進行することにより前記視覚障害者を前記案内開始地点から前記特定の色の案内ラインに対応する所望の案内目的地点まで案内する
ことを特徴とする請求項1乃至3のいずれかに記載の視覚障害者案内システム。Draw guide lines of different colors on the accessible route from a predetermined guide start point to multiple desired guide destination points,
The visually impaired guidance device
Corresponding to the visually impaired person from the guidance start point to the specific color guide line by proceeding along the specific color guide line while selectively identifying the specific color guide line on the route The guidance system for visually impaired persons according to any one of claims 1 to 3, wherein guidance is provided to a desired guidance destination point.
前記案内ラインの所定の色を設定する案内ライン色設定手段と、
前記案内ライン色設定手段で設定された所定の色の前記案内ラインを選択的に検出する案内ライン検出手段と、
前記案内ライン検出手段の検出出力に基づき前記案内ラインからの外れを前記視覚障害者に報知することにより前記視覚障害者を前記特定の色の案内ラインに沿って案内する案内手段と
を具備することを特徴とする視覚障害者案内装置。A visual obstacle that can be carried by a visually handicapped person to guide a visually handicapped person along a guide line of a predetermined color drawn on a route that is accessible from a predetermined guide start point to a plurality of desired guide destination points A person guidance device,
Guide line color setting means for setting a predetermined color of the guide line;
Guide line detection means for selectively detecting the guide line of a predetermined color set by the guide line color setting means;
Guiding means for guiding the visually handicapped person along the guide line of the specific color by notifying the visually handicapped person of deviation from the guide line based on the detection output of the guide line detecting means. A visually impaired person guidance device characterized by the above.
前記案内情報取得手段で取得した案内情報を前記視覚障害者に報知する案内情報報知手段と
を更に具備することを特徴とする請求項5記載の視覚障害者案内装置。Guidance information acquisition means for acquiring in the vicinity of the specific position from guidance information generating means for generating predetermined guidance information disposed at a specific position on the guide line;
The visually impaired person guidance device according to claim 5, further comprising guidance information notifying means for notifying the visually impaired person of the guide information acquired by the guide information acquiring means.
前記案内ライン上の特定の位置に前記所定の色若しくは他の色で描かれた光学的に読み取り可能なコード情報を含み、
前記案内情報報知手段は、
前記特定の位置において前記コード情報を読み取ることにより該コード情報に対応する前記所定の案内情報を前記視覚障害者に報知する
ことを特徴とする請求項6記載の視覚障害者案内装置。The guidance information generating means includes
Including optically readable code information drawn in the predetermined color or other colors at a specific position on the guide line;
The guidance information notification means includes
The visually impaired person guidance device according to claim 6, wherein the visually impaired person is notified of the predetermined guidance information corresponding to the code information by reading the code information at the specific position.
前記案内ライン色設定手段は、
前記案内ラインの特定の色を設定し、
前記案内ライン検出手段は、
前記案内ライン色設定手段で設定された特定の色の案内ラインを選択的に検出する
ことを特徴とする請求項5乃至7のいずれかに記載の視覚障害者案内装置。Different colored guide lines are drawn on the routes that can be traveled from a predetermined guidance start point to a plurality of desired guidance destination points,
The guide line color setting means includes:
Set a specific color for the guide line,
The guide line detection means includes
The visually impaired person guidance device according to any one of claims 5 to 7, wherein a guide line of a specific color set by the guide line color setting means is selectively detected.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004144209A JP4194975B2 (en) | 2004-04-12 | 2004-04-12 | Visually impaired person guidance system and visually impaired person guidance apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004144209A JP4194975B2 (en) | 2004-04-12 | 2004-04-12 | Visually impaired person guidance system and visually impaired person guidance apparatus |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2005296570A true JP2005296570A (en) | 2005-10-27 |
| JP2005296570A5 JP2005296570A5 (en) | 2007-05-10 |
| JP4194975B2 JP4194975B2 (en) | 2008-12-10 |
Family
ID=35328809
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004144209A Expired - Fee Related JP4194975B2 (en) | 2004-04-12 | 2004-04-12 | Visually impaired person guidance system and visually impaired person guidance apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4194975B2 (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007218813A (en) * | 2006-02-20 | 2007-08-30 | Casio Comput Co Ltd | Information transmission system, imaging device, route guidance method, and route guidance program |
| JP2011092272A (en) * | 2009-10-27 | 2011-05-12 | Tnk:Kk | System for guiding visually handicapped person |
| KR101257438B1 (en) | 2011-12-26 | 2013-04-23 | 건국대학교 산학협력단 | System for guiding a indoor waking-path of situation-based using a color-code and method thereof |
| JP2019184820A (en) * | 2018-04-10 | 2019-10-24 | 穂積 正男 | Walking support device |
| JP2025048955A (en) * | 2023-09-21 | 2025-04-03 | ソフトバンクグループ株式会社 | system |
-
2004
- 2004-04-12 JP JP2004144209A patent/JP4194975B2/en not_active Expired - Fee Related
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007218813A (en) * | 2006-02-20 | 2007-08-30 | Casio Comput Co Ltd | Information transmission system, imaging device, route guidance method, and route guidance program |
| JP2011092272A (en) * | 2009-10-27 | 2011-05-12 | Tnk:Kk | System for guiding visually handicapped person |
| KR101257438B1 (en) | 2011-12-26 | 2013-04-23 | 건국대학교 산학협력단 | System for guiding a indoor waking-path of situation-based using a color-code and method thereof |
| JP2019184820A (en) * | 2018-04-10 | 2019-10-24 | 穂積 正男 | Walking support device |
| JP2025048955A (en) * | 2023-09-21 | 2025-04-03 | ソフトバンクグループ株式会社 | system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4194975B2 (en) | 2008-12-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101845754B1 (en) | Independence walking guidance device for visually handicapped person | |
| KR101130735B1 (en) | Navigation system using rf beacon | |
| KR101898582B1 (en) | A stick for the blind | |
| US20060108426A1 (en) | Location, orientation, product and color identifiaction system for the blind or visually impaired | |
| US10869805B2 (en) | System and method for providing navigation information | |
| JP2000352521A (en) | System and method for providing navigation support for user, tactile-sense direction indicating device for providing the same via direction indicating cue, and method for providing the same via the same device | |
| KR20130086861A (en) | Guide device for blind people using electronic stick and smartphone | |
| KR101954989B1 (en) | Imformation provision apparatus for blind people | |
| KR102178152B1 (en) | Smart braille block system | |
| Fukasawa et al. | A navigation system for the visually impaired an intelligent white cane | |
| JP2019215840A (en) | Guidance system | |
| CN105030491A (en) | Blind guide method and blind guide system | |
| JP2004024853A (en) | Device for supporting walking | |
| JP4194975B2 (en) | Visually impaired person guidance system and visually impaired person guidance apparatus | |
| JP2002054945A (en) | Route guidance system for pedestrians and device used therefor | |
| JP2005296570A5 (en) | ||
| ES2401252A2 (en) | Virtual walking stick for assisting blind people | |
| US20180350319A1 (en) | Information presentation apparatus, information presentation system, information presentation method, and non-transitory computer readable medium | |
| JP2004309305A (en) | Communication system and information providing method | |
| KR20180102744A (en) | A Method for Guiding a Movement of a Visually Impaired by A Robot Dog | |
| Duarte et al. | Overview of assistive technologies for the blind: Navigation and shopping | |
| KR20140104122A (en) | Guide apparatus for blind person | |
| KR20200130794A (en) | Smart block guide system | |
| KR20120116035A (en) | A subway station of guidance information system for the transportation disadvantaged | |
| KR20160008931A (en) | system of voice guidance |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051027 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060131 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070213 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070802 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070814 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071010 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071211 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080507 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080704 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080905 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080924 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111003 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131003 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131003 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |