JPH1069218A - 視覚障害者用グラフィカルユーザーインターフェース方式 - Google Patents

視覚障害者用グラフィカルユーザーインターフェース方式

Info

Publication number
JPH1069218A
JPH1069218A JP8247150A JP24715096A JPH1069218A JP H1069218 A JPH1069218 A JP H1069218A JP 8247150 A JP8247150 A JP 8247150A JP 24715096 A JP24715096 A JP 24715096A JP H1069218 A JPH1069218 A JP H1069218A
Authority
JP
Japan
Prior art keywords
tactile
window
user interface
graphical user
software
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8247150A
Other languages
English (en)
Other versions
JP2810982B2 (ja
Inventor
Takeshi Ebina
毅 海老名
Seiji Inoki
誠二 猪木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Institute of Information and Communications Technology
Original Assignee
Communications Research Laboratory
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Communications Research Laboratory filed Critical Communications Research Laboratory
Priority to JP8247150A priority Critical patent/JP2810982B2/ja
Publication of JPH1069218A publication Critical patent/JPH1069218A/ja
Application granted granted Critical
Publication of JP2810982B2 publication Critical patent/JP2810982B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Input From Keyboards Or The Like (AREA)

Abstract

(57)【要約】 【課題】視覚障害者でも簡単な操作でウィンドウ対応型
のソフトウエアを使用できる視覚障害者用グラフィカル
ユーザーインターフェース方式を提供する。 【解決手段】触覚ディスプレイ装置5の各触覚セル1を
それぞれ各ウィンドウと対応させて操作することによっ
て、コンピュータ6の制御ソフトウエア6aは音声合成
装置7に音声データを出力してスピーカ8から音声によ
る情報提供をおこなうと共に、アプリケーションソフト
ウエア6cに対して触覚ディスプレイ装置5の操作に伴
うデータを伝達する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は視覚障害者等がグラ
フィカルユーザーインターフェースを有するソフトウエ
アのウィンドウ構成及び部品名を容易に認識できる視覚
障害者用グラフィカルユーザーインターフェース方式に
関するものである。
【0002】
【従来の技術】従来より視覚障害者用のコンピュータイ
ンターフェースソフトウェアには様々なものが存在して
いたが、それは大部分がDOS用のスクリーンリーダで
あって、DOS及びBIOSがおこなう入出力関連の割
り込みを全てトラップし、入出力された情報を音声や点
字出力として視覚障害者に提供するものである。
【0003】
【発明が解決しようとする課題】従って、最近普及して
いるウィンドウ対応型のソフトウェアでは、コンピュー
タの画面を見ながら操作をおこなう構成となっているた
め、視覚障害者は操作をおこなうことができず、しかも
従来のDOS用のスクリーンリーダが使用できないた
め、視覚障害者にとってはウインドウ対応型のソフトウ
エアを一人で操作することは不可能であった。
【0004】
【課題を解決するための手段】本発明は上記に鑑みて提
案されたものであり、グラフィカルユーザーインターフ
ェースを有するソフトウエアのウィンドウの構造及び機
能を触覚ディスプレイに複数設けられた触覚ピン配列の
表示態様で表現すると共に、上記触覚ディスプレイの上
記触覚ピン配列に接触することによって、該当する上記
グラフィカルユーザーインターフェースのウィンドウ名
か若しくは部品名を音声で伝達することにより、視覚障
害者に上記グラフィカルユーザーインターフェースの構
造を認識させる視覚障害者用グラフィカルユーザーイン
ターフェース方式を提供するものである。
【0005】また、本発明は、上記ソフトウエアのウィ
ンドウの構造及び機能が、上記触覚ディスプレイの上記
触覚ピン配列における触覚ピンの位置及び数で表現され
る視覚障害者用グラフィカルユーザーインターフェース
方式を提供するものである。
【0006】
【発明の実施の形態】以下に、本発明の基本的な原理を
説明する。図1は本発明に係わるウィンドウの構成を示
しており、(a) はウィンドウの画面構成を示す概念図、
(b) はウィンドウのツリー構造を示す概念図、(c) は各
ウィンドウや部品に対応した触覚ピンの表示を示す概念
図である。
【0007】すなわち、(a) で示したウィンドウの構造
は背景ウィンドウAにボタン列ウィンドウB及びテキス
ト入力部品Eが接続されており、更に、ウィンドウBに
ボタン部品C及びDが接続した状態となっている((b)
参照)。
【0008】これを各ウィンドウや部品A〜Eに対応し
た接触ピンで表現すると(c) に示すようにウィンドウA
は最左下段に設けた一個の点で示され、ウィンドウBは
次の段の一個の点で示される。これに対して、ボタン部
品C及びDは次の段の二個の点で表現され、また、テキ
スト入力部品EはウィンドウBと同じ段の二個の点と次
の段の一個の点で示される。以上のような原理を用い
て、本発明ではウィンドウの階層や部品の種類等を簡単
な接触ピンの表示で表現することができる。
【0009】以下に、本発明の実施形態の具体的な構成
を図面に従い説明する。図2は本発明の一実施形態に係
わる触覚ディスプレイ装置の触覚セルの構成を示す概観
図である。図において1は触覚セルであり、複数の触覚
セル1から触覚ディスプレイ装置は構成されている。2
は触覚センサであり、複数設けられたウィンドウ構造表
示用ピン(以下触覚ピンと記す)3に手や指が接触する
ことを検出するために設けられている。
【0010】触覚ピン3は外部からの制御信号によって
凹凸の状態を制御する駆動機構(図示せず)を触覚セル
1内に内蔵しており、その凹凸の態様でウィンドウの構
造や機能を表現している。例えば、1つの触覚セル1が
1つのウィンドウに対応しており、触覚セル1における
触覚ピン3の位置でウィンドウの構造を表現し、触覚ピ
ン3の突出した数でウィンドウの機能を表現している。
【0011】また、触覚セル1にはウィンドウに関する
詳細な情報を読み上げる操作のためのウィンドウ状態問
い合わせボタン4a及びその触覚セル1が対応するウィ
ンドウの選択をおこなうウィンドウ選択ボタン4bが設
けられている。
【0012】図3は本発明の一実施形態における触覚利
用型視覚障害者用グラフィカルユーザーインターフェー
ス装置の構成を示すブロック図である。図において5は
触覚ディスプレイ装置であり、複数の触覚セル1から構
成されており、上述したように1つの触覚セル1が1つ
のウィンドウに対応するように構成されている。
【0013】また、触覚ディスプレイ装置5はコンピュ
ータ6とデータの送受信をおこなっており、コンピュー
タ6側の制御ソフトウエア6aは触覚ディスプレイ装置
5に対してピン配列データの送信をおこなうと共に、触
覚ディスプレイ装置5側からウィンドウ状態問い合わせ
ボタン4a及びウィンドウ選択ボタン4bの入力データ
を受信している。
【0014】また、制御ソフトウエア6aはグラフィカ
ルユーザーインターフェースソフトウエア6bからウィ
ンドウ構造のデータ等を受信すると共に、ウィンドウ選
択ボタン4bの入力データを送信している。更に、制御
ソフトウエア6aは視覚障害者が使用するアプリケーシ
ョンソフトウエア6cに対してデータを送信している。
【0015】また、制御ソフトウエア6aはコンピュー
タ6の外部に設けられた音声合成装置7に音声データを
出力し、該音声合成装置7はこの音声データに基づいて
スピーカ8から音声信号を出力する。
【0016】次に、本発明の一実施形態における触覚利
用型視覚障害者用グラフィカルユーザーインターフェー
ス装置の動作を図4に示すブロック図を用いて説明す
る。
【0017】先ず、ステップS1でアプリケーションソ
フトウエア6cに対応するウィンドウの構造を取得し、
ステップS2でステップS1で取得した各ウィンドウの
部品名を取得し、ステップS3で各ウィンドウの構造及
び機能を、触覚ディスプレイ装置5の各触覚セル1に反
映させる。
【0018】そして、ステップS4で触覚ディスプレイ
装置からの入力データを判別する。すなわち、ステップ
S4−1の触覚セル1の触覚センサ2からの入力であれ
ば、ステップS5で対応するウィンドウ名をスピーカ8
から音声で出力し、ステップS3に戻る。
【0019】また、ステップS4−2のウィンドウ状態
問い合わせボタン4aからの入力であれば、ステップS
6でその触覚セル1が対応しているウィンドウに関する
詳細な情報をスピーカ8から音声で出力し、ステップS
3に戻る。
【0020】更に、ステップS4−3のウィンドウ選択
用ボタン4bからの入力であれば、ステップS7でその
触覚セル1が対応しているウィンドウ操作のデータをア
プリケーションソフトウエア6cに伝達し、ステップS
3に戻る。
【0021】一方、ステップS4で何の入力もなけれ
ば、ステップS4−4でステップS3に戻る。
【0022】以上のように、本実施形態においては画面
を目視しなくても容易にウィンドウ対応型のアプリケー
ションソフトウエアを操作することが可能となる。
【0023】以上、本発明を実施形態に基づいて説明し
たが、本発明は上記した実施形態に限定されるものでは
なく、特許請求の範囲に記載した構成を変更しない限
り、どのようにでも実施できる。例えば、本実施形態で
はアプリケーションソフトウエアは、触覚ディスプレイ
装置と対応したコンピュータ上で動作する構成となって
いるが、本発明はこの構成に限定されるものではなく、
上記コンピュータとネットワークで結ばれているコンピ
ュータ上のアプリケーションソフトウエアをも容易に操
作することが可能である。
【0024】
【発明の効果】以上に示したように本発明における視覚
障害者用グラフィカルユーザーインターフェース方式お
いては、視覚障害者がウィンドウ対応型のアプリケーシ
ョンソフトウエア等を操作することが可能となり、使用
できるソフトウエアの数が増大すると共に、ウィンドウ
対応型の最新のソフトウエアを容易に使いこなすことが
できる。
【0025】また、本発明では触覚を用いて画面上の部
品を直接探索できるため、検索を高速で実施でき、更に
は、視覚障害者が触覚ディスプレイ装置に触ると音声で
部品名等が表現されるので、点字が読めない視覚障害者
でも容易に操作することが可能であり、且つ操作方法の
修得が容易である等、多大な効果を奏する。
【図面の簡単な説明】
【図1】(a) はウィンドウの画面構成を示す概念図、
(b) はウィンドウのツリー構造を示す概念図、(c) は各
ウィンドウや部品を接触ピンの態様で示した概念図であ
る。
【図2】本発明の一実施形態に係わる触覚ディスプレイ
装置の触覚セルの構成を示す概観図である。
【図3】本発明の一実施形態における触覚利用型視覚障
害者用グラフィカルユーザーインターフェース装置の動
作を示すブロック図である。
【図4】本発明の一実施形態における触覚利用型視覚障
害者用グラフィカルユーザーインターフェース装置の動
作を示すフローチャートである。
【符号の説明】
1 触覚セル 2 触覚センサ 3 ウィンドウ構造表示用ピン(触覚ピン) 4a ウィンドウ状態問い合わせボタン 4b ウィンドウ選択用ボタン 5 触覚ディスプレイ装置 6 コンピュータ 6a 制御用ソフトウェア 6b グラフィカルユーザーインターフェースソフト
ウエア 6c アプリケーションソフトウエア 7 音声合成装置 8 スピーカ

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 グラフィカルユーザーインターフェース
    を有するソフトウエアのウィンドウの構造及び機能を触
    覚ディスプレイに複数設けられた触覚ピン配列の表示態
    様で表現すると共に、上記触覚ディスプレイの上記触覚
    ピン配列に接触することによって、該当する上記グラフ
    ィカルユーザーインターフェースのウィンドウ名か若し
    くは部品名を音声で伝達することにより、視覚障害者に
    上記グラフィカルユーザーインターフェースの構造を認
    識させることを特徴とする視覚障害者用グラフィカルユ
    ーザーインターフェース方式。
  2. 【請求項2】 上記ソフトウエアのウィンドウの構造及
    び機能は、上記触覚ディスプレイの上記触覚ピン配列に
    おける触覚ピンの位置及び数で表現されることを特徴と
    する請求項1に記載の視覚障害者用グラフィカルユーザ
    ーインターフェース方式。
JP8247150A 1996-08-29 1996-08-29 視覚障害者用グラフィカルユーザーインターフェース方式 Expired - Lifetime JP2810982B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP8247150A JP2810982B2 (ja) 1996-08-29 1996-08-29 視覚障害者用グラフィカルユーザーインターフェース方式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP8247150A JP2810982B2 (ja) 1996-08-29 1996-08-29 視覚障害者用グラフィカルユーザーインターフェース方式

Publications (2)

Publication Number Publication Date
JPH1069218A true JPH1069218A (ja) 1998-03-10
JP2810982B2 JP2810982B2 (ja) 1998-10-15

Family

ID=17159189

Family Applications (1)

Application Number Title Priority Date Filing Date
JP8247150A Expired - Lifetime JP2810982B2 (ja) 1996-08-29 1996-08-29 視覚障害者用グラフィカルユーザーインターフェース方式

Country Status (1)

Country Link
JP (1) JP2810982B2 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000017739A1 (en) * 1998-09-22 2000-03-30 Yasufumi Mase Information processor for visually disabled person and tactile input/output device
JP2003502699A (ja) * 1999-06-14 2003-01-21 ヴィアタッチ リミテッド 電子データ表示システムのための触覚インターフェースシステム
US7403897B2 (en) 2003-08-29 2008-07-22 International Business Machines Corporation Voice output device, information input device, file selection device, telephone set, and program and recording medium of the same
JP2010128788A (ja) * 2008-11-27 2010-06-10 Mitsubishi Electric Corp 入力装置
WO2017183803A1 (ko) * 2016-04-20 2017-10-26 가천대학교 산학협력단 사용자와 상호작용을 할 수 있는 촉각 인터페이스장치를 제어하기 위한 방법, 장치 및 비일시적 컴퓨터-판독가능 매체
WO2017183853A1 (ko) * 2016-04-20 2017-10-26 가천대학교 산학협력단 촉각 인터페이스장치 및 촉각 인터페이스방법
KR20170128196A (ko) * 2017-11-15 2017-11-22 가천대학교 산학협력단 촉각 인터페이스장치를 제어하기 위한 방법, 장치 및 컴퓨터-판독가능 매체

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000017739A1 (en) * 1998-09-22 2000-03-30 Yasufumi Mase Information processor for visually disabled person and tactile input/output device
JP2003502699A (ja) * 1999-06-14 2003-01-21 ヴィアタッチ リミテッド 電子データ表示システムのための触覚インターフェースシステム
US7403897B2 (en) 2003-08-29 2008-07-22 International Business Machines Corporation Voice output device, information input device, file selection device, telephone set, and program and recording medium of the same
US9349302B2 (en) 2003-08-29 2016-05-24 International Business Machines Corporation Voice output device, information input device, file selection device, telephone set, and program and recording medium of the same
JP2010128788A (ja) * 2008-11-27 2010-06-10 Mitsubishi Electric Corp 入力装置
WO2017183803A1 (ko) * 2016-04-20 2017-10-26 가천대학교 산학협력단 사용자와 상호작용을 할 수 있는 촉각 인터페이스장치를 제어하기 위한 방법, 장치 및 비일시적 컴퓨터-판독가능 매체
WO2017183853A1 (ko) * 2016-04-20 2017-10-26 가천대학교 산학협력단 촉각 인터페이스장치 및 촉각 인터페이스방법
US10845880B2 (en) 2016-04-20 2020-11-24 Gachon University-Industry Foundation Method, device, and computer-readable medium for controlling tactile interface device interacting with user
KR20170128196A (ko) * 2017-11-15 2017-11-22 가천대학교 산학협력단 촉각 인터페이스장치를 제어하기 위한 방법, 장치 및 컴퓨터-판독가능 매체

Also Published As

Publication number Publication date
JP2810982B2 (ja) 1998-10-15

Similar Documents

Publication Publication Date Title
EP0394614B1 (en) Advanced user interface
US6307549B1 (en) Reduced keyboard disambiguating system
US8125440B2 (en) Method and device for controlling and inputting data
KR100255627B1 (ko) 이동 클라이언트 컴퓨터
US5252951A (en) Graphical user interface with gesture recognition in a multiapplication environment
US9349302B2 (en) Voice output device, information input device, file selection device, telephone set, and program and recording medium of the same
EP1496405A2 (en) Information processing method and information processing apparatus
US20030197744A1 (en) Zeroclick
US20030005003A1 (en) Information processing apparatus
KR19980018171A (ko) 예측성 입력 리스트를 교환하기 위해 프로그램된 이동 클라이언트 컴퓨터
US5361310A (en) Handwriting entry processing system using keyboard and mouse interfaces requiring no modification of an application program
KR20190002525A (ko) 눈멀거나 시각적으로 손상된 사람용 컴퓨팅 장치의 멀티미디어 관리용 가제트
ATE240573T1 (de) Taktiles informationsausgabesystem von einem computer und entsprechende kommunikationsvorrichtung
JP2810982B2 (ja) 視覚障害者用グラフィカルユーザーインターフェース方式
KR100381870B1 (ko) 휴대용 점자 출력장치 및 방법
US20030189551A1 (en) System and method for identifying functions invoked by function keys on a keyboard
JP2007035059A (ja) 計算装置用のマン/マシンインタフェース
WO2005053173A1 (en) Digital information processing system having character input apparatus
RU2210802C2 (ru) Система ввода и вывода данных для эвм
KR200215091Y1 (ko) 문자입력기능을 갖는 마우스장치
US20250077550A1 (en) Search device, search system, search method, and recording medium
JPH064211A (ja) 情報入力装置
KR20000047404A (ko) 컴퓨터 속기의 단축입력 데이터 처리 장치 및 방법
AU747901B2 (en) Reduced keyboard disambiguating system
KR100319826B1 (ko) 유아용 컴퓨터 보조 학습기

Legal Events

Date Code Title Description
S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term