JP6084823B2 - インターフェイス装置及びその制御方法 - Google Patents
インターフェイス装置及びその制御方法 Download PDFInfo
- Publication number
- JP6084823B2 JP6084823B2 JP2012257387A JP2012257387A JP6084823B2 JP 6084823 B2 JP6084823 B2 JP 6084823B2 JP 2012257387 A JP2012257387 A JP 2012257387A JP 2012257387 A JP2012257387 A JP 2012257387A JP 6084823 B2 JP6084823 B2 JP 6084823B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- time axis
- mode
- rectangular wave
- operator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- User Interface Of Digital Computer (AREA)
Description
そのため、従来は、検出された筋電位が微弱な場合、検出された筋電位と予め登録されたパターンとが正確に一致しないことから、アクチュエータ装置に入力される制御信号が本人の意思に対応していないことがあり、アクチュエータ装置を正確に動作制御することが難しかった。
(1)本発明は、操作者の皮膚の異なる箇所に貼り付けられ、当該操作者の神経細胞から生成される神経信号をそれぞれ検出する複数の信号検出センサと、複数の信号検出センサより得られた各神経信号の差分に基づく電位を所定電圧値に増幅して、時間軸上においてゼロ電位から+側に立ち上り、最大値に達すると、−側に低下した後、再び+側に推移しながらゼロ電位に戻る傾向を示す生体信号を出力する差動増幅器と、差動増幅器により増幅された生体信号をアナログ信号のまま所定周波数範囲のみ通過させて増幅して出力する増幅・フィルタ回路と、増幅・フィルタ回路により増幅されたアナログ信号の生体信号をデジタル変換するA/D変換器と、デジタル化された生体信号の電位と予め設定された+側の閾値とを比較し、当該閾値以上になった時点の立ち上がりエッジの一定時間内の連続数が所定数を越えた時点を始点とし、かつ、当該始点から所定時間の経過時点を終点とする矩形波信号を出力する出力信号生成手段と、矩形波信号を、当該矩形波信号の時間軸長さに応じた操作内容が予め割り当てられている外部機器に送信する送信手段とを備え、出力信号生成手段は、矩形波信号の始点を常時検出し、最初の始点から所定時間の経過時までに次の始点を検出した場合には、当該検出された次の始点を基準に所定時間の経過時まで終点を延長することにより、矩形波信号の時間軸長さを変更することを特徴とする。
(2)本発明は、操作者の皮膚の異なる箇所において、当該操作者の神経細胞から生成される神経信号をそれぞれ検出する第1の過程と、第1の過程より得られた各神経信号の差分に基づく電位を所定電圧値に増幅して、時間軸上においてゼロ電位から+側に立ち上がり、最大値に達すると、−側に低下した後、再び+側に推移しながらゼロ電位に戻る傾向を示す生体信号を出力する第2の過程と、第2の過程により増幅された生体信号をアナログ信号のまま所定周波数範囲のみ通過させて増幅して出力する第3の過程と、第3の過程により増幅されたアナログ信号の生体信号をデジタル変換する第4の過程と、第4の過程によりデジタル化された生体信号の電位と予め設定された+側の閾値とを比較し、当該閾値以上になった時点の立ち上がりエッジの一定時間内の連続数が所定数を越えた時点を始点とし、かつ、当該始点から所定時間の経過時点を終点とする矩形波信号を出力する第5の過程と、矩形波信号を、当該矩形波信号の時間軸長さに応じた操作内容が予め割り当てられている外部機器に送信する第6の過程とを行い、第5の過程では、矩形波信号の始点を常時検出し、最初の始点から所定時間の経過時までに次の始点を検出した場合には、当該検出された次の始点を基準に所定時間の経過時まで終点を延長することにより、矩形波信号の時間軸長さを変更することを特徴とする。
図1Aは本発明によるインターフェイス装置及びその制御方法の一実施例を示すブロック図である。図1Aに示されるように、インターフェイス装置10は、生体信号検出センサ(生体信号検出手段)20と、差動増幅器(増幅手段)30と、増幅・フィルタ回路40と、ADコンバータ50と、制御部(データ変換手段)60と、送信回路(送信手段)70と、モニタ(表示手段)80とを有する。
図1Bは本発明によるインターフェイス装置の変形例を示すブロック図である。図1Bに示されるように、変形例のインターフェイス装置10Aは、モニタ80に接続された外部機器制御部84より外部機器110に制御信号を送信できる。この場合、モニタ80は、通信機能を有するタブレット型端末装置あるいはスマートホンなどの携帯電話機あるいはパーソナルコンピュータのディスプレイ(液晶パネル)であり、後述するモード選択画面200、文字入力画面300、エアコン制御画面500、テレビ制御画面700、照明スイッチ制御画面900などが表示される。
図4は神経細胞からの神経信号による生体信号及び時間軸データのパターン例を示す図である。図4(A)に示されるように、生体信号検出センサ20は、操作者100が神経信号を生成すると、当該神経信号に応じた生体信号E1を出力する。この生体信号E1は、差動増幅器30により増幅されるが、時間軸上において、ゼロVより+側に立ち上がり、最大値に達すると、−側に低下した後、再び+側に推移しながら緩やかにゼロVに戻る傾向にある。
制御部60は、生体信号E1の電位と予め設定された閾値Vaとを比較(閾値比較手段)し、比較結果がE1>Vaになった時点で出力信号P1(時間軸データ)を所定時間が経過するまで出力(出力信号生成手段)する。
図4(A)に示されるように、制御部60は、入力された生体信号Eが、一定時間内にn回以上の立ち上がりエッジを数えた場合(エッジカウンタ手段)、矩形波信号(パルス波形)P1を出力する(出力信号生成手段)。なお、エッジカウンタ手段の閾値nは1以上の任意の値を自由に設定できる。また、図4(B)(C)に示されるように、エッジカウンタの値が2又は3になると、エッジカウント値に応じた矩形波信号(パルス波形)P2,P3を出力する。
図4(A)に示されるように、制御部60は、入力された生体信号Eが示す個人特有の性質(信号の振幅、発火頻度など)を考慮し、適切な条件を満たす場合に矩形波信号(パルス波形)P1を出力する。個人特有の性質は、残存する筋肉や神経の量などが異なるために生じる差異であり、固定の出力条件下では適正な出力が実現しない。また、図4(B)(C)に示されるように、個人特有の性質(信号の振幅、発火頻度など)を考慮し、個人差に応じた矩形波信号(パルス波形)P2,P3を出力する。
図4(A)に示されるように、制御部60は、入力された生体信号Eに応じ何らかの出力条件(閾値以外の要素、例えば生体信号の電流値あるいは電圧値の変化率など)を満たす場合に矩形波信号(パルス波形)P1を出力し、次の出力P2までの間に不感帯を設けることができる。これにより、操作者の意図と連動した生体信号E1とE2との間に、操作者の意図と連動しない生体信号が連続して入力されてしまう誤入力を回避することができる。また、図4(B)(C)に示されるように、入力された生体信号Eに応じ何らかの出力条件を満たす場合に、その回数に応じた矩形波信号(パルス波形)P2,P3を出力する。
尚、以下では、上記第1出力条件に基づいて制御する場合について説明する。
図6Aは文字入力モードの表示画面を説明するための概念図である。図6Aに示されるように、前述したモード選択カーソル260の移動により文字入力モードが選択されると、モニタ80に文字入力画面300が表示される。文字入力画面300には、ひらがなを選択できるように「あいうえお」を選択できる「あ行」310A、「かきくけこ」を選択できる「か行」320A、「さしすせそ」を選択できる「さ行」330A、「たちつてと」を選択できる「た行」340A、「なにぬねの」を選択できる「な行」350A、「はひふへほ」を選択できる「は行」360A、「まみむめも」を選択できる「ま行」370A、「やゆよ」を選択できる「や行」380A、「らりるれろ」を選択できる「ら行」390A、「わをん」を選択できる「わ行」400Aが表示される。
図7Aはエアコン設定モードの表示画面を説明するための概念図である。図7Aに示されるように、前述したモード選択カーソル260の移動によりエアコンモードが選択されると、モニタ80にエアコン制御画面500が表示される。
図8Aはテレビ操作モードの場合の制御処理方法を説明するための概念図である。図8Aに示されるように、前述したモード選択カーソル260の移動によりテレビモードが選択されると、モニタ80にテレビ制御画面700が表示される。
図9Aは照明スイッチの切替え操作の制御処理方法を説明するための概念図である。図9Aに示されるように、前述したモード選択カーソル260の移動により照明スイッチモードが選択されると、モニタ80に照明スイッチ制御画面900が表示される。
20 生体信号検出センサ
30 差動増幅器
40 増幅・フィルタ回路
50 ADコンバータ
60 制御部
62 時間軸データ変換手段
64 制御信号変換手段
70 送信回路
80 モニタ
82 受信回路
100 操作者
110A〜110C 外部機器
112a、112b、112a'、112b'、112a''、112b'' 入力端子
200 モード選択画面
260、550、960 モード選択カーソル
300 文字入力画面
410 第1の文字選択カーソル
420 第2の文字選択カーソル
500 エアコン制御画面
610 第1のモード選択カーソル
620 第2のモード選択カーソル
630 第3のモード選択カーソル
700 テレビ制御画面
810 第1のモード選択カーソル
820 第2のモード選択カーソル
900 照明スイッチ制御画面
Claims (6)
- 操作者の皮膚の異なる箇所に貼り付けられ、当該操作者の神経細胞から生成される神経信号をそれぞれ検出する複数の信号検出センサと、
前記複数の信号検出センサより得られた各神経信号の差分に基づく電位を所定電圧値に増幅して、時間軸上においてゼロ電位から+側に立ち上り、最大値に達すると、−側に低下した後、再び+側に推移しながらゼロ電位に戻る傾向を示す生体信号を出力する差動増幅器と、
前記差動増幅器により増幅された前記生体信号をアナログ信号のまま所定周波数範囲のみ通過させて増幅して出力する増幅・フィルタ回路と、
前記増幅・フィルタ回路により増幅されたアナログ信号の前記生体信号をデジタル変換するA/D変換器と、
デジタル化された前記生体信号の電位と予め設定された+側の閾値とを比較し、当該閾値以上になった時点の立ち上がりエッジの一定時間内の連続数が所定数を越えた時点を始点とし、かつ、当該始点から所定時間の経過時点を終点とする矩形波信号を出力する出力信号生成手段と、
前記矩形波信号を、当該矩形波信号の時間軸長さに応じた操作内容が予め割り当てられている外部機器に送信する送信手段と
を備え、前記出力信号生成手段は、前記矩形波信号の前記始点を常時検出し、最初の始点から前記所定時間の経過時までに次の始点を検出した場合には、当該検出された次の始点を基準に前記所定時間の経過時まで終点を延長することにより、前記矩形波信号の時間軸長さを変更する
ことを特徴とするインターフェイス装置。 - 前記出力信号生成手段は、前記操作者の個人特有の性質の差異に応じた長さを、前記矩形波信号の時間軸の長さを決定する前記所定時間として設定する
ことを特徴とする請求項1に記載のインターフェイス装置。 - 前記出力信号生成手段は、前記閾値以外の要素を不感帯として、前記操作者の意図と連動する前記生体信号のみに基づいて前記矩形波信号を生成する
ことを特徴とする請求項1または2に記載のインターフェイス装置。 - 操作者の皮膚の異なる箇所において、当該操作者の神経細胞から生成される神経信号をそれぞれ検出する第1の過程と、
前記第1の過程より得られた各神経信号の差分に基づく電位を所定電圧値に増幅して、時間軸上においてゼロ電位から+側に立ち上がり、最大値に達すると、−側に低下した後、再び+側に推移しながらゼロ電位に戻る傾向を示す生体信号を出力する第2の過程と、
前記第2の過程により増幅された前記生体信号をアナログ信号のまま所定周波数範囲のみ通過させて増幅して出力する第3の過程と、
前記第3の過程により増幅されたアナログ信号の前記生体信号をデジタル変換する第4の過程と、
前記第4の過程によりデジタル化された前記生体信号の電位と予め設定された+側の閾値とを比較し、当該閾値以上になった時点の立ち上がりエッジの一定時間内の連続数が所定数を越えた時点を始点とし、かつ、当該始点から所定時間の経過時点を終点とする矩形波信号を出力する第5の過程と、
前記矩形波信号を、当該矩形波信号の時間軸長さに応じた操作内容が予め割り当てられている外部機器に送信する第6の過程と、
を行い、前記第5の過程では、前記矩形波信号の前記始点を常時検出し、最初の始点から前記所定時間の経過時までに次の始点を検出した場合には、当該検出された次の始点を基準に前記所定時間の経過時まで終点を延長することにより、前記矩形波信号の時間軸長さを変更する
ことを特徴とするインターフェイス装置の制御方法。 - 前記第5の過程では、前記操作者の個人特有の性質の差異に応じた長さを、前記矩形波信号の時間軸の長さを決定する前記所定時間として設定する
ことを特徴とする請求項4に記載のインターフェイス装置の制御方法。 - 前記第5の過程では、前記閾値以外の要素を不感帯として、前記操作者の意図と連動する前記生体信号のみに基づいて前記矩形波信号を生成する
ことを特徴とする請求項4または5に記載のインターフェイス装置の制御方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012257387A JP6084823B2 (ja) | 2012-11-26 | 2012-11-26 | インターフェイス装置及びその制御方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012257387A JP6084823B2 (ja) | 2012-11-26 | 2012-11-26 | インターフェイス装置及びその制御方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014106601A JP2014106601A (ja) | 2014-06-09 |
| JP6084823B2 true JP6084823B2 (ja) | 2017-02-22 |
Family
ID=51028060
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012257387A Active JP6084823B2 (ja) | 2012-11-26 | 2012-11-26 | インターフェイス装置及びその制御方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6084823B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019111471A1 (ja) * | 2017-12-08 | 2019-06-13 | ソニー株式会社 | 情報処理装置及びその制御方法、並びに記録媒体 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS54121025A (en) * | 1978-03-13 | 1979-09-19 | Agency Of Ind Science & Technol | Signal generating device for machine operation |
| JP4661115B2 (ja) * | 2004-07-15 | 2011-03-30 | ソニー株式会社 | 信号処理装置及び信号処理方法、並びに機械装置 |
| JP2006051343A (ja) * | 2004-07-16 | 2006-02-23 | Semiconductor Energy Lab Co Ltd | 生体信号処理装置、無線メモリ、生体信号処理システム及び被制御装置の制御システム |
| US20090281448A1 (en) * | 2008-05-10 | 2009-11-12 | Neural Signals, Inc. | Wireless Skin Surface Potential Sensing System and Method |
| JP5283065B2 (ja) * | 2008-08-26 | 2013-09-04 | 学校法人慶應義塾 | 運動関連電位信号検出システム |
| EP2335570A4 (en) * | 2008-09-10 | 2014-04-02 | Univ Tsukuba | Wearing tool for measuring biological signal, and wearing-type motion assisting device |
-
2012
- 2012-11-26 JP JP2012257387A patent/JP6084823B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2014106601A (ja) | 2014-06-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102943079B1 (ko) | 신경망을 사용한 범용 제어 시스템 및 방법 | |
| JP7149492B2 (ja) | 文脈依存性ユーザインタフェースを備えた筋電位(emg)支援通信デバイス | |
| Stefanov et al. | The smart house for older persons and persons with physical disabilities: structure, technology arrangements, and perspectives | |
| Valbuena et al. | Brain-computer interface for high-level control of rehabilitation robotic systems | |
| WO2001052736A1 (en) | System and method of monitoring and modifying human activity-based behavior | |
| JP2021506052A (ja) | コミュニケーション方法及びシステム | |
| Lo et al. | Novel non-contact control system for medical healthcare of disabled patients | |
| Kader et al. | Wireless need sharing and home appliance control for quadriplegic patients using head motion detection via 3-axis accelerometer | |
| US8894718B2 (en) | System for remote management in ambient intelligence environments using electromyographic signals | |
| JP6084823B2 (ja) | インターフェイス装置及びその制御方法 | |
| Contreras-Castañeda et al. | Smart home: Multimodal interaction for control of home devices | |
| Cincotti et al. | Brain-operated assistive devices: the ASPICE project | |
| Raen et al. | A smart hand glove that converts gesture into text & speech to assist the handicapped-(handtalk) | |
| KR20200071236A (ko) | 개인 맞춤형 운동강도조절 기능을 갖는 멀티센서 기반 타이밍 피드백 시스템 | |
| Hassan et al. | EEG Signal Based Cognitive System for Controlling Home Appliances and Generating Speech Command | |
| KR101727183B1 (ko) | 뇌파를 이용한 홈케어 시스템 | |
| Cincotti et al. | Non-invasive brain-computer interface system to operate assistive devices | |
| Ganapathy | Geriatric Smart home technology implementation—are we really there? | |
| KR101214544B1 (ko) | 능동 검출 장치를 이용한 입력 제어 시스템 및 방법 | |
| Madhavi et al. | Sustainable practices for semi-paralysed people using gesture-link paralysis glove | |
| KR20200130006A (ko) | 사물인터넷 기반의 조명장치를 이용한 헬스 케어 시스템 및 방법 | |
| EP3193239A1 (en) | Methods and systems for augmentative and alternative communication | |
| Chincholkar et al. | IOT Based Paralysis Healthcare | |
| Kokila et al. | Smart Assistive System for Paralysis Patients using Finger Flex Sensors, Eye Movement Detection, and Vital Sign Monitoring | |
| Hundekar et al. | ParalyzeAssist: a smart wearable solution for paralysis |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151125 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151215 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20151215 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160826 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160830 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161028 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170104 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170126 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6084823 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |