JP2012509145A - 気分に基づく触覚フィードバックを生成する方法及び装置 - Google Patents

気分に基づく触覚フィードバックを生成する方法及び装置 Download PDF

Info

Publication number
JP2012509145A
JP2012509145A JP2011537517A JP2011537517A JP2012509145A JP 2012509145 A JP2012509145 A JP 2012509145A JP 2011537517 A JP2011537517 A JP 2011537517A JP 2011537517 A JP2011537517 A JP 2011537517A JP 2012509145 A JP2012509145 A JP 2012509145A
Authority
JP
Japan
Prior art keywords
user
haptic
mood
detection signal
detecting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011537517A
Other languages
English (en)
Other versions
JP5643214B2 (ja
Inventor
クルツ−ヘルナンデス,ジャン,マニュエル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2012509145A publication Critical patent/JP2012509145A/ja
Application granted granted Critical
Publication of JP5643214B2 publication Critical patent/JP5643214B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/024Measuring pulse rate or heart rate
    • A61B5/02438Measuring pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient; User input means
    • A61B5/7455Details of notification to user or communication with user or patient; User input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6027Methods for processing data by generating or executing the game program using adaptive systems learning from user actions, e.g. for skill level adjustment
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/013Force feedback applied to a game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Cardiology (AREA)
  • Neurology (AREA)
  • Hospice & Palliative Care (AREA)
  • Multimedia (AREA)
  • Neurosurgery (AREA)
  • Social Psychology (AREA)
  • Physiology (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Dermatology (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

気分に基づく触覚フィードバックを生成する方法及び装置が開示される。触覚システムは、検知デバイスと、デジタル処理ユニットと、触覚ジェネレーターとを備える。検知デバイスは、一実施形態では、1つ又は複数のセンサーによって収集される気分情報に従ってユーザーの様相を検出するように構成されると共に、ユーザーの様相に応じて検知信号を発行することができる。デジタル処理ユニットは、検知信号に従ってユーザーの状態を特定することができると共に、ユーザーの状態に応じて触覚信号を提供することができる。ユーザーの状態は、一態様では、ユーザーの気分及び/又はユーザーの心理状態を示す。触覚ジェネレーターは、触覚信号に従って触覚フィードバックを生成する。

Description

本発明の例示の実施形態は電子通信の分野に関する。より具体的には、本発明の例示の実施形態は触覚フィードバックを用いた通信に関する。
コンピューターベースのシステム、器具、現金自動預け払い機(Automated Teller Machine:ATM)、POS端末等がより広く普及するにつれて、ヒューマンマシンインターフェースの使いやすさがより重要となってきている。このようなインターフェースは、直観的に動作すべきものであり、ユーザーのトレーニングをほとんど又は全く要しないものであるべきであり、それによって、事実上誰もが用いることができる。キーボード、マウス、ジョイスティック、及びタッチスクリーン等の多くの従来のユーザーインターフェースデバイスが市場で入手可能である。知られているより直観的かつインタラクティブなインターフェースデバイスのうちの1つはタッチパネルであり、これはタッチスクリーン又はタッチパッドとすることができる。タッチスクリーンは、タッチ入力パネル及びディスプレイデバイスを備え、ユーザーのタッチに反応すると共に、ユーザーが見ることができその後「タッチ」することができるコンテンツを表示するパネルを通じてユーザーにマシンインターフェースを提供する。
キーボード、音声、及びタッチスクリーン等の従来のヒューマンマシンインターフェースは、通常、インターフェース操作中に視覚支援又は一見することが必要である。たとえば、ユーザーは、タッチスクリーン上で自身の選択を入力するとき、タッチするロケーションを見てかつ/又は特定する必要がある。また、ユーザーは、マウスを操作するとき、クリックボタンを押すことができるようになる前に、スクリーン上のアイコンの動きを見る必要がある。
従来のヒューマンマシンインターフェースに関連した問題は、視覚支援がヒューマンマシンインターフェースの操作中に利用可能でないことが時折あるということである。たとえば、トラック運転手又はパイロットは、多くの場合、運転又は飛行時に自身の視界を維持する必要があり、したがって、入力/選択操作中にインターフェースデバイスを見ることができない。また、作業をしている人は、聞き取れる指示が雑音のある環境では聞こえない場合がある。
本発明の実施形態は、気分に基づく触覚フィードバックを生成することができる触覚システム、及び気分に基づく触覚フィードバックを行う方法を含む。触覚システムは、検知デバイスと、デジタル処理ユニットと、触覚ジェネレーターとを備える。検知デバイスは、一実施形態では、1つ又は複数のセンサーによって収集される気分情報に従ってユーザーの様相を検出するように構成されると共に、ユーザーの様相に応じて検知信号を発行することができる。デジタル処理ユニットは、検知信号に従ってユーザーの状態を特定することができると共に、ユーザーの状態に応じて触覚信号を提供することができる。ユーザーの状態は、一態様では、ユーザーの気分又はユーザーの心理状態を示す。触覚ジェネレーターは、触覚信号に従って触覚フィードバックを生成する。
本発明の例示の実施形態の付加的な特徴及び利点は、以下で述べる詳細な説明、図、及び特許請求の範囲から明らかになる。
本発明の例示の実施形態は、以下に与える詳細な説明及び本発明のさまざまな実施形態の添付図面からより完全に理解される。しかしながら、これらの実施形態は、本発明を特定の実施形態に制限するものと解釈されるべきではなく、単なる説明及び理解のためのものである。
本発明の一実施形態による気分に基づく触覚感覚を生成することができる触覚システムを示す図である。 本発明の一実施形態による気分に基づく触覚システムを有する自動車環境の一例示の用途を示す図である。 本発明の一実施形態による気分に基づく触覚システムを有するビデオゲーム環境の一例示の用途を示す図である。 本発明の一実施形態による、他のデバイスと通信することができる気分に基づく触覚システムを示す図である。 本発明の一実施形態による気分に基づく触覚情報を処理することができる処理デバイスを示す図である。 本発明の一実施形態による気分に基づく触覚フィードバックを提供するプロセスを示すフローチャートである。
本明細書では、本発明の実施形態を、ポータブル触覚デバイスを用いて1つ又は複数のイベントに応じて気分に基づく触覚フィードバックを提供する方法、システム、及び装置のコンテキストで説明する。
本発明の以下の詳細な説明は単なる例示であり、多少なりとも限定的であることを意図するものでないことが当業者には理解されよう。この開示の利益を有するそのような当業者には、本発明の他の実施形態が容易に思いつくであろう。次に、添付図面に示すような本発明の例示の実施形態の実施態様について詳細に言及する。同じ参照指示子(又は番号)は、図面及び以下の詳細な説明の全体を通じて同じ又は同様の部分を指すのに用いられる。
明瞭にするために、本明細書で説明する実施態様の標準的なハードウェア機能及びルーチン機能のすべてが図示及び説明されるわけではない。もちろん、任意のこのような実際の実施態様の開発では、用途に関連した制約及びビジネスに関連した制約との整合性等、開発者の特定の目標を達成するために、数多くの実施態様特有の判断を行う必要があること、及びこれらの特定の目標は実施態様ごと及び開発者ごとに変化することが理解されよう。さらに、このような開発努力は、複雑で多くの時間を要する場合もあるが、それでも、この開示の利益を有する当業者にとってはエンジニアリングの規定通りの作業になることが理解されよう。
本発明の実施形態は、気分に基づく触覚フィードバックを生成することができる触覚システム及び該触覚フィードバックを行う方法を含む。触覚システムは、検知デバイス、デジタル処理ユニット、及び触覚ジェネレーターを含む。検知デバイスは、一実施形態では、ユーザーの様相を示す気分情報を検知するセンサーを用い、その後、ユーザーの様相に従って検知信号を発行する。デジタル処理ユニットは、検知信号を受信すると、ユーザーの状態又は気分を特定する。ユーザーの状態に従って触覚信号が生成された後、触覚ジェネレーターが、この触覚信号に応じて触覚フィードバックを生成する。
図1は、本発明の一実施形態による気分に基づく触覚感覚を生成することができる触覚システムを示す図100である。図100は、第1のポータブルデバイス102、通信ネットワーク104、及び第2のポータブルデバイス106を含む。一実施形態では、ポータブルデバイス102及び106は、無線通信ネットワーク、インターネット、パーソナルエリアネットワーク、ローカルエリアネットワーク、メトロポリタンエリアネットワーク、ワイドエリアネットワーク等の1つ又は複数の通信ネットワークを含むことができるネットワーク104を介して互いに通信することができる。本発明の例示の実施形態の基礎にある概念は、付加的なブロックが図100に追加されても又は図100から削除されても変化しないことに留意すべきである。
ポータブルデバイス102は、一実施形態では、気分に基づく触覚デバイス112、検知デバイス114、及び触覚ジェネレーター128を備える。ディスプレイ108、キーボード110、及びアンテナ116等の付加的な構成要素をデバイス102に追加することができる。ポータブルデバイス102は移動電話、携帯情報端末(Personal Digital Assistant:PDA)、セルラーフォン、ポータブルコンピューター、触覚腕時計、触覚ネックレス等とすることができることに留意すべきである。ポータブルデバイス106は、他方で、気分に基づく触覚デバイス122、検知デバイス124、及び触覚ジェネレーター130を備える。同様に、ディスプレイ118、キーボード120、及びアンテナ126等の付加的な構成要素もポータブルデバイス106に追加することできる。ポータブルデバイス102及び106は、同じデバイス又は異なるデバイスとすることができるが、共に気分に基づく触覚デバイスを装備している限り、互いに通信することができる。
検知デバイス114は、一実施形態では、ユーザーに関する気分情報を検知して収集するように構成された複数のセンサーを備える。たとえば、検知デバイス114は、センサーを用いて、さまざまな様相又はユーザーの気分状態を介して気分情報を検出及び/又は収集する。さまざまな様相又はユーザーの気分状態には、ユーザーの顔の表情、音声ピッチ、及び/又はユーザーのバイオメトリクスが含まれるが、これらに限定されるものではない。バイオメトリクスは、ユーザーの気分状態のサブセットであり、これには、体温、体湿度又は汗、心臓の鼓動又は心拍数、呼吸リズム、体位、手のジェスチャ又は動き等がさらに含まれる。気分情報を取得した後、ポータブルデバイス102又は106と共に実装することができるデジタル処理ユニットは、ユーザーの現在の気分及び/又は収集された気分情報に基づく心理状態を特定する。ユーザーの気分に関する情報は、その後、関心のある関係者に転送される。関心のある関係者は、ユーザー自身又はユーザーと交流のある人とすることができる。たとえば、2人の人がセルラーフォンで会話しているとき、いずれかの関係者が、気分に基づく触覚メカニズムにより他方の人の気分を検知することができる。
検知デバイス114は、代替的に、周囲の状態を検出するセンサーも備える。たとえば、検知デバイス114は、天気、気温、湿度、明るさ、気圧等の環境に関する周囲情報を収集する。検知デバイス114及び/又は気分に基づく触覚デバイス112は、周囲情報を気分情報と共に用いて、ユーザーの気分を評価することができる。周囲情報は、ユーザーが厳しい環境にいるのか又は親しみやすい環境にいるのかを示すこともできることに留意すべきである。
動作中、図1に図示しないユーザーAは、ポータブルデバイス102を用い、ポータブルデバイス106を通じてユーザーBと会話及び/又は通信する。検知デバイス114を介してユーザーAの気分を検知すると、気分に基づく触覚デバイス112は、ネットワーク104を介してポータブルデバイス106にユーザーAの気分情報を送信する。気分情報の受信後、触覚ジェネレーター130は、ユーザーAの気分を示す触覚フィードバックを生成してユーザーBに送る。同様に、ユーザーAは、同じ方法又は類似の方法でユーザーBの気分を触覚ジェネレーター128を介して検知することもできる。
人間の気分のさまざまな態様及び環境状態を検出することができる高度化された検知技術の出現により、人間の挙動及び/又は心理状態の高い精度の人工知能評価又はコンピューター評価がますます達成可能となっている。たとえば、高機能な信号処理ユニットは、画像、音声、及びバイオメトリクス情報を処理して、人間すなわちユーザーの気分又は体調を示す豊富な気分情報又は属性を生成することができる。気分情報が処理されると、気分情報を考慮して触覚フィードバックが生成される。触覚フィードバックは、ユーザー及び/又はユーザーと交流のあるコミュニティに送ることができる。ポータブルデバイス102又は106は、さまざまな様相からユーザーの気分を特定することができるハンドヘルドデバイス、装着可能コンピューターデバイス、又は他の周囲のデバイスとすることができる。ポータブルデバイス102は、近く又は遠隔のロケーションにいるユーザーに気分に基づく触覚フィードバックを提供することができる。
一例において、ユーザーの気分を検知するために、顔の表情を検出する検知技法、音声分析、及び/又はバイオメトリクスセンシングを用いることができる。検知技法は、たとえば、ビデオカメラを用いて、ユーザーの顔の表情を観察することができる。或る特定の顔の表情から、ユーザーの感情状態をビデオの記録に基づき推定することができる。顔の画像を分析して人間の感情面の精神状態を推論する技術は成熟しており利用可能であることに留意すべきである。ビデオカメラは、電話又はPDS上のカメラ等のデバイスと共に一般に利用可能であることにもさらに留意すべきである。
検知技法は、音声分析を記録しかつ/又は容易にするためにさまざまな音センサー又はオーディオセンサーを用いることもできる。電話で会話している間の音声周波数及び音声強度からユーザーの気分を推論することができることに留意すべきである。バイオメトリクスセンシングの場合、さまざまなセンサーを用いて、体温、湿度(若しくは汗)、呼吸リズム、及び/又は心臓の鼓動を測定し、ユーザーの気分又は状態を示すことができる。たとえば、触覚リストバンド又は触覚ネックレスを用いて、心臓の鼓動の検知及び経時的な気分の予測を行うことができる。
用途に応じて、さまざまな様相を用いて、目標とする気分に基づく触覚フィードバックを生成することができる。たとえば、電話で会話中に友人と楽しい精神状態を共有するために、楽しい気分又は愉快な精神状態を信号で伝える触覚キュー(cue)を用いて或るユーザーの電話から別のユーザーの電話へ送信することにより、通信を強化することができる。携帯電話をダイヤル中又は携帯電話で会話中のユーザーの感情状態を捕捉するために、たとえば、携帯電話上のデジタルカメラ又はビデオカメラを用いて捕捉することができ、次いで、捕捉した気分情報又は顔の表情を、呼び出しを受けているユーザーに送信することができる。
図1を再び参照して、触覚システムは、ポータブルデバイス102及び106を備え、各ポータブルデバイスは、1つ又は複数のセンサー及びアクチュエーターをさらに備える。センサー及びアクチュエーターは、一態様では、同じデバイス上に構築することができる。センサーはユーザー状態を検出するのに用いられる一方、アクチュエーターはユーザー状態に従って触覚フィードバックを提供するのに用いられる。たとえば、心拍数センサーはユーザーの心拍数を検知することができる一方、温度センサーはユーザーの体温を測定する。心拍数及び体温等の検出された情報は、その後処理され、現在のユーザーの気分を示す一連の触覚フィードバックが生成される。触覚フィードバックという用語は、触知効果、触知フィードバック、触覚効果、力覚フィードバック、振動触知フィードバック、触覚キュー等と呼ぶことができることに留意すべきである。
気分に基づく触覚デバイスは、無線ネットワーク104を介してそれらのデバイス間で通信することができる。無線通信ネットワークには、ローカル無線周波数、Bluetooth、セルラー(GPRS、CDMA、GSM、CDPD、2.5G、3G等)、超広帯域(Ultra-WideBand:UWB)、WiMax、ZigBee、及び/又は他のアドホック/メッシュ無線ネットワーク技術が含まれ得る。電力消費を削減するために、デバイス102又は106は、中継局を用いて信号強度を増幅し、電力を節減することもできる。たとえば、中継局は、他のユーザーによって用いられる他の触覚デバイスから触覚信号を受信して、電力及びカバレッジを節減することができる。
ポーカーのプレーヤー、水球の泳者、又は自転車ツアー競技の自転車走者等の個人競技又はチームスポーツにおいてデバイス102又は106を用いて、アスリートの気分状態を特定することもできる。たとえば、デバイス102は、検出された気分又は心理情報に従ってチームの成績を改善するために自転車走者のうちの1人に加速又は減速を通知することができる。デバイス102は、精神病院の精神的に不安定な患者を監視する等の他の用途に用いることもできることに留意すべきである。
触覚システムは、一実施形態では、複数のユニットを備えることができる。胸部、手首、足等にそれらのユニットのうちのいくつかを配置してユーザーの気分を検知することができる。触覚ジェネレーター128は、たとえば、気分変動のレベルが異なるごとに異なるレベルの強度で触覚キュー又は触覚警告信号を生成することができる。たとえば、触覚ジェネレーター128は、ユーザーがわずかに憂鬱であるときは小さな触覚キューを生成し、ユーザーが激怒しているときは増強された触覚キューを生成する。触知フィードバックを用いてユーザーの心理状態を示すことは、繊細かつ控え目で非侵襲的な通信方法とすることができることに留意すべきである。
検知デバイス114及び触覚ジェネレーター128を単一のデバイスに結合又は製造することができる。たとえば、振動触知フィードバック又は触覚フィードバックは、圧電材料、形状記憶合金(Shape Memory Alloy:SMA)、偏心回転質量体(Eccentric Rotating Mass:ERM)又はリニア共振アクチュエーター(Linear Resonant Actuator:LRA)等を通じて提供することができる。圧電材料は、一実施形態では、検知機能及び作動機能の双方を実行するのに用いることができる。
圧電材料等のいくつかの触覚材料は、振動触知効果の検知及び提供を行う物理特性を有する。たとえば、圧電材料は、圧力に起因してその物理形状が変形したときに圧力を検出したことを示す電流を放出する。圧電材料の寸法は、5ミリメートル×5ミリメートル等の比較的小さなサイズに縮小することができる。圧電材料には、一実施形態では、石英(SiO)等の結晶又はセラミックが含まれる。電圧ポテンシャルが圧電材料に印加されたとき、圧電材料はその元の形状から拡大した形状に変形する。圧電材料は、電圧ポテンシャルが取り除かれるとすぐにその元の状態に戻ることができる。一方、圧電材料は、押圧されているとき、電流を放出する。その結果として、圧電材料は、押圧されているとき、入力を検出することができる。圧電材料を、LRA、ERM、及びSMA等の他の材料又はデバイスに取り替えても、センサー/アクチュエーターの同様の機能を実行することができる。一例において、SMAは、電圧ポテンシャルが取り除かれた後、或る期間の間その変形形状を維持することができる。本発明の実施形態の基礎となる概念は、圧電アクチュエーター以外の異なる材料が用いられても変化しないことに留意すべきである。
気分に基づく触覚フィードバックを用いることの利点は、このフィードバックが、通話者間で気分情報を送信する通信チャネルを本質的に作成しているということである。気分に基づく触覚システムは、複数の関係者間の会話、チームスポーツ、軍事ミッション、インタロゲーション、患者監視等のさまざまな用途に適用することができる。
図2は、本発明の一実施形態による気分に基づく触覚システムを有する自動車の一例示の用途を示す図200である。図200は、自動車202及びネットワーク204を含み、自動車202は、気分に基づく触覚デバイス208を有するハンドル206をさらに備える。本発明の例示の実施形態の基礎にある概念は、付加的なデバイス及びブロックが図200に追加されても又は図200から削除されても変化しないことに留意すべきである。
自動車202は、一実施形態では、図2には図示しない検知デバイス、触覚ジェネレーター、及び気分処理ユニットを備え、触覚ジェネレーターは、気分に基づく触覚デバイス208と統合することもできる。運転手の気分状態を検出すると、触覚ジェネレーターは、運転手の疲労、機敏さ、注意散漫、及び/又は冷静さのレベルを示すさまざまな触覚フィードバックを生成することができる。触覚ジェネレーターは、運転手の座席を振動させて、運転手のストレスを取り除くか又は運転手の目を覚まさせることができる。たとえば、ハンドル206は、気分に基づく触覚デバイス208をアクティブ化することによって振動触知フィードバックを生成し、運転手が疲れすぎて車両を操作し続けることができないことを運転手に気付かせる。代替的に、触覚ジェネレーターは、運転手の体調(又は有効性)を家族、会社の個人、ハイウェイパトロール等の関係者に放送することもできる。鉄道業界、航空業界、及び/又は海運業界にも同様の気分に基づく触覚システムを適用することができることに留意すべきである。
動作中、自動車202の検知デバイスは、汗、顔の表情、音声、心臓の鼓動等の検知された入力を運転手から読み取る。検知された入力を処理した後、気分処理ユニットは、検知された入力に従って運転手の精神状態、気分、感情等を推測する。運転手の気分状態を特定すると、触覚ジェネレーターは、運転手の現在の気分を示す触覚フィードバックを生成する。
一態様では、気分に基づく触覚デバイス208は、同じユーザーの精神状態又は気分を(悲しいから楽しいへ)変更するように構成される。さらに、デバイス208は、或る特定のタイプの触覚フィードバックを提供することによって、同じユーザーの現在の精神状態又は気分(リラックス状態、高い集中状態)を維持するのに用いることもできる。また、デバイス208は、第三者の個人又はネットワークグループ等の複数の第三者の個人に同じ触覚効果を送信することもできる。
図3は、本発明の一実施形態による気分に基づく触覚システムを有するビデオゲーム環境の一例示の用途を示す図250である。図250は、端末256、ゲームコンソール252、及びゲームコントローラー254を含み、気分に基づく触覚コントローラー258及び260は、ゲームコンソール252及びコントローラー254内に配置される。本発明の例示の実施形態の基礎にある概念は、付加的なデバイス又はブロックが図250に追加されても又は図250から削除されても変化しないことに留意すべきである。
ゲーミングデバイスの場合、ゲームは、一実施形態では、プレーヤーの気分又は感情に応じて難易度又は環境レベルに適応することができる。たとえば、気分に基づく触覚コントローラー258又は260の検知デバイスがリラックスしたプレーヤー(たとえば低い湿度)を検知したとき、ゲームコンソールは、ゲームをより難しいレベル又は異なるゲームイベントに自動的に上げる。代替的に、気分に基づく触覚コントローラー258又は260の検知デバイスが、緊張又は興奮した気分(たとえば高い湿度)を検知したとき、ゲームコンソールはゲームをより簡単なレベル又は異なるゲームイベントに調整する。換言すれば、ゲームコンソールは、ユーザーがゲームをするときに、どれくらい「冷静」であるのかを監視して判断することができる。
代替的な実施形態では、気分に基づく触覚システムを、作業に関連した環境又は設定において効率性を高めるのに用いることもできる。たとえば、製造組立ラインの速度を、気分に基づく触覚システムによって検出される労働者の気分に従って調整することができる。
図4は、本発明の一実施形態による、他のデバイスと通信することができる気分に基づく触覚システムを示している。図300は、ポータブル又は着用可能なインターフェースデバイス302、PC304、セルラーフォン306、PDA308、サーバー310、及び処理デバイス312を含み、処理デバイス312は命令を実行することができる。本発明の例示の実施形態の基礎にある概念は、電源等の付加的なブロックが図300に追加されても又は図300から削除されても変化しないことに留意すべきである。
デバイス302は、センサー320、内部フィルター322、セレクター324、ジェネレーター326、及び触覚出力デバイス328をさらに備える。一実施形態では、センサー320は、デバイス302のユーザーに関する顔の表情、音声ピッチ、及びバイオメトリクスを検出するように構成される。フィルター322は、不要な画像及び音声等のあらゆる無関係な情報をフィルタリングするのに用いられ、これらの不要な画像及び音声等は、ユーザーからの気分情報ではなく自然雑音及び/又は周囲雑音とみなされる。別の実施形態では、内部フィルター322は、ホストコンピューター内に配置され、フィルタリングプロセスは、ホストプロセッサによって実施される。ジェネレーター326は、フィルタリングされた気分情報に応じてコマンドを生成し、さまざまな通信チャネル330乃至338を介してPC304又はPDA308等の1つ又は複数の処理デバイスに入力コマンドを送信する。これらの通信チャネルは、有線通信又は無線通信とすることができる。
セレクター324は、触覚効果のリストを含む触覚データを格納するのに用いられる1つ又は複数の触覚ライブラリを含む。一実施形態では、触覚効果のリストは、検出された気分情報に従ってユーザーに触覚フィードバックを提供するのに用いられる。各気分検出又は気分入力は、たとえば、固有の触覚フィードバックを必要とすることがある。触覚データを含むライブラリは、リモートホストコンピューターに配置することもできることに留意すべきである。代替的な実施形態では、触覚データを動的に生成して、連続的に更新し、検出された気分状態をエミュレート及び/又は再現することができる。気分状態をリアルタイムでエミュレートするために、セレクター324は、触覚効果を動的に生成して、検出された気分及び/又は気分状態をエミュレートすることができる。触覚出力デバイス328は、セレクター324からの触覚データに従って触覚フィードバックを生成する。たとえば、振動効果は楽しい気分をエミュレートする。
デバイス302の機能は、気分に基づく触覚フィードバックを、ラップトップ304、セルラーフォン306、PDA308、サーバー310等の1つ又は複数のデバイスに同時に通信することである。構成要素320乃至328は、用途に応じていくつかの異なるエンティティ内に分散させることもできることに留意すべきである。デバイス302は、ケーブル接続、無線接続、並びに有線ネットワーク及び無線ネットワークの組み合わせを介して他のデバイス304乃至310と通信することができる。
図5は、本発明の一実施形態による、気分に基づく触覚情報を処理することができる処理ユニット500を示している。ユニット500は、処理ユニット501、インターフェースバス511、及び入出力(Input/Output:IO)ユニット520を備える。処理ユニット501は、プロセッサ502、メインメモリ504、システムバス511、スタティックメモリデバイス506、バス制御ユニット505、マスストレージメモリ507、及び気分制御530を備える。バス511は、さまざまな構成要素とプロセッサ502との間でデータ処理のために情報を送信するのに用いられる。プロセッサ502は、Pentium(商標)マイクロプロセッサ、Intel(登録商標)Core(商標)2 Duo、Intel(登録商標)Core(商標)2 Quad、Intel(登録商標)Xeon(登録商標)、AMD Athlon(商標)プロセッサ、Motorola(商標)68040、又はPowerPC(商標)マイクロプロセッサ等、多種多様な汎用プロセッサ又はマイクロプロセッサのうちの任意のものとすることができる。気分制御530は、気分に基づく入力信号に応じて触覚フィードバックを生成する。
メインメモリ504は、複数のレベルのキャッシュメモリを備えることができ、頻繁に用いられるデータ及び命令を格納する。メインメモリ504は、RAM(ランダムアクセスメモリ)、MRAM(磁気RAM)、又はフラッシュメモリとすることができる。スタティックメモリ506は、静的情報及び/又は命令を格納するROM(読み出し専用メモリ)とすることができ、バス511に結合される。バス制御ユニット505は、バス511乃至512に結合され、メインメモリ504又はプロセッサ502等のいずれのコンポーネントがバスを用いることができるのかを制御する。バス制御ユニット505は、バス511とバス512との間の通信を管理する。マスストレージメモリ507は、大量のデータを記憶する磁気ディスク、光ディスク、ハードディスクドライブ、フロッピーディスク、CD−ROM、及び/又はフラッシュメモリとすることができる。アクチュエーター制御モジュール530は、一実施形態では、触覚効果制御の機能を実行する独立した構成要素(Independent Component:IC)である。アクチュエーター制御530の機能は、1つ又は複数の触覚アクチュエーター524を駆動することであり、1つ又は複数の触覚アクチュエーター524はリモートの装着可能リングとすることができる。別の実施形態では、アクチュエーター制御モジュール530は、プロセッサ502、メインメモリ504、及び/又はスタティックメモリ506内に存在することができる。
I/Oユニット520は、一実施形態では、フレキシブルディスプレイ521、キーボード522、カーソル制御デバイス523、及び通信デバイス525を備える。キーボード522は、処理ユニット500とコンピューターオペレーターとの間で情報を通信する従来の英数字入力デバイスとすることができる。別のタイプのユーザー入力デバイスは、従来のマウス、タッチマウス、トラックボール、指、又はユニット500とユーザーとの間で情報を通信する他のタイプのカーソル等のカーソル制御デバイス523である。通信デバイス525は、ワイドエリアネットワークを通じてリモートコンピューター又はリモートサーバーから情報にアクセスするバス512に結合される。通信デバイス525には、モデム若しくは無線ネットワークインターフェースデバイス、又はユニット500とネットワークとの間の通信を容易にする他の同様のデバイスが含まれ得る。
本発明の例示の実施形態は、以下で説明するさまざまな処理ステップを含む。実施形態のステップは、マシン実行可能命令又はコンピューター実行可能命令で実施することができる。命令は、該命令を用いてプログラムされた汎用システム又は専用システムに、本発明の実施形態のステップを実行させるのに用いることができる。代替的に、本発明の実施形態のステップは、該ステップを実行するハードワイヤードロジックを含む特定のハードウェア構成要素が実行することもできるし、プログラムされたコンピューター構成要素及びカスタムハードウェア構成要素の任意の組み合わせが実行することもできる。
図6は、本発明の一実施形態による気分に基づく触覚フィードバックを提供するプロセスを示すフローチャート600である。ブロック602において、気分情報に基づく触覚フィードバックを生成することができるプロセスが、ユーザーに関連した第1のイベントを検知する。一例では、プロセスは、ユーザーに関する顔の表情、音声、及び心拍数を検知するように構成される。別の例では、プロセスは、体温及び呼吸リズム等のユーザーのバイオメトリクスを検出することができる。
ブロック604において、プロセスは、第1のイベントに応じて検知信号を生成する。一実施形態では、プロセスは、第1のイベントが楽しい気分を示すとき、ユーザーの現在の気分を示す楽しい指示子を提供する。代替的に、プロセスは、第1のイベントが悲しい気分を示すとき、ユーザーの現在の気分を示す悲しい指示子を提供することができる。
ブロック606において、プロセスは、ネットワークを介して検知信号を受信し、その後、検知信号に基づくユーザーの状態又は気分が判断される。プロセスは、無線通信ネットワークを通じて検知信号を取得することもできる。ユーザーの気分は連続的にサンプリングすることができ、ユーザーの気分をそれに従って更新することができることに留意すべきである。
ブロック608において、プロセスは、ユーザーの状態に従って触覚信号を生成し、触覚信号を触覚ジェネレーターに転送する。一実施形態では、プロセスは、別のユーザーによって操作される別の触覚システムにも触覚信号を通信ネットワークを介して送信する。
ブロック610において、プロセスは、触覚信号に応じて触覚フィードバックを生成する。一実施形態では、プロセスは、ユーザーの状態又は気分に従ってゲームの難易度を調整する。別の実施形態では、プロセスは、ユーザーの状態又は気分を示すアラート信号を提供する。プロセスは、一例では、周囲の状態に関連した第2のイベントを検知することができる。たとえば、プロセスは、周辺環境の温度を検出することができる。
本発明の特定の実施形態を図示及び説明してきたが、本明細書の教示に基づいて、本発明及びそのより広い態様から逸脱することなく、変更及び改変を行うことができることが当業者に明らかであろう。したがって、添付の特許請求の範囲は、本発明の例示の実施形態の真の趣旨及び範囲内にあるすべての変更及び改変をその範囲内に包含するように意図されている。

Claims (26)

  1. 1つ又は複数のセンサーによって収集される検出された気分情報に従って、ユーザーの気分状態を検出するように構成されると共に、前記ユーザーの気分状態に応じて検知信号を発行することができる検知デバイスと、
    前記検知デバイスに結合されると共に、前記検知信号に従ってユーザーの状態を特定するように構成されるデジタル処理ユニットであって、該デジタル処理ユニットは、前記ユーザーの状態に応じて触覚信号を提供する、デジタル処理ユニットと、
    前記デジタル処理ユニットに結合されると共に、前記触覚信号に従って触覚フィードバックを生成することができる触覚ジェネレーターと、
    を備える、触覚システム。
  2. 前記デジタル処理ユニットに論理結合されると共に、前記ユーザーの気分に基づく触覚フィードバックを生成することができるアクティブデバイスをさらに備える、請求項1に記載のシステム。
  3. 前記アクティブデバイスは、無線通信ネットワークを用いて前記デジタル処理ユニットと通信する、請求項2に記載のシステム。
  4. 前記アクティブデバイスは、前記ユーザーの状態に従ってゲームイベントを調整することができるゲーミングデバイスである、請求項2に記載のシステム。
  5. 前記アクティブデバイスは、前記ユーザーの状態に関するアラートを発行することができるアラートデバイスである、請求項2に記載のシステム。
  6. 前記ユーザーの気分状態を検出するように構成される前記検知デバイスは、顔の表情、音声、温度、湿度のレベル、及び電気パルスのうちの1つを検出することができる、請求項1に記載のシステム。
  7. 前記ユーザーの気分状態を検出するように構成される前記検知デバイスは、周囲の状態をさらに検出することができる、請求項1に記載のシステム。
  8. 前記検知デバイスに結合されると共に、前記ユーザーの状態を特定するように構成される前記デジタル処理ユニットは、前記検知信号に従ってユーザーの気分を判断することができる、請求項1に記載のシステム。
  9. 前記デジタル処理ユニットに結合される前記触覚ジェネレーターは、無線通信ネットワークを介して前記デジタル処理ユニットに結合される、請求項1に記載のシステム。
  10. 触覚キューを生成する方法であって、
    ユーザーに関連した第1のイベントを検知するステップ、
    前記第1のイベントに応じて検知信号を生成するステップ、
    ネットワークを介して前記検知信号を受信すると共に、該検知信号に応じてユーザーの状態のうちの1つを判断するステップ、
    前記ユーザーの状態に従って触覚信号を生成すると共に、該触覚信号を触覚ジェネレーターに転送するステップ、及び
    前記触覚信号に応じて触覚フィードバックを生成するステップ、
    を含む方法。
  11. 前記ユーザーの状態に従ってゲームの難易度を調整するステップをさらに含む、請求項10に記載の方法。
  12. 前記ユーザーの状態を示すアラートを提供するステップをさらに含む、請求項10に記載の方法。
  13. 周囲の状態に関連した第2のイベントを検知するステップをさらに含む、請求項10に記載の方法。
  14. 前記周囲の状態に関連した第2のイベントを検知するステップは、周辺環境の温度を検出するステップを含む、請求項13に記載の方法。
  15. 前記ユーザーに関連した第1のイベントを検知するステップは、顔の表情、音声、及び心拍数のうちの1つを検知するステップを含む、請求項10に記載の方法。
  16. 前記検知信号に応じてユーザーの状態のうちの1つを判断するステップは、ユーザーの気分を特定するステップをさらに含む、請求項10に記載の方法。
  17. 前記第1のイベントに応じて検知信号を生成するステップは、
    前記第1のイベントが楽しい気分を示すときは、楽しい指示子を提供するステップ、及び
    前記第1のイベントが悲しい気分を示すときは、悲しい指示子を提供するステップ、
    をさらに含む、請求項10に記載の方法。
  18. 前記ネットワークを介して前記検知信号を受信するステップは、無線通信ネットワークを通じて前記検知信号を取得するステップを含む、請求項10に記載の方法。
  19. 前記触覚信号を触覚ジェネレーターに転送するステップは、別のユーザーによって操作される別の触覚システムに前記触覚信号を通信ネットワークを介して送信するステップを含む、請求項10に記載の方法。
  20. 触覚キューを生成する装置であって、
    ユーザーに関連した第1のイベントを検知する手段と、
    前記第1のイベントに応じて検知信号を生成する手段と、
    ネットワークを介して前記検知信号を受信すると共に、該検知信号に応じてユーザーの状態のうちの1つを判断する手段と、
    前記ユーザーの状態に従って触覚信号を生成すると共に、該触覚信号を触覚ジェネレーターに転送する手段と、
    前記触覚信号に応じて触覚フィードバックを生成する手段と、
    を備える、装置。
  21. 前記ユーザーの状態に従ってゲームの難易度を調整する手段をさらに備える、請求項20に記載の装置。
  22. 前記ユーザーの状態を示すアラートを提供する手段をさらに備える、請求項20に記載の装置。
  23. 周囲の状態に関連した第2のイベントを検知する手段をさらに備える、請求項20に記載の装置。
  24. 前記周囲の状態に関連した第2のイベントを検知する前記手段は、周辺環境の温度を検出する手段を含む、請求項20に記載の装置。
  25. 前記ユーザーに関連した第1のイベントを検知する前記手段は、顔の表情、音声、及び心拍数のうちの1つを検知する手段を含む、請求項20に記載の装置。
  26. 前記検知信号に応じてユーザーの状態のうちの1つを判断する前記手段は、ユーザーの気分を特定する手段をさらに含む、請求項20に記載の装置。
JP2011537517A 2008-11-19 2009-11-13 気分に基づく触覚フィードバックを生成する方法及び装置 Expired - Fee Related JP5643214B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/274,152 2008-11-19
US12/274,152 US8004391B2 (en) 2008-11-19 2008-11-19 Method and apparatus for generating mood-based haptic feedback
PCT/US2009/064348 WO2010059513A2 (en) 2008-11-19 2009-11-13 Method and apparatus for generating mood-based haptic feedback

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2014219881A Division JP5952374B2 (ja) 2008-11-19 2014-10-29 気分に基づく触覚フィードバックを生成する方法及び装置

Publications (2)

Publication Number Publication Date
JP2012509145A true JP2012509145A (ja) 2012-04-19
JP5643214B2 JP5643214B2 (ja) 2014-12-17

Family

ID=42110296

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2011537517A Expired - Fee Related JP5643214B2 (ja) 2008-11-19 2009-11-13 気分に基づく触覚フィードバックを生成する方法及び装置
JP2014219881A Expired - Fee Related JP5952374B2 (ja) 2008-11-19 2014-10-29 気分に基づく触覚フィードバックを生成する方法及び装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2014219881A Expired - Fee Related JP5952374B2 (ja) 2008-11-19 2014-10-29 気分に基づく触覚フィードバックを生成する方法及び装置

Country Status (6)

Country Link
US (4) US8004391B2 (ja)
EP (1) EP2350776A2 (ja)
JP (2) JP5643214B2 (ja)
KR (3) KR101600126B1 (ja)
CN (2) CN104571535B (ja)
WO (1) WO2010059513A2 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014174988A (ja) * 2013-03-11 2014-09-22 Immersion Corp 自動ハプティック効果調整システム
JP2014528328A (ja) * 2011-10-04 2014-10-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated 生理的データを収集するための動的に構成可能な生体電位電極アレイ
JP2015535632A (ja) * 2012-11-21 2015-12-14 ソムニック インク. エンパセティックコンピューティングのための装置、システム、及び方法
JP2016509276A (ja) * 2012-12-03 2016-03-24 クゥアルコム・インコーポレイテッドQualcomm Incorporated ユーザ感情の電子媒体への関連付け
USD806711S1 (en) 2015-12-11 2018-01-02 SomniQ, Inc. Portable electronic device
US9946351B2 (en) 2015-02-23 2018-04-17 SomniQ, Inc. Empathetic user interface, systems, and methods for interfacing with empathetic computing device
US10222875B2 (en) 2015-12-11 2019-03-05 SomniQ, Inc. Apparatus, system, and methods for interfacing with a user and/or external apparatus by stationary state detection
JP2022053411A (ja) * 2020-09-24 2022-04-05 株式会社Jvcケンウッド 情報処理装置、情報処理方法、およびプログラム
JP2026021580A (ja) * 2014-05-16 2026-02-10 Case特許株式会社 車両

Families Citing this family (122)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
US20100152620A1 (en) * 2008-12-12 2010-06-17 Immersion Corporation Method and Apparatus for Providing A Haptic Monitoring System Using Multiple Sensors
US20100201652A1 (en) * 2009-02-12 2010-08-12 Sony Ericsson Mobile Communications Ab Embedded piezoelectric elements in touch panels
KR101054359B1 (ko) * 2009-02-16 2011-08-04 한국과학기술원 근감각 피드백을 이용한 상호작용장치 및 이의 작동방법
CN102395410B (zh) * 2009-04-15 2015-12-02 皇家飞利浦电子股份有限公司 用于适应性调节用户环境的方法和系统
KR101262922B1 (ko) * 2009-12-10 2013-05-09 한국전자통신연구원 감성 변화에 따른 감성지수 결정 장치 및 그 방법
US8314691B2 (en) * 2010-01-12 2012-11-20 Shepherd Center, Inc. Assistive driving aid
US20110276659A1 (en) * 2010-04-05 2011-11-10 Electronics And Telecommunications Research Institute System and method for providing multimedia service in a communication system
US9678569B2 (en) * 2010-04-23 2017-06-13 Immersion Corporation Systems and methods for providing haptic effects
US10779761B2 (en) * 2010-06-07 2020-09-22 Affectiva, Inc. Sporadic collection of affect data within a vehicle
CN102387241B (zh) * 2010-09-02 2015-09-23 联想(北京)有限公司 一种移动终端及其发送处理方法
JP5149954B2 (ja) * 2010-11-25 2013-02-20 東芝テック株式会社 情報処理端末
US20140025385A1 (en) * 2010-12-30 2014-01-23 Nokia Corporation Method, Apparatus and Computer Program Product for Emotion Detection
US20120182211A1 (en) * 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
US8674961B2 (en) * 2011-01-31 2014-03-18 National Semiconductor Corporation Haptic interface for touch screen in mobile device or other device
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
KR101121784B1 (ko) * 2011-05-28 2012-03-09 (주)이미지스테크놀로지 입출력 성질을 가진 소자를 이용한 터치 및 햅틱 구동 시스템
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
KR101779505B1 (ko) * 2011-06-29 2017-09-18 엘지전자 주식회사 이동 단말기 및 이동 단말기의 생체신호 측정 방법
US9762719B2 (en) * 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
CN102438064A (zh) * 2011-09-28 2012-05-02 宇龙计算机通信科技(深圳)有限公司 移动终端的情绪表达方法、系统及移动终端
US20140250200A1 (en) * 2011-11-09 2014-09-04 Koninklijke Philips N.V. Using biosensors for sharing emotions via a data network service
US20130144537A1 (en) * 2011-12-03 2013-06-06 Neuro Analytics and Technologies, LLC Real Time Assessment During Interactive Activity
JP5929145B2 (ja) * 2011-12-07 2016-06-01 株式会社ニコン 電子機器、情報処理方法およびプログラム
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
US8954372B2 (en) 2012-01-20 2015-02-10 Fuji Xerox Co., Ltd. System and methods for using presence data to estimate affect and communication preference for use in a presence system
US20130305169A1 (en) * 2012-05-11 2013-11-14 Robert Evan Gold Methods and Systems for Providing Feedback in Interactive, Interest Centric Communications Environment
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
DE102012214697A1 (de) 2012-08-01 2014-02-06 Soma Analytics Ug (Haftungsbeschränkt) Vorrichtung, Verfahren und Applikation zur Ermittlung eines aktuellenBelastungsniveaus
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
JP5634462B2 (ja) * 2012-08-31 2014-12-03 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
CN103678417B (zh) * 2012-09-25 2017-11-24 华为技术有限公司 人机交互数据处理方法和装置
US9104231B2 (en) 2012-09-27 2015-08-11 Microsoft Technology Licensing, Llc Mood-actuated device
WO2014065781A1 (en) * 2012-10-23 2014-05-01 Empire Technology Development, Llc Filtering user actions based on user's mood
CN103905619A (zh) * 2012-12-26 2014-07-02 腾讯科技(深圳)有限公司 一种基于移动终端的交互方法、系统及移动终端
US9046884B2 (en) 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device
JP2014134922A (ja) * 2013-01-09 2014-07-24 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20140191939A1 (en) * 2013-01-09 2014-07-10 Microsoft Corporation Using nonverbal communication in determining actions
EP2759949A1 (en) 2013-01-28 2014-07-30 Tata Consultancy Services Limited Media system for generating playlist of multimedia files
US10504339B2 (en) * 2013-02-21 2019-12-10 Immersion Corporation Mobile device with instinctive alerts
US20140239743A1 (en) * 2013-02-27 2014-08-28 James Edward Jennings Xeno transduction system
CN103179274A (zh) * 2013-03-11 2013-06-26 广东欧珀移动通信有限公司 在移动终端上显示心情的方法及系统
US9904394B2 (en) * 2013-03-13 2018-02-27 Immerson Corporation Method and devices for displaying graphical user interfaces based on user contact
US9875304B2 (en) 2013-03-14 2018-01-23 Aperture Investments, Llc Music selection and organization using audio fingerprints
US11271993B2 (en) 2013-03-14 2022-03-08 Aperture Investments, Llc Streaming music categorization using rhythm, texture and pitch
US10061476B2 (en) 2013-03-14 2018-08-28 Aperture Investments, Llc Systems and methods for identifying, searching, organizing, selecting and distributing content based on mood
US10623480B2 (en) 2013-03-14 2020-04-14 Aperture Investments, Llc Music categorization using rhythm, texture and pitch
US10225328B2 (en) 2013-03-14 2019-03-05 Aperture Investments, Llc Music selection and organization using audio fingerprints
US10242097B2 (en) 2013-03-14 2019-03-26 Aperture Investments, Llc Music selection and organization using rhythm, texture and pitch
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9274603B2 (en) * 2013-05-24 2016-03-01 Immersion Corporation Method and apparatus to provide haptic feedback based on media content and one or more external parameters
CN104239304B (zh) * 2013-06-07 2018-08-21 华为技术有限公司 一种数据处理的方法、装置以及设备
CN103315753A (zh) * 2013-06-24 2013-09-25 西南大学 便携式情感分析仪及分析方法
EP3041200B1 (en) * 2013-08-29 2021-04-28 Sony Corporation Wristband-type information processing device, information processing system, information processing method, and program
US9892413B2 (en) * 2013-09-05 2018-02-13 International Business Machines Corporation Multi factor authentication rule-based intelligent bank cards
US9669297B1 (en) 2013-09-18 2017-06-06 Aftershock Services, Inc. Using biometrics to alter game content
US9368006B1 (en) * 2013-09-24 2016-06-14 Woodenshark, LLC Wearable bracelet with bidirectional network connectivity and touch feedback
US20150084735A1 (en) * 2013-09-25 2015-03-26 Lenovo (Singapore) Pte. Ltd. Wearable information handling device outputs
US9489048B2 (en) * 2013-12-13 2016-11-08 Immersion Corporation Systems and methods for optical transmission of haptic display parameters
GB2521436A (en) 2013-12-20 2015-06-24 Nokia Corp Method and apparatus for adaptive feedback
US9754445B2 (en) * 2013-12-31 2017-09-05 Video Gaming Technologies, Inc. Stress detecting input device for a gaming machine
US8941500B1 (en) 2014-01-23 2015-01-27 Google Inc. Somatosensory type notification alerts
US10254836B2 (en) * 2014-02-21 2019-04-09 Immersion Corporation Haptic power consumption management
CN105981083B (zh) * 2014-02-24 2019-01-08 索尼公司 智能可穿戴设备和用于优化输出的方法
US20220147562A1 (en) 2014-03-27 2022-05-12 Aperture Investments, Llc Music streaming, playlist creation and streaming architecture
US9509789B2 (en) * 2014-06-04 2016-11-29 Grandios Technologies, Llc Managing mood data on a user device
US9390706B2 (en) * 2014-06-19 2016-07-12 Mattersight Corporation Personality-based intelligent personal assistant system and methods
KR102254705B1 (ko) 2014-09-19 2021-05-24 삼성전자주식회사 단말 장치 및 그 제어방법
KR102225400B1 (ko) 2014-12-04 2021-03-09 삼성전자주식회사 웨어러블 디바이스 및 웨어러블 디바이스에서 메시지를 전송하는 방법
KR20160105321A (ko) 2015-02-27 2016-09-06 임머숀 코퍼레이션 사용자의 무드에 기초하는 액션 생성
CN104799831A (zh) * 2015-03-18 2015-07-29 四川九洲电器集团有限责任公司 一种用于情感监测的可穿戴设备
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US9853905B2 (en) 2015-04-02 2017-12-26 Honda Motor Co., Ltd. System and method for wireless connected device prioritization in a vehicle
US10293260B1 (en) * 2015-06-05 2019-05-21 Amazon Technologies, Inc. Player audio analysis in online gaming environments
CN105100435A (zh) * 2015-06-15 2015-11-25 百度在线网络技术(北京)有限公司 移动通讯应用方法和装置
US20160378186A1 (en) * 2015-06-23 2016-12-29 Intel Corporation Technologies for controlling haptic feedback intensity
US10210737B2 (en) * 2015-06-23 2019-02-19 Cleveland State University Systems and methods for privacy-aware motion tracking with notification feedback
CN105139317B (zh) * 2015-08-07 2018-10-09 北京环度智慧智能技术研究所有限公司 兴趣取向值测验的认知指标分析方法
US10248207B2 (en) * 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
WO2017081895A1 (ja) * 2015-11-13 2017-05-18 ソニー株式会社 通信システム、および記憶媒体
US10105608B1 (en) 2015-12-18 2018-10-23 Amazon Technologies, Inc. Applying participant metrics in game environments
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
WO2017173436A1 (en) 2016-04-01 2017-10-05 University Of Pittsburgh-Of The Commonwealth System Of Higher Education Regulatory device and associated method
US10382820B2 (en) * 2016-04-01 2019-08-13 Huawei Technologies Co., Ltd. Apparatus and method for bandwidth allocation as a function of a sensed characteristic of a user
CN105852823A (zh) * 2016-04-20 2016-08-17 吕忠华 一种医学用智能化息怒提示设备
EP3454815A4 (en) * 2016-05-09 2020-01-08 Subpac, Inc. TOUCH SOUND DEVICE WITH ACTIVE FEEDBACK SYSTEM
WO2017201329A1 (en) * 2016-05-20 2017-11-23 Magic Leap, Inc. Contextual awareness of user interface menus
US9886829B2 (en) * 2016-06-20 2018-02-06 Immersion Corporation Systems and methods for closed-loop control for haptic feedback
US9921609B2 (en) 2016-08-02 2018-03-20 Immersion Corporation Systems and methods for deformation and haptic effects
WO2018035442A1 (en) * 2016-08-19 2018-02-22 Xsync Technologies Llc Systems and methods for multimedia tactile augmentation
US11676461B2 (en) * 2016-08-29 2023-06-13 Sony Corporation Information processing device, information processing method, and program for controlling haptics based on context information
US10884502B2 (en) * 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
US10078370B2 (en) * 2016-11-23 2018-09-18 Immersion Corporation Devices and methods for modifying haptic effects
US10769418B2 (en) 2017-01-20 2020-09-08 At&T Intellectual Property I, L.P. Devices and systems for collective impact on mental states of multiple users
US20180247443A1 (en) * 2017-02-28 2018-08-30 International Business Machines Corporation Emotional analysis and depiction in virtual reality
CN107071154A (zh) * 2017-03-22 2017-08-18 广东小天才科技有限公司 一种通话过程中的提示方法及移动设备
CN108653897A (zh) * 2017-03-31 2018-10-16 高军 一种单兵心理调适仪系统
GB201713301D0 (en) * 2017-08-18 2017-10-04 Revolutioneyes Me Ltd Communication method
KR101901364B1 (ko) 2017-09-18 2018-11-22 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
US20190138095A1 (en) * 2017-11-03 2019-05-09 Qualcomm Incorporated Descriptive text-based input based on non-audible sensor data
US10776576B2 (en) 2017-11-16 2020-09-15 International Business Machines Corporation Automated mobile device detection
CN108491074B (zh) * 2018-03-09 2021-07-09 Oppo广东移动通信有限公司 电子装置、运动辅助方法及相关产品
KR102311660B1 (ko) * 2018-09-17 2021-10-13 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
CN109432779B (zh) * 2018-11-08 2022-05-17 北京旷视科技有限公司 难度调整方法、装置、电子设备及计算机可读存储介质
CN109582137A (zh) * 2018-11-15 2019-04-05 深圳市知更鸟旅游投资发展有限公司 一种行为动作识别系统及其方法
US10835823B2 (en) * 2018-12-27 2020-11-17 Electronic Arts Inc. Sensory-based dynamic game-state configuration
WO2020142259A1 (en) 2019-01-04 2020-07-09 Apollo Neuroscience, Inc. Systems and methods of wave generation for transcutaneous vibration
KR102777377B1 (ko) * 2019-01-07 2025-03-11 현대자동차주식회사 차량 및 그 제어방법
CN110279426A (zh) * 2019-06-03 2019-09-27 常州为伊心理咨询有限公司 一种综合性中学生心理测评系统
US20220121283A1 (en) * 2019-06-12 2022-04-21 Hewlett-Packard Development Company, L.P. Finger clip biometric virtual reality controllers
WO2021119910A1 (zh) * 2019-12-16 2021-06-24 瑞声声学科技(深圳)有限公司 一种触觉反馈分享方法、装置及系统
WO2021203197A1 (en) * 2020-04-07 2021-10-14 The Royal Institution For The Advancement Of Learning / Mcgill University Methods and systems for controlling a haptic display
CN116157606A (zh) 2020-07-22 2023-05-23 日本精工株式会社 动力传递路径切换装置及二级变速器
EP4196868A4 (en) 2021-01-21 2024-02-21 Samsung Electronics Co., Ltd. METHODS AND SYSTEMS FOR CUSTOMIZING DEVICES IN AN IOT ENVIRONMENT USING A SELF-ADAPTIVE MECHANISM
WO2022190187A1 (ja) * 2021-03-09 2022-09-15 株式会社ファセテラピー 振動情報提供システム、振動情報提供サーバ装置、振動情報取得装置、振動情報提供方法、振動情報提供用プログラムおよび振動情報取得用プログラム
CN113703567B (zh) * 2021-07-06 2024-09-20 清华大学 图像处理系统、方法、设备、可读存储介质及程序产品
CN118511016A (zh) 2022-01-13 2024-08-16 日本精工株式会社 动力传递路径切换装置以及二级变速器
CN114598896A (zh) * 2022-02-17 2022-06-07 北京达佳互联信息技术有限公司 网络直播方法、装置、电子设备以及存储介质
CN115826770A (zh) * 2022-10-26 2023-03-21 瑞声开泰声学科技(上海)有限公司 触觉反馈方法和装置
CN116943226B (zh) * 2023-09-20 2024-01-05 小舟科技有限公司 基于情绪识别的游戏难度调节方法、系统、设备及介质
US20250291417A1 (en) * 2024-03-14 2025-09-18 Dell Products L.P. Information handling system haptic feedback closed loop response
US12541247B1 (en) * 2024-09-16 2026-02-03 Dell Products L.P. Artificial emotional intelligence using human interface devices (HIDs)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0654836A (ja) * 1991-07-30 1994-03-01 Muneaki Mizote 人の心理的変化の推定方法及び装置
JPH08229132A (ja) * 1994-12-28 1996-09-10 Hitachi Ltd 生体信号測定・誘導装置
JPH09294724A (ja) * 1996-05-08 1997-11-18 Sanyo Electric Co Ltd 精神安定化訓練装置
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
JP2001252265A (ja) * 2000-03-08 2001-09-18 Sharp Corp バイオフィードバック装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes
WO2007055099A1 (ja) * 2005-11-09 2007-05-18 Pioneer Corporation 運転者精神状態情報提供システム

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2928344B2 (ja) * 1990-07-11 1999-08-03 松下電器産業株式会社 体調監視装置
US5720619A (en) * 1995-04-24 1998-02-24 Fisslinger; Johannes Interactive computer assisted multi-media biofeedback system
US7689437B1 (en) * 2000-06-16 2010-03-30 Bodymedia, Inc. System for monitoring health, wellness and fitness
US7159008B1 (en) * 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
US6963762B2 (en) * 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
EP1440414B1 (en) * 2001-10-30 2016-08-17 Immersion Corporation Methods and apparatus for providing haptic feedback in interacting with virtual pets
US20030195040A1 (en) * 2002-04-10 2003-10-16 Breving Joel S. Video game system and game controller
US8849379B2 (en) * 2002-04-22 2014-09-30 Geelux Holdings, Ltd. Apparatus and method for measuring biologic parameters
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
JP4165707B2 (ja) * 2004-03-22 2008-10-15 株式会社国際電気通信基礎技術研究所 刺激提示システム
EP1582965A1 (en) * 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
US7148789B2 (en) * 2004-09-09 2006-12-12 Motorola, Inc. Handheld device having multiple localized force feedback
US20070063849A1 (en) * 2005-09-02 2007-03-22 Francesca Rosella Wearable haptic telecommunication device and system
WO2007033194A2 (en) * 2005-09-13 2007-03-22 Aware Technologies, Inc. Method and system for proactive telemonitor with real-time activity and physiology classification and diary feature
JP2007115147A (ja) 2005-10-21 2007-05-10 Aruze Corp ユーザの感情や体調の安定化を図る感情・体調の安定化装置
TWI311067B (en) * 2005-12-27 2009-06-21 Ind Tech Res Inst Method and apparatus of interactive gaming with emotion perception ability
US7602301B1 (en) * 2006-01-09 2009-10-13 Applied Technology Holdings, Inc. Apparatus, systems, and methods for gathering and processing biometric and biomechanical data
US8157730B2 (en) * 2006-12-19 2012-04-17 Valencell, Inc. Physiological and environmental monitoring systems and methods
US8098273B2 (en) * 2006-12-20 2012-01-17 Cisco Technology, Inc. Video contact center facial expression analyzer module
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
EP1936929A1 (en) * 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
US20080220865A1 (en) * 2007-03-06 2008-09-11 Wei Hsu Interactive playstation controller
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9754078B2 (en) 2007-06-21 2017-09-05 Immersion Corporation Haptic health feedback monitoring
US20090002178A1 (en) * 2007-06-29 2009-01-01 Microsoft Corporation Dynamic mood sensing
US20090110246A1 (en) * 2007-10-30 2009-04-30 Stefan Olsson System and method for facial expression control of a user interface
EP2327201B1 (en) * 2008-07-15 2018-09-05 Immersion Corporation Systems and methods for transmitting haptic messages
US9046884B2 (en) * 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0654836A (ja) * 1991-07-30 1994-03-01 Muneaki Mizote 人の心理的変化の推定方法及び装置
JPH08229132A (ja) * 1994-12-28 1996-09-10 Hitachi Ltd 生体信号測定・誘導装置
JPH09294724A (ja) * 1996-05-08 1997-11-18 Sanyo Electric Co Ltd 精神安定化訓練装置
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
JP2001252265A (ja) * 2000-03-08 2001-09-18 Sharp Corp バイオフィードバック装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes
WO2007055099A1 (ja) * 2005-11-09 2007-05-18 Pioneer Corporation 運転者精神状態情報提供システム

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014528328A (ja) * 2011-10-04 2014-10-27 クゥアルコム・インコーポレイテッドQualcomm Incorporated 生理的データを収集するための動的に構成可能な生体電位電極アレイ
JP2015535632A (ja) * 2012-11-21 2015-12-14 ソムニック インク. エンパセティックコンピューティングのための装置、システム、及び方法
US9830005B2 (en) 2012-11-21 2017-11-28 SomniQ, Inc. Devices, systems, and methods for empathetic computing
JP2016509276A (ja) * 2012-12-03 2016-03-24 クゥアルコム・インコーポレイテッドQualcomm Incorporated ユーザ感情の電子媒体への関連付け
US9378655B2 (en) 2012-12-03 2016-06-28 Qualcomm Incorporated Associating user emotion with electronic media
JP2014174988A (ja) * 2013-03-11 2014-09-22 Immersion Corp 自動ハプティック効果調整システム
US10228764B2 (en) 2013-03-11 2019-03-12 Immersion Corporation Automatic haptic effect adjustment system
JP2026021580A (ja) * 2014-05-16 2026-02-10 Case特許株式会社 車両
US10409377B2 (en) 2015-02-23 2019-09-10 SomniQ, Inc. Empathetic user interface, systems, and methods for interfacing with empathetic computing device
US9946351B2 (en) 2015-02-23 2018-04-17 SomniQ, Inc. Empathetic user interface, systems, and methods for interfacing with empathetic computing device
US10222875B2 (en) 2015-12-11 2019-03-05 SomniQ, Inc. Apparatus, system, and methods for interfacing with a user and/or external apparatus by stationary state detection
USD864961S1 (en) 2015-12-11 2019-10-29 SomniQ, Inc. Portable electronic device
USD940136S1 (en) 2015-12-11 2022-01-04 SomniQ, Inc. Portable electronic device
USD806711S1 (en) 2015-12-11 2018-01-02 SomniQ, Inc. Portable electronic device
JP2022053411A (ja) * 2020-09-24 2022-04-05 株式会社Jvcケンウッド 情報処理装置、情報処理方法、およびプログラム
JP7537207B2 (ja) 2020-09-24 2024-08-21 株式会社Jvcケンウッド 情報処理装置、情報処理方法、およびプログラム

Also Published As

Publication number Publication date
CN102216876B (zh) 2015-03-18
CN102216876A (zh) 2011-10-12
JP5952374B2 (ja) 2016-07-13
CN104571535B (zh) 2018-03-23
US9841816B2 (en) 2017-12-12
KR101600126B1 (ko) 2016-03-04
CN104571535A (zh) 2015-04-29
US20100123588A1 (en) 2010-05-20
US8004391B2 (en) 2011-08-23
US8390439B2 (en) 2013-03-05
KR101655055B1 (ko) 2016-09-06
US20180143692A1 (en) 2018-05-24
WO2010059513A2 (en) 2010-05-27
US20130225261A1 (en) 2013-08-29
JP2015062676A (ja) 2015-04-09
US10289201B2 (en) 2019-05-14
KR20150119493A (ko) 2015-10-23
KR20110088520A (ko) 2011-08-03
EP2350776A2 (en) 2011-08-03
US20120001749A1 (en) 2012-01-05
JP5643214B2 (ja) 2014-12-17
KR20160105991A (ko) 2016-09-08
WO2010059513A3 (en) 2010-11-18
KR101800992B1 (ko) 2017-12-20

Similar Documents

Publication Publication Date Title
JP5952374B2 (ja) 気分に基づく触覚フィードバックを生成する方法及び装置
JP2023529125A (ja) 身体活動イベントを追跡するためのユーザインタフェース
KR102521953B1 (ko) 가변 햅틱 출력을 위한 시맨틱 프레임워크
US10679516B2 (en) Craving input and support system
EP3133471B1 (en) Play control method, apparatus, terminal, and recording medium
CN108874152A (zh) 具有本能警告的移动设备
CN110658919A (zh) 用于触觉效果的参数修改的方法、电子装置和介质
JP2012511782A (ja) 複数のセンサーを用いた触覚監視システムを提供する方法及び装置
CN108144291A (zh) 基于脑电波的游戏控制方法及相关产品
CN108837271B (zh) 电子装置、提示信息的输出方法及相关产品
HK1236639A1 (en) Semantic framework for variable haptic output

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20120713

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121023

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131112

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140212

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140219

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140312

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141002

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141030

R150 Certificate of patent or registration of utility model

Ref document number: 5643214

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees