ES3032385T3 - User-vehicle interface - Google Patents

User-vehicle interface

Info

Publication number
ES3032385T3
ES3032385T3 ES20761876T ES20761876T ES3032385T3 ES 3032385 T3 ES3032385 T3 ES 3032385T3 ES 20761876 T ES20761876 T ES 20761876T ES 20761876 T ES20761876 T ES 20761876T ES 3032385 T3 ES3032385 T3 ES 3032385T3
Authority
ES
Spain
Prior art keywords
user
gesture
display
vehicle
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES20761876T
Other languages
English (en)
Inventor
Glenn David Allan
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BAE Systems PLC
Original Assignee
BAE Systems PLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from GB1912839.6A external-priority patent/GB2586856B/en
Priority claimed from EP19275096.6A external-priority patent/EP3809251A1/en
Application filed by BAE Systems PLC filed Critical BAE Systems PLC
Application granted granted Critical
Publication of ES3032385T3 publication Critical patent/ES3032385T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D43/00—Arrangements or adaptations of instruments
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0016—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/20—Control system inputs
    • G05D1/22—Command input arrangements
    • G05D1/221—Remote-control arrangements
    • G05D1/222—Remote-control arrangements operated by humans
    • G05D1/223—Command input arrangements on the remote controller, e.g. joysticks or touch screens
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/40—Control within particular dimensions
    • G05D1/46—Control of position or course in three dimensions [3D]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Remote Sensing (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

Se proporciona una interfaz de usuario-vehículo, que comprende: un sistema de control de gestos, dispuesto para detectar un gesto de un usuario del vehículo; estando dispuesto el sistema de control de gestos para procesar el gesto detectado para controlar la interacción con el contenido de una pantalla, de acuerdo con ese gesto detectado; comprendiendo el vehículo un actuador físico para controlar el vehículo, y estando dispuesto el sistema de control de gestos para facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con una disposición del gesto se acopla con el actuador. (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Interfaz usuario-vehículo
La presente invención se refiere generalmente a una interfaz usuario-vehículo y, en particular, a una interfaz que comprende un sistema de control por gestos utilizable para interactuar con el contenido de una pantalla relacionada con la interfaz.
Tradicionalmente, las interfaces usuario-vehículo han adoptado la forma de accionadores físicos, por ejemplo, palancas de control de vuelo, aceleradores, volantes, etc., y ayudas visuales, tales como diales, pantallas, pantallas táctiles, etc. Con el paso del tiempo, se han propuesto enfoques de interfaz más nuevos y posiblemente más intuitivos, por ejemplo, la utilización del seguimiento ocular y el control por gestos, etc.
Las interfaces usuario-vehículo más tradicionales tienen ventajas, tales como la simplicidad, la robustez y la longevidad, pero también desventajas, tales como un ámbito de interacción relativamente limitado con el vehículo o una interacción no intuitiva. Si bien las propuestas más recientes de interfaces usuario-vehículo han intentado evitar o superar tales desventajas, existen, sin embargo, desventajas con tales propuestas más recientes, por ejemplo, en lo que respecta a garantizar que esas nuevas propuestas son adecuadas para su propósito y, que son generalmente, útiles, precisas y fiables, etc.
Además, las interfaces usuario-vehículo ahora se utilizan en una variedad más amplia de vehículos, que varían desde automóviles hasta barcos, aviones, helicópteros, y en toda la gama de vehículos. Frecuentemente es conveniente garantizar que la interfaz usuario-vehículo se adapte al vehículo, o a las condiciones de uso, particulares, no solo en términos de apariencia y funcionalidad, sino también en términos de facilidad de uso, o uso particular, de un usuario de ese vehículo. Estos últimos puntos frecuentemente se ignoran o se pasan por alto en las implementaciones propuestas.
Un objetivo de las realizaciones o aspectos ilustrativos de la presente invención es al menos parcialmente resolver, evitar o superar uno o más problemas o desventajas asociados con las interfaces usuario-vehículo de la técnica anterior, ya sea que se identifiquen en la presente memoria o en otro lugar, o al menos proporcionar una alternativa viable a las interfaces usuario-vehículo de la técnica anterior. Los aspectos y las realizaciones de la presente invención se describen con más detalle en la presente memoria y se definen más generalmente mediante las reivindicaciones que siguen.
La patente US-2013/076615 A1 (D1) se refiere a una interfaz usuario-vehículo para un vehículo de motor en donde un usuario puede realizar órdenes por gestos utilizando sus dedos mientras sostiene el volante. La patente US-2014/278068 A1 se refiere a una interfaz usuario-vehículo para que un vehículo de motor recupere información relacionada con un punto de interés. La patente US-2016/349850 A1 se refiere a una interfaz usuario-vehículo para que un vehículo de motor detecte un gesto de un dedo de un operador.
Según un primer aspecto de la presente invención, se proporciona una interfaz usuario-vehículo, que comprende un sistema de control por gestos que está dispuesto para: detectar la dirección de un gesto de un usuario del vehículo; y procesar el gesto detectado para controlar una ubicación de un indicador en una pantalla según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla, y estando en un plano en el que reside ese contenido.
El sistema de control por gestos puede disponerse para procesar el gesto detectado para controlar, en la pantalla, una representación de la dirección detectada, hacia la posición actual para la interacción del usuario con el contenido, ya sea como parte del indicador visualizado, o además del indicador visualizado.
El control puede disponerse de tal modo que la representación se configura: de tal modo que el usuario considere que la representación se origina desde la perspectiva general del usuario; y/o de tal modo que el usuario considere que la representación proviene de una ubicación general de una parte del cuerpo utilizada en el gesto; y/o de tal modo que la representación se extienda al plano en el que reside el contenido.
El control puede disponerse de tal modo que el usuario considere que la representación proviene de una ubicación general de una mano o un dedo señalador de la mano del usuario, o de una representación virtual de tal mano o dedo señalador proporcionada en la pantalla.
La representación puede comprender una representación lineal.
El sistema de control por gestos puede disponerse para detectar una dirección del gesto del usuario, en la forma de una dirección de un gesto con la mano, o en la forma de una dirección de una punta de un dedo de la mano del usuario.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse continua y proporcionalmente según los cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, según un factor de escalado, de tal modo que: el factor de escalado es sustancialmente de 1:1, de tal modo que un grado de movimiento del indicador equivale sustancialmente a un grado de cambios en la dirección detectada; o el factor de escalado es X:1, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es mayor que un grado de cambios en la dirección detectada; o el factor de escalado es 1:X, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es menor que un grado de cambios en la dirección detectada.
El control puede ser tal que una ubicación del indicador esté dispuesta para estar alineada con la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para desplazarse con respecto a la dirección detectada.
La interfaz usuario-vehículo puede comprender además un dispositivo de entrada de interacción para que el usuario lo utilice para interactuar con el contenido que coincide con una ubicación del indicador.
La interfaz usuario-vehículo puede comprender además la pantalla, estando dispuesta la pantalla para ser visible para el usuario del vehículo, y para visualizar el contenido al usuario.
La pantalla puede ser una pantalla de usuario, montada en la cabeza; y/o una pantalla que está fija a, o en relación con, el vehículo.
Según un segundo aspecto de la presente invención, se proporciona un método de interfaz usuario-vehículo, que comprende: detectar la dirección de un gesto de un usuario del vehículo; y controlar una ubicación de un indicador en una pantalla según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla, y estando en un plano en el que reside ese contenido.
Según un tercer aspecto de la presente invención, se proporciona un vehículo que: comprende la interfaz usuariovehículo del primer aspecto; y/o se configura para implementar el método de interfaz usuario-vehículo del segundo aspecto; y, opcionalmente, en donde el vehículo es una aeronave.
Según un cuarto aspecto de la presente invención, se proporciona una interfaz usuario-vehículo, que comprende: un sistema de control por gestos, dispuesto para detectar un gesto de un usuario del vehículo; el sistema de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido en una pantalla, según ese gesto detectado; y la interfaz usuario-vehículo comprende además un soporte de control por gestos, dispuesto para soportar físicamente una parte del cuerpo del usuario asociada con la provisión del gesto.
La interfaz usuario-vehículo puede disponerse para determinar si la parte del cuerpo está siendo soportada, opcionalmente, utilizando: un sensor en el soporte de control por gestos; o el sistema de control por gestos.
El grado de control facilitado por el sistema de control por gestos puede depender de la determinación, comprendiendo el grado de control opcionalmente: habilitar o deshabilitar el control por gestos; o un factor de escalado de control de detección diferente.
El soporte de control por gestos puede fijarse al vehículo.
El soporte de control por gestos también puede ser un accionador físico para controlar el vehículo.
El sistema de control por gestos puede disponerse para detectar un gesto con la mano de un usuario del vehículo y, opcionalmente, el soporte de control por gestos está dispuesto para soportar físicamente una parte de un brazo del usuario conectado a esa mano.
El sistema de control por gestos puede estar dispuesto para detectar la dirección de un gesto del usuario del vehículo; y procesar el gesto detectado para controlar una ubicación de un indicador en la pantalla según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse continua y proporcionalmente según los cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, según un factor de escalado, de tal modo que: el factor de escalado es sustancialmente de 1:1, de tal modo que un grado de movimiento del indicador equivale sustancialmente a un grado de cambios en la dirección detectada; o el factor de escalado es X:1, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es mayor que un grado de cambios en la dirección detectada; o el factor de escalado es 1 :X, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es menor que un grado de cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para: alinearse con la dirección detectada; o desplazarse con respecto a la dirección detectada.
La interfaz usuario-vehículo puede comprender además un dispositivo de entrada de interacción para que el usuario lo utilice para interactuar con el contenido que coincide con una ubicación del indicador.
La interfaz usuario-vehículo puede comprender además la pantalla, estando dispuesta la pantalla para ser visible para el usuario del vehículo, y para visualizar el contenido al usuario.
La pantalla puede ser: una pantalla de usuario, montada en la cabeza; y/o una pantalla que está fija a, o en relación con, el vehículo.
Según un quinto aspecto de la presente invención, se proporciona un método de interfaz usuario-vehículo, que comprende: detectar un gesto de un usuario del vehículo; controlar la interacción con el contenido de una pantalla, según ese gesto detectado; y soportar físicamente una parte del cuerpo del usuario asociada con la provisión del gesto.
Según un sexto aspecto de la presente invención, se proporciona un vehículo que: comprende la interfaz usuariovehículo del cuarto aspecto; y/o se configura para implementar el método de interfaz usuario-vehículo del quinto aspecto; y, opcionalmente, en donde el vehículo es una aeronave.
Según un séptimo aspecto de la presente invención, se proporciona una interfaz usuario-vehículo, que comprende: un sistema de control por gestos, dispuesto para detectar un gesto de un usuario del vehículo; el sistema de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido en una pantalla, según ese gesto detectado; comprendiendo el vehículo un accionador físico para controlar el vehículo, y el sistema de control por gestos está dispuesto para facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con una provisión del gesto interacciona con el accionador.
La interfaz usuario-vehículo puede configurarse para determinar si la parte del cuerpo interacciona con el accionador, utilizando opcionalmente: un sensor en el accionador; o el sistema de control por gestos.
La interfaz usuario-vehículo puede disponerse para determinar si el usuario ha realizado un gesto particular.
El gesto particular puede comprender un movimiento o una punta de uno o más dedos de una mano del usuario que interacciona con el accionador.
El grado de control facilitado por el sistema de control por gestos puede depender de la determinación y, opcionalmente, el grado de control comprende: habilitar o deshabilitar el control por gestos; o un factor de escalado de control de detección diferente.
El actuador puede estar fijado al vehículo.
El sistema de control por gestos puede estar dispuesto para detectar la dirección de un gesto del usuario del vehículo; y procesar el gesto detectado para controlar una ubicación de un indicador en la pantalla según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse continua y proporcionalmente según los cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, según un factor de escalado, de tal modo que: el factor de escalado es sustancialmente de 1:1, de tal modo que un grado de movimiento del indicador equivale sustancialmente a un grado de cambios en la dirección detectada; o el factor de escalado es X:1, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es mayor que un grado de cambios en la dirección detectada; o el factor de escalado es 1:X, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es menor que un grado de cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para: alinearse con la dirección detectada; o desplazarse con respecto a la dirección detectada.
La interfaz usuario-vehículo puede comprender además un dispositivo de entrada de interacción para que un usuario lo utilice para interactuar con el contenido que coincide con una ubicación del indicador y, opcionalmente, el dispositivo de entrada de interacción que es o forma parte del accionador.
La interfaz usuario-vehículo puede comprender además la pantalla, estando dispuesta la pantalla para ser visible para el usuario del vehículo, y para visualizar el contenido al usuario.
La pantalla puede ser: una pantalla de usuario, montada en la cabeza; y/o una pantalla que está fija a, o en relación con, el vehículo.
Según un octavo aspecto de la presente invención, se proporciona un método de interfaz usuario-vehículo, que comprende: detectar un gesto de un usuario del vehículo; y controlar la interacción con el contenido de una pantalla, según ese gesto detectado; facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con una provisión del gesto interacciona con un accionador físico para controlar el vehículo.
Según un noveno aspecto de la presente invención, se proporciona un vehículo que: comprende la interfaz usuariovehículo del séptimo aspecto; y/o se configura para implementar el método de interfaz usuario-vehículo del octavo aspecto; y, opcionalmente, en donde el vehículo es una aeronave.
Según un décimo aspecto de la presente invención, se proporciona una interfaz usuario-vehículo, que comprende: un sistema de selección, dispuesto para recibir una entrada de un usuario del vehículo, estando dispuesto el sistema de selección para procesar la entrada para facilitar la interacción con una región seleccionada particular de una pantalla, según esa entrada; y un sistema de control por gestos, dispuesto para detectar un gesto de un usuario, estando dispuesto el sistema de control por gestos para procesar el gesto detectado para controlar la interacción con el contenido de la pantalla, según ese gesto detectado; en donde la interfaz usuario-vehículo está dispuesta de tal modo que la interacción de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla, según lo seleccione el usuario.
La interfaz usuario-vehículo puede disponerse de tal modo que la interacción de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla, según lo seleccione el usuario, ya que no se puede interactuar con el contenido fuera de esa región utilizando el control por gestos.
La interfaz usuario-vehículo puede disponerse de tal modo que la interacción de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla, según lo seleccione el usuario, ya que un indicador en la pantalla, móvil según el gesto detectado: puede moverse fuera de la región seleccionada, pero no puede interactuar con el contenido fuera de la región seleccionada; o no puede moverse fuera de la región seleccionada y, por lo tanto, no puede interactuar con el contenido que se encuentra fuera de la región seleccionada.
La región puede comprender: una subárea particular de un área de visualización total; y/o contenido particular
El sistema de selección puede comprender al menos un componente de seguimiento ocular para recibir entradas basadas en el movimiento ocular del usuario y, opcionalmente, un dispositivo de entrada confirmatoria para confirmar una región de la pantalla como la región seleccionada basada en el seguimiento ocular.
El sistema de control por gestos puede estar dispuesto para detectar la dirección de un gesto del usuario del vehículo; y procesar el gesto detectado para controlar una ubicación de un indicador en la pantalla según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse continua y proporcionalmente según los cambios en la dirección detectada.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, según un factor de escalado, de tal modo que: el factor de escalado es sustancialmente de 1:1, de tal modo que un grado de movimiento del indicador equivale sustancialmente a un grado de cambios en la dirección detectada; o el factor de escalado es X:1, donde X es mayor que 1, de tal modo que un grado de movimiento del indicador es mayor que un grado de cambios en la dirección detectada; o el factor de escalado es 1:X, donde X es mayor que 1, de tal modo que el grado de movimiento del indicador es menor que el grado de cambios en la dirección detectada,
El factor de escalado puede depender de: el tamaño de la región seleccionada; la ubicación de la región seleccionada; un tipo de contenido que comprende la región.
El control puede ser de tal modo que una ubicación del indicador está dispuesta para: alinearse con la dirección detectada; o desplazarse con respecto a la dirección detectada.
La interfaz usuario-vehículo de cualquier reivindicación anterior, que comprende además un dispositivo de entrada de interacción para que un usuario lo utilice para interactuar con el contenido que coincide con una ubicación del indicador.
La interfaz usuario-vehículo puede comprender además la pantalla, estando dispuesta la pantalla para ser visible para el usuario del vehículo, y para visualizar el contenido al usuario.
La pantalla puede ser: una pantalla de usuario, montada en la cabeza; y/o una pantalla que está fija a, o en relación con, el vehículo.
Según un undécimo aspecto de la presente invención, se proporciona un método de interfaz usuario-vehículo, que comprende: recibir una entrada de un usuario del vehículo; facilitar la interacción con una región seleccionada particular de una pantalla, según esa entrada; detectar un gesto de un usuario del vehículo; controlar la interacción con el contenido de una pantalla, según ese gesto detectado; y en donde la interacción de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla, según lo seleccione el usuario.
Según un duodécimo aspecto de la presente invención, se proporciona un vehículo que: comprende la interfaz usuariovehículo del décimo aspecto; y/o se configura para implementar el método de interfaz usuario-vehículo del undécimo aspecto; y, opcionalmente, en donde el vehículo es una aeronave.
Se apreciará que una o más características de uno o más de los aspectos descritos anteriormente pueden utilizarse en combinación con, o incluso reemplazar, una o más características de otros aspectos de la invención. Esto se debe a que todos los aspectos se relacionan estrechamente, e incluso se interrelacionan, en términos de la interfaz usuariovehículo que implica la utilización del control por gestos, con los beneficios correspondientes.
Para una mejor comprensión de la presente invención y para mostrar cómo se pueden llevar a la práctica las realizaciones de la misma, ahora se hará referencia, a manera de ejemplo, a las figuras esquemáticas adjuntas, en que:
la figura 1 a representa esquemáticamente una interfaz usuario-vehículo que utiliza el control por gestos para controlar la ubicación de un indicador visualizado, según una realización de la presente invención;
la figura 1b representa esquemáticamente una vista de una pantalla tal como la ve el usuario de la interfaz de la figura 1a utilizando el control por gestos para controlar la ubicación de un indicador visualizado, según una realización ilustrativa;
las figuras 2a y 2b muestran la utilización de la interfaz y las pantallas de las figuras 1a y 1b, según realizaciones ilustrativas;
las figuras 3a y 3b representan esquemáticamente implementaciones alternativas de las pantallas mostradas en las figuras 1b y 2b, respectivamente, según realizaciones ilustrativas;
las figuras 4a y 4b representan esquemáticamente una implementación más particular de las realizaciones ya mostradas y descritas con referencia a las figuras 1a a 2b;
la figura 5a representa esquemáticamente los principios generales del aparato asociados con una interfaz usuariovehículo según realizaciones ilustrativas;
la figura 5b representa esquemáticamente la metodología general de la interfaz usuario-vehículo, según realizaciones ilustrativas;
la figura 6a representa esquemáticamente una interfaz usuario-vehículo que incorpora un soporte de control por gestos, según una realización ilustrativa;
la figura 6b representa esquemáticamente la vista de una pantalla desde la perspectiva de un usuario de la interfaz de la figura 6a;
las figuras 7a y 7b representan esquemáticamente una versión ligeramente modificada de las realizaciones ya mostradas y descritas con referencia a las figuras 6a y 6b;
la figura 8a representa esquemáticamente los principios generales del aparato asociados con una interfaz usuariovehículo según realizaciones ilustrativas;
la figura 8b representa esquemáticamente la metodología general de la interfaz usuario-vehículo, según las realizaciones ilustrativas;
la figura 9a representa esquemáticamente una interfaz usuario-vehículo que incorpora el control por gestos en combinación con un accionador físico de un vehículo, según una realización ilustrativa;
la figura 9b representa esquemáticamente una vista de una pantalla por parte del usuario de la interfaz de la figura 9a, según una realización ilustrativa;
la figura 10a representa esquemáticamente el uso de la interfaz de la figura 9a;
la figura 10b representa esquemáticamente la vista de la pantalla tal como la ve el usuario según el uso de la interfaz de la figura 10a;
la figura 11a representa esquemáticamente los principios generales del aparato asociados con una interfaz usuariovehículo según realizaciones ilustrativas;
la figura 11b representa esquemáticamente la metodología general de la interfaz usuario-vehículo, según realizaciones ilustrativas;
la figura 12a representa esquemáticamente una interfaz usuario-vehículo que incorpora la selección de una región de pantalla por parte de un usuario y el posterior control por gestos vinculado o unido a esa región, según una realización ilustrativa;
la figura 12b representa esquemáticamente una vista de una pantalla del usuario de la interfaz de la figura 12a, según una realización ilustrativa;
las figuras 13a y 14a representan esquemáticamente el uso ilustrativo de la interfaz de la figura 12a, mostrando las figuras 13b y 14b vistas de la pantalla desde la perspectiva del usuario durante tal uso;
las figuras 15a y 15b representan esquemáticamente una implementación más particular de las interfaces de las figuras 12a, 13a, 14a, y las respectivas vistas de usuario mostradas en las figuras 12b, 13b y 14b, según una realización ilustrativa;
la figura 15c representa esquemáticamente una vista diferente a la mostrada en la figura 15b, que demuestra el uso alternativo de la interfaz de las figuras 12a, 13a, 14a y 15a;
la figura 16a representa esquemáticamente los principios generales del aparato asociados con una interfaz usuariovehículo según realizaciones ilustrativas; y
la figura 16b representa esquemáticamente la metodología general de la interfaz usuario-vehículo, según realizaciones ilustrativas.
Como se ha descrito antes, generalmente es deseable proporcionar una interfaz usuario-vehículo mejorada y, en particular, una que implique el uso de alguna forma de control por gestos para interactuar con el contenido de una pantalla que forma parte de, o en conexión con, esa interfaz.
Un problema con las interfaces existentes que implican el uso del control por gestos es la visualización de cualquier interacción relacionada con el contenido. Por ejemplo, algunas implementaciones propuestas podrían implicar el seguimiento y, a continuación, la visualización de una extremidad de un usuario, tal como la mano, para interactuar con el contenido de una pantalla. Sin embargo, hasta cierto punto, se ve que la mano o similar flota en la pantalla, y la mano debe moverse hacia o lejos del contenido de la pantalla para interactuar con el contenido, ya sea en un sentido más global o más preciso, por ejemplo, moviendo uno o más dedos de la mano del usuario hacia la pantalla para presionar o presionar virtualmente un botón o similar visualizado en la pantalla. Tal interfaz puede parecer bastante intuitiva e impresionante, pero en la práctica puede resultar bastante difícil de utilizar para un usuario. La interfaz no es muy intuitiva cuando se usa realmente en la práctica. Por ejemplo, aunque la visualización de la extremidad del usuario pueda dar al usuario algún contexto para interactuar con el contenido en la pantalla, no es nada intuitivo para el usuario saber a qué distancia, en un sentido virtual, está la mano visualizada de un plano en el que reside el contenido con el que se va a interactuar. Esto significa que puede ser muy difícil para el usuario saber fácilmente qué tan lejos, o no, mover su mano o sus dedos o similares para interactuar con el contenido. En otras palabras, puede ser muy difícil para un usuario hacerse una idea rápida o intuitivamente de cómo interactuar con el contenido en tal entorno.
Según una realización ilustrativa, los problemas anteriores pueden resolverse, superarse, o evitarse al menos parcialmente. La presente invención proporciona una interfaz usuario-vehículo, que comprende un sistema de control por gestos. El sistema de control por gestos está dispuesto para detectar la dirección de un gesto de un usuario del vehículo. Es decir, el sistema se configura para detectar una dirección en la que se extiende un gesto, por ejemplo, en la que una mano apunta, o un dedo señala, o un brazo se extiende, etc. El sistema de control por gestos está dispuesto adicionalmente para procesar el gesto detectado para controlar una ubicación de un indicador en una pantalla según esa dirección detectada, y esto es de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada. El indicador se utiliza para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla, por ejemplo, en forma de puntero o cursor, etc. La clave es que el indicador esté en un plano en el que reside el contenido. Aunque esto pueda parecer un cambio aparentemente trivial con respecto a los sistemas propuestos, el cambio es ventajoso y poderoso. El cambio elimina inmediatamente todas las desventajas descritas anteriormente, mientras que al mismo tiempo, permite la interacción intuitiva y precisa con el contenido utilizando el control por gestos. Como se explica a continuación, el indicador ubicado en un plano en el que reside el contenido se puede utilizar además con otras visualizaciones, por ejemplo, otras representaciones, tales como la mano de un usuario, etc.
La figura 1a representa esquemáticamente una implementación de la realización descrita anteriormente. Un vehículo se muestra esquemáticamente, por ejemplo, en forma de cabina o cabina del vehículo 2. También se representa una interfaz 4 usuario-vehículo. La interfaz 4 usuario-vehículo comprende un sistema 6 de control por gestos. El sistema 6 de control por gestos funciona al leer o detectar óptica o visualmente el movimiento de las extremidades de un usuario, a diferencia del seguimiento ocular. El sistema 6 de control de gestos está dispuesto para detectar la dirección de un gesto 8, 10 de un usuario 12 del vehículo 2. El gesto puede ser, por ejemplo, una extensión del brazo 8 y/o la mano 10 del usuario 12, y una dirección del gesto 14 puede ser la dirección en la que el brazo 8 y/o la mano 10 generalmente se extienden 14 (p. ej., en qué dirección apunta o se alinea la extremidad, etc.).
El usuario 12 puede ver el contenido con el que interactuar en una pantalla, y la pantalla podría adoptar la forma de un usuario, una pantalla 15 montada en la cabeza y/o una pantalla 16 que esté de alguna manera fijada al vehículo 2. Una pantalla 15 montada en la cabeza puede ser conveniente en términos de permitir al usuario 12 disfrutar de una experiencia de interfaz más inmersiva y quizás más fácil de aumentar. Una pantalla 16 fija más tradicionalmente puede ser más fácil de implementar o puede servir más como un punto focal para interactuar con el vehículo 2. También se podría emplear un sistema combinado, por ejemplo, con una pantalla 15 montada en la cabeza que proporcione contenido o aumento específico para el usuario, y una pantalla 16 fija que muestre contenido común.
Se puede proporcionar una pantalla 15 montada en la cabeza que se configura para presentar al usuario una pantalla aumentada, que parece fija en relación con la aeronave como lo haría una pantalla fija, pero que solo es visible a través de la pantalla montada en la cabeza.
En algunos ejemplos, la interfaz 4 usuario-vehículo puede comprender una pantalla para visualizar el contenido con el que el usuario 12 va a interactuar. Sin embargo, la interfaz usuario-vehículo podría ser un sistema independiente adaptado a vehículos con pantallas existentes o similares.
El sistema de control por gestos, o la interfaz en general, puede controlar una pantalla para procesar el contenido que se visualizará (incluidas las indicaciones basadas en gestos), o el sistema de control por gestos, o la interfaz en general, pueden procesar el contenido y enviar señales a la pantalla para su visualización.
La interfaz 4 usuario-vehículo puede comprender adicionalmente un dispositivo 18 de entrada de interacción, por ejemplo, para que el usuario lo utilice al interactuar con el contenido mediante el sistema 6 de control por gestos. Esto puede implicar confirmar que se va a interaccionar con el contenido o controlar un aspecto de la interacción con el contenido.
La figura 1b representa esquemáticamente la vista del usuario 12 cuando utiliza la interfaz 4 usuario-vehículo. Se muestra genéricamente un área 20 de visualización, junto con regiones particulares 22, 24 del área de visualización 20. Estas regiones 22 podrían ser áreas particulares (p. ej., mosaicos) del área 20 de visualización, y/o contenido particular con el que el usuario 12 interactuará, por ejemplo, iconos o menús, o pantallas secundarias.
Como se ha descrito anteriormente, el sistema 6 de control por gestos está dispuesto para controlar una ubicación de un indicador 26 en el área 20 de visualización, según la dirección detectada del gesto del usuario 12.
Como se muestra en las figuras 2a y 2b, cuando la dirección del gesto ha cambiado, se puede ver en la figura 2b que la ubicación del indicador 26 está dispuesta para moverse según los cambios en la dirección detectada. Es importante destacar que el indicador 26 se ubica en el mismo plano en el que reside el contenido con el que se va a interactuar. Esto significa que es más fácil e intuitivo para el usuario disfrutar de los beneficios del control por gestos, pero al mismo tiempo ver, apreciar y comprender más rápida y sencillamente cómo se visualiza ese control por gestos en una pantalla y en relación con el contenido con el que se interactuará. El usuario no tiene que hacerse una idea de qué tan lejos está una visualización flotante del plano del contenido.
El indicador ya está en el avión. Por supuesto, podría haber múltiples planos de contacto y, en este caso, sería posible seleccionar con qué plano se va a interactuar y en qué lugar se mostrará el indicador.
Si bien las figuras 1a y 1b muestran una dirección 14 en la que se extiende el gesto 8, 10, debe tenerse en cuenta que las vistas reales de la pantalla por parte del usuario 12, como se muestra en las figuras 1b y 2b, no muestran realmente esta dirección 14 de extensión. En cambio, esas vistas muestran solo la indicación de cambios en la dirección, en el plano en el que reside el contenido. Las figuras 3a y 3b corresponden generalmente a las vistas mostradas en las figuras 1b y 2b, pero ahora muestran que el sistema de control por gestos está dispuesto adicionalmente para procesar el gesto detectado para controlar, en la pantalla, una representación 30 de la dirección detectada, hacia la posición actual para la interacción del usuario con el contenido (es decir, el indicador 26). Esto podría definirse o describirse adicional o alternativamente como parte del indicador visualizado 26, o además del indicador visualizado 26. En otras palabras, esto podría verse como una varita visual o similar, particularmente cuando la representación 30 es una representación lineal o similar. Esto puede guiar al usuario más visualmente hasta donde se encuentra el indicador 26 o, generalmente, hasta donde se encuentra el contenido con el que se va a interactuar, sin dejar de disfrutar de los beneficios del indicador integrado en el plano descrito anteriormente.
Las figuras 3a y 3b muestran que la representación 30 puede parecerle convenientemente al usuario que se origina desde la perspectiva general del usuario. Esta podría ser una implementación visualmente más cómoda e intuitiva, que permita al usuario interactuar más fácil y convenientemente con su contenido desde su propia perspectiva visual.
Las figuras 3a y 3b muestran que, más particularmente, la representación 30 puede parecerle al usuario que proviene de una ubicación general de una parte del cuerpo utilizada en la implementación del gesto, por ejemplo, su brazo, o mano 10 (que incluye la representación visual y virtual de tal en la pantalla 20). Una vez más, esta podría ser una implementación aún más cómoda e intuitiva desde el punto de vista visual, permitiendo al usuario interactuar más fácil y convenientemente con su contenido desde su propia perspectiva visual.
Si bien el uso de una dirección de extensión de la mano de un usuario puede ser una forma intuitiva de indicar una dirección o una interacción deseada con el contenido de una pantalla, una implementación aún más intuitiva es utilizar la punta de un dedo de la mano del usuario, que por supuesto se utiliza comúnmente para indicar una dirección para interactuar en el mundo cotidiano. Las figuras 4a y 4b muestran tal implementación, donde la dirección de un gesto de señalar se utiliza para determinar la ubicación y el movimiento de un indicador visualizado 26, y una representación asociada de la dirección detectada 30 desde la mano 10 del usuario.
En las figuras 1 a 4, el indicador visualizado 26 se muestra moviéndose continua y proporcionalmente según los cambios en la dirección detectada. Esto es particularmente intuitivo, ya que el indicador sirve a continuación como un puntero en tiempo real y vivo para la interacción del usuario. Sin embargo, en una alternativa, el movimiento del indicador puede no ser necesariamente continuo, y podría ser gradual o discreto, por ejemplo, moviéndose de una región de visualización a otra, o de un contenido a otro. De alguna manera, esto puede no ser tan intuitivo como la implementación continua. Sin embargo, en otros ejemplos, esta puede ser una implementación ventajosa, ya que podría mejorar la velocidad con la que se puede navegar o interactuar con el contenido, o la precisión con la que se puede navegar e interactuar con el contenido. Este puede ser particularmente el caso cuando el vehículo no se mueve con suavidad, sino que se mueve o rebota o gira bruscamente, etc., donde puede ser difícil mover con exactitud y precisión el indicador visualizado 26 en tales circunstancias. Sin embargo, y de nuevo, es probable que el movimiento continuo y proporcional sea una forma más intuitiva de interactuar con el contenido de la pantalla.
También como se muestra en las figuras 1 a 4, el movimiento visualizado del indicador se muestra como directamente proporcional a los cambios detectados en la dirección del gesto. Es decir, se aplica un factor de escalado de 1:1, de tal modo que el grado de movimiento del indicador en la pantalla equivale sustancialmente a un grado de cambios en la dirección detectada. De nuevo, esto puede ser particularmente intuitivo y lógico para un usuario, ya que esto equivale a un entorno real de apuntar o gesticular, donde, por ejemplo, el movimiento de un puntero láser en 90° daría como resultado un movimiento del punto láser visualizado en 90°, etc. Sin embargo, otras implementaciones relacionadas pueden ser ventajosas por diferentes razones. Por ejemplo, el movimiento del gesto puede ser más limitado que el área de visualización disponible. Por ejemplo, es muy posible que el movimiento de la mano, el dedo u otro dedo del usuario se restrinja relativamente, donde hay un margen mucho más amplio para la interacción con un área de visualización física o virtual más grande. En este caso, es muy posible que se aplique un factor de escalado de X:1, donde X es mayor que 1, de tal modo que el grado de movimiento del indicador en la pantalla es mayor que el grado de cambios en la dirección detectada del gesto de entrada. En otras palabras, el gesto de entrada se amplía en cierta medida en términos de cómo se visualiza el movimiento relacionado del indicador. Si bien esto puede ser útil para situaciones en las que el gesto de entrada se restringe en términos de libertad de movimiento, también puede ser ventajoso en términos de interactuar simplemente de forma más rápida o de forma más tosca con la pantalla. Por el contrario, puede ocurrir lo opuesto, cuando se aplica un factor de escalado de 1:X, donde X es mayor que 1, de tal modo que el grado de movimiento del indicador tal como se visualiza es menor que el grado de cambios en la dirección detectada. Esta implementación puede ser útil cuando se requiere un control más refinado, por ejemplo, donde el contenido está más estrechamente agrupado, o donde el contenido con el que se interactuará es más pequeño en la pantalla. Adicional, o alternativamente, esta implementación podría ser útil de forma simple cuando se requiere una menor sensibilidad de entrada, por ejemplo, cuando el vehículo se mueve en un entorno en el que no es probable o no se experimenta un recorrido suave, por ejemplo, debido a una superficie de carretera con baches, viajes aéreos turbulentos, giros bruscos, etc. En esta situación, podría ser muy deseable que el control por gestos no equivalga realmente a la entrada del usuario, sino que sea una versión menos sensible de esa entrada. Esto puede reducir o evitar que el control por gestos mueva el indicador en pantalla involuntariamente por el área de visualización, o lo aleje involuntariamente del contenido deseado o, de manera relacionada, que interactúe con contenido no intencional, etc. Por ejemplo, esto podría evitar o reducir una entrada inestable.
Incluso cuando la entrada es proporcional, o escala hacia arriba o hacia abajo, se puede aplicar un grado de suavizado para evitar la fluctuación o el movimiento involuntario (frecuencia relativamente alta) del indicador.
En las figuras 1 a 4, el indicador que se visualiza en la pantalla se muestra alineado con la dirección del gesto detectada. Una vez más, esto es intuitivo e imita un entorno del mundo real, tal como el uso con un puntero láser o similar. Por lo tanto, esta implementación es tanto cómoda para el usuario y fácil de procesar visual y cognitivamente.
Sin embargo, en otras implementaciones, esta implementación puede no ser deseable o práctica. Por ejemplo, es muy posible que el gesto de entrada del usuario esté restringido en términos de la extensión o dirección de su movimiento. Por ejemplo, es posible que un usuario solo pueda mover su mano o dedo u otros dedos de forma limitada, y una dirección de movimiento detectada no se corresponde ni se alinea de ninguna manera con la ubicación de una pantalla. Sin embargo, la implementación anterior todavía se puede utilizar, y de manera útil. En esta situación, la ubicación del indicador tal como se visualiza puede disponerse para que se desplace con respecto a la dirección detectada del gesto de entrada para que el usuario no necesite, por ejemplo, apuntar físicamente a la pantalla con la que va a interactuar para interactuar con esa pantalla.
Para interactuar con el contenido, el usuario puede utilizar el dispositivo de entrada de interacción como se muestra y se describe con referencia a las figuras 1 a. El dispositivo 18 podría ser cualquier cosa que permita al usuario ingresar a la interfaz 4 usuario-vehículo, y podría ser un botón físico, un micrófono, una cámara, un sistema de seguimiento ocular, una pantalla táctil o almohadilla, etc. En algunas implementaciones, el dispositivo de entrada podría de hecho ser o formar parte de, o estar en conexión con, el sistema 6 de control por gestos, por ejemplo, un gesto particular o la duración del gesto, indicando que se va a interactuar con el contenido de alguna manera particular.
Se apreciará que un nuevo vehículo podría construirse o de cualquier otro modo fabricarse e incorporar la interfaz usuario-vehículo descrita anteriormente. Alternativamente, la interfaz usuario-vehículo podría adaptarse o similar a los vehículos existentes para mejorar o cambiar la funcionalidad de tal vehículo.
Si bien el vehículo podría ser cualquier vehículo en particular, se cree que un vehículo de particular interés es una aeronave y, en particular, un avión a reacción rápida. Estos vehículos particulares tienen principios operativos algo únicos, lo que significa que la interfaz usuario-vehículo descrita anteriormente es muy adecuada para aplicarse en tales vehículos. Por ejemplo, las aeronaves y, en particular, los aviones a reacción rápida requieren un alto grado de interacción con el usuario, frecuentemente en poco tiempo, con un alto grado de precisión y en circunstancias extremas, tales como, por ejemplo, fuerzas G extremas, o turbulencias aéreas o incluso combates. Al mismo tiempo, y por motivos muy similares, la interfaz debe ser extremadamente fácil de utilizar, receptiva e intuitiva. Además, los operadores de aeronaves tienden a estar provistos de aparatos montados en la cabeza (p. ej., cascos, micrófonos y altavoces, aparatos de respiración), por lo que la provisión de una pantalla montada en la cabeza debería ser aceptable. Por lo tanto, la interfaz de usuario anterior puede encontrar una implementación muy útil en vehículos tales como aeronaves y aviones de reacción rápida en particular.
La figura 5a representa esquemáticamente principios generales similares a los de un aparato asociado con una realización ilustrativa como la descrita anteriormente. Se muestra una interfaz 40 usuario-vehículo. La interfaz usuariovehículo comprende un sistema 42 de control por gestos que está dispuesto para detectar la dirección de un gesto de un usuario de un vehículo relacionado. El sistema de control por gestos está dispuesto para procesar un gesto detectado para controlar una ubicación de un indicador en una pantalla 44 (conectada o conectable) según esa dirección detectada, de tal modo que una ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla, y estando en un plano en el que reside ese contenido.
Similarmente, la figura 5b representa los principios metodológicos generales asociados con las realizaciones descritas anteriormente. La figura 5b muestra que la metodología comprende detectar la dirección de un gesto de un usuario de un vehículo 50. A continuación, el método comprende controlar una ubicación de un indicador 52 en una pantalla según esa dirección detectada, de tal modo que la ubicación del indicador está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla, y estando en un plano en el que reside ese contenido.
Para evitar cualquier duda, los aspectos y las realizaciones de esta invención están interrelacionados, como queda claro a partir de la lectura de la descripción. Por lo tanto, las ventajas y funcionalidades de las características descritas en un aspecto se aplican al menos igualmente a otros aspectos y realizaciones.
Como ya se ha mencionado antes, y en relación con esas realizaciones, el uso del control por gestos de un vehículo probablemente dependerá del movimiento del vehículo o del movimiento del usuario dentro del vehículo, al menos hasta cierto punto. En los sistemas de control por gestos propuestos, una o más partes del cuerpo asociadas con la provisión de un gesto (p. ej., la extremidad o parte de la misma, o una extremidad relacionada o próxima o similar) no tienen ningún soporte. Para un gesto de entrada único, puntual o esporádico, es probable que esto sea totalmente satisfactorio. Por ejemplo, la activación de un sistema de entretenimiento multimedia puede requerir solo una interacción por viaje en un vehículo. Aumentar o disminuir el volumen puede requerir un número limitado de interacciones durante un viaje o el uso de un vehículo. Sin embargo, se prevé que el control por gestos forme una parte más importante de la interacción con un vehículo a medida que se produzcan avances tecnológicos. Esto implicará interacciones de control por gestos mucho más frecuentes y a largo plazo con los vehículos. Cuando se utilizan partes del cuerpo asociadas con el control por gestos en tales entornos, es muy probable, si no seguro, que tales partes del cuerpo se cansen muy rápido. Evidentemente, esto no es deseable en términos de inducir fatiga al usuario en general, pero también podría ser potencialmente riesgoso en términos de que el usuario controle el vehículo en general, o en términos de que el usuario utilice de modo fiable la interfaz de control por gestos durante un período de tiempo o durante un número prolongado de interacciones. Estas interacciones pueden implicar el movimiento de un indicador en pantalla o similar, como se ha descrito antes, o aplicarse más generalmente a un control por gestos más amplio que puede no implicar la indicación o visualización en pantalla, o al menos no con un indicador en pantalla.
La presente invención proporciona realizaciones que resuelven, superan o evitan los problemas de la técnica anterior. La presente invención proporciona una interfaz usuario-vehículo, que comprende un sistema de control por gestos. El sistema de control por gestos está dispuesto para detectar un gesto de un usuario del vehículo. Esto puede no ser necesariamente una dirección de un gesto de un usuario, como se describió anteriormente, sino un gesto en general. El sistema de control por gestos está dispuesto adicionalmente para procesar el gesto detectado para controlar la interacción con el contenido de una pantalla, que forma parte de, o que de alguna manera está en conexión con la interfaz usuario-vehículo, según ese gesto detectado. La clave es que la interfaz usuario-vehículo comprende además un soporte de control por gestos dedicado. El soporte de control por gestos está dispuesto para soportar físicamente una parte del cuerpo del usuario asociada con la provisión del gesto, cuando se proporciona el gesto. Si bien esto puede parecer una modificación trivial de los sistemas de control por gestos existentes o propuestos, la implementación es extremadamente ventajosa y poderosa. Con un simple cambio, el sistema de control por gestos es inmediatamente menos agotador de utilizar para el usuario. Al mismo tiempo, el soporte proporciona estabilidad de entrada para el control por gestos, lo que significa que los gestos de entrada se proporcionan de forma más precisa, más fiable y más consistente, y, de forma general, según lo previsto. Todo esto mejora la interacción con el contenido deseado y también limita o evita el riesgo de interactuar con contenido no deseado.
Las figuras 6a y 6b representan esquemáticamente de forma práctica el mismo vehículo 2 e interfaz 4 de usuario, y los principios de visualización relacionados, tal como ya se ha mostrado y descrito con referencia a las figuras 1a y 1b. Sin embargo, por el contrario, ahora se proporciona un soporte 60 de control por gestos dedicado. Esto puede adoptar la forma de un reposabrazos dedicado, un soporte de muñeca dedicado, etc., con el que el usuario puede interactuar y, generalmente, apoyarse cuando el gesto de control se realiza o se introduce en la interfaz 4.
La figura 6b muestra generalmente que un indicador visualizado 26 en pantalla resultante puede controlarse, por ejemplo, de forma más precisa, más fiable o más consistente como resultado de la presencia y el uso del soporte 60. Similarmente, el control por gestos implementado cuando interacciona con el soporte 60 puede realizarse de una manera más relajada y, ciertamente, de una manera que resulte en menos cansancio para el usuario durante un período de tiempo de entrada de gestos o durante un número prolongado de gestos de entrada.
La interfaz 4 usuario-vehículo puede proporcionarse de tal modo que el soporte 60 desempeñe un papel un tanto pasivo en la interfaz 4. Sin embargo, la interfaz puede implementarse de forma más útil si la interfaz 4 está dispuesta para determinar si la parte del cuerpo asociada con la entrada de gestos realmente está siendo soportada. Esta determinación se puede utilizar para un control o una implementación más precisos o refinados de la interfaz en su conjunto. Por ejemplo, el soporte 60 de control por gestos puede, por sí mismo, ser capaz de leer o detectar de cualquier otro modo cuándo una parte del cuerpo, e incluso la parte del cuerpo correcta, interacciona con ese soporte 60, por ejemplo, mediante un sensor integrado o similar. Alternativa o adicionalmente, el propio sistema 6 de control por gestos puede realizar esta determinación, a través de una o más señales o mediciones visuales que típicamente se realizarían en el control por gestos de todos modos.
Tal determinación activa de si se está utilizando o se está interaccionando con el soporte puede permitir, por ejemplo, que un grado de control facilitado por el sistema 6 de control por gestos dependa o esté vinculado de cualquier otro modo a esa determinación. De nuevo, esto podría proporcionar un control más activo de la interfaz, o del vehículo, basándose en dicha determinación. Por ejemplo, el grado de control puede comprender opcionalmente habilitar o deshabilitar el control por gestos basándose en la determinación. Esto puede deberse a motivos de seguridad o simplemente a la comodidad del usuario. En particular en entornos en los que el movimiento del vehículo puede ser bastante violento o dramático, simplemente se puede saber o predecir de antemano que es imposible controlar de forma precisa o segura la interacción con el contenido asociado con la interacción del vehículo, mediante el control por gestos, a menos y hasta que las partes del cuerpo asociadas al control por gestos estén suficientemente apoyadas.
O, de una manera relacionada, la determinación puede resultar en la implementación de un factor de escalado de control de detección diferente. Por ejemplo, esto puede significar que el control por gestos siempre se permite, pero el grado de sensibilidad de la entrada-salida del control por gestos está basado en si el soporte de control por gestos admite o no una o más partes del cuerpo asociadas al control por gestos. Por ejemplo, el control por gestos más sensible solo puede permitirse cuando se determina que las partes del cuerpo están apoyadas por el soporte, y el control menos sensible cuando no se toma tal determinación. O incluso la implementación opuesta, según cómo se utilice el sistema. Esto se refiere al hecho de escalado descrito anteriormente en relación con un grado de movimiento de un indicador en pantalla que es igual, mayor o menor que los cambios en la dirección detectada del gesto de entrada detectado o similar.
En un ejemplo, el soporte de control por gestos podría no estar fijado al vehículo. Por ejemplo, el soporte puede fijarse al usuario o apoyarse contra él de alguna manera, e incluir una o más correas o acoples a una parte del cuerpo diferente del usuario que quizás sea menos móvil o con menos probabilidades de moverse que la parte del cuerpo que participa en el gesto de entrada. Esto puede permitir que el usuario lleve el soporte consigo o incluso que forme parte de un traje o similar que lleve puesto el usuario al operar el vehículo o la interfaz usuario-vehículo. Sin embargo, es probable que sea mejor que el soporte 60 de control por gestos esté fijado al vehículo. Esto probablemente significaría que las partes del cuerpo del usuario se mueven en sincronía con el vehículo, con la excepción de cualquier gesto dedicado realizado por el usuario. Esto debería significar a continuación que cualquier gesto dedicado realizado por el usuario está destinado al control por gestos, en lugar de ser involuntario o ser un control por gestos mal implementado. La figura 7a muestra que esta situación podría realizarse convenientemente implementando el soporte 60 como algo que ya funciona como un accionador físico 70 para controlar el vehículo 2. Esto se debe a que el accionador físico 70 no solo funcionará a continuación como un accionador físico, sino que también funcionará como el soporte de control por gestos y, por lo tanto, realizará dos funciones en una pieza de aparato. Esto significa que la funcionalidad aumenta, pero el espacio o los costos no aumentan o no aumentan considerablemente. Por ejemplo, el accionador físico 70 podría ser una palanca de control de vuelo, un acelerador, un volante, una palanca de cambios, etc. Como se ha descrito antes, la entrada de gestos no tiene que implicar necesariamente que un usuario agite sus manos o brazos alrededor y en el vehículo, sino que podría implicar simplemente señalar con un dedo o algo similar. Por lo tanto, la utilización de un accionador 70 como el soporte 60 quizás incluso permitiría utilizar el accionador en paralelo con el control por gestos, o al menos en rápida sucesión.
Típica, y ventajosamente, es probable que un gesto de entrada pueda implicar la utilización de la mano de un usuario, o los dedos de esa mano, ya que esto es intuitivo para un usuario, particularmente en lo que respecta a señalar un contenido particular para interactuar en una pantalla o similar. En este caso, el soporte de control por gestos a continuación está dispuesto típicamente para soportar físicamente una parte de un brazo del usuario conectada a esa mano, por ejemplo, una muñeca, un antebrazo o similar.
La figura 7b es la misma que la figura 6b, y muestra que utilizar el soporte 60, en este caso a través del accionador 70, se mejora como se ha descrito antes.
La figura 8a representa esquemáticamente principios generales similares a los de un aparato asociado con una realización ilustrativa como la descrita anteriormente. Se muestra una interfaz 80 usuario-vehículo. La interfaz usuariovehículo comprende un sistema 82 de control por gestos que está dispuesto para detectar un gesto de un usuario del vehículo. El sistema de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido en una pantalla 84, según ese gesto detectado. La interfaz usuario-vehículo comprende además un soporte 85 de control por gestos, dispuesto para soportar físicamente una parte del cuerpo del usuario asociada con la provisión del gesto
Similarmente, la figura 8b representa los principios metodológicos generales asociados con las realizaciones descritas anteriormente. La figura 8b muestra que la metodología comprende detectar un gesto de un usuario de un vehículo 90. A continuación, el método comprende controlar la interacción con el contenido en una pantalla 92, según ese gesto detectado 92. El método también implica soportar físicamente una parte del cuerpo del usuario asociada con la provisión del gesto 95.
Como se ha descrito antes, en los últimos tiempos, las interfaces usuario-vehículo han pasado de interfaces más tradicionales que implican el uso de accionadores físicos y pantallas, etc., a interfaces más avanzadas que implican el uso de seguimiento ocular y el control por gestos. Sin embargo, mientras que las interfaces usuario-vehículo más tradicionales tienen limitaciones, no siempre es práctico, posible o deseable tener una interfaz usuario-vehículo que esté libre de accionadores físicos para controlar un vehículo. Esto puede deberse a problemas o normas de seguridad, o simplemente al hecho de que los usuarios o consumidores típicos aún no desean o pueden operar cómodamente un vehículo sin tales accionadores físicos. Por lo tanto, un problema es cómo hacer la transición entre, o disfrutar de los beneficios de ambos, los accionadores tradicionales y físicos, y las interfaces de control por gestos más modernas y recientes, mientras que al mismo tiempo se mantienen al menos algunos de los beneficios de ambos enfoques.
Las realizaciones de la presente invención resuelven, superan o evitan los problemas de la técnica anterior. Según la presente invención, se proporciona una interfaz usuario-vehículo. La interfaz comprende un sistema de control por gestos, dispuesto para detectar un gesto de un usuario del vehículo. El sistema de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido de una pantalla, por ejemplo, que forma parte de o está en conexión con la interfaz, todo según ese gesto detectado. El vehículo comprende además un actuador físico para controlar el vehículo. El sistema de control por gestos está dispuesto para facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con la provisión del gesto interacciona con el accionador físico. En pocas palabras, esto permite un entorno de entrada multimodal, que complementa poderosa y ventajosamente el uso más tradicional del accionador físico. El accionador también puede proporcionar soporte a una parte del cuerpo involucrada en la entrada de gestos, mejorando la precisión de entrada o reduciendo la fatiga de entrada.
La figura 9a representa esquemáticamente de forma práctica la misma interfaz 4 de usuario como ya se ha mostrado y como se ha descrito con referencia en la figura 7a. La figura 9b muestra la pantalla tal como la ve el usuario 12. En este entorno de interfaz, una de estas dos cosas puede ser posible. En un entorno, el usuario 12 puede interaccionar con el accionador 70 y, al mismo tiempo, puede utilizar el control por gestos con la misma parte del cuerpo o serie de partes del cuerpo que interaccionan con el accionador 70 para controlar la interacción con el contenido en pantalla de la pantalla 20. Esto puede ser ventajoso, como se describió anteriormente, en términos de la entrada multimodal. Alternativamente, tal control por gestos puede no permitirse hasta que se inicie de alguna manera un modo de control por gestos. Este último ejemplo podría limitar o evitar el riesgo de que el control por gestos se utilice inadvertidamente para interactuar con el contenido de la pantalla cuando se utilizan las mismas partes del cuerpo del usuario para moverse o interactuar de cualquier otro modo con el accionador 70.
Para evitar o superar algunos de los problemas del párrafo anterior, cuando el control por gestos se implementa o utiliza inadvertida o intencionalmente, la interfaz 4 puede disponerse para determinar si la parte del cuerpo utilizada en un control por gestos interacciona con el accionador 70. Esto puede implementarse utilizando un sensor o similar en el accionador 70, o mediante el propio sistema de control por gestos que detecta visual u ópticamente tal interacción. Alternativa o adicionalmente, la interfaz 4 puede disponerse para determinar si el usuario ha realizado un gesto particular, por ejemplo, tal como un gesto conveniente en forma de un movimiento o una punta de uno o más dedos de una mano del usuario 10 que interacciona con el accionador 70, como se muestra en la figura 10a.
Como se ha mencionado antes en diferentes realizaciones, un grado de control facilitado por un sistema de control por gestos puede depender de la determinación descrita anteriormente. Esto podría mejorar la seguridad o simplemente la interacción del usuario con la interfaz o el vehículo. Por ejemplo, el grado de control puede comprender habilitar o deshabilitar el control por gestos, o implementar un factor de escalado de control de detección diferente. Por ejemplo, la figura 10b muestra que cuando se determina que se ha realizado un gesto particular (p. ej., una punta) o que el usuario ha interaccionado con el accionador, un modo de control por gestos puede interaccionar o interaccionar por completo, tal como, por ejemplo, el que ya se muestra y se describe con referencia a la figura 4b anterior.
Como con todas las realizaciones descritas en la presente memoria, el control por gestos alineado o desplazado, o los factores de escalado, etc., se aplican igualmente a esta realización. Es importante destacar que, en primer lugar, se puede suponer que sería prácticamente imposible emplear un sistema de control por gestos útil al mismo tiempo que la misma parte del cuerpo interacciona con un accionador físico, fijado a un vehículo. Sin embargo, este no es el caso. Por ejemplo, y en una implementación simplista, el gesto no necesita ser particularmente complejo o amplio en términos de sutilezas o rango de movimiento. Por ejemplo, un simple movimiento de un dedo podría utilizarse para iniciar los indicadores de la dirección de giro en un automóvil, o para aumentar o disminuir el volumen de un sistema de sonido multimedia, para deslizar el dedo hacia la izquierda o hacia la derecha en una pantalla multimedia, o para encender o apagar algún tipo de subsistema. En un sistema más avanzado, y como se ha descrito antes, el movimiento de uno o más dedos, o incluso parte de la mano, se puede utilizar para controlar los indicadores visualizados o en pantalla, particularmente con la utilización de los factores de escalado o los principios de desplazamiento descritos antes.
También vale la pena señalar que en estas realizaciones, cuando se interacciona un accionador físico, el accionador físico podría utilizarse aún más ventajosamente, ya que se utiliza no solo para controlar, por ejemplo, la velocidad de un vehículo o la dirección de desplazamiento de un vehículo, sino que se utiliza para confirmar el contenido con el que se va a interacciona mediante el control por gestos. Por ejemplo, esto podría complementar o reemplazar el dispositivo de entrada de interacción de las realizaciones anteriores. En otras palabras, el dispositivo de entrada de interacción podría ser parte de, o simplemente ser, el accionador físico, o el accionador físico podría ser parte de, o simplemente ser, el dispositivo de entrada de interacción.
Como en cualquier realización, el modo de control por gestos siempre puede estar activado o desactivado selectivamente utilizando el propio sistema de control por gestos (p. ej., mediante un gesto de inicio o apagado) o mediante un sistema acoplado o conectado.
La figura 11a representa esquemáticamente principios generales similares a los de un aparato asociado con una realización ilustrativa como la descrita anteriormente. Se muestra una interfaz usuario-vehículo 100. La interfaz usuariovehículo comprende un sistema 102 de control por gestos que está dispuesto para detectar un gesto de un usuario de un vehículo relacionado. El sistema 102 de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido en una pantalla 104, según ese gesto detectado. El vehículo comprende un accionador físico 105 para controlar el vehículo, que puede o no ser parte de la, o la misma, interfaz 100 usuario-vehículo. El sistema 102 de control por gestos está dispuesto para facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada a una provisión del gesto interacciona con el accionador 105.
Similarmente, la figura 11b representa los principios metodológicos generales asociados con las realizaciones descritas anteriormente. La figura 11b muestra que la metodología comprende detectar un gesto de un usuario de un vehículo 110. A continuación, el método comprende controlar la interacción con el contenido de una pantalla según ese gesto detectado 112. El método también implica facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con una provisión del gesto interacciona con un accionador físico para controlar el vehículo 113.
En escenarios relacionados, aunque el control por gestos puede ser ventajoso, puede ser difícil o imposible para el usuario, o incluso para la interfaz, saber con qué parte de una pantalla, o contenido relacionado, se va a interactuar según un gesto detectado. Por ejemplo, en sistemas más avanzados, es probable que el control por gestos se extienda más allá de un simple comando de encendido y apagado, y es probable que implique mucha más sofisticación, ya sea en términos del control por gestos en sí mismo, o por la amplia gama de contenido con el que se puede interactuar según tal control por gestos. Al mismo tiempo, puede que no siempre sea posible proporcionar un control por gestos de forma fiable, consistente y precisa, y puede resultar demasiado fácil alejarse inadvertidamente del contenido deseado o acercarse a contenido no deseado o involuntario, reduciendo el grado de comodidad del usuario o incluso aumentando los riesgos asociados con el control del vehículo en tal entorno. Por último, la extensión de la pantalla, o la gama de contenido en tal pantalla, puede ser demasiado grande o demasiado compleja para navegar e interactuar cómodamente con ella utilizando solo el control por gestos.
Las realizaciones de la presente invención resuelven, superan o evitan las desventajas descritas anteriormente. Según la presente invención, se proporciona una interfaz usuario-vehículo. La interfaz comprende un sistema de selección, dispuesto para recibir una entrada de un usuario del vehículo. El sistema de selección está dispuesto para procesar la entrada para facilitar la interacción con una región seleccionada particular de una pantalla según esa entrada. La interfaz comprende además un sistema de control de gestos dispuesto para detectar un gesto del usuario. El sistema de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido de la pantalla según ese gesto detectado. La clave, en este caso, es que la interfaz usuario-vehículo está dispuesta de tal modo que la interacción de control por gestos con el contenido de la pantalla solo se permita para la región particular de la pantalla, según lo seleccione el usuario. Esta implementación tiene diversos beneficios. Primero, utilizar la primera selección para identificar una región para la interacción con el control por gestos significa que la primera región se puede seleccionar de una serie de maneras diferentes permitiendo flexibilidad en la selección de esa región. A continuación, se puede implementar el control por gestos para esa región. Esto puede significar que, para una pantalla grande o compleja, una región en particular se puede seleccionar más fácilmente que lo que sería el caso con el control por gestos únicamente. También, el control por gestos no está solamente acoplado o centrado en la región seleccionada, sino que solo se permite (p. ej., dentro, sobre, o en) esa región. Esto significa que el control por gestos se puede adaptar para esa región. Por ejemplo, se pueden aplicar desplazamientos o factores de escalado para esa región, y no permitirse el control por gestos fuera de esa región. Esto significa que, ya sea por conveniencia o seguridad, solo se actúa sobre el control por gestos en esa región, y no se puede interactuar con el contenido o de cualquier otro modo fuera de esa región. Esto podría evitar la interacción inadvertida o no intencionada con contenido no intencionado o no deseado, lo que podría ser particularmente el caso en entornos vehiculares donde el movimiento del vehículo es repentino, o violento, o inesperado.
La figura 12a representa esquemáticamente de forma práctica el mismo vehículo 2 y la interfaz 4 usuario-vehículo como se mostró y describió con referencia a la figura 1a. La figura 12a muestra la presencia adicional de un sistema 120 de selección, dispuesto para recibir una entrada de un usuario 12 del vehículo 2, y para procesar la entrada para facilitar la interacción del conjunto o región particular de una pantalla, según esa entrada. En otros ejemplos, este sistema 120 de selección podría ser parte de, o ser, el dispositivo 18 de entrada de interacción, o un accionador del vehículo, etc., o incluso parte del propio sistema 6 de control por gestos. La figura 12b muestra prácticamente la misma vista de una pantalla como ya se ha mostrado y se ha descrito con referencia a la figura 1b, aunque, en esta etapa, sin la presencia de un indicador visual en la pantalla.
El sistema 120 de selección podría adoptar una de diversas formas diferentes, que van desde el seguimiento ocular (incluida la detección de la mirada), el control por voz, un accionador físico, o incluso una forma (p. ej., burda) de control por gestos, tal como el seguimiento de la cabeza o similar. Ventajosamente, el sistema de selección comprende un componente de seguimiento ocular para recibir entradas basándose en el movimiento ocular del usuario 12. Esto permite al usuario mirar rápida, fácil e intuitivamente alrededor del vehículo y las pantallas asociadas, y centrarse y seleccionar una región en particular para interactuar. El sistema 120 de selección puede comprender un dispositivo de entrada confirmatorio para confirmar una región de la pantalla como la región seleccionada basada en el seguimiento ocular. Este podría ser un dispositivo de entrada dedicado o podría ser parte de los componentes de seguimiento ocular, o parte del dispositivo 18 de entrada de interacción, o un accionador físico de las realizaciones anteriores, una entrada de audio, etc. Incluso podría haber un elemento de temporización incorporado en el sistema, de tal modo que si se observa una región o contenido en particular durante un tiempo determinado (p. ej., se observa), a continuación se determine que esa región es la región seleccionada.
Las figuras 13a y 13b muestran a continuación que, después de la selección, se selecciona una región 130 particular de un área 20 total para el control por gestos. La región 130 particular podría resaltarse visualmente al seleccionarse. Esto podría lograrse haciendo que esta región sea más prominente de alguna manera, o haciendo que otras regiones sean menos prominentes. Esto incluye hacer que las demás regiones no sean visibles en absoluto.
Las figuras 14a y 14b son prácticamente iguales a la situación mostrada y descrita con referencia a las figuras 2a y 2b. Es decir, ahora se implementa un modo de control por gestos. Sin embargo, en las figuras 14a y 14b, una diferencia clave es que el control por gestos se permite única y exclusivamente para la región 130 seleccionada. Esto significa que no se puede interactuar con el contenido fuera de esa región utilizando el control por gestos. Esta última funcionalidad se puede implementar de diversas maneras diferentes, por ejemplo, permitiendo que el indicador visual 26 asociado con el control por gestos pueda moverse fuera de la región 130 seleccionada, pero evitando la interacción con el contenido fuera de esa región 130 (p. ej., a través de ese indicador 26). Esto podría ser útil para vincular la interacción a esa región 130, pero aun así permitir que el usuario tenga la comodidad o la interacción intuitiva asociadas con la posibilidad de que el indicador 26 pueda moverse fuera de esa región 130. O, en un sentido opuesto, la funcionalidad se puede implementar impidiendo que el indicador 26 se mueva fuera de la región 130 seleccionada y, por lo tanto, evitando la interacción con el contenido fuera de esa región 130. Esta implementación evita la interacción fuera de esa región, pero también muestra intuitivamente al usuario que simplemente no es posible que tal interacción tenga lugar. Esto puede ser menos confuso que permitir que un indicador se extienda fuera de esa región pero no interactúe con el contenido de esa región.
Es posible que no sea necesario un indicador en pantalla. La prevención del control por gestos fuera de la región seleccionada podría ser, en general, por ejemplo, para gestos que no se representan de alguna manera en una pantalla, pero que podrían resultar en una interacción con el contenido de la pantalla.
Las figuras 15a y 15b son similares a la situación mostrada en relación con las figuras 10a y 10b, en donde el accionador 70 del vehículo interacciona en paralelo con el uso del control por gestos. Sin embargo, en las figuras 15a y 15b, hay una región particular que se ha seleccionado 130 para utilizarse con el control por gestos. Este escenario es interesante porque demuestra muchas ventajas de la presente realización. Por ejemplo, el rango físico del control por gestos puede ser limitado, debido a que la parte del cuerpo del usuario ya interacciona con el accionador 70. Sin embargo, el rango de posible control por gestos puede ampliarse en cierta medida, antes de utilizar el control por gestos, permitiendo implementar un rango espacial de selección mucho más amplio utilizando el sistema 120 de selección, por ejemplo, basándose en el seguimiento ocular o similar. Alternativa o adicionalmente, esta realización demuestra que se puede enfocar en y dirigirse a particularmente una región particular, que puede comprender un área particular o un contenido particular con el que interactuar, incluso cuando el movimiento de esas partes del cuerpo podría de cualquier otro modo haber movido un posible punto de contacto o interacción más allá de un punto o región previsto. Esta vinculación o restricción del control por gestos a una región particular significa que el usuario no tiene que preocuparse por interactuar accidental o inadvertidamente con contenido fuera de esa región. Por ejemplo, el usuario puede seleccionar inicialmente una región de control de volumen de una pantalla y, posteriormente, aumentar o disminuir el volumen utilizando el control por gestos dentro de esa región, siendo consciente de manera segura del hecho de que el control por gestos no cambiará inadvertidamente la velocidad del vehículo, o la marcha en la que se encuentre el vehículo. O bien, un usuario puede seleccionar inicialmente una región de control de comunicación de una pantalla y, posteriormente, comunicarse con un vehículo amigo utilizando el control por gestos dentro de esa región, siendo consciente de manera segura del hecho de que el control por gestos no cambiará inadvertidamente la naturaleza de la interacción con un vehículo no amigo.
La selección de una región en la que se va a vincular el control por gestos también permite implementar el control por gestos específico de la región. Por ejemplo, los factores de desplazamiento o escalado, tal como se ha descrito antes, pueden hacerse dependientes del tamaño de una región seleccionada o de la ubicación de una región de selección, o del tipo de contenido en una región seleccionada. Por lo tanto, es totalmente posible que fuera de esa región el mismo gesto tenga una salida, reacción o grado de movimiento muy diferente, pero el enfoque de selección inicial descrito anteriormente significa que la configuración del sistema en su conjunto puede adaptarse al usuario, al vehículo, o a la interfaz del vehículo, al ser específica de la región.
La figura 15c también muestra una extensión adicional del principio de desplazamiento descrito anteriormente. Por ejemplo, la figura 15c muestra la misma pantalla que la figura 15b, pero con una región 140 de interés seleccionada diferente. Sin embargo, la misma dirección general del gesto que se muestra en la figura 15a puede utilizarse para controlar una región 140 que no está realmente alineada con el gesto. De nuevo, esto aumenta la funcionalidad de un control por gestos, lo que significa que el gesto no necesita alinearse con la dirección general de la pantalla, o la región con la que se interactúa.
La figura 16a representa esquemáticamente principios generales similares a los de un aparato asociado con una realización ilustrativa como la descrita anteriormente. Se muestra una interfaz 150 usuario-vehículo. La interfaz usuario-vehículo comprende un sistema 152 de selección, dispuesto para recibir una entrada de un usuario del vehículo, estando dispuesto el sistema de selección para procesar la entrada para facilitar la interacción con una región seleccionada particular de una pantalla 154, según esa entrada. También se proporciona un sistema 155 de control por gestos, dispuesto para detectar un gesto de un usuario, estando dispuesto el sistema de control por gestos para procesar el gesto detectado para controlar la interacción con el contenido de la pantalla 154, según ese gesto detectado. La interfaz 150 usuario-vehículo se dispone de tal modo que la interacción de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla 154, según lo seleccione el usuario
Similarmente, la figura 16b representa los principios metodológicos generales asociados con las realizaciones descritas anteriormente. La figura 16b muestra que la metodología comprende recibir una entrada 160 de un usuario del vehículo y facilitar la interacción con una región seleccionada particular de una pantalla 162, según esa entrada. El método también comprende detectar un gesto de un usuario del vehículo 163 y controlar la interacción con el contenido de una pantalla, según ese gesto detectado 164. La interacción 164 de control por gestos con el contenido de la pantalla solo se permite para la región particular de la pantalla, según lo seleccione el usuario.
Como se ha descrito antes, se apreciará que se pueden combinar diversos aspectos diferentes de la presente invención, puesto que ya están estrechamente relacionados entre sí en términos de control por gestos en una interfaz usuario-vehículo. Existe un alto grado de interacción entre las diversas realizaciones y, por supuesto, pueden utilizarse en combinación entre sí en ciertos aspectos, o en otros aspectos completamente por separado.
Aunque se han mostrado y descrito unas cuantas realizaciones preferidas de la invención, los expertos en la técnica apreciarán que se pueden hacer varios cambios y modificaciones sin abandonar el ámbito de la invención, como se define en las reivindicaciones adjuntas.
Todas las características descritas en esta memoria descriptiva (incluidas las reivindicaciones y dibujos que la acompañan), y/o todas las etapas de cualquier método o procedimiento así descrito, pueden combinarse en cualquier combinación, excepto combinaciones donde, a lo sumo, algunas de estas características y/o etapas sean mutuamente excluyentes.

Claims (10)

  1. REIVINDICACIONES
    i.Una aeronave (2) que comprende una interfaz (4) usuario-vehículo, comprendiendo la interfaz usuario-vehículo:
    un sistema (6) de control por gestos, dispuesto para detectar un gesto (8, 10) de un usuario (12) de la aeronave (2),
    el sistema (6) de control por gestos está dispuesto para procesar el gesto detectado para controlar la interacción con el contenido de una pantalla (15, 16), según ese gesto detectado; la aeronave (2) comprende un accionador físico (70) para controlar la aeronave (2); el sistema (6) de control por gestos está dispuesto para facilitar la interacción con el contenido de la pantalla (15, 16), cuando una parte del cuerpo del usuario asociada con la provisión del gesto interacciona con el accionador (70);
    en donde la interfaz (4) usuario-vehículo está dispuesta para determinar si la parte del cuerpo interacciona con el accionador (70), utilizando:
    un sensor en el accionador; o
    el sistema (6) de control por gestos; y,
    en donde el sistema (6) de control por gestos está dispuesto además para:
    detectar la dirección del gesto (14) del usuario de la aeronave (2); y, procesar el gesto detectado para controlar la ubicación de un indicador (26) en la pantalla (15, 16) según esa dirección detectada, de tal modo que la ubicación del indicador (26) está dispuesta para moverse según los cambios en la dirección detectada, utilizándose el indicador para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla (15, 16),
    en donde el grado de movimiento del indicador (26) es más sensible a los cambios en la dirección detectada cuando la parte del cuerpo interacciona con el accionador (70).
  2. 2. La interfaz (4) usuario-vehículo de la reivindicación 1, en donde la interfaz usuario-vehículo está dispuesta para determinar si el usuario (12) ha realizado un gesto particular.
  3. 3. La interfaz (4) usuario-vehículo de la reivindicación 2, en donde el gesto particular comprende un movimiento o una punta de uno o más dedos de una mano del usuario (12) que interacciona con el accionador (70).
  4. 4. La interfaz (4) usuario-vehículo de cualquier reivindicación anterior, en donde el accionador (70) está fijado a la aeronave (2).
  5. 5. La interfaz (4) usuario-vehículo de cualquier reivindicación anterior, en donde el control es de tal modo que la ubicación del indicador (26) está dispuesta para moverse continua y proporcionalmente según los cambios en la dirección detectada.
  6. 6. La interfaz (4) usuario-vehículo de cualquier reivindicación anterior, en donde el control es de tal modo que la ubicación del indicador (26) está dispuesta para:
    alinearse con la dirección detectada; o
    desplazarse con respecto a la dirección detectada.
  7. 7. La interfaz (4) usuario-vehículo de cualquier reivindicación anterior, que comprende además un dispositivo (18) de entrada de interacción,
    y opcionalmente
    el dispositivo de entrada de interacción es, o forma parte de, el accionador (70).
  8. 8. La interfaz (4) usuario-vehículo de cualquier reivindicación anterior, que comprende además la pantalla, estando dispuesta la pantalla para que sea visible para el usuario de la aeronave (2) y para visualizar el contenido al usuario.
  9. 9. La interfaz (4) usuario-vehículo de la reivindicación 8, en donde la pantalla es:
    una pantalla (15) de usuario, montada en la cabeza; y/o
    una pantalla (16) que está fija a, o en relación con, la aeronave (2).
  10. 10. Un método de interfaz usuario-vehículo, que comprende:
    detectar un gesto (8, 10) de un usuario (12) de una aeronave (2); y
    controlar la interacción con el contenido de una pantalla (15, 16), según ese gesto detectado; facilitar la interacción con el contenido de la pantalla, cuando una parte del cuerpo del usuario asociada con una provisión del gesto interacciona con un accionador físico (70) para controlar el vehículo;
    determinar si la parte del cuerpo interacciona con el accionador, utilizando:
    un sensor en el accionador; o
    un sistema (6) de control por gestos; y,
    detectar la dirección del gesto (14) del usuario de la aeronave (2); y,
    procesar el gesto detectado para controlar una ubicación de un indicador (26) en una pantalla (15, 16) según esa dirección detectada, de tal modo que la ubicación del indicador (26) se disponga para moverse según los cambios en la dirección detectada, utilizándose el indicador (26) para mostrar una posición actual para la interacción del usuario con el contenido de la pantalla (15, 16); y,
    en donde el grado de movimiento del indicador (26) es más sensible a los cambios en la dirección detectada cuando la parte del cuerpo interacciona con el accionador (70).
ES20761876T 2019-09-06 2020-08-20 User-vehicle interface Active ES3032385T3 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1912839.6A GB2586856B (en) 2019-09-06 2019-09-06 User-Vehicle Interface
EP19275096.6A EP3809251A1 (en) 2019-10-17 2019-10-17 User-vehicle interface
PCT/GB2020/051992 WO2021044117A1 (en) 2019-09-06 2020-08-20 User-vehicle interface

Publications (1)

Publication Number Publication Date
ES3032385T3 true ES3032385T3 (en) 2025-07-18

Family

ID=72243158

Family Applications (1)

Application Number Title Priority Date Filing Date
ES20761876T Active ES3032385T3 (en) 2019-09-06 2020-08-20 User-vehicle interface

Country Status (4)

Country Link
US (1) US12050733B2 (es)
EP (1) EP4025979B1 (es)
ES (1) ES3032385T3 (es)
WO (1) WO2021044117A1 (es)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040017355A1 (en) * 2002-07-24 2004-01-29 Youngtack Shim Cursor control systems and methods
US9292093B2 (en) 2010-11-18 2016-03-22 Alpine Electronics, Inc. Interface method and apparatus for inputting information with air finger gesture
US20130063336A1 (en) 2011-09-08 2013-03-14 Honda Motor Co., Ltd. Vehicle user interface system
US10013053B2 (en) 2012-01-04 2018-07-03 Tobii Ab System for gaze interaction
US20140181759A1 (en) * 2012-12-20 2014-06-26 Hyundai Motor Company Control system and method using hand gesture for vehicle
US8818716B1 (en) 2013-03-15 2014-08-26 Honda Motor Co., Ltd. System and method for gesture-based point of interest search
US9939912B2 (en) 2014-03-05 2018-04-10 Denso Corporation Detection device and gesture input device
US10293783B2 (en) * 2016-05-19 2019-05-21 Ford Global Technologies, Llc Driver detection steering wheel
EP3316075B1 (en) * 2016-10-26 2021-04-07 Harman Becker Automotive Systems GmbH Combined eye and gesture tracking
US11033809B2 (en) * 2019-05-07 2021-06-15 Valve Corporation Using finger presence to activate a motion control feature for a handheld controller

Also Published As

Publication number Publication date
EP4025979C0 (en) 2025-04-09
EP4025979A1 (en) 2022-07-13
US12050733B2 (en) 2024-07-30
WO2021044117A1 (en) 2021-03-11
US20220276719A1 (en) 2022-09-01
EP4025979B1 (en) 2025-04-09

Similar Documents

Publication Publication Date Title
US12271560B2 (en) External user interface for head worn computing
US20250147588A1 (en) External user interface for head worn computing
US12174378B2 (en) External user interface for head worn computing
US9910506B2 (en) Method for interacting with an object displayed on data eyeglasses
US20150205351A1 (en) External user interface for head worn computing
US20170017323A1 (en) External user interface for head worn computing
US20170100664A1 (en) External user interface for head worn computing
US20160062118A1 (en) External user interface for head worn computing
US20160025980A1 (en) External user interface for head worn computing
WO2017015093A1 (en) External user interface for head worn computing
CN110869882B (zh) 用于运行用于机动车的显示设备的方法以及机动车
JP2017068569A (ja) 情報処理装置、情報処理方法、及びプログラム
CN108008873A (zh) 一种头戴式显示设备的用户界面操作方法
WO2019123326A1 (es) Sistema y método de interacción con un dispositivo móvil utilizando un visualizador head-up
ES3032385T3 (en) User-vehicle interface
ES3042175T3 (en) User-vehicle interface
ES3043657T3 (en) User-vehicle interface
EP3809239A1 (en) User-vehicle interface
EP3809251A1 (en) User-vehicle interface
EP3809237A1 (en) User-vehicle interface
GB2586855A (en) User-vehicle interface
GB2586857A (en) User-Vehicle Interface
GB2586856A (en) User-Vehicle Interface
JP2016167217A (ja) ヘッドマウントディスプレイへ表示するためのユーザインタフェース表示方法、及びプログラム