EP3317868B1 - Télécommande virtuelle - Google Patents

Télécommande virtuelle Download PDF

Info

Publication number
EP3317868B1
EP3317868B1 EP16741881.3A EP16741881A EP3317868B1 EP 3317868 B1 EP3317868 B1 EP 3317868B1 EP 16741881 A EP16741881 A EP 16741881A EP 3317868 B1 EP3317868 B1 EP 3317868B1
Authority
EP
European Patent Office
Prior art keywords
touch
zones
zone
remote equipment
remote
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
EP16741881.3A
Other languages
German (de)
English (en)
Other versions
EP3317868A1 (fr
Inventor
David SOUHAMI
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Softathome SA
Original Assignee
Softathome SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Softathome SA filed Critical Softathome SA
Priority to PL16741881T priority Critical patent/PL3317868T3/pl
Publication of EP3317868A1 publication Critical patent/EP3317868A1/fr
Application granted granted Critical
Publication of EP3317868B1 publication Critical patent/EP3317868B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface

Definitions

  • the present invention relates to a portable electronic device used as a remote control for remote equipment such as a television set-top box connected to a television set.
  • the interaction between a user and the television is based on the conventional use of a remote control making it possible to control the desired actions such as zapping, going to standby, access to the program guide, configuration, etc. ..
  • the user adapts to his remote control, the number of keys of which varies according to the ergonomics associated with the interface of the television.
  • the way to use the keys of this remote control, their actions are all things predefined by the supplier of the TV screen, Set Top Box or other device controlling the display on the TV screen.
  • remote controls where a key is associated with a function (EPG, VOD, source selection, ...)
  • remote controls where a combination of several presses is necessary to access a function.
  • the user In the first case, the user must carefully look at his remote control to read the functions to launch, in the last case, the Human Machine interface is crucial to minimize the number of key presses to allow access to services.
  • the conventional remote control is not visible and the virtual remote control requires a backlight to be visible, therefore a non-negligible consumption of energy.
  • the present invention relates to a virtual remote control which can be used without necessarily visually verifying where it is pressed.
  • the present invention also relates to a virtual remote control capable of operating on a tactile object without a screen.
  • Another object of the invention is a virtual remote control usable in the dark.
  • the arrangement of the zones according to the invention allows a user to easily place his finger on the desired zone without looking at the tactile surface. Overall, it is simple to mechanically locate the upper part, the lower part and the central part of a tactile surface.
  • the device according to the invention makes it possible to reconsider the principle of a remote control, by using tactile zones rather than buttons, associated with gestures.
  • it can be a “smartphone” type mobile phone, a touchscreen tablet or mouse, a touchpad or any other device having a touchscreen and a processing unit (detection, filtering, recognition, conversion, ...) able to process actions performed on the touch surface.
  • the processing unit is therefore configured to carry out a correspondence between on the one hand predefined and parameterized gestures in the software application and on the other hand control signals understandable by the remote equipment.
  • You can define simple gestures, each gesture being associated with a TV control function.
  • the software application can integrate several correspondence tables between gestures and a set of commands for each TV manufacturer.
  • the support zones according to the invention are designed to receive the thumb of the user. Their arrangement at the ends of the touch surface allows easy and error-free use. For example, one support area can be set for incrementing TV channels, while the other support area can be set for decrement.
  • the processing unit is configured to process only punctual actions, that is to say short or long presses making it possible to generate a command to increase or decrease one or more arbitrary units.
  • the central zone is capable of receiving instructions in the form of gestures made by a finger or several fingers of a user.
  • the central area is wide enough for the user to carry out his gestures without having to observe the tactile surface.
  • the division into three zones of the tactile surface with two support zones at the end is particularly judicious because these three zones, two for specific commands and one for gestures, make it possible to address all the commands of a classic remote control without representation of a multitude of active keys on the touch surface. The commands can thus be carried out without looking at the tactile surface.
  • the touch surface can be a touch screen, for example like that of a mobile telephone of the “smartphone” type or of a tablet.
  • the pressing actions on keys perfectly calibrated to the size of a finger, on a conventional remote control in particular, are transformed into local gestures making it possible to have the same remote actions. These gestures must make it possible to keep your eyes fixed only on a screen, the one you control.
  • a sound unit capable of being activated in response to the generation of a control signal to the remote equipment.
  • an audible signal alerts the user when a press has been validated on one of the two support zones or when a gesture has been made on the central zone.
  • the device according to the invention can comprise a vibratory unit able to be activated in response to the generation of a control signal to the remote equipment.
  • the device vibrates in the event of an order validated on the touch surface.
  • the vibration mode can be combined with the sound mode.
  • the device according to the invention may comprise a visual unit capable of being activated in response to the generation of a control signal to the remote equipment.
  • the visual unit can advantageously be the screen of the device which can be in unlit mode except when a command (a press or a gesture) has been validated by the processing unit.
  • the screen In lit mode, the screen can be lit on the entire surface or simply on the part concerned by the identified command: that is to say on the central part when a gesture has been identified in this central zone, on the '' one of the support zones when support has been identified in the affected area.
  • the lighting can last a certain time or be repetitive.
  • the screen of the device can be in illuminated mode when performing the gestures or the support.
  • the validation of an order can be done by flashing all or part of the screen.
  • the device according to the invention can comprise at least one transmitter for wireless transmission of the control signals with the remote equipment.
  • the remote equipment is a transceiver for two-way wireless communication of the control signals with the remote equipment.
  • the remote equipment also includes directional communications means. It can also be envisaged that an acknowledgment of receipt is sent by the remote equipment when an order has been correctly received by the latter.
  • the two support zones are located on the upper part and the lower part respectively.
  • the two support zones are far enough apart that the user is not mistaken between them.
  • the one at the top can correspond to an increment.
  • the one at the bottom may correspond to a decrement.
  • each support zone is a strip over the entire length of the side where it is located.
  • the support zone has a length greater than that of the region between the two corners on the same side of the touch surface. In this way, the thumb can more easily reach the support areas.
  • the decoder unit 2 transmits to the television set 4 one or more video streams such as television channels to be viewed.
  • the signals generated are transported between the set-top box 2 and the television set 4 by an HDMI cable 5.
  • the decoder unit 2 further comprises a BLE signal transmitter (not shown).
  • the smartphone 3 also includes a BLE signal transmitter and can thus be in communication over a wireless link L with the decoder unit 2.
  • the smartphone 3 is used as a remote control for the set-top box 2, a remote control which therefore has the function of controlling changes of channels, variation of the volume, navigation in different menus, commands for video playback ...
  • the present invention can also be implemented by using the smartphone as a remote control for the television only or possibly both devices.
  • the touch screen or touch surface 8 of the smartphone 3 will be used as an input interface for commands from the remote equipment. Using his finger, the user will make gestures and presses on the touch screen 8. Unlike the prior art, the user does not press graphic objects symbolizing the keys of a remote control classic. It is no longer a simple emulation or software reproduction of a classic remote control but a new design, a new interpretation of the remote control.
  • buttons on a conventional remote control are as follows: Button Type of support Associated action P + Short Program +: Allows you to zap to the next channel Long Fast channel scrolling P- Short Program -: Allows you to zap on the previous channel Long Fast channel scrolling MENU or HOME Short Access to the main application menu Long okay Short Validation Long 0 1 ... 9 Short Numbers to jump directly to a specific channel ⁇ ⁇ ⁇ ⁇ Short Navigation arrows Long Fast scrolling ⁇ ⁇ Short Actions to play video content
  • the object of the present invention is in particular to reconsider the principle of a remote control, by using tactile zones rather than buttons, these tactile zones being associated with gestures, and by using feedbacks by vibration and / or sound ensuring the good catch. in action account, to cover most of the desired actions.
  • the present invention proposes to use a touch surface such as the touch screen 8 of the smartphone 3 and to cut it virtually into three zones. It can be a partition, i.e. only three zones or there can be other functional zones or not. Ideally, these are three zones only with visible separation (by light lines of separation) or not.
  • Zone 1 is a support zone generally forming a band on the upper part of the touch surface.
  • this band can represent between 5 and 20% of the total surface.
  • a short press ideally corresponds to the increment of a unit while a long press can correspond to an incremental scrolling of the chains.
  • zone1 extends over the lower surface at the corners.
  • a right chamfer 6 is produced on each lateral end of the zone 1, close to a corner of the tactile surface.
  • zone1 is in the form of a straight strip in the center, terminated at each end by a wider zone facilitating access by the thumb. The two ends are thus arranged so that the device is compatible for left-handers and right-handers.
  • Zone 3 is also a support zone similar to zone 1 but located at the bottom of the touch surface, at the lower end when the touch surface is held vertically as illustrated on the figure 2 .
  • Zone1 and zone3 are symmetrical with respect to a horizontal axis passing through the middle of the tactile surface.
  • the chamfers 7 make it possible to create wider zones at the ends of the strip forming the zone 3.
  • Zone1 and zone3 are structured to make it possible to define "pressing zones” over a full width without representing a graphic object of a limited button on a small area of the screen. These areas define the "high” and “low” areas of the screen. They are therefore accessible with the thumb, they are symmetrical to adapt to a holding in hand that one is right-handed or left-handed. They also make it possible to respond to the fact that the screens can have different sizes, and must adapt in relation to the ergonomics of the hand.
  • the central zone is zone2 corresponding to the surface left free by zone1 and zone3, generally at the center of the touch screen 8. Its shape is therefore complementary to the shapes of the support zones.
  • This zone2 provides access to a certain number of remote action commands, by simple gestures that do not require looking at the screen. These gestures can be performed with the thumb for simple gestures, and with several fingers for less common actions. They all involve a remote action on the equipment which is controlled. No gesture has a local action, that is to say a control of the smartphone. It is possible to add a visual, sound and / or vibration feedback to the virtual remote control following the gesture to confirm that the command has been taken into account.
  • the proposed actions can: Gesture Number of fingers Associated remote action Possible return Visual Sound Vibration horizontal slide to the right 1 Right arrow ( ⁇ ) trace horizontal slide to the left 1 Left arrow ( ⁇ ) trace vertical slide up 1 Up arrow ( ⁇ ) trace vertical sliding down 1 Down arrow ( ⁇ ) trace horizontal slide to the right and hold 1 Long press right arrow ( ⁇ ) trace Yes horizontal slide to the left and hold 1 Long press left arrow ( ⁇ ) trace Yes vertical sliding up and holding 1 Long press up arrow ( ⁇ ) trace Yes vertical sliding down and holding 1 Long press down arrow ( ⁇ ) trace Yes Short press 1 OK button Double short press 1 MENU button horizontal slide to the right 2 Button ( ) trace Yes horizontal slide to the left 2 Button ( ) trace Yes Short press 2 Button ( ) click Yes Short press 3 Button ( ⁇ ) click Yes Yes Yes Yes Yes
  • This table very schematically constitutes a conversion table between the gestures performed on zone 2 and the usual control keys of the remote equipment.
  • the associations between gestures and control keys described above are given only by way of nonlimiting example. It is possible to imagine other combinations allowing to make natural the use of a tactile object to control the commands sent to a television set or a decoder displaying on a screen. More elaborate gestures can be considered.
  • the device according to the invention can be a smartphone 3 comprising a processing unit 9, typically a microcontroller or microprocessor associated with adequate memory spaces.
  • This smartphone 3 includes conventional software and hardware components for its proper functioning.
  • the hardware components there is in particular a supply battery 10, a transceiver 11 for communicating wirelessly with the remote equipment, a vibrator 12 for vibrating feedback, the touch screen 8 for among other things visual feedback, and a speaker 13 for sound feedback.
  • These elements are connected to each other in a conventional manner, in particular they are all controlled by the microprocessor.
  • the processing unit 9 implements a software application which performs the steps described on the figure 4 . Namely, a detection of a gesture in zone 2 or a press in zone 1 or zone 3. When a gesture or a press is identified, the conversion table described above is used in particular to identify the corresponding television control. The latter is then sent to the remote television 4 or the remote decoder 2, in parallel with the generation of a validation, which can be of sound type via the loudspeaker 13, visual by mission for example of lighting via the screen 8, or vibrating via the vibrator 12.
  • the present invention thus makes it possible to facilitate the use of remote controls of the virtual type. It allows tactile sensations associated with a vibrator, auditory sensations acknowledging the use of the device. It allows you to control a TV screen using an application running on another screen that does not include physical keys, without having to look at each of these screens alternately to find out what you press and what is the result following support.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Television Systems (AREA)

Description

    Introduction
  • La présente invention se rapporte à un dispositif électronique portatif utilisé comme télécommande d'un équipement distant tel un téléviseur ou une set-top-box connecté à un téléviseur.
  • L'interaction entre un utilisateur et la télévision s'appuie sur l'utilisation classique d'une télécommande permettant de contrôler les actions souhaitées telles que le zapping, le passage en veille, l'accès au guide des programmes, la configuration, etc ...
  • L'utilisateur s'adapte à sa télécommande dont le nombre de touches est variable suivant les ergonomies associées à l'interface du téléviseur. La façon d'utiliser les touches de cette télécommande, leurs actions sont autant de choses prédéfinies par le fournisseur de l'écran de TV, de Set Top Box ou autre appareil contrôlant l'affichage sur l'écran de TV.
    • Art antérieur
  • Il existe deux extrêmes : des télécommandes où une touche est associée à une fonction (EPG, VOD, sélection de la source, ...), des télécommandes où une combinaison de plusieurs appuis est nécessaire pour accéder à une fonction. Dans le premier cas, l'utilisateur doit bien regarder sa télécommande pour lire les fonctions à lancer, dans le dernier cas, l'interface Homme Machine est déterminante pour minimiser le nombre d'appui touche pour permettre l'accès aux services.
  • L'existence de nouveaux écrans mobiles comme les tablettes, les smartphones, de nouveaux objets comme des souris à écran tactile, amène désormais à considérer deux catégories de télécommandes : la télécommande physique comme un objet que l'on prend en main avec des boutons physiques, et la télécommande virtuelle, comme étant une application s'exécutant sur un écran tiers, ou sur un objet à écran tactile. Une telle télécommande virtuelle est décrite par exemple dans la publication US2011/0143835 , afin de permettre à un utilisateur de contrôler des fonctionnalités multimédia dans un avion.
  • Les télécommandes virtuelles développées jusqu'ici cherchent systématiquement à reproduire les télécommandes physiques. Elles nécessitent donc un écran, et représentent les boutons d'une télécommande classique. Un écran n'ayant pas de boutons physiques, il est systématiquement nécessaire de regarder l'écran de la télécommande virtuelle pour déterminer où se trouve le bouton recherché, puis regarder l'écran que l'on contrôle pour s'assurer du résultat, puis regarder à nouveau l'écran de la télécommande et ainsi de suite. Ceci rend l'usage de cette télécommande difficile sur la durée.
  • Par ailleurs, lorsque l'utilisateur souhaite reproduire l'ambiance d'une salle de cinéma, il met la pièce dans laquelle il est installé dans l'obscurité de façon à être complètement absorber par l'écran. Dans un tel cas, la télécommande classique n'est pas visible et la télécommande virtuelle nécessite un rétro-éclairage pour être visible, donc une consommation non négligeable d'énergie.
  • La présente invention a pour objet une télécommande virtuelle qui peut être utilisée sans obligatoirement vérifier visuellement où l'on appui.
  • La présente invention a aussi pour objet une télécommande virtuelle apte à fonctionner sur un objet tactile sans écran.
  • Un autre but de l'invention est une télécommande virtuelle utilisable dans l'obscurité.
    • Exposé de l'invention
  • On atteint au moins l'un des objectifs précités avec un dispositif électronique portatif utilisé comme télécommande d'un équipement distant tel un téléviseur ou une set-top-box connecté à un téléviseur. Ce dispositif comprend une surface tactile et une unité de traitement logeant une application logicielle qui lorsqu'exécutée, scinde virtuellement la surface tactile en uniquement trois zones actives et détecte les actions réalisées sur ces zones de façon à générer des signaux de commande vers l'équipement distant ; les trois zones étant constituées par :
    • deux zones dites zones d'appuis situées respectivement aux deux extrémités opposées de la surface, chaque zone d'appui étant configurée pour constituer dans sa globalité une unique zone à commande ponctuelle, et
    • une zone centrale de taille supérieure à chacune desdites zones d'appuis, cette zone centrale étant configurée pour la détection de gestes.
  • Avec le dispositif selon l'invention, au lieu de reproduire une télécommande physique traditionnelle reproduisant des objets graphiques représentant des boutons, on exploite ici les principes de toucher (tactile), notamment sur des zones larges, pour envoyer des commandes à distance, de façon à ne jamais avoir besoin de regarder l'objet de commande pour contrôler ce qui se passe sur l'équipement distant.
  • La disposition des zones selon l'invention, permet à un utilisateur de facilement disposer le doigt sur la zone souhaitée sans regarder la surface tactile. Globalement, il est simple de repérer machinalement la partie haute, la partie basse et la partie centrale d'une surface tactile.
  • Le dispositif selon l'invention permet de reconsidérer le principe d'une télécommande, en utilisant des zones tactiles plutôt que des boutons, associées à des gestes. Pour ce faire, il peut s'agir d'un téléphone portable de type « smartphone », une tablette ou une souris tactile, un pavé tactile ou tout autre dispositif ayant une surface tactile et une unité de traitement (détection, filtrage, reconnaissance, conversion,...) apte à traiter des actions réalisées sur la surface tactile. L'unité de traitement est donc configurée pour réaliser une correspondance entre d'une part des gestes prédéfinis et paramétrés dans l'application logicielle et d'autre part des signaux de commandes compréhensibles par l'équipement distant. On peut définir des gestes simples, chaque geste étant associé à une fonction de commande du téléviseur. L'application logicielle peut intégrer plusieurs tables de correspondance entre les gestes et un ensemble des commandes pour chaque constructeur de téléviseur.
  • Les zones d'appuis selon l'invention sont prévues pour recevoir le pouce de l'utilisateur. Leur disposition aux extrémités de la surface tactile permet une utilisation facile et sans erreur. Par exemple, une zone d'appui peut être paramétrée pour une incrémentation de chaînes du téléviseur, tandis que l'autre zone d'appui peut être paramétrée pour une décrémentation. De préférence, l'unité de traitement est configurée pour ne traiter que des actions ponctuelles, c'est-à-dire des appuis courts ou longs permettant de générer une commande d'augmentation ou de diminution d'une ou plusieurs unités arbitraires.
  • La zone centrale est apte à recevoir des consignes sous la forme de gestes réalisés par un doigt ou plusieurs doigts d'un utilisateur. La zone centrale est suffisamment large pour que l'utilisateur puisse réaliser ses gestes sans être obligé d'observer la surface tactile. Le découpage en trois zones de la surface tactile avec deux zones d'appuis à l'extrémité est particulièrement judicieux car ces trois zones, deux pour des commandes ponctuelles et une pour les gestes, permettent d'adresser l'ensemble des commandes d'une télécommande classique sans représentation d'une multitude de touches actives sur la surface tactile. Les commandes peuvent ainsi être réalisées sans regarder la surface tactile.
  • Selon une caractéristique avantageuse de l'invention, la surface tactile peut être un écran tactile, par exemple comme celui d'un téléphone mobile de type « smartphone » ou d'une tablette.
  • Avec le dispositif selon l'invention, on transforme les actions d'appui sur des touches parfaitement calibrées à la dimension d'un doigt, sur une télécommande classique notamment, en des gestes locaux permettant d'avoir les mêmes actions distantes. Ces gestes doivent permettre de ne garder les yeux fixés que sur un écran, celui que l'on contrôle.
  • Afin de s'assurer qu'un signal de commande a été généré par le dispositif, on prévoit par exemple une unité sonore apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant. De cette façon, un signal sonore avertit l'utilisateur lorsqu'un appui a été validé sur l'une des deux zones d'appui ou lorsqu'un geste a été réalisé sur la zone centrale.
  • De la même façon, le dispositif selon l'invention peut comprendre une unité vibratoire apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant. Ainsi, le dispositif vibre en cas d'une commande validée sur la surface tactile. Le mode vibratoire peut être combiné au mode sonore.
  • En outre, le dispositif selon l'invention peut comprendre une unité visuelle apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant. L'unité visuelle peut avantageusement être l'écran du dispositif qui peut être en mode non éclairé sauf lorsqu'une commande (un appui ou un geste) a été validée par l'unité de traitement. En mode allumé, l'écran peut être éclairé sur toute la surface ou simplement sur la partie concernée par la commandé identifiée : c'est-à-dire sur la partie centrale lorsqu'un geste a été identifié dans cette zone centrale, sur l'une des zones d'appuis lorsqu'un appui a été identifié dans la zone concernée. L'éclairage peut durer un certain temps ou bien être répétitif.
  • En variante, l'écran du dispositif peut être en mode éclairé lors de la réalisation des gestes ou de l'appui. Dans ce cas, la validation d'une commande peut se faire par clignotement de tout ou partie de l'écran.
  • En complément notamment de ce qui précède, on peut envisager un retour visuel, conjointement ou non à l'éclairage de l'écran, sur une diode disposée sur le dispositif.
  • Selon une caractéristique avantageuse de l'invention, le dispositif selon l'invention peut comprendre au moins un émetteur pour une transmission sans fil des signaux de commande avec l'équipement distant.
  • De préférence, il s'agit d'un émetteur-récepteur pour une communication bidirectionnelle sans fil des signaux de commande avec l'équipement distant. Dans ce cas, l'équipement distant comporte des moyens de communications directionnelles également. On peut envisager en outre qu'un accusé réception soit envoyé par l'équipement distant lorsqu'une commande a été correctement reçue par ce dernier.
  • Selon un mode de réalisation de l'invention, lorsque le dispositif est tenu verticalement, les deux zones d'appuis se situent sur la partie haute et la partie basse respectivement. Les deux zones d'appuis sont suffisamment éloignées pour que l'utilisateur ne se trompe pas entre elles. Celle située en haut peut correspondre à une incrémentation. Celle située en bas peut correspondre à une décrémentation.
  • De préférence, lorsque la surface tactile présente une forme parallélépipédique, chaque zone d'appui est une bande sur toute la longueur du côté où elle se trouve.
  • Par ailleurs, on peut envisager le fait qu'à chaque coin de la surface tactile, la zone d'appui ait une longueur supérieure à celle de la région entre les deux coins d'un même côté de la surface tactile. De cette façon, le pouce peut plus facilement atteindre les zones d'appuis.
    • Description des figures
  • D'autres particularités et avantages de l'invention apparaîtront à la lecture de la description détaillée de mises en œuvre et de modes de réalisation nullement limitatifs, au regard de figures annexées sur lesquelles :
    • la Figure 1 est une vue schématique d'un système comprenant un dispositif tel un smartphone en guise de télécommande pour un équipement distant tel un décodeur numérique ou un téléviseur selon l'invention ;
    • la Figure 2 est une vue schématique d'un découpage virtuelle d'une surface tactile ou d'un écran tactile selon l'invention ;
    • la Figure 3 est une vue schématique très simplifiée d'une partie de composants constitutifs d'un dispositif selon l'invention ; et
    • la Figure 4 est un ordinogramme simplifié des étapes pour générer un signal de commande selon l'invention.
    Description de l'invention
  • Les modes de réalisation décrits n'étant nullement limitatifs, on pourra notamment réaliser des variantes de l'invention ne comprenant qu'une sélection de caractéristiques décrites par la suite, telles que décrites ou généralisées, isolées des autres caractéristiques décrites, si cette sélection de caractéristiques est suffisante pour conférer un avantage technique ou pour différencier l'invention par rapport à l'état de la technique.
  • La Figure 1 illustre un système 1 selon un mode de réalisation de l'invention. Le système 1 comprend :
    • un équipement distant 2, ici un boîtier décodeur ou « set top box » en anglais ;
    • un dispositif portatif de commande 3, ici un « smartphone » ; et
    • un téléviseur 4.
  • Le boîtier décodeur 2 transmet au téléviseur 4 un ou plusieurs flux vidéo tels que des chaînes de télévision à visualiser.
  • Usuellement les signaux générés sont transportés entre le boîtier décodeur 2 et le téléviseur 4 par un câble HDMI 5.
  • Dans l'exemple représenté, le boîtier décodeur 2 comprend en outre un transmetteur de signaux BLE (non représenté). Le smartphone 3 comprend également un transmetteur de signaux BLE et peut ainsi être en communication selon une liaison sans-fil L avec le boîtier décodeur 2.
  • Dans l'exemple représenté, le smartphone 3 est utilisé comme télécommande du boîtier décodeur 2, une télécommande qui a donc pour fonction de commander les changements de chaînes, la variation du volume, la navigation dans différents menus, les commandes d'une lecture vidéo... Mais la présente invention peut également être mise en œuvre en utilisant le smartphone comme télécommande du téléviseur uniquement ou bien éventuellement des deux équipements.
  • Selon l'invention, l'écran tactile ou surface tactile 8 du smartphone 3 va être utilisé comme interface d'entrée des commandes de l'équipement distant. A l'aide de son doigt, l'utilisateur va réaliser des gestes et des appuis sur l'écran tactile 8. Contrairement à l'art antérieur, l'utilisateur n'appuie pas sur des objets graphiques symbolisant les touches d'une télécommande classique. Il ne s'agit plus d'une simple émulation ou reproduction logicielle d'une télécommande classique mais bien d'une nouvelle conception, une nouvelle interprétation de la télécommande.
  • Un exemple d'usage courant des boutons d'une télécommande classique est le suivant :
    Bouton Type d'appui Action associée
    P+ Court Programme + : Permet de zapper sur la chaine suivante
    Long Défilement rapide des chaines
    P- Court Programme - : Permet de zapper sur la chaine précédente
    Long Défilement rapide des chaines
    MENU or HOME Court Accès au menu principal de l'application
    Long
    OK Court Validation
    Long
    0 1 ... 9 Court Numéros pour sauter directement vers une chaine spécifique
    ←→↑↓ Court Flèches de navigation
    Long Défilement rapide
    Figure imgb0001
    Figure imgb0002
    Figure imgb0003
    Figure imgb0004
    ■ ●
    Figure imgb0005
    		 Court Actions de lecture d'un contenu vidéo
  • La présente invention a notamment pour objet de reconsidérer le principe d'une télécommande, en utilisant des zones tactiles plutôt que des boutons, ces zones tactiles étant associées à des gestes, et en utilisant des retours par vibration et/ou sonore assurant la bonne prise en compte de l'action, pour couvrir la plupart des actions souhaitées.
  • Afin de permettre l'utilisation d'une télécommande sans être obligé de vérifier visuellement si l'on actionne bien la bonne touche, la présente invention propose d'utiliser une surface tactile telle l'écran tactile 8 du smartphone 3 et de le découper virtuellement en trois zones. Il peut s'agir d'une partition, c'est-à-dire uniquement trois zones ou bien il peut y avoir d'autres zones fonctionnelles ou pas. Idéalement il s'agit de trois zones uniquement avec une séparation visible (par des traits lumineux de séparation) ou pas.
  • Sur la figure 2, on distingue le découpage selon la verticale en trois zones distinctes avec l'attribution suivante des fonctions :
    • Zone 1 : P+
    • Zone 2 : Zone de contrôle par geste tactile
    • Zone 3 : P-
  • La zone1 est une zone d'appui formant globalement une bande sur la partie haute de la surface tactile. A titre d'exemple non limitatif, cette bande peut représenter entre 5 et 20% de la surface totale. L'utilisateur qui souhaite commander le passage à une chaîne supérieure à la chaîne courante, utilise son pouce pour cliquer sur cette zone1. Un appui court correspond idéalement à l'incrément d'une unité alors qu'un appui long peut correspondre à un défilement incrémental des chaînes. Pour faciliter l'accès à la zone1 tout en conservant un maximum de surface pour la zone centrale, la zone1 déborde sur la surface inférieure au niveau des coins. Sur chaque extrémité latérale de la zone1, proche d'un coin de la surface tactile, un chanfrein 6 droit est réalisé. On peut prévoir des formes différentes du chanfrein droit, notamment des formes arrondies ou angles droits ou autres angles. Au final, la zone1 est en forme d'une bande droite au centre, terminée à chaque extrémité par une zone plus large facilitant l'accès par le pouce. Les deux extrémités sont ainsi arrangées pour que le dispositif soit compatible pour des gauchers et des droitiers.
  • La zone3 est également une zone d'appui semblable à la zone1 mais située en bas de la surface tactile, à l'extrémité inférieure lorsque la surface tactile est tenue verticalement comme illustrée sur la figure 2. La zone1 et la zone3 sont symétriques par rapport à un axe horizontal passant au milieu de la surface tactile. Les chanfreins 7 permettent de créer des zones plus larges aux extrémités de la bande formant la zone3. Lorsqu'un utilisateur souhaite commander le passage à une chaîne inférieure à la chaîne courante diffusée sur le téléviseur par exemple, un appui court sur la zone3 permet de générer une commande de changement de chaîne par décrémentation.
  • La zone1 et la zone3 sont structurées pour permettre de définir des "zones d'appuies" sur toute une largeur sans représentation d'un objet graphique d'un bouton limité sur une petite surface de l'écran. Ces zones définissent les zones "haute" et "basse" de l'écran. Elles sont donc accessibles avec le pouce, elles sont symétriques pour s'adapter à une tenue en main que l'on soit droitier ou gaucher. Elles permettent aussi de répondre au fait que les écrans peuvent avoir des tailles différentes, et doivent s'adapter par rapport à l'ergonomie de la main.
  • Ces zones ne sont des zones uniquement cliquables. Des retours sonore et vibrant permettent à l'utilisateur d'avoir une validation naturelle de la prise en compte de l'action souhaitée, c'est-à-dire l'envoie vers le téléviseur d'une commande P+ ou P- (programme supérieur/programme inférieur). Le tableau ci-dessous reprend un ensemble d'actions et retour possibles avec la zone1 et la zone3 :
    Geste Nombre de doigts Action associée Re tour possible
    Visuel Sonore Vibration
    Appui zone1 1 P+ : Permet de zapper sur la chaine suivante Coloration de la zone Un clic non
    Appui long zone1 1 Défilement rapide Un clic oui
    Appui zone3 1 P-: Permet de zapper sur la chaine précédente Coloration de la zone Un clic non
    Appui long zone 3 1 Défilement rapide Un clic oui
  • Sur la figure 2, la zone centrale est la zone2 correspondant à la surface laissée libre par la zone1 et la zone3, globalement au centre de l'écran tactile 8. Sa forme est donc complémentaire aux formes des zones d'appui.
  • Cette zone2 permet d'accéder à un certain nombre de commandes à action distantes, par des gestes simples ne nécessitant pas de regarder l'écran. Ces gestes peuvent être réalisés avec le pouce pour les gestes simples, et avec plusieurs doigts pour des actions moins courantes. Elles entrainent toutes une action distante sur l'équipement qui est piloté. Aucun geste n'a une action local en c'est-à-dire un contrôle du smartphone. Il est possible d'adjoindre suite au geste un retour visuel, sonore et/ou vibratoire sur la télécommande virtuelle pour valider la prise en compte de la commande. Les gestes proposés peuvent :
    Geste Nombre de doigts Action distante assocée Retour possible
    Visuel Sonore Vibration
    glissement horizontal vers la droite 1 Flèche droite (→) trace
    glissement horizontal vers la gauche 1 Flèche gauche (←) trace
    glissement vertical vers le haut 1 Flèche haut (↑) trace
    glissement vertical vers le bas 1 Flèche bas (↓) trace
    glissement horizontal vers la droite et maintien 1 Appui long flèche droite (→) trace oui
    glissement horizontal vers la gauche et maintien 1 Appui long flèche gauche (←) trace oui
    glissement vertical vers le haut et maintien 1 Appui long flèche haut (↑) trace oui
    glissement vertical vers le bas et maintien 1 Appui long flèche bas (↓) trace oui
    Appui court 1 Bouton OK
    Double appui court 1 Bouton MENU
    glissement horizontal vers la droite 2 Bouton (
    Figure imgb0003
    )    		 trace oui
    glissement horizontal vers la gauche 2 Bouton (
    Figure imgb0001
    )    		 trace oui
    Appui court 2 Bouton (
    Figure imgb0004
    Figure imgb0005
    )    		 clic oui
    Appui court 3 Bouton (●) clic oui oui
  • Ce tableau constitue de façon très schématique un tableau de conversion entre les gestes réalisés sur la zone2 et les touches de contrôle habituels de l'équipement distant. Les associations entre des gestes et des touches de contrôle décrites ci-dessus ne sont données qu'à titre d'exemple non limitatif. Il est possible d'imaginer d'autres combinaisons permettant de rendre naturel l'utilisation d'un objet tactile pour contrôler les commandes envoyées vers un téléviseur ou un décodeur affichant sur un écran. Des gestes plus élaborés peuvent être envisagés.
  • Sur la figure 3 est illustré de façon très schématique quelques éléments constitutifs d'un dispositif selon l'invention. Typiquement, le dispositif selon l'invention peut être un smartphone 3 comprenant une unité de traitement 9, typiquement un microcontrôleur ou microprocesseur associé à des espaces mémoires adéquats. Ce smartphone 3 comporte des composants logiciels et matériels conventionnels pour son bon fonctionnement. Parmi les composants matériels on distingue en particulier une batterie d'alimentation 10, un émetteur-récepteur 11 pour communiquer sans fil avec l'équipement distant, un vibreur 12 pour un retour vibrant, l'écran tactile 8 pour entre autre un retour visuel, et un haut parleur 13 pour un retour sonore. Ces éléments sont connectés entre eux de façon conventionnelle, en particulier ils sont tous commandés par le microprocesseur.
  • L'unité de traitement 9 met en œuvre une application logicielle qui réalise les tapes décrites sur la figure 4. A savoir, une détection d'un geste dans la zone2 ou d'un appui dans la zone 1 ou la zone3. Lorsqu'un geste ou un appui est identifié, on utilise notamment le tableau de conversion décrit ci-dessus pour identifier la commande télévisuelle correspondante. Cette dernière est ensuite envoyée vers le téléviseur distant 4 ou le décodeur distant 2, parallèlement à la génération d'une validation, qui peut être de type sonore via le haut parleur 13, visuel par mission par exemple d'un éclairage via l'cran 8, ou vibrant via le vibreur 12.
  • La présente invention permet ainsi de faciliter l'usage des télécommandes de type virtuel. Elle autorise des sensations tactiles associées à un vibreur, des sensations auditives acquittant l'usage du dispositif. Elle permet de contrôler un écran de téléviseur à l'aide d'une application s'exécutant sur un autre écran ne comprenant pas de touches physiques, sans être contraint de regarder alternativement chacun de ces écrans pour savoir sur quoi on appui et quel est le résultat suite à l'appui.
  • Bien sûr, l'invention n'est pas limitée aux exemples qui viennent d'être décrits et de nombreux aménagements peuvent être apportés à ces exemples sans sortir du cadre de l'invention. De plus, les différentes caractéristiques, formes, variantes et modes de réalisation de l'invention peuvent être associés les uns avec les autres selon diverses combinaisons dans la mesure où ils ne sont pas incompatibles ou exclusifs les uns des autres.

Claims (15)

  1. Dispositif électronique portatif utilisé comme télécommande d'un équipement distant, ce dispositif comprenant une surface tactile et une unité de traitement logeant une application logicielle qui lorsqu'exécutée, scinde virtuellement la surface tactile en uniquement trois zones actives et détecte les actions réalisées sur ces zones de façon à générer des signaux de commande vers l'équipement distant ; les trois zones étant constituées par :
    - deux zones dites zones d'appuis situées respectivement aux deux extrémités opposées de la surface, chaque zone d'appui étant configurée pour constituer dans sa globalité une unique zone à commande ponctuelle, et
    - une zone centrale de taille supérieure à chacune desdites zones d'appuis, cette zone centrale étant configurée pour la détection de gestes.
  2. Dispositif selon la revendication 1, caractérisé en ce qu'il comprend une unité sonore apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant.
  3. Dispositif selon la revendication 1 ou 2, caractérisé en ce qu'il comprend une unité vibratoire apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant.
  4. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce qu'il comprend une unité visuelle apte à être activée en réponse à la génération d'un signal de commande vers l'équipement distant.
  5. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce qu'il comprend au moins un émetteur pour une transmission sans fil des signaux de commande avec l'équipement distant.
  6. Dispositif selon la revendication 5, caractérisé en ce qu'il comprend un émetteur-récepteur pour une communication bidirectionnelle sans fil des signaux de commande avec l'équipement distant.
  7. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que la surface tactile est un écran tactile.
  8. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que lorsque le dispositif est tenu verticalement, les deux zones d'appuis se situent sur la partie haute et la partie basse respectivement.
  9. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que lorsque la surface tactile présente une forme parallélépipédique, chaque zone d'appui est une bande sur toute la longueur du côté où elle se trouve.
  10. Dispositif selon la revendication 9, caractérisé en ce qu'à chaque coin de la surface tactile, la zone d'appui a une longueur supérieure à celle de la région entre les deux coins d'un même côté de la surface tactile.
  11. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que le dispositif est un téléphone portable de type « smartphone ».
  12. Dispositif selon l'une quelconque des revendications 1 à 10, caractérisé en ce que le dispositif est une tablette.
  13. Dispositif selon l'une quelconque des revendications 1 à 10, caractérisé en ce que le dispositif est une souris tactile.
  14. Dispositif selon l'une quelconque des revendications 1 à 10, caractérisé en ce que le dispositif est un pavé tactile.
  15. Dispositif selon l'une quelconque des revendications précédentes, caractérisé en ce que l'unité de traitement est configurée pour réaliser une correspondance entre d'une part des gestes prédéfinis et paramétrés dans l'application logicielle et d'autre part des signaux de commandes compréhensibles par l'équipement distant.
EP16741881.3A 2015-06-30 2016-06-30 Télécommande virtuelle Active EP3317868B1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PL16741881T PL3317868T3 (pl) 2015-06-30 2016-06-30 Pilot wirtualny

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1556186A FR3038436B1 (fr) 2015-06-30 2015-06-30 Telecommande virtuelle
PCT/EP2016/065339 WO2017001578A1 (fr) 2015-06-30 2016-06-30 Telecommande virtuelle

Publications (2)

Publication Number Publication Date
EP3317868A1 EP3317868A1 (fr) 2018-05-09
EP3317868B1 true EP3317868B1 (fr) 2019-12-18

Family

ID=54199828

Family Applications (1)

Application Number Title Priority Date Filing Date
EP16741881.3A Active EP3317868B1 (fr) 2015-06-30 2016-06-30 Télécommande virtuelle

Country Status (5)

Country Link
EP (1) EP3317868B1 (fr)
ES (1) ES2777536T3 (fr)
FR (1) FR3038436B1 (fr)
PL (1) PL3317868T3 (fr)
WO (1) WO2017001578A1 (fr)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113822795B (zh) * 2021-09-17 2024-02-09 惠州视维新技术有限公司 基于毫米波雷达的虚拟按键投影方法、装置及电子设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8734256B2 (en) * 2008-09-15 2014-05-27 Panasonic Avionics Corporation System and method for hosting multiplayer games
US9547375B2 (en) * 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Split virtual keyboard on a mobile computing device

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
None *

Also Published As

Publication number Publication date
WO2017001578A1 (fr) 2017-01-05
ES2777536T3 (es) 2020-08-05
PL3317868T3 (pl) 2020-06-29
FR3038436B1 (fr) 2017-08-18
FR3038436A1 (fr) 2017-01-06
EP3317868A1 (fr) 2018-05-09

Similar Documents

Publication Publication Date Title
USD842892S1 (en) Electronic device with pair of display screens or portions thereof each with graphical user interface
US20170347054A1 (en) Systems and Methods for Remote Control of a Television
EP1929778B1 (fr) Procede de navigation dans une liste par defilement continu d'une caracteristique graphique, et terminal associe
FR2967509A1 (fr) Appareil d'affichage d'images et procede de fonctionnement associe
CN103970443B (zh) 一种终端及终端显示控制方法
FR3022367A1 (fr)
CN108475158A (zh) 基于轻扫手势让内容项目间能够转换的系统及方法
WO2008051538A3 (fr) Affichage d'informations sur produits et sur produits d'association
WO2007090063A3 (fr) Visualisation d'objets numériques au moyen de cartes
WO2006041692A3 (fr) Ecrans tactiles video fractionnels
US20160373804A1 (en) Systems and methods of displaying and navigating content based on dynamic icon mapping
CN106325663A (zh) 移动终端及其截屏方法
KR20140131166A (ko) 디스플레이 장치 및 검색 방법
CN103150084A (zh) 终端和终端操控方法
EP2539875B1 (fr) Procede et dispositif de controle d'au moins un appareil par au moins un autre appareil, systeme mettant en oeuvre un tel dispositif
CN104991699B (zh) 一种视频显示控制的方法和装置
CN103345303A (zh) 一种用智能移动设备全替代鼠标键盘的系统及实现方法
EP3317868B1 (fr) Télécommande virtuelle
CN103226458A (zh) 一种用于智能移动设备的多屏显示控制方法
CN105898604A (zh) 基于移动终端的直播视频互动信息配置方法及装置
TW201207669A (en) A display control apparatus and method for selecting an interactive object on a display frame by a numberic controller
WO2008067263A3 (fr) Procédé et système informatiques d'interface graphique utilisateur interactive
CN109634487A (zh) 信息显示方法、装置及存储介质
EP2958004B1 (fr) Procédé de selection d'un élément dans une liste
CN103442125A (zh) 手机

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20180130

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20190708

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602016026439

Country of ref document: DE

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 1215460

Country of ref document: AT

Kind code of ref document: T

Effective date: 20200115

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20191218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200319

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200318

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200318

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200513

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2777536

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20200805

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20200418

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602016026439

Country of ref document: DE

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 1215460

Country of ref document: AT

Kind code of ref document: T

Effective date: 20191218

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

26N No opposition filed

Effective date: 20200921

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20200630

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20200630

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20200630

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20191218

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20230628

Year of fee payment: 8

Ref country code: DE

Payment date: 20230629

Year of fee payment: 8

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: PL

Payment date: 20230626

Year of fee payment: 8

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: ES

Payment date: 20230807

Year of fee payment: 8

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 602016026439

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20250101

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20240630

REG Reference to a national code

Ref country code: ES

Ref legal event code: FD2A

Effective date: 20250805

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: ES

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20240701

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20240630