FR3143155A1 - Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés - Google Patents

Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés Download PDF

Info

Publication number
FR3143155A1
FR3143155A1 FR2213083A FR2213083A FR3143155A1 FR 3143155 A1 FR3143155 A1 FR 3143155A1 FR 2213083 A FR2213083 A FR 2213083A FR 2213083 A FR2213083 A FR 2213083A FR 3143155 A1 FR3143155 A1 FR 3143155A1
Authority
FR
France
Prior art keywords
function
elementary
processing
processing function
instantiated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
FR2213083A
Other languages
English (en)
Inventor
Olivier HOTEL
Franck ROUDET
David Excoffier
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Priority to FR2213083A priority Critical patent/FR3143155A1/fr
Priority to EP23818368.5A priority patent/EP4630914A1/fr
Priority to PCT/EP2023/084177 priority patent/WO2024121075A1/fr
Publication of FR3143155A1 publication Critical patent/FR3143155A1/fr
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/34Graphical or visual programming
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/36Software reuse

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Stored Programmes (AREA)

Abstract

Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés L'invention concerne une solution de génération d’une application de traitement d’un flux multimédia comprenant un assemblage de fonctions de traitement élémentaire, ces fonctions de traitement élémentaire étant instanciées sur des nœuds de calcul. Un fichier de configuration est fourni à chaque fonction de traitement élémentaire afin de réaliser cet assemblage. Ainsi, un tel procédé permet de bénéficier des avantages des techniques dites de « low code » ou de « no code » tout en offrant la possibilité de sélectionner des fonctions élémentaires instanciées sur des nœuds de calcul adaptés. FIGURE 4

Description

Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés Domaine de l'invention
Le domaine de l'invention est celui des applications dites de vision par ordinateur dont le but est de traiter des flux multimédias. Plus précisément, l'invention concerne des applications de vision par ordinateur assemblées de manière graphique ou «low code».
Art antérieur et ses inconvénients
Classiquement, les applications de vision par ordinateur reposent sur un code informatique écrit par des spécialistes de langages informatiques. Ces codes permettent d’appeler des fonctions, elles aussi codées, appliquant un ou plusieurs traitements à des images constitutives du flux multimédia à traiter.
Cependant, de telles applications manquent de modularité car elles sont codées de manière monolithique, les fonctions appelées étant intégrées au sein même du code de l’application. Ainsi, toute modification apportée à l’une de ces fonctions peut nécessiter une réécriture partielle ou totale du code de l’application.
Avec le développement des technologies dites du numérique, les besoins en développement d’applications ont augmenté. Pour répondre à ce besoin grandissant, des techniques de génération d’applications nécessitant peu ou pas de compétences en codage informatique ont été développées. De telles techniques sont dite «low code» pour « peu de code » ou «no code» pour « pas de code ».
De telles techniques consistent en l’écriture de codes informatiques correspondant à des fonctions de traitement élémentaire. Ainsi, chaque fonction de traitement élémentaire correspond à un bloc fonctionnel, par exemple un bloc « reconnaissance faciale », un bloc « redimensionnement de l’image », etc.
Une personne souhaitant générer une application spécifique, telle que par exemple une application de vision par ordinateur, sélectionne plusieurs blocs fonctionnels appartenant à une bibliothèque de fonctions de traitement élémentaire mise à sa disposition, et les assemble de manière ordonnée afin de générer l’application permettant d’obtenir le traitement escompté.
Les différentes fonctions de traitement élémentaire étant développées indépendamment les unes des autres, une modification impactant l’une d’elles n’a pas de répercussion sur les autres fonctions de traitement élémentaire constitutives de l’application ce qui réduit les besoins en réécriture du code de l’application.
Un inconvénient de ces solutions est que les différents blocs fonctionnels proposés par un fournisseur de service de génération d’applications «low code» ou «no code» sont instanciés sur un même nœud de calcul. Or, selon les traitements effectués par les différents blocs fonctionnels sur les images constitutives du flux multimédia, le nœud de calcul sur lequel ces blocs fonctionnels sont instanciés peut ne pas disposer des ressources nécessaires à la bonne exécution de certaines fonctions de traitement élémentaire. Dans un tel cas de figure, l’application de vision par ordinateur n’offre pas une qualité de service satisfaisante.
Il existe donc un besoin d'une technique de génération d’application de traitement d’un flux multimédia ne présentant pas tout ou partie des inconvénients précités.
L'invention répond à ce besoin en proposant un procédé de génération d’une application de traitement d’au moins un flux multimédia, ladite application comprenant un assemblage de fonctions de traitement élémentaire.
Un tel procédé est particulier en ce qu’il est mis en œuvre par un module de génération d’applications comprenant les étapes suivantes de :
- sélection de fonctions de traitement élémentaire destinées à être assemblées pour générer ladite application de traitement, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire,
- pour une fonction de traitement élémentaire sélectionnée donnée, association d’un fichier de configuration comprenant au moins un paramètre relatif à au moins une première fonction de traitement élémentaire générant des données destinées à être traitées par ladite fonction de traitement élémentaire donnée.
Une telle solution repose astucieusement sur la fourniture, dans un fichier de configuration, de paramètres permettant à une fonction de traitement élémentaire donnée d’identifier une ou plusieurs autres fonctions de traitement élémentaire auprès desquelles obtenir des données à traiter.
La fourniture de ces paramètres rend possible l’instanciation de ces fonctions de traitement élémentaire sur des nœuds de calculs distincts. Chaque fonction de traitement élémentaire peut être instanciée sur un nœud de calcul disposant des ressources qui répondent à ses besoins. Dans la suite du document, on entend par nœud de calcul tout équipement ou dispositif disposant des ressources nécessaires à l’exécution d’une fonction de traitement élémentaire. Ainsi, un nœud de calcul peut être une caméra, un dispositif d’affichage tel qu’un écran ou un smartphone, une machine virtuelle, un nœud de calcul d’une grappe de nœuds de type Kubernetes, un serveur, un ordinateur personnel, un processeur ou CPU (pour « Central Processing Unit »), une carte graphique ou GPU (pour « Graphical Processing Unit ») etc.
Un tel fichier de configuration peut être généré automatiquement par le module de génération, par exemple lorsque les paramètres relatifs à une fonction de traitement élémentaire sont associés à cette dernière dans la bibliothèque de blocs fonctionnels. Ainsi, la simple sélection des fonctions de traitement élémentaire à assembler déclenche la génération des fichiers de configuration correspondant.
Le fichier de configuration peut également être généré par un utilisateur du module de génération pour chaque fonction de traitement élémentaire. Une telle implémentation permet une plus grande flexibilité quant à l’ordonnancement des fonctions de traitement élémentaire entre elles puisque l’utilisateur a la possibilité de choisir quelles sont les entrées pour une fonction de traitement élémentaire donnée au lieu d’être contraint par les informations fournies par la bibliothèque de blocs fonctionnels.
Ainsi, un tel procédé permet de bénéficier des avantages des techniques dites de « low code » ou de « no code » tout en offrant la possibilité de sélectionner des fonctions élémentaires instanciées sur des nœuds de calcul adaptés. Un tel procédé permet également de mutualiser les fonctions de traitement élémentaire entre plusieurs applications de traitement de flux multimédia distinctes.
Le paramètre relatif à ladite première fonction de traitement élémentaire fourni par le fichier de configuration comprend entre autres :
- une adresse réseau dudit nœud de calcul sur lequel ladite première fonction de traitement élémentaire est instanciée,
- un port dudit nœud de calcul sur lequel ladite première fonction de traitement élémentaire est instanciée au travers duquel les données générées par ladite première fonction de traitement élémentaire sont destinées à être fournies,
- un identifiant de ladite première fonction de traitement élémentaire.
De telles informations permettent à la fonction de traitement élémentaire donnée d’identifier le nœud de calcul concerné et de pouvoir collecter les données appropriées auprès de ce dernier.
Ces informations sont également facilement identifiables et compréhensibles pour un utilisateur qui peut alors aisément les introduire lui-même dans un fichier de configuration.
Plus particulièrement, le paramètre relatif à ladite première fonction de traitement élémentaire constitue un argument de ladite fonction de traitement élémentaire sélectionnée donnée.
Le fichier de configuration comprend en outre, pour ladite fonction de traitement élémentaire sélectionnée donnée :
- un identifiant d’au moins un module de fourniture desdites données générées par ladite fonction de traitement élémentaire sélectionnée donnée.
Un tel module de fourniture appartient au groupe comprenant en outre :
- un port dudit nœud de calcul sur lequel ladite fonction de traitement élémentaire sélectionnée donnée est instanciée,
- un module d’affichage dudit flux multimédia,
- une mémoire.
Selon la position de la fonction de traitement élémentaire donnée dans l’assemblage de fonctions de traitement élémentaire constituant l’application, les données générées par son exécution sont destinées à être soit fournies en entrée d’une autre fonction de traitement élémentaire qui va leur appliquer un traitement supplémentaire, soit fournies à des modules d’affichage et/ou de stockage. De tels modules d’affichage et/ou de stockage peuvent être embarqués dans le nœud de calcul.
L’invention a également pour objet un procédé de traitement d’au moins un flux multimédia par une application de traitement comprenant un assemblage de fonctions de traitement élémentaire, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire.
Un tel procédé de traitement est particulier en ce qu’il est mis en œuvre par un nœud de calcul et qu’il comprenant une étape de :
- obtention de données contenues dans ledit flux multimédia à traiter,
- traitement, par ladite fonction de traitement élémentaire instanciée sur ledit nœud, desdites données obtenues,
- génération de métadonnées associées auxdites données traitées,
- fourniture desdites données traitées et desdites métadonnées générées.
Plus particulièrement, les données obtenues sont fournies par au moins une fonction de traitement élémentaire identifiée dans un fichier de configuration de ladite fonction de traitement élémentaire instanciée sur ledit nœud.
En effet, comme expliqué plus haut, les différentes fonctions de traitement élémentaire constituant l’application se voient fournir un fichier de configuration comprenant les informations permettant à une fonction de traitement élémentaire donnée d’identifier le nœud de calcul auprès duquel collecter les données qu’elle doit traiter. Ces informations étant des arguments de la fonction de traitement élémentaire donnée, lui sont fournies lors de la génération de l’application. Ainsi, dès la première exécution de l’application, chaque fonction de traitement élémentaire est en capacité de collecter les données qu’elle doit traiter.
Dans certains cas, les données obtenues sont acquises par le nœud de calcul lui-même.
Cela est par exemple le cas lorsque le nœud de calcul est embarqué dans une caméra qui capte une scène.
Les données obtenues peuvent être accompagnées par des métadonnées qui leur sont associées, lesdites métadonnées ayant également été générées par la fonction de traitement élémentaire identifiée dans le fichier de configuration de ladite fonction de traitement élémentaire instanciée sur ledit nœud.
Ces métadonnées peuvent contenir des informations relatives au traitement précédemment effectué sur les images du flux multimédia.
De la même manière les métadonnées générées par ladite fonction de traitement élémentaire instanciée sur ledit nœud appartiennent au groupe comprenant en outre :
- des coordonnées d’une caméra ayant acquis le contenu du flux multimédia,
- un identifiant de ladite caméra,
- des coordonnées d’au moins un vecteur de mouvement calculé pour au moins une image constitutive du flux multimédia,
- au moins un identifiant d’au moins un objet détecté dans au moins une image constitutive du flux multimédia.
Ces métadonnées sont comprises dans un champ de données dudit au moins un flux, relatif à au moins une image fixe à traiter.
Les métadonnées sont par exemple comprises dans un champ AAPn ou COM du format JPEG ou encore dans I’un des champs iTXt, tEXt et zTXt du format PNG.
Ainsi, il n’est pas nécessaire de générer de nouveaux messages pour transmettre ces données supplémentaires. Cela facilite la mise en œuvre de la présente invention dans des systèmes déjà existants.
L’invention concerne également un module de génération d’une application de traitement d’au moins un flux multimédia, ladite application comprenant un assemblage de fonctions de traitement élémentaire.
Un tel module de génération d’applications comprend des moyens pour :
- sélectionner des fonctions de traitement élémentaire destinées à être assemblées pour générer ladite application de traitement, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire,
- pour une fonction de traitement élémentaire sélectionnée donnée, associer un fichier de configuration comprenant au moins un paramètre relatif à au moins une première fonction de traitement élémentaire générant des données destinées à être traitées par ladite fonction de traitement élémentaire donnée.
L’invention a encore pour objet un nœud de calcul sur lequel est instanciée au moins une fonction de traitement élémentaire comprise dans une application de traitement d’un flux multimédia.
Un tel nœud de calcul exécute ladite fonction élémentaire et comprend au moins un processeur configuré pour :
- obtenir des données contenues dans ledit flux multimédia à traiter,
- traiter, au moyen de ladite fonction de traitement élémentaire instanciée sur ledit nœud, lesdites données obtenues,
- générer des métadonnées associées auxdites données traitées,
- fournir lesdites données traitées et lesdites métadonnées générées.
L’invention concerne enfin des produits programme d'ordinateur comprenant des instructions de code de programme pour la mise en œuvre des procédés tels que décrits précédemment, lorsqu’ils sont exécutés par un processeur.
L’invention vise également un support d’enregistrement lisible par un ordinateur sur lequel sont enregistrés des programmes d’ordinateur comprenant des instructions de code de programme pour l’exécution des étapes des procédés selon l’invention tels que décrits ci-dessus.
Un tel support d'enregistrement peut être n'importe quelle entité ou dispositif capable de stocker les programmes. Par exemple, le support peut comporter un moyen de stockage, tel qu'une ROM, par exemple un CD ROM ou une ROM de circuit microélectronique, ou encore un moyen d'enregistrement magnétique, par exemple une clé USB ou un disque dur.
D'autre part, un tel support d'enregistrement peut être un support transmissible tel qu'un signal électrique ou optique, qui peut être acheminé via un câble électrique ou optique, par radio ou par d'autres moyens, de sorte que les programmes d’ordinateur qu’il contient sont exécutables à distance. Les programmes selon l'invention peuvent être en particulier téléchargés sur un réseau, par exemple le réseau Internet.
Alternativement, le support d'enregistrement peut être un circuit intégré dans lequel les programmes sont incorporés, le circuit étant adapté pour exécuter ou pour être utilisé dans l'exécution des procédés objets de l’invention précités.
Liste des figures
D'autres buts, caractéristiques et avantages de l'invention apparaîtront plus clairement à la lecture de la description suivante, donnée à titre de simple exemple illustratif, et non limitatif, en relation avec les figures, parmi lesquelles :
: cette figure représente un système dans lequel la présente invention est mise en œuvre,
: cette figure représente les différentes étapes mises en œuvre pour générer une application de traitement d’un flux multimédia,
: cette figure représente un premier exemple d’assemblage de fonctions de traitement élémentaire,
: cette figure représente un deuxième exemple d’assemblage de fonctions de traitement élémentaire,
: cette figure représente les différentes étapes mises en œuvre pour traiter un flux multimédia au moyen d’une application de traitement représentée à la et obtenue selon le procédé décrit en référence à la ,
: cette figure représente un module de génération selon un mode de réalisation de l’invention. Un module de génération est apte à mettre en œuvre le procédé de génération d’une application de traitement d’un flux multimédia selon la .
Description détaillée de modes de réalisation de l'invention
Le principe général de l'invention repose sur la génération d’une application de traitement d’un flux multimédia comprenant un assemblage de fonctions de traitement élémentaire, ces fonctions de traitement élémentaire étant instanciées sur des nœuds de calcul. Un fichier de configuration est fourni à chaque fonction de traitement élémentaire afin de réaliser cet assemblage.
Ainsi, un tel procédé permet de bénéficier des avantages des techniques dites de «low code» ou de «no code» tout en offrant la possibilité de sélectionner des fonctions élémentaires instanciées sur des nœuds de calcul adaptés.
On présente désormais, en relation avec la un système dans lequel la présente invention est mise en œuvre.
Un tel système est un système distribué dans lequel une pluralité de nœuds de calculs communiquent entre eux pour traiter un flux multimédia.
Le système ainsi représenté comprend, par exemple, un module de génération 10 d’application de traitement d’un flux multimédia. Un tel module de génération 10 est par exemple embarqué dans un serveur ou dans une machine virtuelle opéré(e) par un fournisseur de services de traitements de flux multimédia.
Un tel module de génération 10 comprend une bibliothèque 12 de fonctions de traitement élémentaire FTE, ou blocs fonctionnels. De telles fonctions de traitement élémentaire FTE sont par exemple une fonction d’acquisition d’images représentatives d’une scène, une fonction de redimensionnement d’une image, une fonction de colorimétrie, une fonction de détection d’objets, une fonction d’affichage d’un contenu multimédia ou de stockage d’un contenu multimédia, etc. Chacune de ces fonctions de traitement élémentaire FTE est instanciée sur un nœud de calcul 11-i disposant des ressources nécessaires à l‘exécution de la fonction de traitement élémentaire FTE instanciée. Un même nœud de calcul peut instancier plusieurs fonctions de traitement élémentaire FTE. A titre d’exemple, un nœud de calcul peut être tout équipement ou dispositif disposant des ressources nécessaires à l’exécution d’une fonction de traitement élémentaire. Ainsi, un nœud de calcul peut être une caméra, un dispositif d’affichage tel qu’un écran ou un smartphone, une machine virtuelle, un nœud de calcul d’une grappe de nœuds de type Kubernetes, un serveur, un ordinateur personnel, un CPU, un GPU, etc.
Bien que quatre nœuds de calculs 11-1 à 11-4 soient représentés à la , le nombre de nœuds de calculs impliqués dans la mise en œuvre de la présente solution dépend du nombre de fonctions de traitement élémentaire FTE assemblées pour constituer l’application de traitement d’un flux multimédia.
Dans la présente solution, trois types de fonctions de traitement élémentaire FTE sont envisagés. Un premier type de fonctions de traitement élémentaire est qualifié de source FTES, un deuxième type est qualifié d’opération FTEO et un troisième type est qualifié de puit FTEP.
Une fonction source FTES est une fonction de traitement élémentaire n’ayant pas d’entrée mais au moins une sortie.
Lorsqu’une fonction de traitement élémentaire n’a pas d’entrée, cela signifie que les données qu’elle traite ne lui sont pas fournies par une autre fonction de traitement élémentaire mais qu’elle les obtient par un autre biais. Une fonction source FTES est par exemple une fonction de décodage d’images acquises par une caméra ou une fonction de dématriçace (ou «demosaicing» en langue anglaise. Une fonction source FTES peut également lire les données qu’elle doit traiter depuis une mémoire.
Une sortie d’une fonction de traitement élémentaire est par exemple un port du nœud de calcul 11-i sur lequel elle est instanciée et via lequel les données générées par la fonction de traitement élémentaire sont fournies (ou rendues accessibles).
Une fonction d’opération FTEO est une fonction de traitement intermédiaire ayant une ou plusieurs entrées et une ou plusieurs sorties. Une telle fonction d’opération FTEO obtient des données à traiter sur chacune de ses entrées à partir d’une sortie d’une autre fonction de traitement élémentaire FTE source ou d’opération et rend accessibles les données qu’elle a générées sur chacune de ses sorties.
Enfin, une fonction puits FTEP est une fonction de traitement élémentaire n’ayant pas de sortie mais au moins une entrée.
Lorsqu’une fonction de traitement élémentaire n’a pas de sortie, cela signifie que les données qu’elle a traitées ne sont pas fournies à une autre fonction de traitement élémentaire mais qu’elles sont présentées à un utilisateur final. Une fonction puits FTEP est par exemple un dispositif d’affichage ou un module de stockage des données.
Une application de traitement d’un flux multimédia est un assemblage d’au moins une fonction source FTES et d’au moins une fonction puits FTEP. Une telle application peut également comprendre au moins une fonction d’opération FTEO.
La représente les différentes étapes mises en œuvre pour générer une application de traitement d’un flux multimédia.
Dans une étape E1, le module de génération 10 sélectionne, dans la bibliothèque 12, au moins une fonction source FTES, dans l’exemple décrit il s’agit de la fonction source « Camera », au moins une fonction d’opération FTEO, dans l’exemple décrit deux fonctions d’opérations sont sélectionnées : une première fonction d’opération « Resize » qui redimensionne la taille des images et une deuxième fonction d’opération « YOLO » (pour «You Only Look Once» en anglais) qui détecte des objets dans une image, et au moins une fonction puits FTEP « Viz » qui permet d’afficher le résultat des différents traitements appliqués sur un écran. Bien entendu, d’autres fonctions de traitement élémentaire peuvent être sélectionnées et assemblées afin de générer une application de traitement d’un flux multimédia.
Un utilisateur final peut interagir avec le module de génération 10 au moyen d’une interface homme-machine (non représenté sur les figures) telle qu’un écran tactile ou un couple écran-clavier afin de transmettre au module de génération 10 des instructions permettant de sélectionner les différentes fonctions élémentaires FTE à assembler.
Une fois les différentes fonctions de traitement élémentaires FTE sélectionnées, ces dernières sont assemblées afin de générer l’application de traitement d’un flux multimédia.
Pour cela, un fichier de configuration FC est fourni à chacune des fonctions de traitement élémentaire FTE sélectionnées.
Un tel fichier de configuration FC est généré au cours d’une étape E2. Dans un premier mode de réalisation, un fichier de configuration FC peut être généré automatiquement par le module de génération 10, par exemple lorsque les paramètres relatifs à une fonction de traitement élémentaire sont associés à cette dernière dans la bibliothèque 12. Ainsi, la sélection et l’ordonnancement entre elles des fonctions de traitement élémentaire FTE à assembler déclenche la génération du ou des fichiers de configuration correspondants.
Dans un deuxième mode de réalisation, le fichier de configuration FC peut également être généré par l’utilisateur du module de génération 10. Une telle implémentation permet une plus grande flexibilité quant à l’ordonnancement des fonctions de traitement élémentaire entre elles puisque l’utilisateur a la possibilité de choisir quelles sont les entrées pour une fonction de traitement élémentaire donnée au lieu d’être contraint par les informations fournies par la bibliothèque 12.
Pour une fonction source FTES, un tel fichier de configuration FC comprend au moins un identifiant d’au moins une sortie ou module de fourniture sur laquelle les données traitées ou générées par la fonction source FTES sont destinées à être rendues accessibles.
Un tel identifiant est par exemple un couple port/path, ou « port » correspondant à un numéro de port du nœud de calcul sur lequel la fonction FTE est instanciée et « path » est un paramètre identifiant la fonction de traitement élémentaire FTE ayant rendu les données accessibles. Le paramètre « port » est particulièrement utile lorsqu’un même nœud de calcul instancie plusieurs fonctions de traitement élémentaire FTE.
Pour une fonction d’opération FTEO, un tel fichier de configuration FC comprend au moins un identifiant d’au moins une entrée et au moins un identifiant d’au moins une sortie sur laquelle les données traitées ou générées par la fonction d’opération FTEO sont destinées à être fournies.
Plus particulièrement, un tel fichier de configuration FC comprend pour chaque entrée de la fonction d’opération FTEO une adresse réseau d’un nœud de calcul sur lequel au moins une fonction source FTS et/ou au moins une autre fonction d’opération sont instanciées, ces fonctions de traitement élémentaire fournissant des données à traiter à la fonction d’opération FTEO, un port des nœuds de calcul concernés sur lequel ces fonctions source FTES et/ou ces fonctions d’opérations FTEO fournissent les données générées et un identifiant de ces fonctions source FTES et/ou de ces fonctions d’opérations FTEO.
Le fichier de configuration FC comprend également au moins un identifiant d’au moins une sortie sur laquelle les données traitées ou générées par la fonction d’opération FTEO sont destinées à être fournies.
Enfin, pour une fonction puits FTEP, un tel fichier de configuration FC comprend pour chaque entrée de la fonction puits FTEP une adresse réseau d’un nœud de calcul sur lequel au moins une fonction source FTS et/ou au moins une fonction d’opération sont instanciées, ces fonctions de traitement élémentaire fournissant des données à traiter à la fonction puits FTEP, un port des nœuds de calcul concernés sur lequel ces fonctions source FTES et/ou ces fonctions d’opérations FTEO fournissent les données générées et un identifiant de ces fonctions source FTES et/ou de ces fonctions d’opérations FTEO.
Une fois les fichiers de configuration générés, ces derniers sont transmis dans une étape E3 aux différentes fonctions de traitement élémentaire FTE sélectionnées.
La représente un premier exemple d’assemblage de fonctions de traitement élémentaire FTE. Un tel assemblage comprend une fonction source FTES « Camera » configurée pour décoder les images acquises par une caméra. Cette fonction source présente une unique sortie. Une telle fonction source est par exemple instanciée sur un nœud de calcul 11-1 de type CPU.
L’assemblage comprend ensuite une première fonction d’opération « Resize » qui redimensionne les images acquises par la caméra. La fonction « Resize » a une entrée qui collecte les données fournies par la fonction « Camera » et une unique sortie. Une telle fonction d’opération est par exemple instanciée sur un nœud de calcul 11-2 de type CPU.
L’assemblage comprend une deuxième fonction d’opération « YOLO » qui détecte et identifie les objets présents dans les images acquises par la caméra. La fonction « YOLO » a une unique entrée qui collecte les données fournies par la fonction « Resize » et une unique sortie. Une telle fonction d’opération est par exemple instanciée sur un nœud de calcul 11-3 de type GPU.
Enfin, l’assemblage comprend une fonction puits FTEP « Viz » qui affiche les images acquises par la caméra sur un écran. La fonction « Viz » a une unique entrée qui collecte les données fournies par la fonction « YOLO » et ne comprend aucune sortie. Une telle fonction puits est par exemple instanciée sur un nœud de calcul 11-4 de type CPU.
En référence à l’assemblage décrit à la , le fichier de configuration FC1 de la fonction « Camera » comprend les données suivantes :
/Camera -port=8080,
où /Camera est l’identifiant de la fonction source, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction puit sont rendues accessibles.
Le fichier de configuration FC2 de la fonction « Resize » comprend les données suivantes :
/Resize 192.168.0.1 : 8080/cam -port=8080,
où /Resize est l’identifiant de la première fonction d’opération, 192.168.0.1 est l’adresse réseau du nœud de calcul 11-1 sur lequel la fonction « Camera » est instanciée et 8080/cam le couple port/path du nœud de calcul sur lequel la fonction « Camera » est instanciée et sur lequel les données traitées par la fonction « Camera » sont fournies, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction « Resize » sont rendues accessibles.
Le fichier de configuration FC3 de la fonction « YOLO » comprend les données suivantes :
/YOLO 192.168.5.1 : 8080/rsz -port=8080,
où /YOLO est l’identifiant de la deuxième fonction d’opération, 192.168.5.1 est l’adresse réseau du nœud de calcul 11-2 sur lequel la fonction « Resize » est instanciée et 8080/rsz le couple port/path du nœud de calcul sur lequel la fonction « Resize » est instanciée et sur lequel les données traitées par la fonction « Resize » sont fournies, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction « YOLO » sont rendues accessibles.
Enfin, le fichier de configuration FC4 de la fonction « Viz » comprend les données suivantes :
/Viz 192.168.10.1 : 8080/objs,
où /Viz est l’identifiant de la deuxième fonction puits, 192.168.10.1 est l’adresse réseau du nœud de calcul 11-3 sur lequel la fonction « YOLO » est instanciée et 8080/objs le couple port/path du nœud de calcul sur lequel la fonction « YOLO » est instanciée et sur lequel les données traitées par la fonction « YOLO » sont fournies.
Une fois en possession de son fichier de configuration FC, chaque fonction de traitement élémentaire FTE sait auprès de quel nœud de calcul obtenir les données qu’elle doit traiter et sur quel module d’accès elle doit rendre accessible ses propres données.
La représente un deuxième exemple d’assemblage de fonctions de traitement élémentaire FTE. Un tel assemblage comprend une fonction source FTES « Camera » configurée pour décoder les images acquises par une caméra. Cette fonction source présente une unique sortie. Une telle fonction source est par exemple instanciée sur un nœud de calcul 11-1 de type CPU.
L’assemblage comprend ensuite une première fonction d’opération « Resize » qui redimensionne les images acquises par la caméra. La fonction « Resize » a une entrée qui collecte les données fournies par la fonction « Camera » et deux sorties. Une telle fonction d’opération est par exemple instanciée sur un nœud de calcul 11-2 de type CPU.
L’assemblage comprend une deuxième fonction d’opération « YOLO » qui détecte et identifie les objets présents dans les images acquises par la caméra. La fonction « YOLO » a une unique entrée qui collecte les données fournies par la fonction « Resize » et une unique sortie. Une telle fonction d’opération est par exemple instanciée sur un nœud de calcul 11-3 de type GPU.
L’assemblage comprend une troisième fonction d’opération « Face » qui détecte par exemple les visages présents dans les images acquises par la caméra. La fonction « Face » a une unique entrée qui collecte les données fournies par la fonction « Resize » et une unique sortie. Une telle fonction d’opération est par exemple instanciée sur un nœud de calcul 11-5 de type GPU.
Enfin, l’assemblage comprend une fonction puits FTEP « Viz » qui affiche les images acquises par la caméra sur un écran. La fonction « Viz » a deux entrées, une première entrée qui collecte les données fournies par la fonction « YOLO » et une deuxième entrée qui collecte les données fournies par la fonction « Face » et ne contient aucune sortie. Une telle fonction puits est par exemple instanciée sur un nœud de calcul 11-4 de type CPU.
En référence à l’assemblage décrit à la , le fichier de configuration FC1 de la fonction « Camera » comprend les données suivantes :
/Camera -port=8080,
où /Camera est l’identifiant de la fonction source, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction puit sont rendues accessibles.
Le fichier de configuration FC2 de la fonction « Resize » comprend les données suivantes :
/Resize 192.168.0.1 : 8080/cam -port=8080,
où /Resize est l’identifiant de la première fonction d’opération, 192.168.0.1 est l’adresse réseau du nœud de calcul 11-1 sur lequel la fonction « Camera » est instanciée et 8080/cam le couple port/path du nœud de calcul sur lequel la fonction « Camera » est instanciée et sur lequel les données traitées par la fonction « Camera » sont fournies, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction « Resize » sont rendues accessibles.
Le fichier de configuration FC3 de la fonction « YOLO » comprend les données suivantes :
/YOLO 192.168.5.1 : 8080/rsz -port=8080,
où /YOLO est l’identifiant de la deuxième fonction d’opération, 192.168.5.1 est l’adresse réseau du nœud de calcul 11-2 sur lequel la fonction « Resize » est instanciée et 8080/rsz le couple port/path du nœud de calcul sur lequel la fonction « Resize » est instanciée et sur lequel les données traitées par la fonction « Resize » sont fournies, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction « YOLO » sont rendues accessibles.
Le fichier de configuration FC5 de la fonction « Face » comprend les données suivantes :
/Face 192.168.5.1 : 8080/rsz -port=8080,
où /Face est l’identifiant de la deuxième fonction d’opération, 192.168.5.1 est l’adresse réseau du nœud de calcul 11-2 sur lequel la fonction « Resize » est instanciée et 8080/rsz le couple port/path du nœud de calcul sur lequel la fonction « Resize » est instanciée et sur lequel les données traitées par la fonction « Resize » sont fournies, et -port=8080 l’identifiant du module de fourniture sur lequel les données traitées par la fonction « Face » sont rendues accessibles.
Enfin, le fichier de configuration FC4 de la fonction « Viz » comprend les données suivantes :
/Viz 192.168.10.1 : 8080/objs,
/Viz 192.168.15.1 :8080/fcs
où /Viz est l’identifiant de la deuxième fonction puits, 192.168.10.1 est l’adresse réseau du nœud de calcul 11-3 sur lequel la fonction « YOLO » est instanciée et 8080/objs le couple port/path du nœud de calcul sur lequel la fonction « YOLO » est instanciée et sur lequel les données traitées par la fonction « YOLO » sont fournies, et 192.168.15.1 est l’adresse réseau du nœud de calcul 11-5 sur lequel la fonction « Face » est instanciée et 8080/fcs le couple port/path du nœud de calcul sur lequel la fonction « Face » est instanciée et sur lequel les données traitées par la fonction « Face » sont fournies.
Une fois en possession de son fichier de configuration FC, chaque fonction de traitement élémentaire FTE sait auprès de quel nœud de calcul obtenir les données qu’elle doit traiter et sur quel module de fourniture elle doit rendre accessible ses propres données.
Les données comprises dans ces différents fichiers de configuration FC sont considérées comme des arguments des fonctions de traitement élémentaire FTE qui leur sont fournis en préambule de leur exécution.
La représente les différentes étapes mises en œuvre pour traiter un flux multimédia au moyen de l’application de traitement représentée à la et obtenue selon le procédé décrit en référence à la .
Dans une étape G1, une fonction source, ici la fonction « Camera », acquiert des images d’une scène qu’elle décode au cours d’une étape G2.
La fonction « Camera » génère également des métadonnées relatives aux images décodées. De telles métadonnées sont par exemple, un identifiant de la caméra, une résolution de cette dernière, un horodatage des images capturées, une géolocalisation des images capturées, etc. De telles métadonnées sont comprises par exemple dans le champ AAPn (pour «Application Specific») ou le champ COM (pour «Comment») du format JPEG (pour « Joint Photographic Experts Group ») dans lequel les images sont codées. D’autres formats de traitement d’images fixes et leurs champs de données correspondants peuvent bien entendu être utilisés, tels que par exemple le format PNG avec entre autres les champs iTXt, tEXt et zTXt, etc.
Conformément à ce qui est indiqué dans le fichier de configuration FC, la fonction « Camera » fournit les images décodées et leurs métadonnées sur le port 8080 du nœud de calcul 11-1 sur lequel la fonction « Camera » est instanciée dans une étape G3.
Au cours d’une étape G4, la fonction « Resize » obtient, conformément aux informations comprises dans son fichier de configuration FC1, les données fournies par la fonction « Camera ».
A l’aide des informations comprises dans les métadonnées accompagnant les données obtenues, la fonction « Resize » traite ces dernières dans une étape G5. La fonction « Resize » génère également des métadonnées relatives aux images redimensionnées, ces métadonnées pouvant toujours comprendre les informations générées par la fonction « Camera », telles que les informations d’horodatage par exemple.
Conformément à ce qui est indiqué dans le fichier de configuration FC1, la fonction « Resize » fournit les images redimensionnées et leurs métadonnées sur le port 8080 du nœud de calcul 11-2 sur lequel la fonction « Resize » est instanciée dans une étape G6.
Au cours d’une étape G7, la fonction « YOLO » obtient, conformément aux informations comprises dans son fichier de configuration FC2, les données fournies par la fonction « Resize ».
A l’aide des informations comprises dans les métadonnées accompagnant les données obtenues, la fonction « YOLO » traite ces dernières au cours d’une étape G8. La fonction « YOLO » génère également des métadonnées relatives aux objets identifiés dans les images redimensionnées, ces métadonnées pouvant toujours comprendre les informations générées par la fonction « Camera » et la fonction « Resize », telle que les informations d’horodatage par exemple, ainsi que des informations relatives aux objets identifiés telles que leur nom, leur position dans l’image, etc.
Conformément à ce qui est indiqué dans le fichier de configuration FC2, la fonction « YOLO » fournit les images redimensionnées et leurs métadonnées sur le port 8080 du nœud de calcul 11-3 sur lequel la fonction « YOLO » est instanciée dans une étape G9.
Au cours d’une étape G10, la fonction « Viz » obtient, conformément aux informations comprises dans son fichier de configuration FC, les données fournies par la fonction « YOLO ».
A l’aide des informations comprises dans les métadonnées accompagnant les données obtenues, la fonction « Viz » traite ces dernières dans une étape G11 et les images ainsi traitées sont ainsi affichées sur un écran.
La représente un module de génération 10 selon un mode de réalisation de l’invention. Un module de génération 10 est apte à mettre en œuvre le procédé de génération d’une application de traitement d’un flux multimédia selon la .
Un module de génération 10 peut comprendre au moins un processeur matériel 61, une unité de stockage 62, au moins une interface 63, et au moins une interface homme-machine 64 qui sont connectés entre eux au travers d’un bus 65. Bien entendu, les éléments constitutifs du module de génération 10 peuvent être connectés au moyen d’une connexion autre qu’un bus.
Le processeur 61 commande les opérations du module de génération 10. L'unité de stockage 62 stocke au moins un programme pour la mise en œuvre du procédé selon un mode de réalisation de l’invention à exécuter par le processeur 61, et diverses données, telles que des paramètres utilisés pour des calculs effectués par le processeur 61, des données intermédiaires de calculs effectués par le processeur 61, etc. Le processeur 61 peut être formé par tout matériel ou logiciel connu et approprié, ou par une combinaison de matériel et de logiciel. Par exemple, le processeur 61 peut être formé par un matériel dédié tel qu'un circuit de traitement, ou par une unité de traitement programmable telle qu'une unité centrale de traitement (Central Processing Unit) qui exécute un programme stocké dans une mémoire de celui-ci.
L'unité de stockage 62 peut être formée par n'importe quel moyen approprié capable de stocker le programme ou les programmes et des données d'une manière lisible par un ordinateur. Des exemples d'unité de stockage 62 comprennent des supports de stockage non transitoires lisibles par ordinateur tels que des dispositifs de mémoire à semi-conducteurs, et des supports d'enregistrement magnétiques, optiques ou magnéto-optiques chargés dans une unité de lecture et d'écriture.
L'interface 63 fournit une connexion entre le module de génération 10 et l’ensemble des nœuds de calcul 11-i du système.
L’interface homme-machine 64 peut être un écran tactile ou un ensemble comprenant un clavier, une souris et un écran.

Claims (14)

  1. Procédé de génération d’une application de traitement d’au moins un flux multimédia, ladite application comprenant un assemblage de fonctions de traitement élémentaire, ledit procédé étant mis en œuvre par un module de génération d’application et comprenant les étapes suivantes :
    - sélection de fonctions de traitement élémentaire destinées à être assemblées pour générer ladite application de traitement, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire,
    - pour une fonction de traitement élémentaire sélectionnée donnée, association d’un fichier de configuration comprenant au moins un paramètre relatif à au moins une première fonction de traitement élémentaire générant des données destinées à être traitées par ladite fonction de traitement élémentaire donnée.
  2. Procédé de génération d’une application de traitement selon la revendication 1 dans lequel ledit paramètre relatif à ladite première fonction de traitement élémentaire comprend:
    - une adresse réseau dudit nœud de calcul sur lequel ladite première fonction de traitement élémentaire est instanciée,
    - un port dudit nœud de calcul sur lequel ladite première fonction de traitement élémentaire est instanciée, au travers duquel les données générées par ladite première fonction de traitement élémentaire sont destinées à être fournies,
    - un identifiant de ladite première fonction de traitement élémentaire.
  3. Procédé de génération d’une application de traitement selon la revendication 2 dans lequel ledit paramètre relatif à ladite première fonction de traitement élémentaire est un argument de ladite fonction de traitement élémentaire sélectionnée donnée.
  4. Procédé de génération d’une application de traitement selon les revendications 1 à 3 dans lequel ledit fichier de configuration comprend en outre, pour ladite fonction de traitement élémentaire sélectionnée donnée :
    - un identifiant d’au moins un module de fourniture desdites données générées par ladite fonction de traitement élémentaire sélectionnée donnée.
  5. Procédé de génération d’une application de traitement selon la revendication 4 dans lequel ledit identifiant est un argument de ladite fonction de traitement élémentaire sélectionnée donnée.
  6. Procédé de génération d’une application de traitement selon la revendication 4 ou la revendication 5 dans lequel ledit module appartient au groupe comprenant:
    - un port dudit nœud de calcul sur lequel ladite fonction de traitement élémentaire sélectionnée donnée est instanciée,
    - un module d’affichage dudit flux multimédia,
    - une mémoire.
  7. Procédé de traitement d’au moins un flux multimédia par une application de traitement comprenant un assemblage de fonctions de traitement élémentaire, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire, ledit procédé étant mis en œuvre par un nœud de calcul et comprenant ce qui suit :
    - obtention de données contenues dans ledit flux multimédia à traiter,
    - traitement, par ladite fonction de traitement élémentaire instanciée sur ledit nœud, desdites données obtenues,
    - génération de métadonnées associées auxdites données traitées,
    - fourniture desdites données traitées et desdites métadonnées générées.
  8. Procédé de traitement d’au moins un flux multimédia selon la revendication 7 dans lequel les données obtenues sont fournies par au moins une fonction de traitement élémentaire identifiée dans un fichier de configuration de ladite fonction de traitement élémentaire instanciée sur ledit nœud.
  9. Procédé de traitement d’au moins un flux multimédia selon la revendication 8 dans lequel le nœud de calcul obtient des métadonnées associées auxdites données obtenues, lesdites métadonnées ayant également été générées par la fonction de traitement élémentaire identifiée dans le fichier de configuration de ladite fonction de traitement élémentaire instanciée sur ledit nœud.
  10. Procédé de traitement d’au moins un flux multimédia selon la revendication 7 dans lequel les données obtenues sont acquises par ledit nœud de calcul.
  11. Procédé de traitement d’au moins un flux multimédia selon l’une quelconque des revendications 7 à 10 dans lequel les métadonnées générées par ladite fonction de traitement élémentaire instanciée sur ledit nœud appartiennent au groupe comprenant :
    - des coordonnées d’une caméra ayant acquis un contenu du flux multimédia,
    - un identifiant de ladite caméra,
    - des coordonnées d’au moins un vecteur de mouvement calculé pour au moins une image contenue dans le flux multimédia,
    - au moins un identifiant d’au moins un objet détecté dans au moins une image contenue dans le flux multimédia.
  12. Procédé de traitement d’au moins un flux multimédia selon l’une quelconque des revendications 7 à 11 dans lequel les métadonnées sont comprises dans un champ de données dudit au moins un flux, relatif à au moins une image fixe à traiter.
  13. Module de génération d’une application de traitement d’au moins un flux multimédia, ladite application comprenant un assemblage de fonctions de traitement élémentaire, ledit module de génération d’applications comprenant des moyens pour :
    - sélectionner des fonctions de traitement élémentaire destinées à être assemblées pour générer ladite application de traitement, une fonction de traitement élémentaire étant instanciée sur un nœud de calcul exécutant ladite fonction élémentaire,
    - pour une fonction de traitement élémentaire sélectionnée donnée, associer un fichier de configuration comprenant au moins un paramètre relatif à au moins une première fonction de traitement élémentaire générant des données destinées à être traitées par ladite fonction de traitement élémentaire donnée.
  14. Nœud de calcul sur lequel est instanciée au moins une fonction de traitement élémentaire comprise dans une application de traitement d’un flux multimédia, ledit nœud de calcul exécutant ladite fonction élémentaire et comprenant au moins un processeur configuré pour :
    - obtenir des données contenues dans ledit flux multimédia à traiter,
    - traiter, au moyen de ladite fonction de traitement élémentaire instanciée sur ledit nœud, lesdites données obtenues,
    - générer des métadonnées associées auxdites données traitées,
    - fournir lesdites données traitées et lesdites métadonnées générées.
FR2213083A 2022-12-09 2022-12-09 Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés Pending FR3143155A1 (fr)

Priority Applications (3)

Application Number Priority Date Filing Date Title
FR2213083A FR3143155A1 (fr) 2022-12-09 2022-12-09 Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés
EP23818368.5A EP4630914A1 (fr) 2022-12-09 2023-12-04 Procédé de génération d'une application de traitement d'au moins un flux multimédia, dispositif et programme d'ordinateur associés
PCT/EP2023/084177 WO2024121075A1 (fr) 2022-12-09 2023-12-04 Procédé de génération d'une application de traitement d'au moins un flux multimédia, dispositif et programme d'ordinateur associés

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR2213083A FR3143155A1 (fr) 2022-12-09 2022-12-09 Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés
FR2213083 2022-12-09

Publications (1)

Publication Number Publication Date
FR3143155A1 true FR3143155A1 (fr) 2024-06-14

Family

ID=85381094

Family Applications (1)

Application Number Title Priority Date Filing Date
FR2213083A Pending FR3143155A1 (fr) 2022-12-09 2022-12-09 Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés

Country Status (3)

Country Link
EP (1) EP4630914A1 (fr)
FR (1) FR3143155A1 (fr)
WO (1) WO2024121075A1 (fr)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020059401A1 (en) * 1997-11-14 2002-05-16 National Instruments Corporation Assembly of a graphical program for accessing data from a data source/target
US20020070965A1 (en) * 2000-12-13 2002-06-13 Austin Paul F. System and method for automatically configuring program data exchange
US20030037119A1 (en) * 1997-11-14 2003-02-20 National Instruments Corporation Graphical programming system and method including nodes for programmatically accessing data sources and targets
US20050039162A1 (en) * 2003-08-15 2005-02-17 Cifra Christopher G. Signal analysis function blocks and method of use
US20080005752A1 (en) * 2006-06-30 2008-01-03 Robert Paul Morris Methods, systems, and computer program products for generating application processes by linking applications
US20090037875A1 (en) * 2007-08-03 2009-02-05 Jones Andrew R Rapidly Assembling and Deploying Selected Software Solutions
US20190114152A1 (en) * 2016-09-16 2019-04-18 Oracle International Corporation Systems and methods for building applications using building blocks linkable with metadata
US20200153744A1 (en) * 2015-08-28 2020-05-14 Softnas Operating Inc. Automated data flows using flow-based data processor blocks

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018107650A (ja) * 2016-12-27 2018-07-05 TsZ株式会社 スティッチング処理制御装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020059401A1 (en) * 1997-11-14 2002-05-16 National Instruments Corporation Assembly of a graphical program for accessing data from a data source/target
US20030037119A1 (en) * 1997-11-14 2003-02-20 National Instruments Corporation Graphical programming system and method including nodes for programmatically accessing data sources and targets
US20020070965A1 (en) * 2000-12-13 2002-06-13 Austin Paul F. System and method for automatically configuring program data exchange
US20050039162A1 (en) * 2003-08-15 2005-02-17 Cifra Christopher G. Signal analysis function blocks and method of use
US20080005752A1 (en) * 2006-06-30 2008-01-03 Robert Paul Morris Methods, systems, and computer program products for generating application processes by linking applications
US20090037875A1 (en) * 2007-08-03 2009-02-05 Jones Andrew R Rapidly Assembling and Deploying Selected Software Solutions
US20200153744A1 (en) * 2015-08-28 2020-05-14 Softnas Operating Inc. Automated data flows using flow-based data processor blocks
US20190114152A1 (en) * 2016-09-16 2019-04-18 Oracle International Corporation Systems and methods for building applications using building blocks linkable with metadata

Also Published As

Publication number Publication date
WO2024121075A1 (fr) 2024-06-13
EP4630914A1 (fr) 2025-10-15

Similar Documents

Publication Publication Date Title
CN111260545B (zh) 生成图像的方法和装置
US20200128286A1 (en) Live streaming social interaction to trigger product search
FR2767210A1 (fr) Procede et architecture pour simplifier les communications avec les dispositifs d'interface-utilisateur
FR2824160A1 (fr) Conteneur generique configurable de facon dynamique
FR3047579A1 (fr)
US10841482B1 (en) Recommending camera settings for publishing a photograph based on identified substance
CA3102192A1 (fr) Procede mis en oeuvre par ordinateur pour la creation de contenus comprenant des images de synthese
CN112153422A (zh) 视频融合方法和设备
FR3055079B1 (fr) Systeme de composition ou de modification de sequences de realite virtuelle, procede de composition et systeme de lecture desdites sequences
EP3202116B1 (fr) Procédé et dispositif d'aide à la décision
FR3143155A1 (fr) Procédé de génération d’une application de traitement d’au moins un flux multimédia, dispositif et programme d'ordinateur associés
FR2892883A1 (fr) Procede d'optimisation de rendu d'une scene multimedia, programme, signal, support de donnees, terminal et procede de reception correspondants.
JP2023525091A (ja) 画像特殊効果の設定方法、画像識別方法、装置および電子機器
WO2014170482A1 (fr) Procede de generation d'un flux video de sortie a partir d'un flux video large champ
CN109923540A (zh) 实时记录用于修改动画的手势和/或声音
EP4232970A1 (fr) Procede d'annotation de donnees d'entrainement
FR3040576A1 (fr) Gestion des partages d'ecran dans une application d'entreprise
WO2020128206A1 (fr) Procédé d'interaction d'un utilisateur avec un environnement de réalité virtuelle
CH721153A2 (fr) Méthode pour mettre à disposition une pièce d'information à un utilisateur qui ouvre et/ou qui visualise, sur un écran, une image et/ou une vidéo
EP4250718A1 (fr) PROCEDE ET DISPOSITIF DE MODIFICATION D'UN CONTENU MULTIMEDIA EN FONCTION DE 
L'ATTENTION D'UN UTILISATEUR
FR3080935A1 (fr) Procede et systeme de generation a la volee d'un contenu de realite augmentee sur un appareil utilisateur.
FR3103041A1 (fr) Procédé et dispositif de traitement d’image
FR2898707A1 (fr) Procede, dispositif et systeme de gestion d'informations structurees au sein d'une scene graphique
EP2271051B1 (fr) Procédé d'exécution d'un service applicatif dans un environnement web
WO2025046115A1 (fr) Procédé et système pour accéder à des ressources et services distants à partir d'un contenu audiovisuel disponible sur un équipement de télévision

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20240614