A first set of signals corresponding to a first signal modality (such as the direction of a gaze) during a time interval is collected from an individual. A second set of signals corresponding to a different signal modality (such as hand-pointing gestures made by the individual) is also collected. In response to a command, where the command does not identify a particular object to which the command is directed, the first and second set of signals is used to identify candidate objects of interest, and an operation associated with a selected object from the candidates is performed.

    Selon l'invention, un premier ensemble de signaux correspondant à une première modalité de signal (telle que la direction d'un regard) pendant un intervalle de temps est collecté à partir d'un individu. Un second ensemble de signaux correspondant à une modalité de signal différente (telle que des gestes de pointage manuel effectués par l'individu) est également collecté. En réponse à une instruction, l'instruction n'identifiant pas un objet particulier vers lequel l'instruction est dirigée, le premier et le second ensemble de signaux sont utilisés pour identifier des objets d'intérêt candidats, et une opération associée à un objet sélectionné parmi les candidats est effectuée.


    Access

    Download


    Export, share and cite



    Title :

    COMMAND PROCESSING USING MULTIMODAL SIGNAL ANALYSIS


    Additional title:

    TRAITEMENT D'INSTRUCTION À L'AIDE D'UNE ANALYSE DE SIGNAUX MULTIMODAUX


    Contributors:

    Publication date :

    2018-02-22


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    English


    Classification :

    IPC:    G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / B60K Anordnung oder Einbau von Antriebseinheiten oder von Kraft- bzw. Drehmomentübertragungen in Fahrzeugen , ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES



    Command Processing Using Multimodal Signal Analysis

    KIENZLE WOLF / BOWMAN DOUGLAS A | European Patent Office | 2021

    Free access

    COMMAND PROCESSING USING MULTIMODAL SIGNAL ANALYSIS

    KIENZLE WOLF / BOWMAN DOUGLAS A | European Patent Office | 2018

    Free access

    Command processing using multimodal signal analysis

    KIENZLE WOLF / BOWMAN DOUGLAS A | European Patent Office | 2020

    Free access

    COMMAND PROCESSING USING MULTIMODAL SIGNAL ANALYSIS

    KIENZLE WOLF / BOWMAN DOUGLAS A | European Patent Office | 2023

    Free access

    Command processing using multi-modal signal analysis

    KIENZLE WOLF / BOWMAN DOUGLAS A | European Patent Office | 2022

    Free access