Traitement en cours

Veuillez attendre...

Paramétrages

Paramétrages

Goto Application

1. WO2020069160 - AGENT DE NAVIGATION À BASE CONJOINTE VISUELLE-TEXTUELLE AUTO-SENSIBLE

Numéro de publication WO/2020/069160
Date de publication 02.04.2020
N° de la demande internationale PCT/US2019/053200
Date du dépôt international 26.09.2019
CIB
G05D 1/00 2006.01
GPHYSIQUE
05COMMANDE; RÉGULATION
DSYSTÈMES DE COMMANDE OU DE RÉGULATION DES VARIABLES NON ÉLECTRIQUES
1Commande de la position, du cap, de l'altitude ou de l'attitude des véhicules terrestres, aquatiques, aériens ou spatiaux, p.ex. pilote automatique
G10L 15/00 2013.01
GPHYSIQUE
10INSTRUMENTS DE MUSIQUE; ACOUSTIQUE
LANALYSE OU SYNTHÈSE DE LA PAROLE; RECONNAISSANCE DE LA PAROLE; TRAITEMENT DE LA PAROLE OU DE LA VOIX; CODAGE OU DÉCODAGE DE LA PAROLE OU DE SIGNAUX AUDIO
15Reconnaissance de la parole
CPC
B25J 9/0003
BPERFORMING OPERATIONS; TRANSPORTING
25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
9Programme-controlled manipulators
0003Home robots, i.e. small robots for domestic use
B25J 9/1697
BPERFORMING OPERATIONS; TRANSPORTING
25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
9Programme-controlled manipulators
16Programme controls
1694characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
1697Vision controlled systems
G05D 1/0016
GPHYSICS
05CONTROLLING; REGULATING
DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
1Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
0011associated with a remote control arrangement
0016characterised by the operator's input device
G05D 1/0221
GPHYSICS
05CONTROLLING; REGULATING
DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
1Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
02Control of position or course in two dimensions
021specially adapted to land vehicles
0212with means for defining a desired trajectory
0221involving a learning process
G05D 1/0246
GPHYSICS
05CONTROLLING; REGULATING
DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
1Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
02Control of position or course in two dimensions
021specially adapted to land vehicles
0231using optical position detecting means
0246using a video camera in combination with image processing means
G05D 2201/0217
GPHYSICS
05CONTROLLING; REGULATING
DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
2201Application
02Control of position of land vehicles
0217Anthropomorphic or bipedal robot
Déposants
  • SALESFORCE.COM, INC. [US]/[US]
Inventeurs
  • MA, Chih-Yao
  • XIONG, Caiming
Mandataires
  • WOO, Philip W.
  • EDWARDS, Gary
  • BROWN, Randall
  • SIMON, David
  • BECKER, Jeffrey
  • OLSEN, Joseph Sr.
  • BLIKSHTEYN, Dina
  • COBB, Ryan
  • WOLFSON, Jeffrey
  • COHN, Andrew
  • NGUYEN, Thuc
  • HONG, Shi
Données relatives à la priorité
16/176,95531.10.2018US
62/737,68427.09.2018US
Langue de publication anglais (EN)
Langue de dépôt anglais (EN)
États désignés
Titre
(EN) SELF-AWARE VISUAL-TEXTUAL CO-GROUNDED NAVIGATION AGENT
(FR) AGENT DE NAVIGATION À BASE CONJOINTE VISUELLE-TEXTUELLE AUTO-SENSIBLE
Abrégé
(EN)
An agent for navigating a mobile automated system is disclosed herein. The navigation agent receives a navigation instruction and visual information for one or more observed images. The navigation agent is provided or equipped with self-awareness, which provides or supports the following abilities: identifying which direction to go or proceed by determining the part of the instruction that corresponds to the observed images (visual grounding), and identifying which part of the instruction has been completed or ongoing and which part is potentially needed for the next action selection (textual grounding). In some embodiments, the navigation agent applies regularization to ensures that the grounded instruction can correctly be used to estimate the progress made towards the navigation goal (progress monitoring).
(FR)
L'invention concerne un agent de navigation d'un système automatisé mobile. L'agent de navigation reçoit une instruction de navigation et des informations visuelles d'une ou de plusieurs images observées. L'agent de navigation est pourvu ou équipé d'une auto-conscience, qui fournit ou prend en charge les capacités suivantes : d'identification de la direction à suivre ou poursuivre par une détermination de la partie de l'instruction qui correspond aux images observées (base visuelle), et d'identification de la partie de l'instruction qui a été achevée ou qui est en cours et de la partie qui est potentiellement nécessaire pour la sélection d'action suivante (base textuelle). Selon certains modes de réalisation, l'agent de navigation applique une régularisation pour garantir le fait que l'instruction de base puisse être correctement utilisée pour estimer la progression faite en direction de l'objectif de navigation (surveillance de progression).
Également publié en tant que
Dernières données bibliographiques dont dispose le Bureau international