WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2002031772) METHOD FOR TRACKING MOTION OF A FACE
Latest bibliographic data on file with the International Bureau   

Pub. No.:    WO/2002/031772    International Application No.:    PCT/IB2001/002736
Publication Date: 18.04.2002 International Filing Date: 09.10.2001
Chapter 2 Demand Filed:    07.05.2002    
IPC:
G06T 7/20 (2006.01), G06T 15/70 (2006.01)
Applicants: ERDEM, Tanju, A. [TR/TR]; (TR)
Inventors: ERDEM, Tanju, A.; (TR)
Priority Data:
09/689,595 13.10.2000 US
Title (EN) METHOD FOR TRACKING MOTION OF A FACE
(FR) PROCEDE DE SUIVI DU MOUVEMENT D'UN VISAGE
Abstract: front page image
(EN)A method for tracking the motion of a person's face for the purpose of animating a 3-D face model of the same or another person is disclosed. The 3-D face model carries both the geometry (shape) and the texture (color) characteristics of the person's face. The shape of the face model is represented via a 3-D triangular mesh (geometry mesh), while the texture of the face model is represented via a 2-D composite image (texture image). Both the global motion and the local motion of the person's face are tracked. Global motion of the face involves the rotation and the translation of the face in 3-D. Local motion of the face involves the 3-D motion of the lips, eyebrows, etc., caused by speech and facial expressions. The 2-D positions of salient features of the person's face and/or markers placed on the person's face are automatically tracked in a time-sequence of 2-D images of the face. Global and local motion of the face are separately calculated using the tracked 2-D positions of the salient features or markers. Global motion is represented in a 2-D image by rotation and position vectors while local motion is represented by an action vector that specifies the amount of facial actions such as smiling-mouth, raised-eyebrows, etc.
(FR)La présente invention concerne un procédé de suivi du mouvement du visage d'une personne destiné à l'animation d'un modèle tridimensionnel de ce visage ou du visage d'une autre personne. Le modèle de visage tridimensionnel précité possède tant les caractéristiques géométriques (forme) du visage de la personne que les caractéristiques de texture (couleur) de celui-ci. La forme du modèle de visage est représentée à l'aide d'un canevas triangulaire tridimensionnel (canevas géométrique) tandis que la texture du modèle de visage est représentée à l'aide d'une image composite bidimensionnelle (image de texture). Le procédé permet de suivre à la fois le mouvement global et le mouvement local du visage de la personne. Le mouvement global du visage implique une rotation et une translation du visage en trois dimensions. Le mouvement local du visage implique le mouvement en trois dimensions des lèvres, des sourcils, etc. entraîné par la parole et les expressions du visage. Les positions bidimensionnelles des traits caractéristiques du visage d'une personne et/ou des repères placés sur le visage d'une personne sont automatiquement déterminées dans une séquence chronologique d'images bidimensionnelles du visage. Le mouvement global et le mouvement local du visage sont calculés séparément à l'aide des positions bidimensionnelles déterminées des traits caractéristiques ou des repères. Le mouvement global est représenté dans une image bidimensionnelle par des vecteurs de rotation et de position tandis que le mouvement local est représenté par un vecteur d'action qui spécifie la quantité d'actions effectuées par le visage telles que le sourire dessiné par la bouche ou les sourcils qui se lèvent.
Designated States: JP.
European Patent Office (AT, BE, CH, CY, DE, DK, ES, FI, FR, GB, GR, IE, IT, LU, MC, NL, PT, SE, TR).
Publication Language: English (EN)
Filing Language: English (EN)