WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2018102880) SYSTEMS AND METHODS FOR REPLACING FACES IN VIDEOS
Latest bibliographic data on file with the International Bureau    Submit observation

Pub. No.:    WO/2018/102880    International Application No.:    PCT/AU2017/051353
Publication Date: 14.06.2018 International Filing Date: 08.12.2017
IPC:
G06K 9/62 (2006.01), G06T 7/20 (2017.01), G06T 19/20 (2011.01)
Applicants: FRANGOS, Marcus George [AU/AU]; (AU)
Inventors: FRANGOS, Marcus George; (AU)
Agent: GRIFFITH HACK; GPO Box 1285, Melbourne, Victoria 3001 (AU)
Priority Data:
2016905100 09.12.2016 AU
Title (EN) SYSTEMS AND METHODS FOR REPLACING FACES IN VIDEOS
(FR) SYSTÈMES ET PROCÉDÉS DE REMPLACEMENT DE VISAGES DANS DES VIDÉOS
Abstract: front page image
(EN)A method of replacing faces in videos is disclosed. The method comprises providing a pre-processed video wherein a target face appearing in multiple frames of the video has been mapped to a 3D target model and receiving, from a user device, a user's facial image. The method further comprises automatically identifying facial landmarks in the user's facial image, automatically mapping the facial landmarks to a 3D subject model to generate a user's facial image texture and automatically compositing the user's facial image texture into each video frame by transforming coordinates of the 3D subject model and corresponding pixels of the user's facial image texture to coordinates of the 3D target model and pixels of the target face respectively. The method also comprises displaying the composited video on the user device. A system for replacing faces in videos is also disclosed.
(FR)L'invention a trait à un procédé de remplacement de visages dans des vidéos. Le procédé consiste à utiliser une vidéo prétraitée comprenant plusieurs images dans lesquelles un visage cible qui apparaît a été mis en correspondance avec un modèle de cible en 3D, et à recevoir, en provenance d'un dispositif utilisateur, une image faciale de l'utilisateur. Le procédé consiste en outre à identifier automatiquement des points de repère faciaux dans l'image faciale de l'utilisateur, à mettre automatiquement en correspondance les points de repère faciaux avec un modèle de sujet en 3D pour générer une texture d'image faciale de l'utilisateur, et à composer automatiquement la texture d'image faciale de l'utilisateur dans chaque image vidéo par transformation respective des coordonnées du modèle de sujet en 3D et de pixels correspondants de la texture d'image faciale de l'utilisateur en coordonnées du modèle de cible en 3D et en pixels du visage cible. Le procédé consiste aussi à afficher la vidéo composée sur le dispositif utilisateur. L'invention concerne également un système de remplacement de visages dans des vidéos.
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DJ, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IR, IS, JO, JP, KE, KG, KH, KN, KP, KR, KW, KZ, LA, LC, LK, LR, LS, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SA, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW.
African Regional Intellectual Property Organization (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, ST, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, KM, ML, MR, NE, SN, TD, TG).
Publication Language: English (EN)
Filing Language: English (EN)