Processing

Please wait...

Settings

Settings

Goto Application

1. WO2020112733 - ONLINE CALIBRATION OF 3D SCAN DATA FROM MULTIPLE VIEWPOINTS

Publication Number WO/2020/112733
Publication Date 04.06.2020
International Application No. PCT/US2019/063195
International Filing Date 26.11.2019
IPC
H04N 13/00 2018.01
HELECTRICITY
04ELECTRIC COMMUNICATION TECHNIQUE
NPICTORIAL COMMUNICATION, e.g. TELEVISION
13Stereoscopic video systems; Multi-view video systems; Details thereof
G06T 15/00 2011.01
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
153D  image rendering
G06T 17/00 2006.01
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
173D modelling for computer graphics
CPC
G06T 15/00
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
153D [Three Dimensional] image rendering
G06T 17/00
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
17Three dimensional [3D] modelling, e.g. data description of 3D objects
H04N 13/00
HELECTRICITY
04ELECTRIC COMMUNICATION TECHNIQUE
NPICTORIAL COMMUNICATION, e.g. TELEVISION
13Stereoscopic video systems; Multi-view video systems; Details thereof
Applicants
  • SONY CORPORATION [JP]/[JP]
  • FURUKAWA, Kendai [JP]/[US] (US)
Inventors
  • FURUKAWA, Kendai
Agents
  • CHINTALAPOODI, Pramod
Priority Data
62/772,52628.11.2018US
Publication Language English (EN)
Filing Language English (EN)
Designated States
Title
(EN) ONLINE CALIBRATION OF 3D SCAN DATA FROM MULTIPLE VIEWPOINTS
(FR) ÉTALONNAGE EN LIGNE DE DONNÉES DE BALAYAGE 3D À PARTIR DE MULTIPLES POINTS DE VUE
Abstract
(EN)
A calibration system and method for online calibration of 3D scan data from multiple viewpoints is provided. The calibration system receives a set of depth scans and a corresponding set of color images of a scene that includes a human-object as part of a foreground of the scene. The calibration system extracts a first three-dimensional (3D) representation of the foreground based on a first depth scan and spatially aligns the extracted first 3D representation with a second 3D representation of the foreground. The first 3D representation and the second 3D representation are associated with a first viewpoint and a second viewpoint, respectively, in a 3D environment. The calibration system updates the spatially aligned first 3D representation based on the set of color images and a set of structural features of the human-object and reconstructs a 3D mesh of the human-object based on the updated first 3D representation of the foreground.
(FR)
L'invention concerne également un système et un procédé D'étalonnage pour l'étalonnage en ligne de données de balayage 3D à partir de multiples points de vue. Le système d'étalonnage reçoit un ensemble de balayages de profondeur et un ensemble correspondant d'images de couleur d'une scène qui comprend un objet humain en tant que partie d'un premier plan de la scène. Le système d'étalonnage extrait une première représentation tridimensionnelle (3D) du premier plan sur la base d'un premier balayage de profondeur et aligne spatialement la première représentation 3D extraite avec une seconde représentation 3D du premier plan. La première représentation 3D et la seconde représentation 3D sont associées à un premier point de vue et à un second point de vue, respectivement, dans un environnement 3D. Le système d'étalonnage met à jour la première représentation 3D alignée spatialement sur la base de l'ensemble d'images couleur et d'un ensemble de caractéristiques structurelles de l'objet humain et reconstruit un maillage 3D de l'objet humain sur la base de la première représentation 3D mise à jour du premier plan.
Latest bibliographic data on file with the International Bureau