Processing

Please wait...

Settings

Settings

Goto Application

1. WO2022115195 - ACCURATE VIDEO EVENT INFERENCE USING 3D INFORMATION

Publication Number WO/2022/115195
Publication Date 02.06.2022
International Application No. PCT/US2021/056800
International Filing Date 27.10.2021
IPC
G06V 20/40 2022.1
G06T 17/00 2006.1
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
173D modelling for computer graphics
G06V 20/52 2022.1
G06V 20/64 2022.1
CPC
G06T 2207/10016
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
2207Indexing scheme for image analysis or image enhancement
10Image acquisition modality
10016Video; Image sequence
G06T 2207/30196
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
2207Indexing scheme for image analysis or image enhancement
30Subject of image; Context of image processing
30196Human being; Person
G06T 7/73
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
7Image analysis
70Determining position or orientation of objects or cameras
73using feature-based methods
G06T 7/80
GPHYSICS
06COMPUTING; CALCULATING; COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
7Image analysis
80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
G06V 20/40
G06V 20/44
Applicants
  • MICROSOFT TECHNOLOGY LICENSING, LLC [US]/[US]
Inventors
  • DENG, Hongli
  • FILCIK, Joseph Milan
  • YAN, Hao
  • JIN, Tony Ducheng
  • BLANCO SALDANA, Gabriel
  • MENEZES, Ryan Savio
Agents
  • CHATTERJEE, Aaron C.
  • BARKER, Doug
  • CHEN, Wei-Chen Nicholas
  • CHOI, Daniel
  • CHURNA, Timothy
  • DINH, Phong
  • EVANS, Patrick
  • GABRYJELSKI, Henry
  • GUPTA, Anand
  • HWANG, William C.
  • JARDINE, John S.
  • LEE, Sunah
  • LEMMON, Marcus
  • MARQUIS, Thomas
  • MEYERS, Jessica
  • SPELLMAN, Steven
  • SULLIVAN, Kevin
  • WALKER, Matt
  • WIGHT, Stephen A.
  • WISDOM, Gregg
  • WONG, Thomas S.
  • ZHANG, Hannah
  • AKHTER, Julia
  • KADOURA, Judy M.
  • NIU, Bo
  • BROWN, Renee
  • TRAN, Kimberly
Priority Data
17/103,26424.11.2020US
Publication Language English (en)
Filing Language English (EN)
Designated States
Title
(EN) ACCURATE VIDEO EVENT INFERENCE USING 3D INFORMATION
(FR) INFÉRENCE PRÉCISE D'ÉVÈNEMENT DE VIDÉO UTILISANT DES INFORMATIONS 3D
Abstract
(EN) Techniques for inferring whether an event is occurring in 3D space based on 2D image data and for maintaining a camera's calibration are disclosed. An image of an environment is accessed. Input is received, where the input includes a 2D rule imposed against a ground plane. The 2D rule includes conditions indicative of an event. A bounding box is generated and encompasses a detected object. A point within the bounding box is projected from a 2D-space image plane of the image into 3D space to generate a 3D-space point. Based on the 3D-space point, a 3D-space ground contact point is generated. That 3D-space ground contact point is reprojected onto the ground plane of the image to generate a synthesized 2D ground contact point. A location of the synthesized 2D ground contact point is determined to satisfy the conditions.
(FR) L'invention concerne des techniques pour inférer si un évènement se produit dans un espace 3D en fonction de données d'image 2D et pour maintenir l'étalonnage d'une caméra. L'accès à une image d'un environnement est effectué. Une entrée est reçue, l'entrée comprenant une règle 2D imposée par rapport à un plan de sol. La règle 2D comprend des conditions indiquant un évènement. Un rectangle de délimitation est produit et englobe un objet détecté. Un point dans le rectangle de délimitation est projeté à partir d'un plan d'image d'espace 2D de l'image dans l'espace 3D pour produire un point d'espace 3D. En fonction du point d'espace 3D, un point de contact avec le sol dans l'espace 3D est produit. Ce point de contact avec le sol dans l'espace 3D est reprojeté sur le plan de sol de l'image pour produire un point de contact de sol 2D synthétisé. Un emplacement du point de contact de sol 2D synthétisé est déterminé pour respecter les conditions.
Related patent documents
Latest bibliographic data on file with the International Bureau