Processing

Please wait...

PATENTSCOPE will be unavailable a few hours for maintenance reason on Tuesday 25.01.2022 at 12:00 PM CET
Settings

Settings

Goto Application

1. WO2022002181 - FREE VIEWPOINT VIDEO RECONSTRUCTION METHOD AND PLAYING PROCESSING METHOD, AND DEVICE AND STORAGE MEDIUM

Publication Number WO/2022/002181
Publication Date 06.01.2022
International Application No. PCT/CN2021/103932
International Filing Date 01.07.2021
IPC
G06T 7/50 2017.1
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
7Image analysis
50Depth or shape recovery
G06T 5/00 2006.1
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
5Image enhancement or restoration
Applicants
  • 阿里巴巴集团控股有限公司 ALIBABA GROUP HOLDING LIMITED
Inventors
  • 盛骁杰 SHENG, Xiaojie
Agents
  • 北京三友知识产权代理有限公司 BEIJING SANYOU INTELLECTUAL PROPERTY AGENCY LTD.
Priority Data
202010630754.003.07.2020CN
Publication Language Chinese (zh)
Filing Language Chinese (ZH)
Designated States
Title
(EN) FREE VIEWPOINT VIDEO RECONSTRUCTION METHOD AND PLAYING PROCESSING METHOD, AND DEVICE AND STORAGE MEDIUM
(FR) PROCÉDÉ DE RECONSTRUCTION DE VIDÉO À POINT DE VUE LIBRE ET PROCÉDÉ DE TRAITEMENT DE LECTURE, ET DISPOSITIF ET SUPPORT DE STOCKAGE
(ZH) 自由视点视频重建方法及播放处理方法、设备及存储介质
Abstract
(EN) A free viewpoint video reconstruction method and playing processing method, and a device and a storage medium. The video reconstruction method comprises: acquiring a spliced image of a plurality of frame moments, wherein the spliced image comprises texture maps of a plurality of synchronous viewing angles, and first depth maps of the corresponding viewing angles, and the resolution of the first depth maps is less than the resolution of the texture maps; separating the texture maps and the first depth maps in the spliced image; upsampling the first depth maps on the basis of the resolution of the corresponding texture maps in the spliced image to obtain second depth maps; and on the basis of the texture maps of the plurality of synchronous viewing angles in the spliced image, and the second depth maps of the corresponding viewing angles, performing reconstruction according to position information of a virtual viewpoint and parameter data corresponding to the spliced image, so as to obtain an image of the virtual viewpoint. By using the solution, the definition of a free viewpoint image obtained by means of reconstruction can be improved.
(FR) L'invention concerne un procédé de reconstruction de vidéo à point de vue libre et un procédé de traitement de lecture, un dispositif et un support de stockage. Le procédé de reconstruction vidéo consiste à : acquérir une image épissée d'une pluralité de moments de trame, l'image épissée comprenant des cartes de texture d'une pluralité d'angles de visualisation synchrones, et des premières cartes de profondeur des angles de visualisation correspondants, et la résolution des premières cartes de profondeur étant inférieure à la résolution des cartes de texture; séparer les cartes de texture et les premières cartes de profondeur dans l'image épissée; suréchantillonner les premières cartes de profondeur sur la base de la résolution des cartes de texture correspondantes dans l'image épissée pour obtenir des secondes cartes de profondeur; et sur la base des cartes de texture de la pluralité d'angles de visualisation synchrones dans l'image épissée, et des secondes cartes de profondeur des angles de visualisation correspondants, effectuer une reconstruction en fonction d'informations de position d'un point de vue virtuel et de données de paramètre correspondant à l'image épissée, de façon à obtenir une image du point de vue virtuel. L'utilisation de cette solution permet d'améliorer la définition d'une image de point de vue libre obtenue par reconstruction.
(ZH) 自由视点视频重建方法及播放处理方法、设备及存储介质,所述视频重建方法包括:获取多个帧时刻的拼接图像,所述拼接图像包括同步的多个视角的纹理图和对应视角的第一深度图,所述第一深度图的分辨率小于所述纹理图的分辨率;对所述拼接图像中的纹理图和第一深度图进行分离;基于所述拼接图像中对应纹理图的分辨率对所述第一深度图进行升采样,得到第二深度图;基于所述拼接图像中同步的多个视角的纹理图以及对应视角的第二深度图,根据虚拟视点的位置信息以及所述拼接图像对应的参数数据,重建得到所述虚拟视点的图像。采用上述方案能够提高重建得到的自由视点图像的清晰度。
Latest bibliographic data on file with the International Bureau