Processing

Please wait...

Settings

Settings

Goto Application

1. WO2020113470 - DATA BLOCK DIVISION METHOD AND APPARATUS, AND TERMINAL DEVICE

Publication Number WO/2020/113470
Publication Date 11.06.2020
International Application No. PCT/CN2018/119378
International Filing Date 05.12.2018
IPC
G06F 3/06 2006.01
GPHYSICS
06COMPUTING; CALCULATING OR COUNTING
FELECTRIC DIGITAL DATA PROCESSING
3Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
06Digital input from, or digital output to, record carriers
Applicants
  • 深圳大学 SHENZHEN UNIVERSITY [CN]/[CN]
Inventors
  • 黄哲学 HUANG, Zhexue
  • 朱胡飞 ZHU, Hufei
Agents
  • 深圳市恒申知识产权事务所(普通合伙) HENSEN INTELLECTUAL PROPERTY FIRM
Priority Data
Publication Language Chinese (ZH)
Filing Language Chinese (ZH)
Designated States
Title
(EN) DATA BLOCK DIVISION METHOD AND APPARATUS, AND TERMINAL DEVICE
(FR) PROCÉDÉ ET APPAREIL DE DIVISION EN BLOCS DE DONNÉES ET DISPOSITIF DE TERMINAL
(ZH) 一种数据分块方法、装置及终端设备
Abstract
(EN)
A data block division method and apparatus (30), and a terminal device. Said method comprises: dividing data into blocks and storing same into C data centers (S1); and dividing the data blocks stored in the ith data center into Pi original data sub-blocks, and placing same, in a distributed manner, into a computing cluster of the ith data center (S2); selecting the C data centers, and acquiring record data in each original data sub-block of each data center, so as to obtain record data in the original data sub-blocks of the C data centers (S3), each piece of record data in the original data sub-blocks being acquired only once; according to the record data in the original data sub-blocks of the C data centers, mixing to generate random sampling data blocks (S4); repeating the steps above K times, to generate K random sampling data blocks, and storing the K random sample data blocks into a preset data center (S5). The method significantly improves the efficiency of data block division processing.
(FR)
L'invention concerne un procédé et un appareil (30) de division en blocs de données, ainsi qu'un dispositif de terminal. Ledit procédé comprend les étapes consistant à : diviser des données en blocs et les stocker dans des centres de données C (S1) ; et diviser les blocs de données stockés dans le ième centre de données en sous-blocs de données d'origine Pi, et les placer, de manière distribuée, dans une grappe de calcul du ième centre de données (S2) ; sélectionner les centres de données C, et acquérir des données d'enregistrement dans chaque sous-bloc de données d'origine de chaque centre de données, de façon à obtenir des données d'enregistrement dans les sous-blocs de données d'origine des centres de données C (S3), chaque élément de données d'enregistrement dans les sous-blocs de données d'origine étant acquis une seule fois ; en fonction des données d'enregistrement dans les sous-blocs de données d'origine des centres de données C, mélanger pour générer des blocs de données d'échantillonnage aléatoire (S4) ; répéter les étapes ci-dessus K fois, pour générer K blocs de données d'échantillonnage aléatoire, et stocker les K blocs de données d'échantillonnage aléatoire dans un centre de données prédéfini (S5). Le procédé améliore significativement l’efficacité du traitement de division en blocs de données.
(ZH)
一种数据分块方法、装置(30)及终端设备,方法包括:将数据分块并分别存储到C个数据中心(S1);将第i个数据中心中所存储的数据块切割成Pi个原始数据子块,并分布式放置在第i个数据中心的计算集群中(S2);选择C个数据中心,获取每个数据中心中每个原始数据子块中的记录数据,得到C个数据中心的原始数据子块中的记录数据(S3),对原始数据子块中的每条记录数据有且只有获取一次;根据C个数据中心的原始数据子块中的记录数据,混合生成随机采样数据块(S4);K次重复上述步骤,生成K个随机采样数据块,并将K个随机采样数据块存储在预设数据中心(S5)。通过该方法能够明显提高数据分块处理的效率。
Latest bibliographic data on file with the International Bureau