WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2016095760) DATA DYNAMIC RE-DISTRIBUTION METHOD, DATA NODE, NAME NODE AND SYSTEM
Latest bibliographic data on file with the International Bureau   

Pub. No.:    WO/2016/095760    International Application No.:    PCT/CN2015/097172
Publication Date: 23.06.2016 International Filing Date: 11.12.2015
IPC:
G06F 17/30 (2006.01)
Applicants: HUAWEI TECHNOLOGIES CO., LTD. [CN/CN]; Huawei Administration Building, Bantian, Longgang District Shenzhen, Guangdong 518129 (CN)
Inventors: LI, Jia; (CN).
LIU, Jie; (CN).
DANG, Lifei; (CN)
Priority Data:
201410790066.5 18.12.2014 CN
Title (EN) DATA DYNAMIC RE-DISTRIBUTION METHOD, DATA NODE, NAME NODE AND SYSTEM
(FR) PROCÉDÉ DE REDISTRIBUTION DYNAMIQUE DE DONNÉES, NŒUD DE DONNÉES, NŒUD DE NOMS ET SYSTÈME
(ZH) 数据动态重分布的方法、数据节点、名字节点及系统
Abstract: front page image
(EN)The present invention belongs to a technical field of Internet big data processing and disclosed are a data dynamic re-distribution method, data node, name node and system, the method comprising: a first data node receives a read command of a data block (S11); accessing a target data block according to the read command of the data block (S12); generating a copy of the data block of a target data block on a first data node (S13); transmitting a first modifying instruction to the name node (S14). The copy of the data block of the target data block is generated on the first data node, so as to increase number of the data node storing the target data block on the HDFS, and when tasks of accessing the target data block are re-distributed, the number of the local task increases, reducing consumption of the HDFS network resource, improving operation speed of the HDFS, as well as sharing operation task load of the data node storing the data block of the target file, realizing balance of the load.
(FR)La présente invention appartient au domaine technique du traitement des données massives de l'Internet et concerne un procédé de redistribution dynamique de données, un nœud de données, un nœud de noms et un système, le procédé comprenant les étapes suivantes : un premier nœud de données reçoit une commande de lecture d'un bloc de données (S11) ; accéder à un bloc de données cible en fonction de la commande de lecture du bloc de données (S12) ; générer une copie du bloc de données d'un bloc de données cible sur un premier nœud de données (S13) ; transmettre une première instruction de modification au nœud de noms (S14). La copie du bloc de données du bloc de données cible est générée sur le premier nœud de données de manière à augmenter le nombre de nœuds de données stockant le bloc de données cible sur le HDFS, et lorsque des tâches d'accès au bloc de données cible sont redistribuées, le nombre des tâches locales augmente, ce qui réduit la consommation des ressources du réseau HDFS, améliore la vitesse de fonctionnement du HDFS, et partage également la charge de tâches de fonctionnement du nœud de données stockant le bloc de données du fichier cible, réalisant ainsi un équilibre de la charge.
(ZH)一种数据动态重分布的方法、数据节点、名字节点及系统,属于互联网大数据处理技术领域。所述方法包括:第一数据节点接收数据块读取命令(S11);根据数据块读取命令访问目标数据块(S12);在第一数据节点上生成目标数据块的数据块副本(S13);向名字节点发送第一修改指令(S14)。通过在第一数据节点上生成目标数据块的数据块副本,使得HDFS中存储目标数据块的数据节点的数量增加,当再次分配访问目标数据块的任务时,本地任务数量增多,这样既能减少对HDFS网络资源的消耗,提高HDFS运行的速度,同时又能分担存储有目标文件的数据块的数据节点的运行任务负载,实现了负载的均衡。
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IR, IS, JP, KE, KG, KN, KP, KR, KZ, LA, LC, LK, LR, LS, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SA, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW.
African Regional Intellectual Property Organization (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, ST, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, KM, ML, MR, NE, SN, TD, TG).
Publication Language: Chinese (ZH)
Filing Language: Chinese (ZH)