Einige Inhalte dieser Anwendung sind momentan nicht verfügbar.
Wenn diese Situation weiterhin besteht, kontaktieren Sie uns bitte unterFeedback&Kontakt
1. (WO2019061122) SPARK TASK ALLOCATION METHOD AND SYSTEM
Aktuellste beim Internationalen Büro vorliegende bibliographische Daten    Einwendung einreichen

Veröff.-Nr.: WO/2019/061122 Internationale Anmeldenummer PCT/CN2017/103877
Veröffentlichungsdatum: 04.04.2019 Internationales Anmeldedatum: 28.09.2017
IPC:
G06F 9/50 (2006.01)
G Physik
06
Datenverarbeitung; Rechnen; Zählen
F
Elektrische digitale Datenverarbeitung
9
Anordnungen zur Programmsteuerung, z.B. Leitwerk
06
mit gespeichertem Programm, d.h. der interne Speicher des Digitalrechners kann das Programm aufnehmen und speichern
46
Mehrfachprogrammierungs-Anordnungen
50
Zuweisung von Betriebsmitteln, z.B. des Zentralprozessors [Central Processing Unit = CPU]
Anmelder:
深圳大学 SHENZHEN UNIVERSITY [CN/CN]; 中国广东省深圳市 南山区南海大道3688号 Nanhai Ave.3688, Nanshan Shenzhen, Guangdong 518060, CN
Erfinder:
毛睿 MAO, Rui; CN
陆敏华 LU, Minhua; CN
陆克中 LU, Kezhong; CN
朱金彬 ZHU, Jinbin; CN
隋秀峰 SUI, Xiufeng; CN
Vertreter:
深圳市恒申知识产权事务所(普通合伙) HENSEN INTELLECTUAL PROPERTY FIRM; 中国广东省深圳市 福田区南园路68号上步大厦10H 10H Shangbu Building No.68 Nanyuan Road, Futian Shenzhen, Guangdong 518000, CN
Prioritätsdaten:
Titel (EN) SPARK TASK ALLOCATION METHOD AND SYSTEM
(FR) PROCÉDÉ ET SYSTÈME D'ATTRIBUTION DE TÂCHE SPARK
(ZH) 一种SPARK任务分配方法和系统
Zusammenfassung:
(EN) A Spark task allocation method and system. The method comprises: firstly, according to a data position selection method, pairing a currently submitted task with nodes comprised in a configured resource, and generating a paring result; grouping, according to generated corresponding relations between node identifiers and storage device characteristic identifiers, nodes comprised in the paring result into a solid state drive (SSD) node group and a hard disk drive node group; and if operation data of the current task exists in a node of the SSD node group and a node of the hard disk drive node group at the same time, preferably allocating the task to a node of the SSD node group for execution, i.e., allocating the task to a computing node configured with an SSD as far as possible. Therefore, the characteristics of high-speed reading and writing and high throughput rate of the SSD are sufficiently used, the execution speed of the task is improved, and the service quality of a cluster is improved.
(FR) L'invention concerne un procédé et un système d'attribution de tâche Spark. Le procédé comprend les étapes suivantes : premièrement, selon un procédé de sélection de position de données, apparier une tâche soumise actuellement avec des nœuds compris dans une ressource configurée, et produire un résultat d'appariement; grouper, selon des relations correspondantes produites entre des identifiants de nœud et des identifiants de caractéristique de dispositif de stockage, des nœuds compris dans le résultat d'appariement dans un groupe de nœuds de disque à semi-conducteurs (SSD) et un groupe de nœuds de lecteur de disque dur; et si des données de fonctionnement de la tâche actuelle existent en même temps dans un nœud du groupe de nœuds de SSD et dans un nœud du groupe de nœuds de lecteur de disque dur, attribuer la tâche de préférence à un nœud du groupe de nœuds de SSD pour l'exécution, c'est-à-dire attribuer la tâche à un nœud de calcul configuré avec un SSD autant que possible. Par conséquent, les caractéristiques de lecture et d'écriture rapides et de débit de traitement élevé du SSD sont utilisées suffisamment, la vitesse d'exécution de la tâche est améliorée, et la qualité de service d'une grappe est améliorée.
(ZH) 一种Spark任务分配方法和系统。首先基于数据位置的选择方法对当前提交的任务和已配置的资源中所包含的节点进行配对,生成配对结果;利用已生成的节点标识与存储设备特征标识的对应关系,将配对结果中所包含的节点分组为固态硬盘节点组和机械硬盘节点组;若当前任务的操作数据同时存在于固态硬盘节点组的节点和机械硬盘节点组的节点中,优先将任务分配到固态硬盘节点组的节点中执行,即最大限度地将任务分配到配置有SSD的计算节点上,从而充分利用SSD高速读、写以及高吞吐率的特性,加快任务的执行速度,提升集群的服务质量。
front page image
Designierte Staaten: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DJ, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IR, IS, JO, JP, KE, KG, KH, KN, KP, KR, KW, KZ, LA, LC, LK, LR, LS, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SA, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW
African Regional Intellectual Property Organization (ARIPO) (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, ST, SZ, TZ, UG, ZM, ZW)
Eurasische Patentorganisation (AM, AZ, BY, KG, KZ, RU, TJ, TM)
Europäisches Patentamt (EPO) (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, KM, ML, MR, NE, SN, TD, TG)
Veröffentlichungssprache: Chinesisch (ZH)
Anmeldesprache: Chinesisch (ZH)