Some content of this application is unavailable at the moment.
If this situation persist, please contact us atFeedback&Contact
1. (WO2019061384) METHOD AND SYSTEM FOR ELECTING TASK MANAGER IN DISTRIBUTED CRAWLER SYSTEM
Latest bibliographic data on file with the International Bureau    Submit observation

Pub. No.: WO/2019/061384 International Application No.: PCT/CN2017/104724
Publication Date: 04.04.2019 International Filing Date: 30.09.2017
IPC:
G06F 17/30 (2006.01)
G PHYSICS
06
COMPUTING; CALCULATING; COUNTING
F
ELECTRIC DIGITAL DATA PROCESSING
17
Digital computing or data processing equipment or methods, specially adapted for specific functions
30
Information retrieval; Database structures therefor
Applicants:
麦格创科技(深圳)有限公司 MAXTRON TECHNOLOGY (SHENZHEN) CO., LTD [CN/CN]; 中国广东省深圳市 南山区南海大道东华园5栋315 Room 315 Building 5 Donghuayuan Nanhai Road, Nanshan District Shenzhen, Guangdong 518000, CN
Inventors:
马岩 MA, Yan; CN
Agent:
深圳市科冠知识产权代理有限公司 SHENZHEN KEGUAN INTELLECTUAL PROPERTY AGENCY CO., LTD; 中国广东省深圳市 南山区南海大道东华园5栋303 Room 303 Building 5 Donghuayuan Nanhai Road, Nanshan District Shenzhen, Guangdong 518000, CN
Priority Data:
Title (EN) METHOD AND SYSTEM FOR ELECTING TASK MANAGER IN DISTRIBUTED CRAWLER SYSTEM
(FR) PROCÉDÉ ET SYSTÈME DE SÉLECTION D'UN GESTIONNAIRE DE TÂCHES DANS UN SYSTÈME DE ROBOT WEB DISTRIBUÉ
(ZH) 分布式爬虫系统中任务管理器的选举方法及系统
Abstract:
(EN) A method for electing a task manager in a distributed crawler system. The method comprises: a distributed device receives or initiates an election message, the election message being used for electing a task manager from a distributed crawler system (101); the distributed device broadcasts device parameters to other devices in the distributed crawler system by means of broadcast messages, receives broadcast messages sent by said other devices, and extracts, from the broadcast messages, a first distributed device having optimal device parameters (102); the distributed device receives voting messages sent by said other devices, the voting messages comprising the numbers of votes and the distributed devices that participate in voting, and the distributed device having the largest number of votes is determined as the task manager (103); if the distributed device is the task manager, crawler tasks to be processed locally are distributed to other distributed devices (104). The method can efficiently elect a task manager in a distributed system.
(FR) L'invention concerne un procédé de sélection d'un gestionnaire de tâches dans un système de robot Web distribué. Le procédé comprend : la réception ou le lancement, par un dispositif distribué, d'un message de sélection, le message de sélection étant utilisé pour sélectionner un gestionnaire de tâches dans un système de robot Web distribué (101) ; la diffusion par le dispositif distribué de paramètres de dispositif à d'autres dispositifs dans le système de robot Web distribué au moyen de messages de diffusion, la réception de messages de diffusion envoyés par lesdits autres dispositifs, et l'extraction, dans les messages de diffusion, d'un premier dispositif distribué présentant des paramètres de dispositif optimaux (102) ; la réception par le dispositif distribué de messages de vote envoyés par lesdits autres dispositifs, les messages de vote comprenant les nombres de votes et les dispositifs distribués qui participent au vote, et le dispositif distribué présentant le plus grand nombre de votes étant déterminé en tant que gestionnaire de tâches (103) ; si le dispositif distribué est le gestionnaire de tâches, la distribution des tâches de robot à traiter localement à d'autres dispositifs distribués (104). Le procédé permet de sélectionner efficacement un gestionnaire de tâches dans un système distribué.
(ZH) 一种分布式爬虫系统中任务管理器的选举方法,所述方法包括:分布式设备接收或发起选举消息,所述选举消息用于从分布式爬虫系统中选举出任务管理器(101);分布式设备将设备参数通过广播消息广播至分布式爬虫系统中的其他设备,接收其他设备发送的广播消息,从广播消息中提取设备参数最优的第一分布式设备(102);分布式设备接收其他设备发送的投票消息,该投票消息包括:票数以及投票的分布式设备,将票数最多的分布式设备确定为任务管理器(103);如分布式设备为任务管理器,将本地处理的爬虫任务分配给其他分布式设备(104)。所述方法能够较高效率地在分布式系统中选举出任务管理器。
front page image
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DJ, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IR, IS, JO, JP, KE, KG, KH, KN, KP, KR, KW, KZ, LA, LC, LK, LR, LS, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SA, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW
African Regional Intellectual Property Organization (ARIPO) (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, ST, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Office (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (EPO) (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, KM, ML, MR, NE, SN, TD, TG)
Publication Language: Chinese (ZH)
Filing Language: Chinese (ZH)