WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2013049633) ONLINE ASYNCHRONOUS REINFORCEMENT LEARNING FROM CONCURRENT CUSTOMER HISTORIES
Latest bibliographic data on file with the International Bureau   

Pub. No.:    WO/2013/049633    International Application No.:    PCT/US2012/058010
Publication Date: 04.04.2013 International Filing Date: 28.09.2012
IPC:
G06F 15/18 (2006.01)
Applicants: CAUSATA INC. [US/US]; 1400 Fashion Island Blvd. #800 San Mateo, California 94404 (US) (For All Designated States Except US).
NEWNHAM, Leonard Michael [GB/GB]; (GB) (US only).
MCFALL, Jason Derek [GB/GB]; (GB) (US only).
BARKER, David J. [GB/GB]; (GB) (US only).
SILVER, David [GB/GB]; (GB) (US only)
Inventors: NEWNHAM, Leonard Michael; (GB).
MCFALL, Jason Derek; (GB).
BARKER, David J.; (GB).
SILVER, David; (GB)
Agent: HEILBRUNN, Elise R.; Weaver Austin Villeneuve & Sampson LLP P.O. Box 70250 Oakland, California 94612-0250 (US)
Priority Data:
61/540,437 28.09.2011 US
Title (EN) ONLINE ASYNCHRONOUS REINFORCEMENT LEARNING FROM CONCURRENT CUSTOMER HISTORIES
(FR) APPRENTISSAGE PAR RENFORCEMENT ASYNCHRONE EN LIGNE À PARTIR D'HISTORIQUES CLIENT CONCORDANTS
Abstract: front page image
(EN)In one embodiment, an indication of a Decision Request or an Update Request may be received, where the Update Request is activated independent of user activity. A user state pertaining to at least one user may be received, obtained, accessed or constructed. For the Decision Request, one or more actions may be scored according to one or more value functions associated with a computing device, a policy associated with the computing device may be applied to identify one of the scored actions as a decision, and an indication of the decision may be provided or applied. For the Update Request, the one or more value functions and/or the policy may be updated. An indication of updates to the one or more value functions and/or an indication of updates to the policy may be provided.
(FR)Dans un mode de réalisation de l'invention, une indication d'une demande de décision ou d'une demande de mise à jour peut être reçue, la demande de mise à jour étant activée indépendamment de l'activité utilisateur. Un état utilisateur correspondant à au moins un utilisateur peut être reçu, obtenu, atteint ou constitué. Pour la demande de décision, une ou plusieurs actions peuvent être enregistrées suivant une ou plusieurs fonctions de valeur associées à un dispositif informatique, une politique associée au dispositif informatique peut être appliquée pour identifier l'une des actions enregistrées comme étant une décision, et une indication de la décision peut être fournie ou appliquée. Pour la demande de mise à jour, la ou les fonctions de valeur et/ou la politique peuvent être mises à jour. Une indication des mises à jour desdites fonctions de valeur et/ou une indication des mises à jour de la politique peuvent être fournies.
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IS, JP, KE, KG, KM, KN, KP, KR, KZ, LA, LC, LK, LR, LS, LT, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW.
African Regional Intellectual Property Organization (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, ML, MR, NE, SN, TD, TG).
Publication Language: English (EN)
Filing Language: English (EN)