WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2013059521) VISUAL SEARCH USING MULTIPLE VISUAL INPUT MODALITIES
Latest bibliographic data on file with the International Bureau   

Pub. No.:    WO/2013/059521    International Application No.:    PCT/US2012/060908
Publication Date: 25.04.2013 International Filing Date: 18.10.2012
IPC:
G06F 17/30 (2006.01), G06T 7/00 (2006.01)
Applicants: MICROSOFT CORPORATION [US/US]; One Microsoft Way Redmond, WA 98052-6399 (US) (For All Designated States Except US)
Inventors: SUD, Avneesh; (US).
PRASAD, Rajeev; (US).
KAHEEL, Ayman, Malek Abdel Hamid; (US).
MISHRA, Pragyana, K.; (US).
AMAR, Sumit; (US).
CAO, Kancheng; (US)
Priority Data:
61/548,585 18.10.2011 US
13/301,381 21.11.2011 US
Title (EN) VISUAL SEARCH USING MULTIPLE VISUAL INPUT MODALITIES
(FR) RECHERCHE VISUELLE À L'AIDE DE MULTIPLES MODALITÉS D'ENTRÉE VISUELLE
Abstract: front page image
(EN)Systems, methods, and computer-readable storage media for web-scale visual search capable of using a combination of visual input modalities are provided. An edgel index is created that includes shape-descriptors, including edgel-based representations, that correspond to each of a plurality of images. Each edgel-based representation includes pixels that depicts edges or boundary contours of an image and is created, at least in part, by segmenting the image into a plurality of image segments and performing a multi-phase contour detection on each segment. Upon receiving a search query having a visual query input, the visual query input is converted into shape- descriptors, including an edgel-based representation, and the shape-descriptors, including the edgel-based representation, of each of the plurality of images is compared with the shape-descriptors, including the edgel-based representation, of the visual query input to identify at least one image of the plurality of images that matches the visual query input.
(FR)La présente invention concerne des systèmes, des procédés et des supports d'informations lisibles par ordinateur permettant une recherche visuelle dans l'ensemble du Web susceptible d'utiliser une combinaison de modalités d'entrée visuelle. Il est créé un index d'edgels qui contient des descripteurs de forme, notamment des représentations basées sur des edgels, qui correspondent à chaque image d'une pluralité d'images. Chaque représentation basée sur des edgels contient des pixels qui forment des bords ou des contours de limites d'une image. Chaque représentation basée sur des edgels est au moins en partie créée en segmentant l'image en une pluralité de segments d'image et en procédant à une détection de contours à phases multiples sur chaque segment. Lors d'une réception d'une interrogation de recherche comportant une entrée d'interrogation visuelle, l'entrée d'interrogation visuelle est convertie en descripteurs de forme, notamment en une représentation basée sur des edgels. Les descripteurs de forme, notamment la représentation basée sur des edgels, de chaque image de la pluralité d'images sont alors comparés aux descripteurs de forme, notamment à la représentation basée sur des edgels, de l'entrée d'interrogation visuelle de façon à identifier au moins une image de la pluralité d'images qui correspond à l'entrée d'interrogation visuelle.
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BN, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IS, JP, KE, KG, KM, KN, KP, KR, KZ, LA, LC, LK, LR, LS, LT, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PA, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW.
African Regional Intellectual Property Organization (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, ML, MR, NE, SN, TD, TG).
Publication Language: English (EN)
Filing Language: English (EN)