WIPO logo
Mobile | Deutsch | Español | Français | 日本語 | 한국어 | Português | Русский | 中文 | العربية |
PATENTSCOPE

Search International and National Patent Collections
World Intellectual Property Organization
Search
 
Browse
 
Translate
 
Options
 
News
 
Login
 
Help
 
Machine translation
1. (WO2012115593) APPARATUS, SYSTEM, AND METHOD FOR ANNOTATION OF MEDIA FILES WITH SENSOR DATA
Latest bibliographic data on file with the International Bureau   

Pub. No.:    WO/2012/115593    International Application No.:    PCT/SG2012/000051
Publication Date: 30.08.2012 International Filing Date: 21.02.2012
IPC:
G01S 19/14 (2010.01), G06F 15/00 (2006.01), G01S 19/13 (2010.01), G06F 17/00 (2006.01)
Applicants: NATIONAL UNIVERSITY OF SINGAPORE [SG/SG]; 21 Lower Kent Ridge Road Singapore 119077 (SG) (For All Designated States Except US).
ZIMMERMANN, Roger [US/SG]; (SG) (For US Only).
KIM, Seon Ho [US/US]; (US) (For US Only).
ARSLAN AY, Sakire [US/SG]; (SG) (For US Only).
SEO, Beomjoo [KR/SG]; (SG) (For US Only).
SHEN, Zhijie [CN/SG]; (SG) (For US Only).
WANG, Guanfeng [CN/SG]; (SG) (For US Only).
HAO, Jia [CN/SG]; (SG) (For US Only).
ZHANG, Ying [CN/SG]; (SG) (For US Only)
Inventors: ZIMMERMANN, Roger; (SG).
KIM, Seon Ho; (US).
ARSLAN AY, Sakire; (SG).
SEO, Beomjoo; (SG).
SHEN, Zhijie; (SG).
WANG, Guanfeng; (SG).
HAO, Jia; (SG).
ZHANG, Ying; (SG)
Agent: AMICA LAW LLC; 30 Raffles Place #18-03/04 Chevron House Singapore 048622 (SG)
Priority Data:
61/445,036 21.02.2011 US
Title (EN) APPARATUS, SYSTEM, AND METHOD FOR ANNOTATION OF MEDIA FILES WITH SENSOR DATA
(FR) APPAREIL, SYSTÈME ET PROCÉDÉ D'ANNOTATION DE FICHIERS MULTIMÉDIAS AVEC DES DONNÉES DE CAPTEUR
Abstract: front page image
(EN)Embodiments of methods for multimedia annotation with sensor data (referred to herein as Sensor-rich video) includes acquisition, management, storage, indexing, transmission, search, and display of video, images, or sound, that has been recorded in conjunction with additional sensor information (such as, but not limited to, global positioning system information (latitude, longitude, altitude), compass directions, WiFi fingerprints, ambient lighting conditions, etc.). The collection of sensor information is acquired on a continuous basis during recording. For example, the GPS information may be continuously acquired from a corresponding sensor at every second during the recording of a video. Therefore, the acquisition apparatus generates a continuous stream of video frames and a continuous stream of sensor meta-data values. The two streams are correlated in that every video frame is associated with a set of sensor values. Note that the sampling frequency (i.e., the frequency at which sensor values can be measured) is dependent on the type of sensor. For example, a GPS sensor may be sampled at 1-second intervals while a compass sensor may be sampled at 50 millisecond intervals. Video is also sampled at a specific rate, such as 25 or 30 frames per second. Sensor data are associated with each frame. If sensor data has not changed from the previous frame (due to a low sampling rate) then the previously measured data values are used. The resulting combination of a video and a sensor stream is called a sensor-rich video.
(FR)Selon des modes de réalisation de l'invention, des procédés d'annotation de contenu multimédia avec des données de capteur (ci-après appelé vidéo enrichie par capteur) comprennent l'acquisition, la gestion, le stockage, l'indexation, la transmission, la recherche et la présentation de vidéos, d'images ou de sons, qui ont été enregistrés conjointement avec des informations de capteur supplémentaires (telles que, mais non exclusivement, des informations de système mondial de localisation (GPS) (latitude, longitude, altitude), des directions de compas, des empreintes WiFi, des conditions d'éclairage ambiant, etc.). La collecte d'informations de capteur est acquise sur une base continue pendant l'enregistrement. Par exemple, les informations GPS peuvent être acquises sans interruption auprès d'un capteur correspondant toutes les secondes pendant l'enregistrement d'une vidéo. Par conséquent, l'appareil d'acquisition génère un flux continu d'images vidéo et un flux continu de valeurs de métadonnées de capteur. Les deux flux sont corrélés en ce que chaque image vidéo est associée à un ensemble de valeurs de capteur. On notera que la fréquence d'échantillonnage (c'est-à-dire la fréquence à laquelle des valeurs de capteur peuvent être mesurées) dépend du type de capteur. Par exemple, un capteur GPS peut être échantillonné à intervalles d'une seconde tandis qu'un capteur de compas peut être échantillonné à intervalles de 50 millisecondes. Une vidéo est également échantillonnée à une fréquence précise, telle que de 25 ou 30 images par seconde. Des données de capteur sont associées à chaque image. Si les données de capteur n'ont pas changé depuis l'image précédente (en raison d'une faible fréquence d'échantillonnage), alors les valeurs de données précédemment mesurées sont utilisées. La combinaison résultante d'une vidéo et d'un flux de capteur est appelée vidéo enrichie par capteur.
Designated States: AE, AG, AL, AM, AO, AT, AU, AZ, BA, BB, BG, BH, BR, BW, BY, BZ, CA, CH, CL, CN, CO, CR, CU, CZ, DE, DK, DM, DO, DZ, EC, EE, EG, ES, FI, GB, GD, GE, GH, GM, GT, HN, HR, HU, ID, IL, IN, IS, JP, KE, KG, KM, KN, KP, KR, KZ, LA, LC, LK, LR, LS, LT, LU, LY, MA, MD, ME, MG, MK, MN, MW, MX, MY, MZ, NA, NG, NI, NO, NZ, OM, PE, PG, PH, PL, PT, QA, RO, RS, RU, RW, SC, SD, SE, SG, SK, SL, SM, ST, SV, SY, TH, TJ, TM, TN, TR, TT, TZ, UA, UG, US, UZ, VC, VN, ZA, ZM, ZW.
African Regional Intellectual Property Organization (BW, GH, GM, KE, LR, LS, MW, MZ, NA, RW, SD, SL, SZ, TZ, UG, ZM, ZW)
Eurasian Patent Organization (AM, AZ, BY, KG, KZ, MD, RU, TJ, TM)
European Patent Office (AL, AT, BE, BG, CH, CY, CZ, DE, DK, EE, ES, FI, FR, GB, GR, HR, HU, IE, IS, IT, LT, LU, LV, MC, MK, MT, NL, NO, PL, PT, RO, RS, SE, SI, SK, SM, TR)
African Intellectual Property Organization (BF, BJ, CF, CG, CI, CM, GA, GN, GQ, GW, ML, MR, NE, SN, TD, TG).
Publication Language: English (EN)
Filing Language: English (EN)