(EN) According to a method and apparatus for enhancing a hand gesture and voice command recognition performance, for an input interface of an augmented reality glass device, which are proposed in the present invention, a hand gesture and a voice command are recognized by additionally training, using wearer data consisting of hand gesture image data and voice command signal data of a wearer wearing the augmented reality glass device, a pre-trained hand gesture recognition model and a pre-trained voice command recognition model and updating weights, and thus performances of the hand gesture and voice command recognition models can be increased according to a specific situation or specific wearer in the augmented reality glass device, and security of personal data can be reinforced since there is no need to transmit the wearer data to a server or the like.
(FR) Selon un procédé et un appareil permettant d'améliorer les performances de reconnaissance d'un mouvement de la main et de commande vocale, destinés à une interface d'entrée d'un dispositif de verre à réalité augmentée, qui sont proposés dans la présente invention, un mouvement de la main et une commande vocale sont reconnus par une formation supplémentaire, à l'aide de données d'un porteur constituées de données d'image de mouvement de main et de données de signal de commande vocale d'un porteur portant le dispositif de verre à réalité augmentée, un modèle de reconnaissance de mouvement de la main pré-formé et un modèle de reconnaissance de commande vocale pré-formé et des poids de mise à jour, et ainsi les performances du mouvement de la main et des modèles de reconnaissance de commande vocale peuvent être augmentés selon une situation spécifique ou un porteur spécifique dans le dispositif de verre à réalité augmentée, et la sécurité des données personnelles peut être renforcée étant donné qu'il n'est pas nécessaire de transmettre les données du porteur à un serveur ou similaire.
(KO) 본 발명에서 제안하고 있는 증강현실 글라스 장치의 입력 인터페이스를 위한 손동작 및 음성명령어 인식 성능 향상 방법 및 장치에 따르면, 증강현실 글라스 장치를 착용한 착용자의 손동작 영상 데이터 및 음성명령어 신호 데이터로 구성되는 착용자 데이터로, 사전 학습된 손동작 인식 모델 및 음성명령어 인식 모델을 추가 학습해 가중치를 업데이트하여 손동작 및 음성명령어 인식을 수행함으로써, 증강현실 글라스 장치 내에서 특정 상황 또는 특정 착용자에 맞추어 손동작 및 음성명령어 인식 모델의 성능을 높일 수 있고, 착용자 데이터를 서버 등에 송신할 필요가 없으므로 개인 데이터의 보안을 강화할 수 있다.