CONTROL DEL MOUSE CON RECONOCIMIENTO DE GESTOS MANUALES MEDIANTE IMÁGENES E INTELIGENCIA ARTIFICIAL
No Thumbnail Available
Date
2023-05-25
Journal Title
Journal ISSN
Volume Title
Publisher
Universidad Industrial de Santander
Abstract
Con el constante avance de la visión por computadora y el gran número de personas que ahora cuentan con un ordenador debido a la pandemia, es esencial aprovechar todas las herramientas posibles para automatizar procesos que faciliten a las personas el desarrollo de sus actividades diarias relacionadas con un ordenador. Por ello, el presente proyecto plantea el desarrollo de un sistema basado en redes neuronales convolucionales y visión por computadora que se ejecuta con una interfaz amigable para el usuario. Luego de obtener el conjunto de datos para el reconocimiento de gestos, se realizó el entrenamiento de múltiples modelos de redes convolucionales, y después de realizar una comparación, se optó por el modelo basado en la arquitectura YOLOv8. Posteriormente, se buscó y adaptó un modelo para esqueletización de la mano, dicho modelo fue tomado de la biblioteca de Mediapipe. Al contar con los dos modelos listos para su despliegue, se realizó la integración de ambos modelos en la interfaz creada con la herramienta PyQt5, y finalmente se definieron los modos de uso para el control del mouse y la activación de macros.
Description
Keywords
RECONOCOCIMIENTO DE GESTOS MANUALES, REDES NEURONALES CONVOLUCIONALES, VISIÓN POR COMPUTADORA