Crear una aplicación móvil que realice una traducción del Lenguaje de señas Peruana

Contexto general del proyecto

Se requieren los siguientes puntos: 1. Se requiere un aplicativo móvil en Android que permita detectar y traducir el lenguaje de señas (frontend). 2. Se requiere un modelo basado en cnn capaz de clasificar el lenguaje de señas peruana (lsp) a texto en tiempo real (backend). 3. Tener una base de 1000 datos etiquetados para el entrenamiento del modelo CNN. 4. Realizar el entrenamiento de los modelos ajustando los hiperparametros generando las gráficas de cómo va el entrenamiento (loss function) y otras métricas de evaluación que crean convenientes. 5. Una vez entrenado el modelo se hace el test de prueba a la base de datos de las señas. 6. Realizar inferencias en el conjunto de datos de prueba: Ejecuta el modelo en las señas de prueba para obtener las detecciones. 7. Comparar las detecciones con las anotaciones de ground truth: Calcula métricas de evaluación como precisión, exhaustividad, F1-score para comparar las predicciones del modelo con las anotaciones de ground truth. Estas métricas te permitirán evaluar la calidad de las detecciones y el rendimiento general del modelo en el conjunto de datos de prueba. 8. Las señas traducidas a texto se deberán visualizar en la aplicación en tiempo real. 10. Análisis de errores: Analiza las situaciones en las que el modelo no funciona bien, como falsos positivos, falsos negativos y detecciones imprecisas. Esto te permitirá identificar posibles mejoras en la arquitectura del modelo, los hiperparámetros o el conjunto de datos. 11. Evaluar los resultados de los modelos de detección de señas en un conjunto de datos de prueba. 12. NOTA: Aplicar en todo el desarrollo las buenas practicas del ISO 25004 y que se evidencie en un documento los criterios tomados. Los entregables del trabajo son: 1. Los códigos desarrollados si es posible en Python (backend) y React Native(frontend) 2. Las métricas de evaluación del entrenamiento de los modelos. 3. Las métricas de evaluación del test de prueba. 4. El documento con la aplicación del ISO 25004 en el desarrollo.

Categoría Programación y Tecnología
Subcategoría Programación de Apps. Android, iOS y otros
¿Cuál es el alcance del proyecto? Crear una aplicación nueva
¿Es un proyecto o una posición? Un proyecto
Actualmente tengo Tengo una idea
Disponibilidad requerida Según se necesite
Plataformas requeridas Android
Necesito Crear una app
Tipo de app Otro
Apps similares Otro
Necesita backend Sí
Procesador de pago No

Plazo de Entrega: No definido

Habilidades necesarias