Digital 3D models generation for AI applications: Automatic landmarking as a case of study

Projecte: Ajuts interns/convocatòries pròpiesAjuts interns a projectes

Detalls del projecte

Description

"Dentro del HER, en los últimos años se está trabajando en diversos proyectos donde aplicamos técnicas de análisis de datos, en diversos ámbitos de la salud (ej. el diagnóstico de enfermedades mentales, la caracterización de grupos de población, el seguimiento de heridas de presión, entre otros) pero nos hemos encontrado dificultades al querer ir más allá y aplicar las técnicas de DL por la falta de muestras de entrenamiento.

Desde el 2016 la linea está trabajando en proyectos de visión aplicada al diagnóstico de enfermedades mentales a través del análisis de la forma del rostro de los pacientes, este estudio se basa en la extracción de unos puntos de referencia en el rostro (biomarcadores faciales), la extracción de estos se hace mayoritariamente de manera manual en las reconstrucciones 3D de resonancia magnética, ya que las técnicas automáticas presentan varias limitaciones a nivel de precisión y orientación inicial del rostro. Es por esto que queremos explorar la extracción automática de estos puntos con técnicas de DL, y es aquí donde la falta de muestras de entrenamiento nos dificulta esta labor.

Los objetivos concretos que se pretenden cumplir gracias a esta ayuda en el ámbito de investigación son los siguientes:
Científicos:
1- Uso de animación 3D para la generación de datasets de manera automática con un alto componente de realismo (parametrizando o mediante inteligencia artificial IA)
2- Generar un dataset en 3D de rostros humanos.
3- Usar el dataset para mejorar los resultados en landmarking automático.
4- Reportar los resultados en publicaciones científicas.

Institución e investigación:
1- Aumentar la colaboración entre líneas de investigación del grupo HER, específicamente la línea de visión por computador y el área de animación y artes digitales (A&AD).
2- Empezar una línea de investigación en generación de datos mediante el uso de técnicas de animación e IA."
EstatusAcabat
Data efectiva d'inici i finalització1/01/2331/12/23