Hola,
¿eres nuevo aquí?

Registrate y conecta tu empresa con financiación pública, partners y proyectos.

PID2021-127643NB-I00

Financiado

ANALISIS Y COMPRENSION DE VIDEO MULTIMODAL

ESTE PROYECTO ESTA DEDICADO AL ANALISIS Y COMPRENSION DE DATOS VISUALES ASI COMO A LA COMPRENSION DE LAS CORRELACIONES Y COMPLEMENTARIEDAD ENTRE MODALIDADES DIFERENTES COMO LA MODALIDAD VISUAL, SONORA O LENGUAJE NATURAL. A PARTIR... ver más

01/01/2021

UPF

93K€

Presupuesto del proyecto: 93K€

Líder del proyecto

UNIVERSITAT POMPEU FABRA No se ha especificado una descripción o un objeto social para esta compañía.

Total investigadores 321

Financiación concedida El organismo AGENCIA ESTATAL DE INVESTIGACIÓN notifico la concesión del proyecto el día 2021-01-01

0% 100%

Participantes

UPF

Lider

Proyectos interesantes

PCIN-2013-067 ANOTACION COLABORATIVA, MULTIMODAL, MULTILINGUE, MULTIMEDIA,... 115K€ Cerrado

PRE2020-094510 INTERACCION CORPORAL CON DATOS SEMANTICOS: INVESTIGANDO LAS... 99K€ Cerrado

PDC2021-120846-C41 DESARROLLO DE UN PROTOTIPO PRECOMPETITIVO PARA EL ANALISIS A... 32K€ Cerrado

TIN2014-58227-P DESCRIPCION LINGUISTICA DE INFORMACION VISUAL MEDIANTE TECNI... 78K€ Cerrado

TEC2017-84593-C2-1-R INFERENCIA DE LA RESPUESTA AFECTIVA DE LOS ESPECTADORES DE U... 70K€ Cerrado

TIN2014-57458-R ALGORITMOS Y TECNICAS PARA LOS RETOS DE LA EXTRACCION DE CON... 78K€ Cerrado

Últimas noticias

29-11-2024: IDAE En las últimas 48 horas el Organismo IDAE ha otorgado 4 concesiones

29-11-2024: ECE En las últimas 48 horas el Organismo ECE ha otorgado 2 concesiones

29-11-2024: CMVAMADRID En las últimas 48 horas el Organismo CMVAMADRID ha otorgado 37 concesiones

Líder del proyecto

UNIVERSITAT POMPEU FABRA

Total investigadores 321

Presupuesto del proyecto 93K€

Descripción del proyecto ESTE PROYECTO ESTA DEDICADO AL ANALISIS Y COMPRENSION DE DATOS VISUALES ASI COMO A LA COMPRENSION DE LAS CORRELACIONES Y COMPLEMENTARIEDAD ENTRE MODALIDADES DIFERENTES COMO LA MODALIDAD VISUAL, SONORA O LENGUAJE NATURAL. A PARTIR DE NUESTROS RESULTADOS, SE ESPERA AVANZAR EN LA COMPRENSION, VIA LA MODELIZACION Y EL ANALISIS FUNDAMENTADO EN DATOS, DE NO SOLAMENTE PATRONES GEOMETRICOS, DE REGULARIDAD Y SIMILARIDAD, SINO TAMBIEN DE INFORMACION A ALTO NIVEL COMO COHERENCIA GLOBAL Y SEMANTICA DE LOS DATOS VISUALES, ACUSTICOS Y DE LENGUAJE NATURAL.LAS RELACIONES ENTRE INFORMACION VISUAL Y LENGUAJE NATURAL SERAN EXPLOTADAS PARA AUMENTAR LA ACCESIBILIDAD DE PERSONAS CON DIFICULTADES E INCAPACIDADES VISUALES A, POR EJEMPLO, LOS AMPLIAMENTE EXTENDIDOS VIDEOS DE AYUDA Y APRENDIZAJE ONLINE O A LAS ACTUALES PLATAFORMAS QUE OFRECEN PELICULAS, SERIES Y DOCUMENTALES. NUESTRA INVESTIGACION EN RELACIONES INTER-MODALIDADES SE APLICARA TAMBIEN A LA SELECCION Y EDICION INTELIGENTE, EN CONTEXTOS DE RETRANSMISIONES EN TELEVISIONES Y PLATAFORMAS DIGITALES, DE CONTENIDO A PARTIR DE MULTIPLES FUENTES. ADEMAS, EL PROYECTO ABORDARA LA RESTAURACION Y COMPLETACION DE VIDEO, SONIDO, HABLA Y TEXTO, INCLUSO EN SITUACIONES DONDE LA CANTIDAD DE INFORMACION PERDIDA O DAÑADA ES GRANDE EN COMPARACION CON EL TAMAÑO DE LOS DATOS ORIGINALES DAÑADOS. UNA PARTE IMPORTANTE DE UN VIDEO CAPTURADO ES LA SEÑAL AUDITIVA. EN UNA ESCENA COMPLEJA CONTENIENDO DIFERENTES ACTORES O EN UN VIDEO CUALQUIERA, LOS DATOS ACUSTICOS CONTIENEN UNA MEZCLA DE DIFERENTES SONIDOS EMITIDOS O PRODUCIDOS POR DIFERENTES FUENTES SONORAS. LA COMPRENSION COMPLETA DE LA ESCENA TAMBIEN INVOLUCRA LA SEPARACION DE LAS DIFERENTES FUENTES ACUSTICAS QUE CONFORMAN LA MEZCLA SONORA. PARTE DEL PROYECTO ESTARA DEDICADO A LA SEPARACION DE FUENTES SONORAS A PARTIR DE LA INFORMACION AUDIOVISUAL PRESENTE EN EL VIDEO Y EN LA CORRELACION NATURAL DE SEÑALES ACUSTICAS Y VISUALES, PARTICULARMENTE EN EL CASO DE LA VOZ HUMANA. LA SEPARACION DE VOZ TIENE NUMEROSAS APLICACIONES PRACTICAS.PARALELAMENTE, PARTE DEL PROYECTO ESTARA FOCALIZADO EN LA COMPRENSION GEOMETRICA Y SEMANTICA DE CONTENIDO DE VIDEO UTILIZANDO INFORMACION MULTIMODAL EN CONTEXTOS PARTICULARES QUE INCLUYEN EL DEPORTE Y EL CINE. EN ELLOS, NUESTRO PRIMER OBJETIVO SERA EL RECONOCIMIENTO DE LAS ACCIONES Y PATRONES TENIENDO LUGAR EN UN VIDEO DADO. EN ANALISIS DE DEPORTE, POR EJEMPLO, HAY UN INTERES POR EL RECONOCIMIENTO DE ACCIONES CONJUNTAS DEL EQUIPO, O EN EL ANALISIS DEL RENDIMIENTO Y CARACTERISTICAS PERSONALES DE UN JUGADOR DETERMINADO. TAMBIEN PRETENDEMOS APLICAR EL MODELO DE RECONOCIMIENTO DE ACCIONES QUE PROPONDREMOS, CONJUNTAMENTE CON OTRAS TECNICAS QUE DESARROLLAREMOS, A LA CREACION DE RESUMENES DEL VIDEO (CONOCIDO COMO VIDEO SUMMARIZATION O HIGHLIGHTS EN CONTEXTOS DEPORTIVOS). PARA CONCLUIR, SI EL TIEMPO Y LOS RECURSOS LO PERMITEN, PRETENDEMOS EXPLORAR RECONOCIMIENTO Y GENERACION DE LENGUAJES DE SIGNOS APOYANDONOS EN ALGUNA DE LA INVESTIGACION DESARROLLADA A LO LARGO DEL PROYECTO PROPUESTO. IDEO ANALYSIS\SUMMARIZATION\ACTION RECOGNITION\SOURCE SEPARATION\RESTORATION\INPAINTING\MULTIMODAL PROCESSING\DEEP LEARNING

Conecta tu I+D

Entra hoy

Financiación

Empresas

CTIs/Universidades

Proyectos

Investigadores