Hola,
¿eres nuevo aquí?

Registrate y conecta tu empresa con financiación pública, partners y proyectos.

TED2021-129177B-I00

Financiado

ARQUITECTURA LAKEHOUSE EN LA NUBE COMO FACILITADOR DE LA DIGITALIZACION

ESTE PROYECTO ABORDA EL RETO DE HACER USO DE DATA LAKES, DISEÑADOS PARA SU USO EN BIG DATA Y CIENCIA DE DATOS, COMO ELEMENTOS FACILITADORES DE LA DIGITALIZACION EN ENTORNOS EMPRESARIALES. LA ARQUITECTURA DATA LAKEHOUSE RECIENTEMEN... ver más

01/01/2021

UDC

188K€

Presupuesto del proyecto: 188K€

Líder del proyecto

UNIVERSIDAD DE A CORUÑA No se ha especificado una descripción o un objeto social para esta compañía.

Total investigadores 86

Financiación concedida El organismo AGENCIA ESTATAL DE INVESTIGACIÓN notifico la concesión del proyecto el día 2021-01-01

0% 100%

Participantes

UDC

Lider

Proyectos interesantes

TIN2013-46883-P BIGDATAPAAS: UNA PLATAFORMA COMO SERVICIO PARA BIG DATA 63K€ Cerrado

TIN2014-55894-C2-2-R BIG TIME-AWARE DATA: ANALISIS DE DATOS MASIVOS INDEXADOS EN... 111K€ Cerrado

PID2020-119478GB-I00 CIENCIA DE DATOS FIABLE Y RESPONSABLE: APLICACIONES, DATOS C... 259K€ Cerrado

RYC2021-031966-I Efficient Data Orchestration in Computing Architectures (EDO... 236K€ Cerrado

PTQ-12-05537 Evaluación e integración de sistemas NoSQL y sistemas mulidi... 105K€ Cerrado

TIN2014-55894-C2-1-R BIG TIME-AWARE DATA: ANALISIS DE DATOS MASIVOS INDEXADOS EN... 125K€ Cerrado

Últimas noticias

29-11-2024: IDAE En las últimas 48 horas el Organismo IDAE ha otorgado 4 concesiones

29-11-2024: ECE En las últimas 48 horas el Organismo ECE ha otorgado 2 concesiones

29-11-2024: CMVAMADRID En las últimas 48 horas el Organismo CMVAMADRID ha otorgado 37 concesiones

Líder del proyecto

UNIVERSIDAD DE A CORUÑA

Total investigadores 86

Presupuesto del proyecto 188K€

Descripción del proyecto ESTE PROYECTO ABORDA EL RETO DE HACER USO DE DATA LAKES, DISEÑADOS PARA SU USO EN BIG DATA Y CIENCIA DE DATOS, COMO ELEMENTOS FACILITADORES DE LA DIGITALIZACION EN ENTORNOS EMPRESARIALES. LA ARQUITECTURA DATA LAKEHOUSE RECIENTEMENTE PROPUESTA COMBINA EL DATA LAKE CON LA ORIENTACION A NEGOCIO DEL DATA WAREHOUSE. EN ESTE PROYECTO SE DISEÑARA UNA NUEVA ARQUITECTURA DATA LAKEHOUSE, DENOMINADA CLADE, QUE ABORDE LOS SIGUIENTES RETOS: (I) EL SOPORTE DE DATOS SEMIESTRUCTURADOS Y NO ESTRUCTURADOS; (II) EL SOPORTE DIRECTO DE ANALITICA DE NEGOCIO A TRAVES DE INFORMES SQL, VISUALIZACION, MACHINE LEARNING (ML) Y CIENCIA DE DATOS; Y (III) EL MAXIMO APROVECHAMIENTO DE LOS SERVICIOS EN LA NUBE POR SU ENFOQUE EN LAS NECESIDADES DEL NEGOCIO, REDUCIENDO EL TIEMPO DE LLEGADA AL MERCADO, ASI COMO SU EFICIENCIA Y ESCALABILIDAD SIN COMPROMETER SU RENDIMIENTO. LA ADOPCION DE CLADE IMPULSARA LA DIGITALIZACION DE PYMES Y ADMINISTRACIONES PUBLICAS AL MEJORAR LA CAPACIDAD, EL RENDIMIENTO Y LA CONFIABILIDAD DE LA EXPLOTACION DE DATOS, AL MISMO TIEMPO QUE REDUCIRA TANTO EL COSTE TOTAL DE LA SOLUCION COMO LAS INVERSIONES INICIALES. ASIMISMO, PROPORCIONARA UNA ALTERNATIVA ABIERTA FRENTE A LA DEPENDENCIA DE PROVEEDORES EXISTENTE EN PLATAFORMAS DE GESTION DE DATOS COMO SERVICIO (DATA-AS-A-SERVICE O DAAS), ENTRE LAS QUE DESTACAN LOS PRODUCTOS COMERCIALES DATABRICKS Y SNOWFLAKE.EL EQUIPO DEL PROYECTO ESTA CONSTITUIDO POR 11 MIEMBROS DEL GRUPO DE ARQUITECTURA DE COMPUTADORES DE LA UNIVERSIDADE DA CORUÑA (10 DE ELLOS DOCTORES), CON UNA AMPLIA EXPERIENCIA CONTRASTADA EN EL AMBITO DEL PROCESAMIENTO BIG DATA, LA COMPUTACION EN LA NUBE Y EL HPC. EL PROYECTO ESTA PLANIFICADO PARA SU EJECUCION EN 2 AÑOS, SIENDO CUATRO LOS OBJETIVOS PROPUESTOS:1. EL ANALISIS DEL ESTADO DEL ARTE EN ARQUITECTURAS DAAS, CON ESPECIAL ATENCION A LAS ARQUITECTURAS DATA LAKEHOUSE.2. EL DISEÑO, IMPLEMENTACION Y DESPLIEGUE DE CLADE SOBRE UN PROVEEDOR DE NUBE PUBLICA. EL DISEÑO INCORPORARA: (I) EL SOPORTE EFECTIVO DE DATOS USANDO FORMATOS ABIERTOS, (II) ML DISTRIBUIDO Y PRECONFIGURADO, Y (III) MEJORAS DE RENDIMIENTO Y ESCALABILIDAD. EL DESARROLLO DE CLADE SE BASARA EN SERVICIOS DE LA NUBE, ADEMAS DE HACER USO DEL PROCESAMIENTO EN MEMORIA DE SPARK Y DE CONECTORES DE DATOS AMPLIAMENTE DIFUNDIDOS.3. EL DESARROLLO DE UN CONJUNTO DE BENCHMARKS PARA DATA LAKEHOUSES, SIMILAR A TPC-DS, REFERENCIA EN DAAS. DISPONER DE UN CONJUNTO DE BENCHMARKS ESPECIFICO PARA DATA LAKEHOUSES, UNA CARENCIA ACTUAL, ES CLAVE PARA EVALUAR TANTO CLADE COMO ARQUITECTURAS LAKEHOUSE ALTERNATIVAS.4. EVALUACION DE LA ARQUITECTURA PROPUESTA DE DATA LAKEHOUSE. SE EVALUARAN COMPARATIVAMENTE CLADE Y SUS ALTERNATIVAS, CON EL OBJETIVO DE CARACTERIZAR SU USABILIDAD Y RENDIMIENTO. ASIMISMO, SE DESPLEGARA UN CASO DE USO PRACTICO, EN EL AMBITO DE UN SECTOR TRACTOR QUE COMBINE DIGITALIZACION Y SOSTENIBILIDAD.CLADE SE DIRIGE A ORGANIZACIONES CON EXPERIENCIA LIMITADA EN GESTION DE DATOS Y SERVICIOS EN LA NUBE, DOTANDOLES DE LA ARQUITECTURA DE BIG DATA MAS AVANZADA, EL DATA LAKEHOUSE. PARA INCREMENTAR EL IMPACTO DEL PROYECTO LAS COLABORACIONES OBJETIVO SERAN AQUELLAS EN TORNO A LA DIGITALIZACION DE LA CADENA DE VALOR EN SECTORES TRACTORES DE LA ECONOMIA, PARTICULARMENTE EN TRANSICION ECOLOGICA (POR EJEMPLO, REDUCIENDO EL CONSUMO DE RECURSOS). FINALMENTE, EL PROYECTO INCLUYE: (I) UN PLAN DE DIFUSION, (II) UN PLAN DE EVALUACION Y MITIGACION DE RIESGOS, (III) UN PLAN DE GESTION DE DATOS, Y (IV) UNA ESTRATEGIA DE TRANSFERENCIA DE TECNOLOGIA. ATA LAKEHOUSE\TRANSICION DIGITAL\PLATAFORMA DE GESTION DE DATOS\ARQUITECTURA BIG DATA\DATO COMO SERVICIO (DAAS)\ARQUITECTURA CLOUD\DATA WAREHOUSE\LAGO DE DATOS

Conecta tu I+D

Entra hoy

Financiación

Empresas

CTIs/Universidades

Proyectos

Investigadores