Big Data Analytics Lab

Este proyecto se realiza con una multinacional con sede en Barcelona con el objetivo de poner en marcha una plataforma experimental de Big Data basada en herramientas Open Source para facilitar y agilizar los procesos de apoyo al análisis y procesamiento de datos de cara a mejorar sus procesos de negocio.

El proyecto se focaliza en mejorar un caso de uso muy concreto, que sirve como punto de partida para definir e implementar una arquitectura de referencia.

En la definición de la arquitectura de referencia es donde se concretan los diferentes componentes tecnológicos. Estos componentes tecnológicos son herramientas de Big Data que hay que escoger cuidadosamente en función de las estructuras de datos y de las consultas que prevemos que se harán.

El proyecto se inicia con el estudio de los datos origen, que nos permite hacer una elección inicial de las herramientas Big Data que nos serán más útiles. Una vez elegidas se valoran las diferentes herramientas, entre las que se incluyen unos benchmarkings, para determinar la rapidez de cada solución en el caso elegido.

Posteriormente, se crea una ontología de los datos para que los analistas de datos de la empresa, que necesitan matrices de datos para trabajar, puedan elegir las variables, ver las características, su distribución, … y posteriormente aplicar las reglas de limpieza, de discretización y/o de transformación (Reglas tipo Map-Reduce) adecuados.

inLab FIB ha constituido un equipo técnico de apoyo a los procesos analíticos y tecnológicos mencionados, formado por expertos en Big Data y minería de datos, que formarán al personal técnico de la compañía para garantizar la continuidad del servicio más allá de la duración del proyecto.