RADIATUS: Infraestructura elástica para Análisis BigData en la nube

ENERGíA, INDUSTRIA 4.0, SALUD
Fecha de inicio: 01/01/2017
Fecha de finalización: 31/12/2019

Cada vez más empresas están adoptando soluciones de Big Data Analytics por tratarse de una herramienta muy eficaz para obtener conocimiento a partir de las grandes cantidades de datos que se generan y recolectan hoy en día en las mismas.

Estas soluciones se aplican a distintos ámbitos de gran interés para las empresas como mantenimiento predictivo, u optimización de la configuración de máquinas.

Durante 2019, el proyecto Radiatus 3 continua los trabajos realizados en 2017 y 2018, incluyendo nuevas tecnologías y se ampliará el abanico de servicios para Machine Learning y Deep Learning. Los objetivos del proyecto son la creación de un prototipo de arquitectura distribuida para la puesta en funcionamiento de servicios de aprendizaje automático (machine learning) y de aprendizaje profundo(Deep-Learning), así como el diseño y desarrollo de un orquestador de servicios distribuidos para el análisis de Big Data en un entorno Ecloud.

En este sentido y desde un punto de vista técnico los principales resultados del proyecto son:

  • Implementación de una solución de BigData Analytics as a service sobre Ecloud que permita el procesamiento distribuido de modelos de aprendizaje automáticos (machine learning) y/o aprendizaje profundo(DeepLearning).
  • Creación e Implementación de un orquestador de servicios de BigData Analytics sobre Ecloud.
  • Adaptación y evolución de los componentes de BigData Analytics para el análisis exploratorio y el análisis de datos en streaming para que puedan utilizar el servicio distribuido de ejecución de modelos.

 

Adopción de soluciones de Análisis BigData para las PYMEs

Actualmente existen herramientas gratuitas y de código libre para implementar estas soluciones, tanto la complejidad  de su configuración y despliegue como  la definición de los algoritmos a utilizar para los análisis, hacen que sean servicios ofrecidos por centros especializados.

En este contexto, ITI da respuesta preparando un entorno de infraestructura elástica para Análisis Big Data en la nube que facilite la configuración y despliegue de esta infraestructura.

El resultado será un ecosistema que proporcione a las empresas TIC de la Comunitat Valenciana, una infraestructura elástica, permitiendo a su vez la democratización de las soluciones de Big Data Analytics entre la PYME valenciana.

Objetivos

El objetivo general del proyecto que arrancó en 2017, ha consistido en sentar las bases de los conocimientos que facilitarán el uso de soluciones de Big Data Analytics, permitiendo a los usuarios obtener conocimiento a partir de datos generados y recolectados, sin preocuparse por la infraestructura necesaria.

Para ello, se seleccionó un escenario común de Big Data Analytics, donde se implementó el servicio asociado en la nube para una PaaS y se creó una herramienta para poder configurar y desplegar de forma rápida instancias de la solución de BDAaaS a usar en cada caso.

Durante 2018 , el proyecto Radiatus II  continua los trabajos iniciados en 2017, avanzando en la investigación, diseño y prototipado de servicios elásticos de Big Data Analytics (BDAaaS) en la nube sobre la plataforma ECloud – Platform as a Service (PaaS) para el tratamiento de datos en Tiempo Real (Streaming).

La complejidad de tratar y analizar grandes cantidades de datos recopilados a través de diferentes fuentes y adquiridos en tiempo real, el llamado Big Data Streaming Analytics, es un reto actual, especialmente en IoT y en la Industria 4.0 donde se genera un gran volumen de datos de forma constante y cuyo mayor desafío radica en la capacidad de manejar la velocidad del flujo de los datos. El proyecto Radiatus2 avanzará en proporcionar soluciones a este gran reto.

 

Actualmente en 2019 se han alcanzado algunos de los hitos del proyecto:

  • Se ha desarrollado un prototipo de servicio para la plataforma Ecloud que permite el procesamiento distribuido de modelos de aprendizaje automático.
  • Se está ultimando una primera versión del orquestador de servicios que incorpora funcionalidades básicas para el uso en modo ‘multitenant’ del mismo.
  • Se ha revisado y mejorado la arquitectura y los servicios del proyecto Radiatus para mejorar su funcionalidad, tolerancia a fallos, rendimiento, seguridad y accesibilidad. Además, se han incorporado nuevas tecnologías.

Y de aquí a final del proyecto se pretenden alcanzar el resto de objetivos y resultados planificados.

 

Este tipo de servicios Ecloud permitirán a los usuarios de empresas, especialmente de PYMEs, abstraerse de la complejidad de gestión de la infraestructura Big Data y centrarse en el análisis de datos propiamente dicho a un coste razonable.

Para ello, en la primera fase del proyecto se realizó el analisis y evaluación de las tecnologías existentes para realizar el procesamiento y adquisición de datos en Streaming, con el objetivo de definir aquellas que se puedan adaptar al modelo de servicio PaaS de Ecloud utilizado en el proyecto, considerando la escalabilidad y la eficiencia del entorno.

A continuación se realizará el diseño arquitectónico de los servicios, identificando los componentes de los mismos con el fin de optimizar el rendimiento. A partir de aquí, se comenzará el proceso de preparación y adaptación con el fin de aprovechar las características de ECloud y se procederá al desarrollo de los componentes e implementación de los servicios Big Data Analytics para el procesamiento de datos en Streaming. Finalmente, se realizará la integración y la evaluación del servicio con el objetivo de analizar la calidad de prototipo implementando. El feedback de las empresas colaboradoras ayudará también en este proceso.

Al finalizar este proyecto, se habrá creado un servicio de Big Data Streaming Analytics en el ecosistema de RADIATUS. De ese modo, se habrán sentado las bases de un ecosistema completo que proporcione a las empresas TIC de la Comunitat Valenciana, de una infraestructura elástica, permitiendo a su vez la democratización de las soluciones de Big Data Analytics entre la PYME valenciana.

ITI está trabajando un desarrollo experimental, en el que se procederá al análisis, diseño e implementación de un servicio Big Data Analytics en la nube (cloud) para procesamiento de datos adquiridos en Streaming

Entidades financiadoras

Entidad: IVACE y FEDER

Nº Expediente 2017: IMDEEA/2017/139
Financiación 2017: 170.771,32 €

Nº Expediente 2018: IMDEEA/2018/94
Financiación 2018: 200.000 €

Nº Expediente 2019: IMDEEA/2019/77
Financiación 2019: 246.070,40 €

Resultados obtenidos

Puedes descargar el folleto del proyecto aquí.

Los resultados obtenidos en el proyecto se encuentran aquí

Vídeo del proyecto aquí

Enlaces externos

Web proyecto

Noticias relacionadas

Big Data para mejorar la calidad de la red de telefonía móvil
Proyecto 

ITI junto a la empresa Arca. participan en el proyecto SILEX para la detección de anomalías en la monitorización en tiempo real de la red de acceso radio móvil.

ITI introduce el concepto de Gemelo Digital en el Summit IT Madrid
 

Hacia la Automatización en las aplicaciones empresariales

Eventos relacionados