DISEÑO, IMPLEMENTACIÓN Y DESARROLLO DE UNA ARQUITECTURA BIG DATA PARA EL ANÁLISIS DE DATOS MEDIOAMBIENTALES DE LA CIUDAD INTELIGENTE DE SANTANDER

Abstract

[ES] El trabajo se basará en el uso de tecnologías BIG DATA para la adquisición, limpieza, procesamiento y almacenamiento de datos medioambientales conseguidos a través de ¿La ciudad inteligente de Santander¿ que genera datos a tiempo real gracias a una extensa red de sensores implementada con el objetivo de medir parámetros como temperatura, nivel de intensidad sonora, humedad relativa... Este trabajo comenzará con el disenño de una arquitectura y finalizará con la visualización de los datos a través de un dashboard que generará gráficos actualizados en tiempo real que puedan ser utilizados en diferentes análisis. Las herramientas que en principio se usarán son: Kafka, Spark, ELK (Elastic- search, Logstash, Kibana), HDFS y Snowflake.

[EN] The work will be based on the use of BIG DATA technologies for the acquisition, cleaning, processing and storage of environmental data obtained through ¿The smart city of Santander¿ that generates data in real time thanks to an extensive network of sensors implemented with the objective of measuring parameters such as temperature, sound intensity level, relative humidity ... This work will begin with the design of an architecture and will end with the visualization of the data through a dashboard that will generate updated graphics in real time that can be used in different analyzes. The tools that will be used in principle are: Kafka, Spark, ELK (Elastic-search, Logstash, Kibana), HDFS and Snowflake.