Aplicación Serverless de Procesado de Datos en AWS

Abstract

[ES] Un comercio de patinetes eléctricos que cuenta con 10 tiendas físicas y una web para las ventas online desea migrar todos sus datos, que actualmente tiene en una infraestructura on-premise, a la nube, ya que quieren unificar los datos de todas sus tiendas para acceder a ellos desde cualquier parte y realizar informes para cada tienda con estos datos. Estos datos consisten en el stock actual, las ventas de las tiendas y las visitas web. También se utilizan tres tablas maestras con la información de cada producto, de cada empleado y de cada tienda física. Para esto, se plantea el diseño de una arquitectura serverless en AWS que permita migrar estos datos a la nube y automatizar la extracción mediante Amazon Kinesis para obtener los datos en tiempo real, el almacenamiento mediante Amazon S3 y DynamoDB, el procesamiento mediante Amazon Glue para crear predicciones de stock y ventas y la explotación de dichos datos mediante QuickSight para poder generar paneles en los que visualizar los datos. Este trabajo pretende diseñar e implementar esta arquitectura realizando, posteriormente, un análisis de coste de la solución mediante la herramienta AWS Pricing Calculator para lograr la migración con el menor coste posible.

[EN] An electric scooter retailer that has 10 physical stores and a website for online sales wants to migrate all its data, which it currently has in an on-premises infrastructure to the cloud because they want to unify the data of all its stores to access them from anywhere and make reports for each store with this data. This data consists of the current stock, store sales and web visits. Three master tables are also used with the information of each product, each employee and each physical store. For this, we propose the design of a serverless architecture in AWS to migrate this data to the cloud and automate the extraction using Amazon Kinesis to obtain the data in real time, the storage using Amazon S3 and DynamoDB, the processing using Amazon Glue to create sales predictions and the exploitation of this data using QuickSight to generate dashboards to visualize the data. This work aims to design and implement this architecture and then perform a cost analysis of the solution using the AWS Pricing Calculator tool to achieve the migration with the lowest possible cost.

[CA] Un comerç de patinets elèctrics que compta amb 10 botigues físiques i una web per a les vendes en línia desitja migrar totes les seues dades, que actualment té en una infraestructura on-premise, al núvol, ja que volen unificar les dades de totes les seues botigues per a accedir a ells des de qualsevol part i realitzar informes per a cada botiga amb aquestes dades. Aquestes dades consisteixen en l'estoc actual, les vendes de les botigues i les visites web. També s'utilitzen tres taules mestres amb la informació de cada producte, de cada empleat i de cada botiga física. Per a això, es planteja el disseny d'una arquitectura serverless en AWS que permeta migrar aquestes dades al núvol i automatitzar l'extracció mitjançant Amazon Kinesis per a obtindre les dades en temps real, l'emmagatzematge mitjançant Amazon S3 i DynamoDB, el processament mitjançant Amazon Glue per a crear prediccions de vendes i l'explotació d'aquestes dades mitjançant QuickSight per a poder generar panells en els quals visualitzar les dades. Aquest treball pretén dissenyar i implementar aquesta arquitectura realitzant, posteriorment, una anàlisi de cost de la solució mitjançant la ferramenta AWS Pricing Calculator per a aconseguir la migració amb el menor cost possible.