CASO DE ÉXITO #BigData #ML #Cloud

Landing zone y entorno de datos para analítica y aplicaciones de Negocio

Imagina Energía, la primera compañía 100% solar del mercado energético español, nace con el objetivo de acercar de manera sencilla e innovadora la energía solar a todos los hogares y empresas de España ya sea con soluciones de autoconsumo o con energía de la red a medida.

Imagina Energía une la energía renovable con una apuesta clara por la digitalización, con la vocación de ser la empresa energética con mejor experiencia de cliente del mercado con un aporte tecnológico innovador, gracias a tecnologías como inteligencia artificial, Big Data y Cloud.

Una nueva energía sostenible más cercana y adaptada a las necesidades de cada persona que cuenta con el apoyo del Hanwha Energy, uno de los mayores inversores solares del mundo y líder internacional en innovación y sostenibilidad. Hanwha Energy es un proveedor de soluciones energéticas integrales que opera plantas de energía en Corea y por todo el mundo, centrado en la sostenibilidad. Su extenso portafolio, incluye plantas de cogeneración, plantas de energía solar, así como la planta de energía de celdas de combustible de hidrógeno más grande del mundo, ubicada en el Complejo Industrial Daesan de Corea. Hanwha Energy busca convertirse en desarrollador global de energía solar, con entidades activas en España, Estados Unidos, Japón, Australia y Vietnam. Desde ahora cuenta con un gaseoducto solar global de 12 GW en desarrollo. Hanwha Energy también actúa como productor de energía independiente, ofrece servicios de operación, mantenimiento y está desarrollando nuevos sistemas de almacenamiento de energía y soluciones inteligentes de gestión de energía.

El sector energético afronta 3 retos en la actualidad: Descarbonización, descentralización y digitalización.

La descarbonización, que abre el mercado a nuevas compañías que basan su modelo de negocio en energías renovables, la descentralización de la generación de energía pivotando hacia modelos distribuidos de autoconsumo, y la digitalización que afecta a toda la cadena de valor.

Desde la mejora en las redes de comunicaciones en la generación y distribución hasta la comercialización a través de la captación y fidelización de clientes digitales. En este escenario de competencia creciente, la capacidad de acelerar el time-to-market y escalar rápido se vuelven diferenciales para conseguir cuota de mercado. 

Imagina Energía inicia sus operaciones en España con una clara estrategia digital Public Cloud First y Data-Driven. Su plan de negocio se basa en crecer consolidando su estructura tecnológica y acelerando constantemente sus tiempos de comercialización y ajuste de inversión tecnológica acorde a las necesidades de negocio. Para conseguirlo, Imagina Energía apuesta por crear una base tecanológica sólida que le permita escalar rápidamente y de forma rentable. 

Por otra parte, el sector energético está altamente regulado por lo que  la privacidad y la seguridad son las principales prioridades de la empresa. Es imprescindible aplicar principios sólidos de seguridad, gobernanza y mejores prácticas.

Solución en Amazon Web Services

La solución debe cubrir un doble objetivo. En primer lugar, disponer de una landing zone que permita el gobierno de la infraestructura cloud, una organización de cuentas sencilla en las que se desplegarán los diferentes aplicativos de negocio y facilitar la gestión de roles, permisos e identidades de los usuarios que tendrán acceso a los recursos de la nube. En segundo lugar, el aprovisionamiento de un entorno centralizado de datos o data lake que sea el origen de los datos de los aplicativos de negocio y, a su vez, destino de los nuevos datos generados por la operativa de negocio, con los que se puedan generar nuevos casos de uso de analítica descriptiva o predictiva.

Para ello, Keepler ha desplegado el servicio AWS Control Tower que implementa el patrón landing zone de forma inmediata y altamente escalable. Este servicio propone formas de centralizar la gestión de las cuentas en forma de roles delegados y el cumplimiento de políticas propias o propuestas por AWS en todas las cuentas derivadas. Estos controles se activan de forma preventiva o informativa con guardarrailes que aplicarían a todas las cuentas.

Para la creación del data lake, Keepler se ha apoyado en el servicio AWS Lake Formation como acelerador del despliegue. Este servicio está orientado a centralizar el diseño de data lakes en AWS. Se basa en tecnologías serverless habituales como Amazon S3, AWS Glue y AWS DMS, ofreciendo una capa adicional de permisos de grano fino sobre AWS IAM entre los roles de uso de servicios y los datos.

Una vez finalizado el proyecto de despliegue, Keepler comenzó a operar la infraestructura del cliente a través de su servicio de DataOps.

Los principales servicios de Amazon Web Services utilizados son:

  • AWS Control Tower para configurar y controlar un entorno de AWS de múltiples cuentas de forma segura.
  • AWS Organizations para crear de manera programática nuevas cuentas de AWS y asignar recursos, aplicar políticas a cuentas o grupos para el control.
  • AWS Single Sign-On para administrar de manera centralizada el acceso con inicio de sesión único (SSO) a distintas aplicaciones y cuentas de AWS.
  • AWS IAM para administrar de manera segura el acceso a los recursos y servicios de AWS
  • AWS Lake Formation para facilitar la configuración de un lago de datos seguro en cuestión de días. 
  • Amazon S3 como repositorio principal de almacenamiento.
  • AWS Glue como herramienta de ETL y Catálogo de Datos.
  • Amazon Cloudwatch para monitorizar si existe o no algún fallo en los modelos y enviar correos siempre que haya fallos.
  • Amazon Security Hub para centralizar la gestión de alertas de seguridad de alta prioridad y el resultado de servicios como GuardDuty o Inspector. Además permite medir en todo momento el grado de cumplimiento de todas las cuentas AWS con estándares de seguridad como CIS.
Beneficios
  • El principal objetivo de Imagina Energía era disponer de un entorno en la nube seguro y escalable en un corto periodo de tiempo. La solución implementada por Keepler ha permitido disponibilizar una landing zone y un data lake en un orden de magnitud de días. Esto ha sido posible gracias a los servicios utilizados para el despliegue en AWS y la experiencia de Keepler en su aplicación en otros clientes.

  • El coste de infraestructura generado durante el despliegue y posteriormente reduce el TCO de la solución en un 50% respecto a implementaciones no basadas en servicios nativos como Control Tower o Lake Formation.

  • El uso de servicios gestionados reduce la complejidad en la operación de la infraestructura, permitiendo a los equipos de operaciones dedicar sus esfuerzos a tareas que aporten mayor valor al cliente.

  • El entorno de datos creado permitirá recolectar información a corto plazo necesaria para construir casos de uso sobre los datos enfocados a analítica prescriptiva o predictiva con técnicas de Machine Learning.

Keepler es una empresa boutique de servicios profesionales tecnológicos especializada en el diseño, construcción, despliegue y operaciones de soluciones software de Big Data y Machine Learning para grandes clientes. Utiliza metodologías Agile y Devops y los servicios nativos de la nube pública para la construcción de sofisticadas aplicaciones de negocio centradas en datos e integradas con diversas fuentes en modo batch y tiempo real. Es nivel Advanced Consulting Partner y cuenta con una plantilla técnica en la que el 90% de sus profesionales están certificados en AWS. Keepler actualmente trabaja para grandes clientes en diversos mercados, como servicios financieros, industria, energía, telecomunicaciones y media.

¿Hablamos?

Si quieres saber más o que desarrollemos una propuesta para tu caso de uso concreto, contáctanos y hablamos.