ElectraLink potencia el mercado de la energía del Reino Unido con la integración de datos y el análisis empresarial de un extremo a otro de la plataforma Pentaho de Hitachi Vantara

Desafío: Volúmenes de datos enormes y un proceso engorroso costoso y muy demandante de mano de obra para extraer y manipular conjuntos de datos para los clientes.

Solución: Plataforma única de integración de datos y proceso de gestión de datos eficiente para optimizar la extracción y estandarizar los conjuntos de datos que se les proporcionan a los clientes.

Resultados

  • Cientos de millones de flujos de datos se extraen y transforman automáticamente en información significativa.
  • Un equipo acotado ahora se centra en el desarrollo de nuevos servicios de datos para mejorar los procesos de suministro de energía.
  • Se pierde menos tiempo con la manipulación manual de datos que antes resultaba engorrosa.

Desafío: la extracción y manipulación manual de volúmenes de datos masivos

En el corazón de la industria energética del Reino Unido, se encuentra ElectraLink y su servicio de transferencia de datos patentado, una red de mensajería y comunicaciones a la que están conectadas más de 250 empresas de gas y electricidad. Cada vez que un cliente cambia de proveedor de energía o se instala un nuevo medidor inteligente, los datos se transfieren a través de esta red. Maneja más de 130 GB de datos por mes.

Y está a punto de manejar mucho más. Cada mes se instalan casi 300 000 medidores inteligentes como parte de un programa que exige el gobierno. Para el año 2020, el Reino Unido tendrá más de 28 millones de medidores inteligentes. Este programa masivo está incrementando en un 25 %, de un año a otro, los datos que circulan a través de la red del servicio de transferencia de datos de ElectraLink.

ElectraLink ha acumulado una cantidad valiosísima de información sobre el mercado de la energía. Pero debe cumplir con restricciones de acceso y uso de datos. Por ejemplo, los proveedores de energía tienen pleno acceso a sus propios datos, pero solo pueden acceder a los datos de otro proveedor desde una vista agregada y anónima.

ElectraLink presta estos servicios de datos como una oferta comercial. Aunque los datos energéticos están estructurados y bien definidos, son complejos y los volúmenes son enormes.

La empresa dependía de un proceso engorroso, costoso y que requería muchísima mano de obra para realizar consultas ad hoc que tendían a modificarse para cada aplicación. Necesitaba un proceso de gestión de datos simplificado para agilizar la extracción de datos y estandarizar los conjuntos de datos que se proporciona a los clientes.

Para extraer cientos de millones de flujos de datos y transformarlos en información significativa que nuestros clientes pudieran comprar y utilizar para mejorar los procesos de suministro de energía, hay que trabajar mucho. Con Pentaho es más fácil.
– Dan Hopkinson, jefe de Servicios de Red y EMI, ElectraLink

Solución: datos de muchas fuentes integrados en una plataforma única

ElectraLink recurrió a Pentaho Data Integration y Pentaho Business Analytics de Hitachi Vantara para integrar datos de muchas fuentes en una sola plataforma y ponerlos a disposición de los usuarios para llevar a cabo análisis casi en tiempo real.

La arquitectura de TI de la empresa incluye Amazon Web Services (AWS) como su plataforma de servicios seguros en la nube, un almacén de datos Vertica, Egnyte para su portal FTP y Pentaho Data Integration para la automatización y la orquestación de los procesos a fin de crear los conjuntos de datos. ElectraLink implementó Pentaho Data Integration a finales de 2016, pero la empresa tiene planes de explotar más las funcionalidades y los paneles de la plataforma como parte de su modelo de entrega de productos.

ElectraLink carga los conjuntos de datos a un portal FTP seguro, donde los clientes pueden acceder a ellos. Toda la red del servicio de transferencia de datos se actualiza cada noche. "Aceleramos los entornos, ejecutamos las consultas, empaquetamos los datos y los devolvemos a los servidores FTP para que los clientes tengan acceso a ellos", explica Dan Hopkinson, jefe de servicios de red y EMI de ElectraLink. "Mantenemos nuestros entornos en funcionamiento durante el mínimo tiempo posible para reducir costos. El control de costos, la automatización, la optimización y los procesos eficientes son importantísimos para nosotros".

ElectraLink también se basa en Pentaho Data Integration para crear un glosario empresarial de procesos y flujos de datos tanto para los datos de electricidad como de gas, el primer catálogo de dos combustibles para que aproveche la industria energética. Las funcionalidades de automatización de Pentaho son fundamentales para mantener actualizado el glosario empresarial. "Lo que me interesa es vincular el catálogo a Pentaho para no tener que cambiar el código cada vez que hay un cambio en el proceso", dice Hopkinson.

Resultado: servicios de datos nuevos e innovadores en el mercado

Pentaho Data Integration se utiliza para gestionar todas las alertas y la automatización, lo que da tiempo al pequeño equipo de cuatro personas de Hopkinson para concentrarse en el desarrollo de nuevos servicios de datos y la mejora de los conjuntos de datos existentes para venderlos a los clientes mediante suscripciones o por volumen. "Tenemos una gama de productos, de fuentes de datos muy sencillas, en los que solo proporcionamos datos a pedido, hasta productos analíticos mucho más complejos", explica Hopkinson.

Por ejemplo, uno de los productos que ha desarrollado ElectraLink es un conjunto de datos que expone toda la generación de energía en la red de distribución del Reino Unido. Son todos los pequeños parques eólicos, parques solares, generadores pequeños conectados directamente a la red de distribución, en lugar de a la red de transmisión. ElectraLink ha sido capaz de identificar los generadores integrados basándose en los datos de consumo que fluyen a través de la red mediante concordancia de patrones. "ElectraLink es la única entidad que tiene esta visión integral de la generación de energía en toda Gran Bretaña. Es un conjunto de datos complejo e increíblemente valioso", dice Hopkinson.

La siguiente etapa del proceso de ElectraLink consiste en aprovechar las funcionalidades de automatización de Pentaho para proporcionar acceso de interfaz de programación de aplicaciones (API) a los datos. Gracias a esto, otras entidades podrán acceder a los datos, como las comparaciones de precios, en tiempo real. Optimizará el proceso de cambio de proveedor y permitirá que más clientes cambien con más facilidad de proveedor de energía.

¡Está en el lugar indicado!

Hitachi Data Systems, Pentaho y Hitachi Insight Group son ahora una sola empresa: Hitachi Vantara.

Obtenga más soluciones basadas en datos e innovación por parte del socio en el que puede confiar.