MoveWORK y los retos del procesamiento masivo de datos

Con 200 millones de cálculos y 20 millones de consultas al día, MoveWORK juega en la gran liga y colabora con el número 1 del mundo AWS Amazon para abordar la nueva generación de BI que tiene su orígen en BigData e IOT. El rendimiento tiene un precio, ya que estamos hablando de cientos de miles de euros al año, pero MoveWORK no escatima en la consecución de sus objetivos, así como en la satisfacción y retención de sus clientes con una plataforma técnica excepcional”, afirma Patrick Tavaris, Presidente del Grupo.

MoveWORK, experto europeo en trazabilidad de la actividad y Business Intelligence, ofrece desde 2009 soluciones en línea que permiten a las empresas del sector multiservicios (recepcionista, mantenimiento o agente de seguridad) recoger datos directamente sobre el terreno. Su solución estrella, DataFlow, proporciona a los directivos una visión de 360 grados de la empresa que permite supervisar y mejorar continuamente su rendimiento.

Luc Bonnin, director de programas de I+D de MoveWORK, cuenta…

“Nuestros conocimientos y experiencia residen en nuestra capacidad para analizar los datos en bruto con el fin de hacerlos relevantes e inteligibles para el gestor. Estos datos son recogidos principalmente por el empleado (azafata, agente de mantenimiento o de seguridad, etc.), pero también proceden de una gran variedad de fuentes: contadores de paso, meteorología en directo, datos de los terminales de satisfacción, información sobre el tráfico de vehículos, etc. A diario, esto representa, para Europa, varios cientos de millones de datos que hay que recoger y procesar en tiempo real, lo que requiere servidores y soluciones fiables. Todo esto lo encontramos en Amazon Web Services (AWS).”

Problemática

  • Servidores que admiten la variación del número de llamadas y de los datos intercambiados
  • Recoger y analizar datos continuamente, 24h/24 y 7d/77

.

  • Más de 20.000.000 de conexiones diarias a la base de datos

Cuando la fiabilidad está en el centro del servicio ofrecido

“Teníamos confianza en nuestros productos, pero no totalmente en nuestros proveedores. Ahora, teniendo en cuenta nuestra actividad, nuestras necesidades y la calidad del servicio que queremos ofrecer a nuestros clientes, es esencial contar con soluciones y proveedores fiables las 24 horas del día”, explica Luc Bonnin. Detectamos las ausencias y las anomalías al minuto. Si un servidor deja de funcionar y perdemos 2 minutos de tiempo, puede ser muy grave. Por ejemplo, tenemos que poder saber si un quirófano se ha limpiado o no, porque si el responsable no tiene la información rápidamente porque un servidor se ha caído, puede tener consecuencias dramáticas para la salud de los pacientes.”

Así que en busca del proveedor perfecto, MoveWORK ha trabajado con varios socios desde su creación. “Para avanzar, tuvimos que “ensuciarnos las manos” en la parte de hardware (PaaS), ya que teníamos servidores semimutualizados, dice Luc Bonnin. Tuvimos problemas relacionados con el tiempo de disponibilidad, la plataforma, la red troncal o el proveedor que no eran 100% fiables.”

El segundo problema de MoveWORK fue su desarrollo. “Pensamos en nuestro programa de I+D al mismo tiempo que en la creación de la empresa, que en nuestro caso tiene que ver con los datos, el big data, la minería de datos y la inteligencia artificial. Para crecer, avanzar e innovar, necesitábamos recopilar muchos más datos y más variados, y necesitábamos una plataforma PaaS súper robusta y fiable.”

Asistencia a medida, desde la migración

Para hacer frente a estos dos problemas, MoveWORK migró a AWS en agosto de 2015. “Cuando llamamos a la puerta de AWS, no esperábamos un soporte con un nivel de calidad tan alto: éramos un “pequeño”, comparado con otros clientes como Spotify o Netflix, por ejemplo. ¡Pero lo tenemos! Por supuesto, nos formaron en los servicios de AWS, pero recibimos la ayuda, la orientación y el asesoramiento necesarios”, analiza Luc Bonnin.

MoveWORK migró unos cincuenta servidores y su base de datos central en unas veinte horas. Esto se consiguió sin perder ni un solo dato, de entre varios cientos de miles de millones de piezas de información estructurada, y con solo apagar los servidores durante unos quince minutos. “La migración ha ido perfectamente. Para cada pregunta, cada duda, teníamos una respuesta. En más de 5 años de historial de datos, ¡no teníamos derecho al más mínimo error!”

Enfócate en tu negocio: el análisis de datos

“Estábamos muy preocupados por el almacenamiento de datos, la columna vertebral de cualquier empresa de TI. Esta fue la principal razón que nos motivó a cambiar a AWS. Nos pasamos a Amazon RDScon el motor MySQL y cogimos el mayor servidor disponible en la zona de Irlanda, en multi A-Z para que las copias de seguridad se gestionaran automáticamente. Desde que nos mudamos a AWS, la base de datos no se ha vuelto a caer, nunca hemos tenido una interrupción. “

Poder descargar la gestión de los servidores también ha liberado a MoveWORK para pasar al “paquete” Amazon EC2. “Nuestros socios externos recuperan o intercambian datos a través de un servicio web de MoveWORK. Durante el día se realizan una media de 2.000.000 de llamadas y, en la época de la migración, llegamos a tener picos de 10.000.000 a 20.000.000 de llamadas en unas pocas horas de la noche”, recuerda Luc Bonnin. Gracias a las tecnologías de AWS y Elastic Load Balancing (ELB), el número de instancias Amazon EC2 evoluciona automáticamente en función del tráfico, las cargas, la CPU, la RAM… De 2-3 instancias, pasamos a 5, 6 o incluso 10 si es necesario. Nunca perdemos velocidad ni potencia y podemos procesar una gran cantidad de datos. Pagamos por estos servidores en base al pago por uso, lo que nos ha permitido reducir automáticamente la factura en un 30%. Como no dedicamos tiempo a la configuración, la instalación, etc., hemos podido reducir nuestros costes. “Y con clientes en más de 60 países de todo el mundo, la cobertura global era imprescindible. “De todos modos, no podíamos tener un solo servidor, por muy potente que fuera, instalado en una parte del mundo. “

Seguir con su política de innovación

“Gracias a AWS, hemos llevado nuestras ideas al siguiente nivel. Hemos multiplicado por diez la cantidad de datos recogidos y analizados, es decir, la intensidad de lo que se pide a las máquinas. Al mismo tiempo, hemos aumentado la velocidad de todo lo que podemos calcular en un 25%. Sin la arquitectura en la nube de AWS que nos permite recopilar y analizar datos, DataFlow nunca habría pasado del laboratorio de I+D al desarrollo real”. Ahora perseguiremos nuestras ambiciones e impulsaremos nuestras innovaciones, utilizando soluciones de AWS como Amazon Aurora o Amazon EMR… “