Boa Vista elige Google Cloud para migrar toda su información a la nube
Acerca de Boa Vista Serviços
Boa Vista Serviços es una empresa que combina inteligencia analítica con tecnología de vanguardia para transformar datos en soluciones a los desafíos de los clientes y los consumidores.
Cuéntanos sobre tu desafío. Estamos para ayudarte.
Comunícate con nosotrosLa iniciativa representa un salto adelante en la transformación digital de la empresa, impulsando el área de análisis de datos y la creación y el refinamiento de productos.
Resultados
- Se multiplicó por nueve la cantidad de modelos de análisis creados.
- Menor tiempo para realizar grandes transferencias de datos: de hasta más de 24 horas a unos pocos minutos.
- Posibilidad de entrenar modelos entre tres y cinco veces más que con el entorno anterior.
- Automatización de más de mil horas de operación del equipo de infraestructura.
- Reducción del precio de casi todos los productos; ahora, Bluebox cuesta casi un 15% de su valor original.
Procesamiento de modelos hasta 20 veces más rápido.
Los datos son los que impulsan el trabajo de los más de 800 empleados de Boa Vista Serviços. Esta empresa, uno de los principales operadores de inteligencia analítica y agencias de informes crediticios de Brasil, posee una extensa base de datos con registros de aproximadamente 280 millones de personas físicas y jurídicas. Con base en esa valiosa información, Boa Vista Serviços desarrolla soluciones de asistencia para la actividad crediticia y protección del crédito para sus cerca de 21,000 clientes activos, que incluyen instituciones financieras, fintechs y los principales grupos empresariales y minoristas de Brasil.
Una empresa tan sólida necesita tecnología de vanguardia para satisfacer rápidamente las necesidades del mercado, ofrecer productos cada vez más relevantes a los clientes y distinguirse de la competencia. Sin embargo, la infraestructura tecnológica que tenía la empresa iba a contramano de esos objetivos. Los servidores físicos distribuidos en tres centros de datos comenzaron a presentar obstáculos para que la empresa alcanzara la velocidad y la capacidad de innovación que necesitaba.
Debido a la escalabilidad limitada para sus recursos y procesos, el equipo no podía entrenar muchos modelos de análisis al mismo tiempo ni implementar técnicas modernas de aprendizaje automático. Es más: estaban por paralizarse las ventas de uno de sus productos porque se había alcanzado la capacidad máxima de procesamiento. Todo esto afectaba directamente la capacidad de la empresa de expandirse.
Por estas razones, la compañía decidió dar un salto en la transformación digital y migrar toda su información de un entorno físico a la nube. Además, la organización de los equipos pasó de un modelo tradicional —en el que las áreas de desarrollo, arquitectura, producto, entre otras, trabajan por separado— a uno de squads. Los más de 20 squads que tiene la empresa están integrados por profesionales de diversas áreas para enfocarse con mayor agilidad en distintos aspectos y desafíos tecnológicos y empresariales.
Para poner en práctica la iniciativa, Boa Vista buscaba un proveedor de nube que tuviera afinidad tecnológica con su negocio y ofreciera soluciones más adecuadas para atender sus necesidades, especialmente en lo relacionado con la inteligencia analítica. Google Cloud fue la nube elegida para formar esa asociación y convertirla en el nuevo destino de todas las aplicaciones de la empresa.
Un data lake construido en Google Cloud
El primer frente de la migración fue el Big Data, que exigía una expansión urgente de la capacidad de procesamiento. La herramienta para procesar datos que se usaba antes junto con el centro de datos presentaba limitaciones de tamaño de recursos y gestión, por lo que algunos empleados optaban por duplicar la base y usarla de forma independiente para desarrollar su producto.
Esto generaba múltiples versiones de las bases de datos en lenguajes y tecnologías diferentes y generaba un costo adicional, ya que se almacenaban datos repetidos sin necesidad. La solución fue crear un data lake centralizado en la nube que ofreciera un procesamiento más sólido, alta escalabilidad y una mejor gestión de la información.
Con la asistencia del equipo de Google Cloud, Boa Vista logró adaptar su infraestructura de Big Data a la nube de forma moderna y eficiente. La empresa decidió no migrar el entorno tal como estaba en la herramienta anterior, sino reconstruir los procesos con las soluciones de Google Cloud. También creó un equipo enfocado en la nube, lo que ayudó a acelerar el proceso.
En tan solo cuatro meses, todo el ambiente originario de la herramienta anterior ya se ejecutaba de forma nativa en la nube de Google Cloud. Ya se migró gran parte de las bases de datos más estratégicas para la empresa y se proyecta que el 80% de las bases de datos se encuentren en el data lake hacia fines de 2021. Además, todos los productos nuevos se lanzan ya integrados a la plataforma.
Arquitectura 100% nativa de la nube
Entre las principales herramientas que conforman el data lake de Boa Vista, Cloud Storage hace de base para la malla de datos, Dataproc ejecuta los procesos masivos de transferencia de información y AI Platform es la plataforma de acceso para los científicos de datos.
Pero la herramienta que más se destaca es BigQuery, que se usa para almacenar las bases de datos estructuradas. Además de permitir una gran evolución en la gestión de la información, esta solución visibiliza los costos de consumo de cada producto y pone los datos a disposición de manera segura, ya que los productos reciben solamente los campos relevantes para su funcionamiento.
Siguiendo con la seguridad, uno de los puntos fundamentales para Boa Vista, la centralización de los procesos permitió aplicar técnicas de enmascaramiento de datos y crear bases sintéticas para reforzar la protección de la información sensible. Se utilizaron los Controles del servicio de VPC, de Google Cloud, para crear una capa antirrobo en los proyectos. Así, ni siquiera los administradores del proyecto pueden mover los datos, ya que el nivel de otorgamiento de permisos se restringe a la organización.
“La creación de este entorno nos ayudó a convertirnos en una de las primeras empresas de Brasil en obtener la certificación ISO 27701, relativa a la privacidad de los datos.”
—Luiz Coutinho, director de Arquitectura y Seguridad de Boa VistaLa arquitectura nativa de la nube redujo el tiempo para realizar grandes transferencias de datos, que pasó de más de 24 horas a unos pocos minutos. También dejó de ser necesario replicar datos en varias bases para atender distintos productos. Todos están disponibles de forma centralizada en el data lake, sin pérdida de rendimiento.
Migración de cientos de VM a la nube
Otra categoría de recursos que se migró a la nube fueron las máquinas virtuales (VM). Usando la solución Migrate to Virtual Machines, el equipo pudo trasladar cerca de 500 VM, alrededor de 7,500 procesadores, a Compute Engine en cuatro meses. Para los productos que debían reconstruirse, se optó por no migrarlos como VM, sino que se los usó directamente para las herramientas de análisis de datos de Google Cloud, como BigQuery y Dataproc.
“Teníamos VM que limitaban nuestra capacidad de ejecutar o crear modelos, o nos llevaban a crear modelos a una velocidad más baja que la actual. Al llevarlas a Google Cloud, ya sea mediante VM o a través de los productos, obtuvimos una escalabilidad muy alta”, afirma Ricardo Orlando, CTO de Boa Vista.
Todas las bases y componentes de las aplicaciones de las VM de la empresa se concibieron de forma automatizada, con módulos que se integran con las tecnologías de Google Cloud. Esa estrategia aumentó la replicabilidad, lo que facilitó la migración de productos ya existentes y la creación de nuevos. Se automatizaron más de 1,000 horas de operación del equipo de infraestructura de Boa Vista gracias al nuevo entorno, que también hizo posible generar más de 10,000 artefactos de Google Cloud mediante la automatización en 2020.
El proceso fue supervisado de cerca por el equipo de especialistas de Google Cloud. “Google Cloud viene trabajando estrechamente con nuestros ingenieros para brindar la mejor solución en la nube”, comenta Lucas Guedes, Vicepresidente Comercial de la empresa. “Eso es lo que garantiza que se atiendan todas nuestras exigencias del día a día y los problemas que encontramos en el camino para obtener la velocidad que necesitamos”.
Nuevas posibilidades para el análisis de datos
La migración a la nube tuvo un impacto directo sobre el área de análisis de datos de Boa Vista. Ahora, el equipo puede paralelizar de forma ilimitada el procesamiento de sus modelos de análisis usando técnicas complejas de aprendizaje automático, lo que aumentó la eficiencia operativa de los productos. Algunos procesamientos de modelos se ejecutan hasta 20 veces más rápido.
“Obtuvimos un poder de procesamiento enorme, lo que aumentó mucho el potencial de quienes trabajan aquí. La capacidad de rendimiento del equipo en su conjunto creció mucho con todo esto.”
—Ricardo Orlando, CTO de Boa VistaAdemás, la facilidad para acceder a los datos hizo que el equipo pudiera multiplicar por nueve la cantidad de modelos que entrega en comparación con la infraestructura anterior. Solo en 2021, ya se están creando 50 modelos nuevos, lo que en la práctica significa que se pueden desarrollar 50 productos nuevos a partir de ellos. También se puede dedicar más tiempo a los entrenamientos para que los modelos sean más avanzados y precisos, lo que mejora la calidad de los productos y la experiencia del usuario final.
“Actualmente, cada modelo está entre tres y cinco veces más entrenado que antes. No escatimamos esfuerzos para garantizar el mejor rendimiento posible. Varios clientes nos informaron que tenemos una gran ventaja respecto de la competencia en cuanto a la precisión de los productos”, comenta Luiz Coutinho, director de Arquitectura y Seguridad.
La nueva infraestructura permite aprovisionar nuevos entornos en minutos en lugar de meses, así como escalar la infraestructura según la demanda y los recursos financieros disponibles. Además, se redujo el costo de los productos migrados. Por ejemplo, Boa Vista Bluebox se reorganizó en contenedores en Google Kubernetes Engine (GKE) y empezó a usar BigQuery como base de datos. Ahora, cuesta un 15% respecto de su valor original.
Lanzamientos más ágiles al mercado
Uno de los nuevos productos lanzados después de la migración es Analytika, que comenzó a desarrollarse en 2020 y está siendo probado por un cliente. Se trata de una solución de alta complejidad, ya que replica la plataforma de modelado de Boa Vista para que los clientes puedan usarla y crear sus propios modelos y soluciones, teniendo en cuenta todas las cuestiones legales y de seguridad necesarias. “Este producto sería impensable si no estuviéramos en la nube”, afirma el CTO.
Otro lanzamiento importante fue el Índice de Vulnerabilidad, creado en marzo de 2020 y puesto a disposición al mes siguiente para ayudar a los clientes a tomar mejores decisiones durante la crisis provocada por la pandemia de Covid-19. Esto solo fue posible gracias a la capacidad de desarrollar modelos y puntuaciones más rápidamente.
“Pudimos hacer una puntuación y ponerla a disposición de los clientes para que la probaran y comenzaran a usarla en un mes. Antes, tardábamos tres meses en hacer lo mismo. Ese tiempo de lanzamiento al mercado más ágil también ayuda a nuestros clientes a acceder a productos mejores, que llegan más rápidamente al mercado.”
, Lucas Guedes, Vicepresidente Comercial de Boa VistaAdemás, para facilitar el acceso de los profesionales comerciales a la información, se crearon catálogos de datos no identificables de los productos en el data lake. Esta iniciativa les dio más practicidad y autonomía a los profesionales. Así, las áreas de tecnología y negocios obtienen más insumos para sumar esfuerzos en diversos squads y crear productos que sigan innovando, sorprendiendo y respondiendo a todas las necesidades de los clientes de Boa Vista.
Cuéntanos sobre tu desafío. Estamos para ayudarte.
Comunícate con nosotros
Acerca de Boa Vista Serviços
Boa Vista Serviços es una empresa que combina inteligencia analítica con tecnología de vanguardia para transformar datos en soluciones a los desafíos de los clientes y los consumidores.