Cómo Clip transformó sus operaciones de datos crediticios: de Snowflake a Databricks

Resumen ejecutivo

Para apoyar la rápida expansión de sus servicios de préstamos en asociación con Prestaclip, Clip se enfrentó al desafío de gestionar datos crediticios cada vez más complejos y fragmentados. Sin una plataforma centralizada, los equipos de finanzas, riesgos y contabilidad se vieron limitados por los flujos de trabajo manuales y la visibilidad limitada de los parámetros clave, como los cronogramas de pagos y el rendimiento de los préstamos.

En respuesta, Mutt Data se asoció con Clip para realizar la transición de Snowflake a Databricks, diseñando e implementando una plataforma de datos moderna y escalable basada en la arquitectura Databricks Medallion. Al estructurar los datos en capas Bronce, Plata y Oro, la solución proporcionó información limpia, unificada y lista para la empresa. La plataforma incluía modelos de datos básicos para los atributos de los préstamos, los cronogramas de amortización y los cobros, así como la ingesta y el procesamiento automatizados de datos mediante los procesos de Airflow y Databricks.

Este esfuerzo de modernización redujo significativamente las cargas de trabajo manuales y permitió el monitoreo en tiempo real del rendimiento y los cobros de los préstamos. Gracias a una mayor granularidad y automatización de los datos, Clip ahora está equipada para escalar sus operaciones de préstamo de manera eficiente, lo que permite a los equipos tomar decisiones más rápidas y basadas en los datos.

Acerca de la empresa

Clip es el principal ecosistema integral financiero de su país. Nació con la misión de ayudar a las empresas a tener una plataforma para pagos digitales. Proporciona servicios de pago móvil y permite a las empresas y los consumidores realizar transacciones convirtiendo sus dispositivos móviles en un terminal de tarjetas. Clip atiende a clientes de todo el mundo. Promueven la inclusión financiera de las personas y las empresas a través de soluciones innovadoras y confiables desde el punto de vista tecnológico, que hacen que sea fácil, accesible y transparente.

Introducción

Clip lanzó recientemente un servicio de préstamos. Esto generó la necesidad de una plataforma de datos para supervisar el rendimiento de los préstamos y satisfacer las necesidades de los equipos de finanzas, riesgos y contabilidad. Los principales resultados fueron los modelos de datos diseñados para gestionar los datos relacionados con los préstamos, incluidos los atributos, los cobros y los cronogramas de amortización.

El desafío

Clip crecía. Al intentar ampliar su cartera de productos financieros para incluir préstamos, se enfrentaron a importantes desafíos a la hora de gestionar y utilizar eficazmente los datos crediticios.

Sin una plataforma de datos estructurada y centralizada, los datos de la empresa estaban dispersos en varias fuentes, lo que hacía que la supervisión del rendimiento de los préstamos llevara mucho tiempo, y que la información procesable tardara en llegar a los equipos internos.

Antes de asociarse con Mutt Data, Clip gestionaba sus datos de préstamos con Snowflake. Si bien Snowflake satisfacía las necesidades básicas de generación de informes, carecía de la flexibilidad, las capacidades de organización y el procesamiento en tiempo real necesarios para respaldar una operación de préstamos en rápida expansión. A medida que aumentaba el volumen de préstamos, este entorno fragmentado provocó retrasos en los ciclos de presentación de informes, conciliaciones manuales y una visibilidad limitada de la información crítica para los equipos de finanzas, riesgos y contabilidad.

Para hacer frente a estos desafíos, Clip acordó una fase de descubrimiento con Mutt Data , durante el cual se llevó a cabo una evaluación exhaustiva de las fuentes de datos y la infraestructura para evaluar la calidad de los datos y la coherencia histórica. Este análisis exhaustivo reveló las principales limitaciones de la arquitectura de Snowflake, especialmente en lo que respecta a la orquestación y la escalabilidad, así como un aumento notable de los costos operativos.

Este análisis reveló la necesidad de hacer la transición a una arquitectura de lago de datos dentro de un Ladrillos de datos medio ambiente.

Basándose en estos hallazgos, Clip tomó la decisión estratégica de migrar a Databricks. La migración requirió una planificación cuidadosa, una evaluación de las herramientas y una estrecha colaboración entre ambos equipos. Durante un período de cuatro meses, Mutt Data guió la implementación y se aseguró de que la nueva plataforma fuera sólida, escalable y estuviera alineada con la estrategia de datos a largo plazo de Clip.

Los beneficios de los entornos fluviales de Databrick incluyen: - Una plataforma única que integra datos, análisis e IA. - Gestión de datos fiable, segura y de alto rendimiento. - Intercambio de datos abierto y seguro sin duplicación. - Soporte sólido para el almacenamiento de datos. - Gobernanza centralizada de todos los recursos de datos, análisis e IA en tiempo real. - Desarrollo simplificado de análisis, IA y aplicaciones de aprendizaje automático e inteligencia artificial en tiempo real.

Este esfuerzo requirió orientación estratégica para la planificación y la implementación, incluida la evaluación de las herramientas y los componentes óptimos para cada segmento de infraestructura. La migración duró aproximadamente cuatro meses e implicó una estrecha colaboración entre ambos equipos.

Se describió un plan de acción, que incluía la creación de una serie de tablas para capturar la información necesaria para la presentación de informes y el análisis. Esto fue diseñado en colaboración por miembros de los equipos de Mutt Data y Clip. Mutt Data se decidió por un Arquitectura Medallion. Una arquitectura en forma de medallón es un enfoque estructurado para organizar los datos en un lago, diseñado para mejorar la calidad y la estructura de los datos paso a paso. Los datos fluyen a través de tres capas (bronce, plata y oro), cada una de las cuales aporta refinamiento y valor. Este método, también denominado arquitectura de «saltos múltiples», garantiza que los datos se preparen progresivamente para el análisis y el uso empresarial.

La solución

Mutt Data guió a Clip en una migración estratégica de Snowflake a Databricks, estableciendo una plataforma de datos moderna. Esta transición permitió la ingesta, la transformación y el modelado de datos en tiempo real a escala, consolidando estas capacidades en una plataforma única y unificada.

Aprovechar herramientas como Flujo de aire y Ladrillos de datos para la automatización integral en las capas Bronce, Plata y Oro, la nueva arquitectura unificó conjuntos de datos previamente fragmentados. También supuso un nuevo nivel de granularidad y automatización de los datos en las finanzas, el riesgo y las operaciones, lo que permitió a los equipos disponer de información más rápida y procesable

Mutt Data diseñó una plataforma de datos de vanguardia utilizando la arquitectura Medallion de Databricks, que organiza los datos en tres capas estructuradas: la plataforma organiza los datos de préstamos en tres capas: Bronze (datos sin procesar), Silver (datos refinados) y Gold (información preparada para la empresa). Mutt Data también creó modelos clave para recopilar los detalles esenciales de los préstamos, los cronogramas de pagos reales y esperados y los registros de cobro.

Modelos clave construidos

1. Atributos del préstamo: captura todos los detalles relevantes de la creación y el enriquecimiento de préstamos para su análisis.
2. Programa de amortización original: unifica los préstamos en un sistema común de automatización para garantizar un seguimiento constante de los pagos. Esto también permite a Clip monitorear el éxito de Prestaclip entre los clientes.
3. Cobros: rastrea los historiales de pagos, incluidos los reembolsos y las devoluciones, con planes de conciliación bancaria.
4. Programa de amortización operativa: proporciona un historial financiero detallado de la amortización del préstamo.

También se automatizó todo el proceso de procesamiento de datos. Esta automatización garantizó a los equipos de Clip información fiable, lo que les permitió supervisar el rendimiento de los préstamos y su alineación con los objetivos estratégicos. Además, la solución redujo considerablemente el tiempo necesario para que varios equipos completaran estas tareas, abordando de manera eficaz los desafíos que supone ampliar los análisis a medida que la empresa se expandía.

Evitar la recursividad

Un desafío notable fue calcular las métricas necesarias para el modelo de cronograma de amortización operativa, ya que las fórmulas implicaban interdependencias (recursividad). Este enfoque tiene como objetivo optimizar las demandas de recursos y los tiempos de procesamiento, garantizando que el sistema funcione de manera eficiente y cumpla con las expectativas de rendimiento. Al utilizar las funciones de ventana de SQL y reformular ciertas métricas, el equipo logró con éxito los resultados deseados.

Testimonio

Impacto

A pesar de ser un servicio nuevo, las ofertas de préstamos de Clip experimentaron un crecimiento rápido y exponencial, y llegaron a un punto en el que el seguimiento era inviable sin una plataforma de datos que proporcionara análisis en tiempo real y automatización de procesos.

Desde la perspectiva del proceso, el equipo de contabilidad calculaba previamente todo de forma manual, lo que llevaba días o semanas. Con esta solución, esos números ahora están disponibles en menos de un día.

Uno de los avances más importantes fue la refactorización de sus procesos de cobro para maximizar las ganancias. Además, la automatización de procesos que antes eran manuales se tradujo en un ahorro de tiempo sustancial. La tecnología Modern Data Stack proporcionó a Clip un nivel de granularidad en la información sobre préstamos que antes era inalcanzable.

Resultados

Finalizando

Tras la exitosa migración a Databricks, el equipo financiero de Clip colaboró con Mutt Data para desarrollar una plataforma de datos que aprovechara la arquitectura multicapa de Databricks. Esta plataforma organiza los datos crediticios en tres capas: Bronze (datos brutos), Silver (datos refinados) y Gold (información preparada para la empresa), lo que dota a Clip y Prestaclip de las herramientas necesarias para supervisar la rentabilidad de los préstamos, optimizar los cobros y respaldar el crecimiento estratégico del mercado crediticio.

Esta solución no solo centralizó los datos de Clip, sino que también les permitió supervisar el rendimiento de los préstamos, optimizar los cobros y respaldar el crecimiento estratégico del mercado crediticio.

¿Está listo para aprovechar todo el potencial de su empresa? Programa una llama con nosotros para descubrir cómo nuestra experiencia puede mejorar sus capacidades.