PayPal: A Migração de Dados que Impulsiona a IA

PayPal: A Migração de Dados que Impulsiona a IA

PayPal Unifica Dados e Abre Caminho para Inovações em IA Generativa

A era da Inteligência Artificial Generativa (Gen AI) traz oportunidades sem precedentes para empresas, exigindo uma adaptação estratégica em suas infraestruturas tecnológicas. O PayPal, gigante dos pagamentos digitais com centenas de milhões de clientes, enfrentou esse desafio de frente.

A Complexidade Gerada pelo Sucesso

Após 25 anos de crescimento e expansão de serviços, o PayPal acumulou uma infraestrutura de análise de dados complexa. Cerca de 400 petabytes de dados estavam dispersos em mais de uma dúzia de sistemas isolados, resultado de limitações de escala e aquisições de empresas como Venmo e Braintree. Essa fragmentação, ironicamente, ameaçava a próxima fase de evolução da empresa.

Para liderar a próxima onda de inovação em serviços financeiros, a modernização da base de dados tornou-se essencial. O PayPal orgulha-se de ter concluído uma das maiores migrações de dados da história, consolidando sua análise na plataforma BigQuery, o data warehouse corporativo do Google Cloud. Esse feito marca um salto significativo na criação de uma estrutura de dados robusta, crucial para as prioridades de negócio e para atender às necessidades financeiras dos clientes.

O Potencial Inexplorado dos Dados

Como pioneiro em pagamentos digitais, o PayPal processa bilhões de transações e detém décadas de insights valiosos sobre clientes e comerciantes. No entanto, essa vasta quantidade de dados não era totalmente aproveitada. Cada aquisição e novo serviço, embora agregassem valor, introduziam desafios de dados. Um pequeno empresário, por exemplo, poderia usar PayPal para vendas online e Venmo para transações locais, mas unificar a visão de seus negócios exigia processos complexos, custosos e lentos.

Essa fragmentação limitava a capacidade de oferecer experiências personalizadas e de obter insights mais profundos. Com a ascensão da Gen AI, a fragmentação digital se tornou mais do que um inconveniente técnico. A IA, com seu potencial de ROI expressivo em serviços financeiros, exigia dados unificados para criar experiências inteligentes, desde o aprimoramento da detecção de fraudes até o fornecimento de uma plataforma de comércio de ponta para comerciantes.

Sistemas Legados Encontram Ambições Modernas

A migração envolveu a consolidação de múltiplas plataformas de dados, incluindo o que se acreditava ser a maior implantação de Teradata do mundo, além de clusters Hadoop, Redshift, Snowflake e outros sistemas. A migração precisava garantir a segurança e a confiabilidade ininterruptas que os clientes esperam.

A decisão de migrar para a nuvem foi estratégica. A rápida inovação em IA ocorre na nuvem, e para alavancar o poder dos dados, o PayPal precisava estar onde essa inovação acontece. Após avaliar diversas soluções, o BigQuery foi escolhido por ser uma plataforma totalmente gerenciada, nativa da nuvem, com computação e armazenamento desacoplados e escaláveis independentemente. Suas poderosas capacidades, desempenho e a familiaridade com SQL facilitaram a adoção pela comunidade de desenvolvedores.

Crucialmente, as integrações nativas do BigQuery com IA permitem uma análise de dados eficiente e contínua.

A Jornada para Dados Unificados

A migração, auxiliada por parceiros e especialistas do Google Cloud Consulting, envolveu a transferência de mais de 300 petabytes de dados e o descomissionamento de cerca de 25% das cargas de trabalho. Tudo isso sem interrupção das operações comerciais ou impacto nos clientes. Fatores chave para o sucesso incluíram:

  • Alinhamento: Tornar a migração uma prioridade empresarial para garantir o consenso das partes interessadas.
  • Descoberta e Análise: Inventários detalhados de dados, cargas de trabalho e fluxos de dados para definir escopo, esforço e orçamento. O estabelecimento de linhagem de dados forneceu uma visão clara das dependências.
  • Estratégia: Definição de princípios fundamentais, como a escolha entre lift-and-shift ou modernização, princípios de segurança e governança, e o rastreamento de consumo.
  • Execução: Automação de tarefas, dashboards para monitoramento contínuo e integração de FinOps para visibilidade de consumo e desempenho.

Benefícios Tangíveis e Inovação Futura

A migração resultou em insights mais rápidos, com consultas até 10x mais velozes, permitindo personalização em tempo real. A base para IA foi fortalecida, com dados 16x mais frescos para treinamento de modelos, acelerando o desenvolvimento de orientação financeira personalizada e análises preditivas.

As operações foram otimizadas com a consolidação de fornecedores de infraestrutura de dados para um único provedor, eliminando a duplicação de dados. A nova plataforma de dados unificada no BigQuery serve como o motor para a próxima onda de inovação do PayPal, impulsionando experiências mais intuitivas e personalizadas em todo o ecossistema.

Fundamentos de Engenharia de Dados: Projete e Construa Sistemas de Dados Robustos
Recomendado pelo autor

Fundamentos de Engenharia de Dados: Projete e Construa Sistemas de Dados Robustos
* Link de afiliado — o preço pode variar. Ao comprar, você apoia este blog sem custo extra.

Decifrando Arquiteturas de Dados: Escolhendo entre data warehouse moderno, data fabric, data lakehouse e data mesh
Recomendado pelo autor

Decifrando Arquiteturas de Dados: Escolhendo entre data warehouse moderno, data fabric, data lakehouse e data mesh
* Link de afiliado — o preço pode variar. Ao comprar, você apoia este blog sem custo extra.

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *