O cliente estava criando uma nova entidade e teve que criar seu Analytics IS do zero, dentro de um prazo apertado. A entidade precisava permitir que seus clientes visualizassem serviços e tarifas, se inscrevessem on-line e obtivessem uma resposta automática às suas solicitações de crédito. Sem o Data Lake, o Datawarehouse, o pipeline e o modelo de pontuação, nada poderia funcionar. O desafio: projetar, construir e industrializar toda a cadeia de dados, desde a ingestão de dados do provedor até a pontuação em tempo real em um cronograma compatível com o lançamento da entidade.
Projeto e industrialização da análise de SI
Um importante agente bancário estava lançando uma nova entidade e precisava criar todo o seu bloco de dados e análises do zero: infraestrutura, pipelines, APIs, modelos de preços e pontuação de crédito automatizada. Projetamos e industrializamos o sistema, que agora está em produção em escala global.
Problemática
Solution
O que construímos
Implantamos uma equipe de 1 arquiteto de dados, 2 engenheiros de dados e 1 desenvolvedor full-stack para projetar e industrializar todo o sistema de análise de dados na AWS.
Etapa 1 — Arquitetura de dados. Defina a arquitetura de destino e crie o Data Lake e o Datawarehouse na AWS. Escolha de componentes técnicos, implementação do ambiente completo e regras de governança associadas.
Etapa 2 — Pipelines de ingestão e transformação. Desenvolvimento e industrialização de pipelines de ingestão em streaming e em lote. Integração dos dados do fornecedor, pré-limpeza e transformação para alimentar continuamente os casos de uso da empresa.
Etapa 3 — Catálogo de dados e APIs. Desenvolvimento de um catálogo de dados para documentar e tornar os dados detectáveis e exposição de todos os dados por meio de APIs para atender aplicativos e modelos front-end.
Etapa 4 — Modelos de preços e pontuação de crédito. Produção de modelos de preços que permitem que os clientes visualizem suas tarifas em tempo real e desenvolvimento do sistema de pontuação automatizado para conceder ou recusar solicitações de crédito instantaneamente.
Projetos na mesma categoria
