Ambiente de analytics preparado para o crescimento e evolução constante do uso de dados.
O modelo de negócios da ClickBus é disruptivo por natureza, pela combinação de diferentes ofertas propicia uma experiência única para seus usuários. Líder de mercado em compras online de passagens de ônibus. Já foram vendidas mais de 6 milhões de passagens para mais de 4.600 destinos diferentes e mais de 100 mil rotas.
Nosso desafio
- Redefinimos a arquitetura que suporta o ambiente de analytics, garantindo a continuidade dos processos do negócio vigentes, ao mesmo tempo que antecipa os requisitos de um ambiente onde o consumo e análise de dados será amplamente disseminada, em especial pelo crescente uso de ciência de dados.
- Realizamos a revisão da arquitetura de analytics de modo a garantir a materialização de requisitos essenciais, como escalabilidade, disponibilidade, performance e otimização dos investimentos em infraestrutura.
Como solucionamos
- Aplicamos frameworks de engenharia e ciência de dados que permitiram o mapeamento estruturado de problemas, requisitos, expectativas, desejos e sugestões de melhorias aplicáveis ao ambiente de analytics. Com isso foi possível definir a melhor arquitetura alvo e sugerir um Roadmap de implantação. Iniciamos o Assessement do projeto em Dezembro de 2019, com o desenvolvimento do Data Lake em Junho de 2020 e implementação do projeto final em Dezembro de 2020.
Tecnologias AWS utilizadas
- S3: como principal ambiente de armazenamento de dados durante todo o ciclo de vida dos dados;
- DMS: utilizado para ingestão de dados via a replicação dos bancos relacionais dos sistemas transacionais de origem;
- Lambda e Glue: utilizados para a ingestão e processamento de dados estruturados e semi-estruturados;
- Glue Data Catalog: responsável pela governança e catálogo de dados;
- Athena: utilizado para o consumo dos dados.
Nossos diferenciais
- Ambiente de analytics com modelo de processamento nativo em nuvem;
- Otimização do uso da infraestrutura por conta da abordagem serverless;
- Amadurecimento dos processos de governança e administração de dados;
- Padronização e automatização dos processos de ingestão de dados;
- Padronização do stack de analytics;
- Democratização do acesso aos dados;
- Redução dos ciclos de desenvolvimento de ciência de dados.
“A Compasso UOL possui uma enorme expertise em desenvolvimento, DevOps e redução de custos em nuvem, tudo isso unido a cultura ágil e aos squads, que fazem toda a diferença.” Anderson Borges – CTO da ClickBus