AWS Data Engineer | Senior (Remote)

Responsabilidades e atribuições

• Desenvolver e manter pipelines de dados ETL/ELT em ambientes de alta volumetria e complexidade, utilizando Apache Spark (Scala e Python) e AWS;
• Atuar na evolução e expansão da Plataforma Analítica, com foco em arquiteturas e tecnologias de Big Data;
• Levantar, analisar e traduzir requisitos de negócio em soluções técnicas de dados;
• Elaborar e manter modelos de dados analíticos, métricas e indicadores;
• Integrar múltiplas fontes de dados, incluindo streams (Apache Kafka / MSK) e bancos SQL e NoSQL;
• Desenvolver, operar e evoluir pipelines de dados em ambientes produtivos;
• Garantir escalabilidade, performance, confiabilidade, qualidade e governança das informações;
• Preparar, tratar e disponibilizar dados para consumo analítico e operacional;
• Automatizar a criação, configuração e monitoramento de pipelines e ambientes de dados;
• Atuar na gestão de SLA...