Tech Stack
AzureCloudGoogle Cloud PlatformMongoDBPostgresPySparkSQL
About the role
- Garantir a disponibilidade, performance e confiabilidade dos pipelines de dados em produção.
- Realizar análise e resolução de incidentes relacionados a processos de ingestão, transformação e carga de dados.
- Atuar proativamente na identificação de gargalos, falhas recorrentes e oportunidades de automação.
- Executar atividades de manutenção preventiva e corretiva em pipelines, bancos de dados e integrações.
- Colaborar com equipes de desenvolvimento e negócio para assegurar qualidade, segurança e governança dos dados.
- Elaborar e manter documentações técnicas claras sobre os processos sustentados.
- Contribuir com o monitoramento contínuo dos ambientes, implementando alertas, métricas e dashboards.
- Apoiar na evolução da arquitetura de dados, sugerindo melhorias de desempenho, custo e escalabilidade.
- Assumir responsabilidade fim a fim pelas demandas, desde a análise até a entrega.
- Buscar novas tecnologias, boas práticas e automações para aumentar a eficiência do time.
Requirements
- Experiência sólida em desenvolvimento e sustentação de pipelines de dados com Azure Data Factory.
- Domínio de PySpark para processamento de dados em larga escala.
- Experiência com bancos de dados relacionais (SQL Server, PostgreSQL, etc.) e não relacionais (CosmosDB, MongoDB, etc.).
- Conhecimento de ferramentas de versionamento de código (Git, GitHub/GitLab, Azure DevOps).
- Vivência em troubleshooting e análise de incidentes em ambientes de produção.
- Forte senso de ownership e atuação proativa.