Engenheiro de Dados – Azure, Databricks
GFT Technologies
full-time
Posted on:
Location Type: Hybrid
Location: Barueri • 🇧🇷 Brazil
Visit company websiteJob Level
Mid-LevelSenior
Tech Stack
AzurePySparkPythonSparkVault
About the role
- Projetar e desenvolver pipelines escaláveis e robustos de ingestão e transformação de dados em Azure e Databricks;
- Construir soluções baseadas em arquitetura lakehouse com organização em camadas (bronze, silver, gold);
- Garantir performance e escalabilidade de pipelines através de boas práticas de particionamento, caching e paralelismo;
- Automatizar processos com foco em reusabilidade, monitoramento e controle de qualidade;
- Atuar como referência técnica para o time de engenharia de dados, promovendo boas práticas e padronizações;
Requirements
- Experiência com bases de dados transacionais e análise de requisitos;
- Conhecimento em Data Governance;
- Domínio de Azure Data Lake Gen2, Azure Data Factory, Key Vault e integração entre serviços Azure;
- Proficiência em Spark (PySpark) e Python para desenvolvimento de pipelines e transformação de dados;
- Experiência com Git e CI/CD aplicados a pipelines de dados;
- Inglês avançado;
Benefits
- Cartão multi-benefícios – você escolhe como e onde utilizar.
- Bolsas de Estudos para cursos de Graduação, Pós, MBA e Idiomas.
- Programas de incentivo à Certificações.
- Horário de trabalho flexível.
- Salários competitivos.
- Avaliação de desempenho anual com plano de carreira estruturado.
- Possibilidade de carreira internacional.
- Wellhub e TotalPass.
- Previdência Privada.
- Auxílio-Creche.
- Assistência Médica.
- Assistência Odontológica.
- Seguro de Vida.
Applicant Tracking System Keywords
Tip: use these terms in your resume and cover letter to boost ATS matches.
Hard skills
AzureDatabricksData GovernanceSparkPySparkPythonGitCI/CDData Lake Gen2Data Factory
Soft skills
referência técnicaboas práticaspadronizaçõesmonitoramentocontrole de qualidadereusabilidade