Engenheiro de Dados Pleno

Minor Hotels Europe and Americas

Data Engineer at Capgemini, responsible for designing and maintaining scalable data pipelines using PySpark and Apache Kafka. Collaborating with data scientists and software engineers to ensure data quality.

Posted 7/21/2026full-timeBarueri • 🇧🇷 BrazilMid-LevelSeniorWebsite

Core Competencies

Role fit

Core Competencies

Use this summary to align your resume positioning with the role.

Demonstrates expertise in designing, developing, and maintaining scalable data pipelines using PySpark on Databricks, while ensuring data governance and compliance with internal and regulatory policies. Proficient in integrating and processing real-time data with Apache Kafka and optimizing data performance.

Highest-signal resume keywords

Databricks ExpertiseApache Spark (PySpark)Apache KafkaPython ProgrammingCI/CD and DevOps Practices

ATS Keywords

Tailor your resume

Applicant Tracking System Keywords

Tip: use these terms in your resume and cover letter to boost ATS matches.

Hard Skills

Data Pipeline DevelopmentData IntegrationSQL ProgrammingData ModelingQuery Optimization

Soft Skills

CollaborationQuality Assurance

Tools & Technologies

AzureAWSGCPGit

Industry Keywords

Data GovernanceData SecurityVersion ControlReal-Time Data Processing

Tech Stack

Tools & technologies

ApacheAWSAzureGoogle Cloud PlatformKafkaPySparkPythonSparkSQL

About the role

Key responsibilities & impact

Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes usando PySpark no Databricks.
Integrar e processar dados utilizando Apache Kafka.
Colaborar com cientistas de dados, analistas e engenheiros de software para garantir a qualidade e disponibilidade dos dados.
Garantir boas práticas de versionamento, testes e documentação de código.
Monitorar e otimizar o desempenho de pipelines e jobs de dados.
Atuar na governança e segurança dos dados em conformidade com políticas internas e regulatórias.

Requirements

What you’ll need

Experiência sólida com Databricks e Apache Spark (preferencialmente com PySpark).
Conhecimento avançado em Apache Kafka (produção e consumo de dados em tempo real).
Experiência com linguagens de programação como Python e SQL.
Familiaridade com ambientes de nuvem (Azure, AWS ou GCP).
Conhecimento em CI/CD, versionamento com Git e práticas DevOps aplicadas a dados.
Experiência com modelagem de dados, particionamento e otimização de queries.

Benefits

Comp & perks

Plano de carreira estruturado e trilhas personalizadas de aprendizado.
Universidade Corporativa, com acesso a Harvard, Pluralsight.
Certificações oficiais com parceiros como SAP, AWS, Microsoft, Salesforce.
Idiomas com EF Education First (Inglês, Espanhol, Francês e Alemão).
Bem-estar completo: Assistência médica e odontológica.
Totalpass e Equilibrium (saúde física e mental).
Previdência privada e seguro de vida.
Programa Family Care: licenças maternidade e paternidade estendidas, apoio à fertilidade, orientação personalizada em saúde e bem-estar.
Vale-refeição, auxílio home office, clube de benefícios e muito mais!