BPR Hub

Data Engineer

BPR Hub

full-time

Posted on:

Origin:  • 🇧🇷 Brazil

Visit company website
✨ AI Apply
Manual Apply

Job Level

Mid-LevelSenior

Tech Stack

AirflowAWSAzureBigQueryCloudDockerETLFlashGoogle Cloud PlatformKubernetesPythonSQLTableau

About the role

  • Este papel fundamental exige habilidades técnicas sólidas, capacidade de resolver problemas complexos, e um profundo entendimento de como estruturar e gerenciar arquiteturas e fluxos de dados escaláveis e robustos.
  • Colaborar com Product Managers, Tech Managers, Data Scientists, e Business Analysts para identificar oportunidades e avaliar arquitetura e fluxos de dados existentes e futuros.
  • Implementar e gerir infra-estrutura da plataforma de dados visando performance e custos.
  • Projetar, construir e manter pipelines de ingestão, movimentação, armazenamento e processamento de dados.
  • Desenvolver integrações confiáveis e escaláveis de várias fontes para aplicações analíticas e operacionais.
  • Garantir qualidade e integridade dos dados através de modelagem e testes de qualidade.
  • Implementar práticas de segurança e governança de dados.

Requirements

  • Bacharelado (concluído) em Engenharia, Matemática, Física, Economia, Administração, Tecnologia ou outra área relacionada
  • 3 anos ou mais trabalhando com Dados
  • Experiência em gerenciamento de datalakes ou data warehouses
  • Proficiência em Python e SQL
  • Conhecimento em frameworks de modelagem de dados como dbt
  • Experiência em gestores de fluxos como Airflow, Dagster, Luigi, etc
  • Experiência com o desenvolvimento de fluxos de ETL/ELT de grandes volumes de dados
  • Experiência em cloud data warehouses como BigQuery, Databricks ou Snowflake.