Creai

Senior Data Engineer

Creai

full-time

Posted on:

Location Type: Remote

Location: Mexico

Visit company website

Explore more

✨ AI Apply
Apply

Job Level

Senior

Tech Stack

ApacheAWSAzureCloudETLHadoopKafkaPythonSparkSQL

About the role

  • Diseñar y construir código optimizado y escalable para pipelines de datos complejos y distribuidos (batch y streaming), aplicando patrones de diseño de datos avanzados y promoviendo las mejores prácticas.
  • Diseñar e implementar estrategias de prueba robustas para pipelines y conjuntos de datos (incluyendo pruebas de calidad de datos), y guiar a otros en la escritura de pruebas de alta calidad.
  • Depurar problemas complejos en sistemas de datos distribuidos, identificando rápidamente la causa raíz de fallos de datos o pipelines.
  • Diseñar y optimizar sistemas de monitoreo y logging para garantizar la observabilidad completa de la plataforma de datos.
  • Diseñar modelos de datos complejos para data warehouses, data lakes o lake houses, y definir estrategias de modelado de datos.
  • Administrar y optimizar bases de datos y sistemas de almacenamiento de datos, y participar en la selección e implementación de tecnologías de infraestructura de datos (ej. Hadoop, Snowflake, Databricks, MS Fabric).
  • Implementar medidas de seguridad robustas en el desarrollo de pipelines de datos y comprender y contribuir a los conceptos de gobernanza de datos.
  • Proponer soluciones de datos que optimizan el valor y la eficiencia económica (ej. costo de almacenamiento, rendimiento de consultas, optimización de recursos).
  • Mentorizar activamente a Data Engineers junior y medianos en el equipo, compartiendo conocimientos avanzados y fomentando el crecimiento profesional.
  • Comunicar ideas técnicas complejas de datos de manera clara a audiencias diversas (técnicas y no técnicas), y dar retroalimentación constructiva y accionable sobre enfoques y soluciones de ingeniería de datos.

Requirements

  • Dominio experto de Python y SQL.
  • Experiencia profunda en el diseño, desarrollo y optimización de pipelines ETL/ELT complejos utilizando frameworks y herramientas de procesamiento de datos distribuidos (ej. Apache Spark, Apache Kafka, Flink).
  • Capacidad probada para diseñar modelos de datos complejos para data warehouses, data lakes y lake houses, y experiencia en el diseño de arquitecturas de datos escalables y resilientes.
  • Experiencia avanzada con plataformas en la nube (AWS, Google Cloud, Azure) y sus servicios de datos para Big Data y analítica avanzada.
  • Fuerte entendimiento y experiencia en la implementación de rutinas de calidad de datos y conceptos de gobernanza de datos.
  • Capacidad experta para resolver problemas complejos relacionados con el rendimiento de pipelines, la calidad de los datos, el volumen y la complejidad de las fuentes de datos.
  • Experiencia comprobada en liderar proyectos técnicos de datos, guiar equipos y mentorizar a otros Data Engineers.
  • Excelentes habilidades de comunicación verbal y escrita, con la capacidad de presentar resultados técnicos complejos y discusiones de diseño de datos a audiencias técnicas y no técnicas.
  • Capacidad para comunicarse de manera efectiva en ambos idiomas.
Benefits
  • Trabajo 100% remoto con horario alineado a CST.
  • PTO ilimitado: Confiamos en que gestionarás tu tiempo de manera efectiva.
  • Presupuesto anual para desarrollo: Acceso a cursos, certificaciones y conferencias.
  • Presupuesto para equipamiento: Configura tu espacio de trabajo remoto ideal.
  • Beneficio de salud: Acceso a cobertura médica privada o subsidios para seguro médico.
  • Oportunidades de crecimiento: Plan de carrera y mentoría con expertos en IA y tecnología.
  • Ambiente de startup dinámico y flexible: Autonomía para tomar decisiones y proponer ideas, con un enfoque en resultados en lugar de horas trabajadas.
  • Balance vida-trabajo: Cultura que prioriza la flexibilidad y el bienestar, permitiéndote gestionar tu tiempo sin sacrificar tu vida personal.
Applicant Tracking System Keywords

Tip: use these terms in your resume and cover letter to boost ATS matches.

Hard Skills & Tools
PythonSQLETLELTApache SparkApache KafkaFlinkdata modelingdata qualitydata governance
Soft Skills
mentoringproblem solvingcommunicationteam leadershiptechnical presentationfeedbackprofessional growth