
Big Data Engineer
Stefanini LATAM
full-time
Posted on:
Location Type: Remote
Location: Mexico
Visit company websiteExplore more
About the role
- Como parte del equipo de Data Engineering, serás responsable del diseño, desarrollo y operación de sistemas de datos a gran escala que operan a nivel de petabytes.
- Te enfocarás en infraestructura de big data distribuido y machine learning.
- Trabajarás de forma cercana con ingenieros, product managers, desarrolladores de BI, arquitectos y stakeholders de negocio para ofrecer soluciones técnicas escalables y robustas.
Requirements
- Mínimo 6 a 8 años de experiencia en desarrollo de Big Data.
- Demuestra experiencia actualizada en Data Engineering y en el desarrollo de pipelines de datos complejos.
- Experiencia en modelos ágiles.
- Diseñar, desarrollar, implementar y optimizar sistemas y pipelines distribuidos a gran escala que procesan grandes volúmenes de datos, con enfoque en escalabilidad, baja latencia y tolerancia a fallos.
- Experiencia necesaria con Java y Python para escribir pipelines de datos y capas de procesamiento.
- Experiencia en Airflow y GitHub.
- Inglés conversacional (necesario).
- Experiencia en la creación de jobs MapReduce.
- Experiencia en la escritura de consultas complejas y altamente optimizadas sobre grandes conjuntos de datos.
- Alta competencia en SQL (necesario).
- Experiencia con tecnologías en la nube (GCP, Azure).
- Apoyo en la implementación y operación de pipelines de datos y soluciones analíticas.
- Experiencia en optimización de rendimiento de sistemas que trabajan con grandes volúmenes de datos.
- Experiencia en servicios de datos mediante API REST (consumo de datos).
- Experiencia en entornos de Retail, Finanzas, Servicios Financieros o Fintech es un gran plus.
- Experiencia práctica con herramientas ETL, como Dataiku, para preparación, transformación de datos y orquestación de pipelines.
Benefits
- 📊 Check your resume score for this job Improve your chances of getting an interview by checking your resume score before you apply. Check Resume Score
Applicant Tracking System Keywords
Tip: use these terms in your resume and cover letter to boost ATS matches.
Hard Skills & Tools
Big DataData Engineeringpipelines de datosJavaPythonAirflowGitHubSQLMapReduceETL
Soft Skills
trabajo en equipocomunicacióncolaboraciónsoluciones técnicasescalabilidadtolerancia a fallosoptimización de rendimiento