Tech Stack
AzureFluxNoSQLPySparkSQL
About the role
- Concevoir, développer et maintenir des pipelines de données à grande échelle utilisant PySpark
- Mettre en place des flux de données avec Azure Data Factory en intégrant SQL, Data Lakes, APIs, etc.
- Assurer l'intégration de données provenant de systèmes variés dans Azure
- Optimiser les performances des traitements de données (SQL, PySpark)
- Collaborer avec équipes métier, data analysts et data scientists pour comprendre les besoins
- Participer à la définition de l’architecture des données et de la stratégie de gouvernance
- Mettre en place et assurer le monitoring des jobs de traitement de données (gestion des erreurs, performances)
- Documenter les solutions et suivre les bonnes pratiques de développement
- Participer à l'amélioration continue des processus et outils existants
Requirements
- Bac +5 en informatique, data science, ou domaine équivalent
- Minimum de 3 ans d’expérience sur un poste similaire
- Expérience confirmée en développement sur PySpark
- Expérience significative avec Azure Data Factory
- Solide expérience en bases de données relationnelles et non relationnelles (SQL, NoSQL)
- Connaissance des outils Azure (Azure Data Lake, Azure SQL Database, Azure Blob Storage)
- Connaissance d’Azure Databricks et Azure Synapse Analytics
- Expérience avec Git, Azure DevOps ou outils de gestion de versions
- Connaissance des concepts Big Data et optimisation des performances dans des environnements distribués
- Autonomie, rigueur, sens du détail, bonnes capacités de communication
- Un cadre de travail flexible
- Des opportunités d’évolution et de formation continue pour développer vos compétences
- Possibilité de travailler à distance
- Avantages attractifs
Applicant Tracking System Keywords
Tip: use these terms in your resume and cover letter to boost ATS matches.
Hard skills
PySparkSQLData LakesAPIsAzure Data FactoryNoSQLAzure DatabricksAzure Synapse AnalyticsBig Dataoptimisation des performances
Soft skills
autonomierigueursens du détailbonnes capacités de communication
Certifications
Bac +5 en informatiqueBac +5 en data science
