Engenheiro de Dados – Especialista
Nuclea
full-time
Posted on:
Location Type: Hybrid
Location: São Paulo • 🇧🇷 Brazil
Visit company websiteJob Level
Mid-LevelSenior
Tech Stack
AirflowAWSETLPySparkPythonSQL
About the role
- Irá atuar com cientistas de dados, arquitetos de dados, engenheiros machine learning para criar produtos inovadores e novas tecnologias que facilitem, acelerem e permitam o desenvolvimento e implantação de soluções de Inteligência Artificial/Aprendizado de máquina com qualidade e escaláveis;
- Trabalhar em estreita colaboração com o time técnico para produzir pipelines de dados, de ponta a ponta (extração, tratamento e delivery de dados) e na evolução da arquitetura de dados e DataOps;
- Liderar o desenvolvimento em nuvem AWS e plataforma Databricks pipelines de processamento de dados de ponta a ponta para garantir que os dados estejam disponíveis para consumo no data lake e plataforma de produtos;
- Selecionar a melhor Stack tecnológica e usar as bibliotecas e serviços de nuvem adequados para cada tarefa, alinhado com arquitetura e aplicar as melhores práticas e padrões de engenharia;
- Produzir código de alta qualidade que nos permita colocar nossas soluções em produção de forma contínua;
- Desempenhar um papel ativo nas reuniões de equipe e apresentações para os times de engenharia para difundir as melhores práticas no desenvolvimento de modelos do negócio.
Requirements
- Ensino superior completo em TI ou áreas correlatas;
- Desejável pós-graduação em TI ou áreas correlatas.
- Liderar o projeto e implementação de soluções escaláveis de dados, otimizar pipelines de ETL e trabalhar com grandes volumes de dados;
- Conhecimento nas linguagens Python, PySpark e SQL;
- Experiência com desenvolvimento utilizando Databricks, AWS e Airflow;
- Forte conhecimento do fluxo de desenvolvimento de APIs e pilares de segurança envolvidos;
- Análise de dados;
- Visualização de dados;
- Vivência em ambiente de dados e experiência com arquiteturas modernas de dados (data lake, data lakehouse);
- Deployment em nuvem;
- Capacidade de aprender novas linguagens de programação e frameworks de modelagem e análise é indispensável;
- Capacidade e hábito em ler documentações técnicas de pacotes de manipulação de dados é essencial;
- Forte habilidade na elaboração e confecção de programas e códigos;
- Machine Learning – conhecimentos dos fundamentos para poder trabalhar com os cientistas de dados de forma eficiente é um diferencial.
Benefits
- Convênio Médico e Odontológico
- Vale Refeição - Caju
- Seguro de Vida
- Auxilio Home Office
- PLR
- Previdência Privada
- Auxílio Creche
- WellHub (Gympass)
Applicant Tracking System Keywords
Tip: use these terms in your resume and cover letter to boost ATS matches.
Hard skills
PythonPySparkSQLETLDataOpsMachine LearningAPIsData AnalysisData VisualizationCloud Deployment
Soft skills
LeadershipCollaborationCommunicationProblem SolvingAdaptability
Certifications
Bachelor's Degree in ITPostgraduate Degree in IT