Engenheiro de Dados SR
SysMap Solutions · São Paulo, São Paulo, Brazil
Apply & track with Apply EdgeEstamos em busca de um(a) Engenheiro(a) de Dados Sênior para atuar na construção e evolução da plataforma de dados da organização. Procuramos um profissional com sólida experiência em ecossistema Microsoft Azure, capaz de desenvolver pipelines escaláveis, garantir a qualidade dos dados e apoiar a criação de soluções analíticas de alta performance para suportar a tomada de decisão do negócio.Responsabilidades:
- Desenvolver, manter e otimizar pipelines ETL/ELT utilizando Azure Synapse Analytics, Azure Data Factory e Azure Data Lake Storage Gen2;
- Realizar integrações com APIs, bancos de dados e diferentes fontes de informação;
- Desenvolver soluções utilizando SQL, Python e PySpark;
- Implementar modelagem de dados, carga incremental, particionamento e otimização de performance;
- Construir e evoluir camadas analíticas seguindo arquiteturas Bronze, Silver e Gold;
- Desenvolver modelos dimensionais, SCDs e componentes reutilizáveis para consumo analítico;
- Aplicar boas práticas de DataOps e Engenharia de Software utilizando Git, Azure DevOps e pipelines CI/CD;
- Garantir estabilidade, monitoramento, qualidade e segurança dos ambientes produtivos;
- Atuar em troubleshooting, otimização de custos e sustentação de soluções críticas;
- Trabalhar em conjunto com Data Analysts e áreas de negócio na definição de soluções escaláveis;
- Contribuir para a evolução da arquitetura, governança e melhores práticas da plataforma de dados.Requisitos:
- Experiência sólida como Engenheiro(a) de Dados em ambientes corporativos de grande porte;
- Conhecimento avançado em SQL;
- Conhecimento avançado em Python e/ou PySpark;
- Experiência com Azure Synapse Analytics;
- Experiência com Azure Data Factory (ADF);
- Experiência com Azure Data Lake Storage Gen2 (ADLS Gen2);
- Conhecimento em modelagem de dados, Data Lake, Data Warehouse e modelagem dimensional;
- Experiência com ETL/ELT, cargas incrementais e otimização de performance;
- Conhecimento em arquiteturas Bronze, Silver e Gold;
- Experiência com Git, Azure DevOps e práticas de CI/CD;
- Vivência com monitoramento, troubleshooting, qualidade e segurança de dados;
- Capacidade de atuar com autonomia e interação próxima com áreas de negócio.Diferenciais:
- Conhecimento em Google Analytics;
- Experiência com Google BigQuery;
- Vivência com integração de dados entre Google Cloud e Microsoft Azure;
- Pós-graduação em Engenharia de Dados, Big Data, Cloud Computing, Data Science ou áreas correlatas;
- Certificações Microsoft Azure voltadas para Data Engineering, Data Analytics ou Arquitetura de Dados.Formação:
- Ensino superior completo em Ciência da Computação, Engenharia da Computação, Sistemas de Informação, Análise e Desenvolvimento de Sistemas, Engenharia de Software, Estatística, Matemática, Ciência de Dados ou áreas correlatas.📩 Interessados(as), candidatem-se ou compartilhem esta oportunidade com sua rede!