Engenheiro de Dados Sênior
Vivara · São Paulo, Brazil
Apply & track with Apply EdgeResponsabilidades e atribuições: Projetar, desenvolver e sustentar pipelines, integrações e transformações de dados utilizando SQL, Python e PySpark;Criar e otimizar modelos e estruturas de dados para Analytics, BI e demais produtos de dados;Definir soluções técnicas e boas práticas de integração, modelagem e arquitetura de dados;Integrar diferentes fontes, como APIs, bancos de dados, arquivos, mensageria e conectores;Atuar na otimização de performance, processamento e consumo de recursos;Garantir qualidade, segurança, observabilidade, rastreabilidade e documentação das soluções;Avaliar e otimizar regras, transformações e estruturas utilizadas nas soluções analíticas;Resolver problemas técnicos complexos, apoiar tecnicamente o time e contribuir para iniciativas de democratização de dados e Inteligência Artificial.Requisitos e qualificações: Sólida experiência em engenharia de dados, com domínio de SQL, Python, PySpark e modelagem de dados;Experiência com Databricks, Apache Spark e arquiteturas Data Lake/Lakehouse;Vivência com pipelines ETL/ELT, orquestração e integrações via APIs, bancos de dados, arquivos e mensageria;Conhecimento do ecossistema Microsoft Azure aplicado a dados, incluindo soluções de integração, orquestração, streaming e monitoramento (Azure Data Factory, Event Hubs, Kafka ou equivalentes);Conhecimento em governança, qualidade, segurança, catálogo e linhagem de dados, utilizando soluções como Unity Catalog, Microsoft Purview ou equivalentes;Experiência com otimização de performance e processamento distribuído de dados;Experiência com CI/CD, versionamento (Git) e práticas DevOps aplicadas a dados;Proatividade e foco em estabilidade e melhoria contínua;Comunicação clara, objetiva e eficaz, com capacidade de traduzir desafios técnicos em soluções compreensíveis para as áreas de negócios;Excelentes habilidades analíticas, com foco em resolução de problemas, eficiência e qualidade;Formação em Engenharia, Ciência da Computação, Sistemas de Informação, Análise e Desenvolvimento de Sistemas, Estatística ou áreas correlatas.Vivência com Microsoft Fabric e seus principais recursos de Dados e Analytics será um diferencial.