Engenheiro de dados
Amaggi · Cuiabá, Mato Grosso, Brazil
Apply & track with Apply EdgeAtribuições:Desenvolver e manter pipelines de ingestão, transformação e processamento de dados;Trabalhar com dados estruturados e não estruturados provenientes de APIs, arquivos e outras fontes;Construir soluções em Python/PySpark;Desenvolver e orquestrar DAGs no Apache Airflow;Implementar soluções na plataforma Databricks utilizando Delta Live Tables (DLT), Unity Catalog e Databricks Asset Bundles (DABs);Participar de revisões de código e aplicar boas práticas de versionamento, testes e documentação;Atuar com Azure DevOps, utilizando Boards, Repos/Git e Pipelines de CI/CD;Utilizar ferramentas de IA de forma responsável como apoio à produtividade e à qualidade das entregas;Interagir com áreas de negócio para compreender processos, regras e necessidades;Identificar riscos, oportunidades de melhoria e possíveis problemas antes que impactem as entregas.Requisitos Necessários:Graduação em Ciências da Computação ou Analise de Sistema;Conhecimento sólido em Python/PySpark;Conhecimento em Delta Live Tables, Unity Catalog e Databricks Asset Bundles;Domínio dos fundamentos de Git e práticas de integração e entrega contínuas;Experiência com Azure DevOps: Boards, Repos e Pipelines;Familiaridade com o uso de IA como ferramenta de produtividade no desenvolvimento.DiferenciaisExperiência com ClickHouse;Conhecimento em Kafka e Kafka Connect;Experiência com CDC utilizando Debezium.BenefíciosAssistência médicaAssistência odontológicaApoio Pass (serviço de apoio psicológico, jurídico, financeiro e social)WellHub (soluções de saúde e bem-estar)Participação nos Lucros ou ResultadosPrevidência privadaSeguro de vidaVale-alimentaçãoAuxílio CrecheLicença maternidade/paternidade estendidaKit do Conhecimento (material escolar para filhos)Plataforma de Telemedicina 24 horasUniversidade AMAGGIPrograma de Auxílio EducaçãoNossas oportunidades são abertas para todos os profissionais, sem distinção de raça, cor, gênero, idade, crença e deficiência (PCD)