Responsabilidades e atribuições
*O que esperamos que você realize:*
– *Desenvolvimento de Pipelines:* Criar e manter pipelines de dados escaláveis e eficientes na Azure Cloud. – *Processamento de Dados:* Trabalhar com Databricks para processamento distribuído e análise de dados. – *Automação em Linux:* Administrar e automatizar rotinas em Linux, com foco em performance e segurança. – *Colaboração Interdisciplinar:* Colaborar com equipes de desenvolvimento e infraestrutura para garantir boas práticas de DataOps.
Requisitos e qualificações
O que precisamos que você tenha de conhecimento:
*Requisitos essenciais:*
– *Experiência em Azure Cloud:* Sólida experiência prática com Azure Cloud, incluindo ferramentas como Data Factory, Synapse, Storage, Key Vault, entre outros. – *Domínio em Databricks:* Proficiência em Databricks, incluindo Spark, notebooks e Delta Lake. – *Conhecimento em Linux:* Sólido conhecimento em Linux, incluindo shell script, administração básica e troubleshooting.
*Diferenciais:*
– *Familiaridade com Kubernetes:* Experiência com Kubernetes para orquestração de containers. – *CI/CD para Projetos de Dados:* Vivência com CI/CD aplicado a projetos de dados (GitHub Actions, Azure DevOps, etc.). – *Interesse em Microsoft Fabric:* Conhecimento ou interesse em Microsoft Fabric.
Regime de trabalho: Remoto Horário de trabalho: Seg a Sex – 09h as 18h
Link para candidatura: Página da Vaga | Engenheiro de Dados Sênior – DataOps <stefanini.gupy.io/jobs/10082812>