Senior Data Engineer

Senior Data Engineer
Empresa:

Softtek


Detalhes da Vaga

.Responsabilidade: Apoiar na análise e levantamento de requisitos para as soluções envolvendo esteira de dados (Data Engineering); Apoio na tomadade decisão e desenho de arquitetura das soluções de dados considerando atendimento aos requisitos de negócios, requisitos técnicos, custos e segurança; Participar das cerimônias (review, retrospectiva, planning, refinamentos), estimando esforço, ajudando a discutir sobre os projetos, levantando dúvidas, impactos, sugestões, etcDocumentação, desenvolvimentos das soluções de dados (Data Engineering), criação de testes unitários, realização nos testes/homologação, implantação, estabilização, monitoramento e manutenção das soluções seja nos ambientes onprem (Cloudera) ou Cloud (Azure); Skill Técnico: Conhecimento em Microsoft Azure: Familiaridade com os principais serviços da Microsoft Azure, incluindo o Azure Data Factory, VMs(Maquinas virtuais), Azure StorageAccounts, Azure Databricks, AKS(Azure Kubernetes),CosmosDB entre outros.Processamento Batch e Streaming de Dados: Conhecimento em processamento de dados em lotes e em streaming, com a capacidade de projetar, implementar e manter pipelines de processamento de dados.Habilidade em Databricks: Experiência em trabalhar com Apache Spark em Databricks, incluindo a criação e otimização de pipelines de dados.Experiência em Pyspark e Python: Fortes habilidades de programação em Pyspark e Python para desenvolver, depurar e manter códigos de transformação de dados.Vivência em Ambientes On-Premises (Cloudera): Desejavel Experiência anterior com a plataforma Cloudera ou outras soluções on-premises para big data, incluindo Hadoop, HBase e Hive. Diferencial:Conhecimento em DevOps: Familiaridade com o uso do Jenkins para integração eentrega contínua (CI/CD), além de automação de tarefas de implantação e gerenciamento de pipelines.Git: Proficiência em Git para controle de versão de código-fonte e colaboração eficaz em equipes de desenvolvimento.Métodos Ágeis: Compreensão dos princípios e práticas de métodos ágeis, como Kanban e Scrum, para colaboração eficaz e gerenciamento de projetos.Conhecimento Opcional em Riscos de Crédito: Familiaridade com riscos de crédito é desejável, mas opcional, e pode ser uma vantagem adicional para a posição, dependendo das necessidades da equipe e da empresa.Orquestração (por exemplo, Control-M ou outros): Conhecimento em ferramentas de orquestração de processos, o que é importante para o agendamento e controle de fluxos de trabalho.Certificações opcionais: Certificações AZ-900 (Microsoft Azure Fundamentals) e/ou DP-900 (Microsoft Azure Data Fundamentals) são preferenciais e demonstram um conhecimento sólido da plataforma Azure e em dados.Modelo de contratação: CLT + BeneficiosModelo Hibrido 3x presencial em Interlagos/SP Zona SulFundada em 1982, a Softtek é uma fornecedora global de soluções de TI orientadas a processos com 30 escritórios na América do Norte, América Latina, Europa e Ásia


Fonte: Jobtome_Ppc

Função de trabalho:

Requisitos

Senior Data Engineer
Empresa:

Softtek


Desenvolvedor Oracle Ebs

Desenvolvedor Oracle EBSNível Sênior - Sorocaba/SP Sólida experiência com desenvolvimento em implementações e configurações do Oracle EBS,Conhecimento em est...


Desde Hrsoul Hunting Relationship - São Paulo

Publicado 22 days ago

Auxiliar Técnico

DescriçãoO técnico em eletrônica atuará na área de manutenção. A área de manutenção o profissional tem a possibilidade de trabalhar internamente, hospitais, ...


Desde Centerlab - São Paulo

Publicado 22 days ago

Técnico De Informática

DescriçãoInstalar, configurar e parametrizar equipamentos e sistemasRealizar manutenções preventivas e corretivas em equipamentos, realizando troca de peças,...


Desde People It Tecnologia - São Paulo

Publicado 22 days ago

Desenvolvedor Oracle Ebs

DescriçãoDesenvolvedor Oracle EBSNível Sênior - Sorocaba/SPSólida experiência com desenvolvimento em implementações e configurações do Oracle EBS;Conheciment...


Desde Hrsoul - São Paulo

Publicado 22 days ago

Built at: 2024-06-14T07:14:45.933Z