Job descriptionSe você se identifica com uma empresa jovem, dinâmica e ágil. Onde a inquietude e a sede por inovação são princípios. Que tem no seu DNA a entrega com foco na qualidade e na superação das expectativas do cliente. Seu lugar é na Vertem!
Main responsibilitiesEstamos em busca de um(a) Engenheiros de Dados com experiência mínima de 5 anos em processos de Ingestão, manipulação e tratamento de dados em Data Lake.
Conhecimento de Ferramentas e Linguagens (pelo menos 3 anos de experiência): Azure Data Factory, Azure Databricks, Python, Spark, SQL, Banco de dados relacional e No-SQL; Conhecimento em AWS;
Será responsável pelo desenvolvimento de pipeline de dados para o Data Lake usando Azure Data Factory e Databricks; Desenvolver pipelines de processamento de dados do hub de eventos usando Delta live tables (Databricks); Criar processos de integração com diferentes fontes de dados (MongoDB, APIs, arquivos .json, etc...); Realizar manutenção dos processos para correção de falhas/erros; Implementação de melhorias; Atuar como parte da equipe ágil; Colaborar com outros membros da equipe, Engenheiros, PO, QA, Scrum Master, Funcional e Tech Leader para resolver os desafios existentes; Desenvolver, implantar e operar aplicações na cultura DevOps; Modelagem de Dados Relacional e Dimensional.
Requirements and skills• Conhecimentos avançado na plataforma Databricks (Delta Lake, Unity Catalog, Notebook, Python, Pyspark, SQL, DLT, JOBs, Federation, Clusters) (Mínimo 3 anos de atuação)
• Conhecimento avançado SQL\PostgreSQL\mongoDB (Mínimo 3 anos de atuação)
• Vivência om pipeline de dados Azure Datafactory e/ouAirFlow
• Vivência com integração de dados de fontes como MongoDB, APIs e arquivos .json
• Conhecimento em Power BI
• Lógica de Programação para escrever e revisar queries em banco de dados, usar parâmetros, criar variáveis Indispensável
Additional informationOque temos para te oferecer?
Flex Office (modelo híbrido de trabalho - 2 dias home office e 3 dias presenciais);Day off Aniversário;Aprendizado e capacitação contínua;Trabalho em equipe - Desenvolvimento ágil;Nosso ambiente é inspirador e disruptivo;Os benefícios que te esperam são:
Vale Refeição/Alimentação flexíveis;Assistência Médica;Assistência Odontológica;Seguro de Vida;Auxílio Creche:Para filhos até 5 anos de idade (60 meses completos);VT / Estacionamento / Fretado;Calma, tem mais:
QultureRocks:Plataforma de gestão de performance e desempenho;Kit Nascimento:Preparamos um kit para o nascimento de bebês dos colaboradores;Total Pass;Horário flexível;Auxílio educação a partir de 12 meses de empresa;Auxílio Flex Office creditados em nossa plataforma de MarketPlace;
#J-18808-Ljbffr
