Engenharia De Dados Gcp - Sênior

Por que fazer parte do time DBC Company?• Somos a 17ª melhor empresa para trabalhar do Brasil e a 4ª melhor empresa para trabalhar no Rio Grande do Sul, segundo o GPTW 2023;• Todos os profissionais que estão alocados em clientes e/ou projetos são acompanhados por Gestor da DBC e também por Líder de Smartsourcing;• A DBC oferece incentivo a certificações a todos os colaboradores.O que é importante saber?• Nosso time promove um ambiente seguro para todos os profissionais independente de sua etnia, crença religiosa, orientação sexual, identidade de gênero, deficiência, idade, etc.O que é necessário para participar desse processo seletivo?Bancos de dados transacional (Oracle, Sybase, SQL Server, MySQL);Bancos de dados analítico (GCP Big Query);Integração de dados/sistemas;GCP Dataflow (Apache Beam);GCP Composer (Apache Airflow);Conhecimento em Cloud GCP;Conhecimento em Spark (Databricks);Armazenamento de dados (Google Cloud Storage);Modelagem de dados; -> Modelagem de dados(Modelagem Dimensional: star schema e snowflake)Conhecimento em GIT;Conhecimento em Python;Diferenciais:Conhecimento em cloud Azure(Data Factory e Azure Synapse Analytics);Conhecimento em Java (springboot).Responsabilidades:Desenvolver componentes para ingestão e processamentos de dados em cima de plataforma em GCP;Análise e throubleshooting dos ambientes que compreendem a plataforma de dados;Desenho e implantação de novas arquiteturas para disponibilização de dados;Atuar na frente da área de dados, apoiando, direcionando e capacitando a equipe atual, para desenhar e implementar as melhores soluções;Desenvolver pipeline ingestão de dados dos sistemas origem para as camadas de entrada no data lake (raw/trusted);Desenvolver pipeline de transformação do dado para atender às necessidades de negócio;Desenvolvimento de pipelines em batch e streaming (NRT);Automatizar pipeline para execução automática de acordo com os requisitos de negócio;Criação de controles para reexecução/retomada do pipeline em casos de erro;Analisar os dados e ajudar nas propostas de solução para contribuir com as áreas solicitantes a termos um produto de Dados ainda melhor.#LI-REMOTE#L1- IP1