Vaga de Data Engineering - Senior (Azure, DataBrics, Pyspark)

Descrição da vaga Estamos em busca de alguém como você, que deseja iniciar uma nova jornada na área de desenvolvimento de software para impactar pessoas, clientes e sociedade. Nós, da Solutis, temos um desafio apaixonante, com o melhor ecossistema de uma Agile Company. Estamos com a posição de Data Engineering - Senior (Azure, DataBrics, Pyspark) que envolve criatividade, proatividade, desenvolvimento ágil e que permite compartilhamento constante de conhecimentos. Somos um mundo plural, que promove um ambiente descontraído de verdade, flexível e focado no desenvolvimento humano e profissional para que você possa exercer a sua singularidade. Então, se você entende que este é o caminho em direção aos seus sonhos, movido por projetos desafiadores, uma carreira bem desenvolvida e o propósito de impactar uns aos outros, todos os dias: venha fazer parte deste vasto mundo Solutis. Responsabilidades e atribuições Como será seu dia a dia: (Atividades que vai realizar) Apoiar na análise e levantamento de requisitos para as soluções envolvendo esteira de dados (Data Engineering ); Apoiar tomada de decisão e desenho de arquitetura das soluções considerando os requisitos de negócios, técnicos, custos e segurança; Participar das cerimônias (review, retrospectiva, planning, refinamentos), estimando esforço, ajudando a discutir sobre os projetos, levantando dúvidas, impactos, sugestões, etc.; Documentar, Desenvolver soluções de dados (Data Engineering), criação de testes unitários, realização nos testes/homologação, implantação, estabilização, monitoramento e manutenção das soluções seja nos ambientes On-Premises(Cloudera) ou Cloud (Azure); Requisitos e qualificações Pra mandar bem nessa oportunidade você precisa manjar das tecnologias: (Conhecimentos técnicos obrigatórios) Conhecimento em Microsoft Azure: Familiaridade com os principais serviços da Microsoft Azure, incluindo o Azure Data Factory, VMs, Azure StorageAccounts, Azure Databricks, AKS(Azure Kubernetes),cCosmosDB entre outros; Processamento Batch e Streaming de Dados: Conhecimento em processamento de dados em lotes e em streaming, com a capacidade de projetar, implementar e manter pipelines de processamento de dados; Conhecimento em Databricks: Experiência em trabalhar com Apache Spark em Databricks, incluindo a criação e otimização de pipelines de dados; Experiência em Pyspark e Python: Fortes habilidades Pyspark e Python para desenvolver, depurar e manter códigos de transformação de dados; Vai ser bom se você também tiver: (Conhecimentos técnicos desejáveis, que serão um diferencial) Vivência em Ambientes On-Premises (Cloudera): Desejavel Experiência anterior com a plataforma Cloudera ou outras soluções on-premises para big data, incluindo Hadoop, HBase e Hive. Conhecimento em DevOps: Familiaridade com o uso do Jenkins para integração e entrega contínua (CI/CD), além de automação de tarefas de implantação e gerenciamento de pipelines. Git: Proficiência em Git para controle de versão de código-fonte e colaboração eficaz em equipes de desenvolvimento. Conhecimento Opcional em Riscos de Crédito: Familiaridade com riscos de crédito é desejável, mas opcional, e pode ser uma vantagem adicional para a posição, dependendo das necessidades da equipe e da empresa. Orquestração (por exemplo, Control-M ou outros): Conhecimento em ferramentas de orquestração de processos, o que é importante para o agendamento e controle de fluxos de trabalho. Certificações opcionais: Certificações AZ-900 (Microsoft Azure Fundamentals) e/ou DP-900 (Microsoft Azure Data Fundamentals) são preferenciais e demonstram um conhecimento sólido da plataforma Azure e em dados. O que não abrimos mão: (Soft Skills) Mindset focado em construir soluções criativas; Profissional SR com experiência (3 anos ou mais) ou no mínimo com experiência condizente ao nível requerido; Bom relacionamento com pares e parceiros. Informações adicionais Para esta posição oferecemos: Salário CLT Full; Vale Refeição ou Alimentação (Alelo); Vale Transporte (sempre que houver o deslocamento); Auxílio Home Office (proporcional aos dias em que atuará nesta modalidade); Assistência Médica Sulamérica; Assistência Odontológica Sulamérica; Seguro de Vida; Parcerias (Curso de idiomas, ensino, livraria, restaurante, entre outras); Gympass; Allya; Day Off; Premiação por indicações; Inside Out (Ocorre todas as quartas-feiras. Evento da galera voltado para troca de conhecimento); Oportunidade de crescimento profissional. Etapas do processo A Solutis é Digital! Somos apaixonados por tecnologia e esse valor está presente em nossas ações e proposta de trabalho. Ambiente descontraído e criativo, horário flexível, possibilidade de trabalho home office, eventos e programas internos com games... Isso faz parte do nosso dia-a-dia. Engajamento, busca intensa por conhecimento, empatia e criatividade são a nossa receita para cultivar e colher, sempre, o melhor resultado tecnológico. Essa é a Solutis, flexível, acolhedora, inquieta, amante da tecnologia e de tudo que ela nos proporciona de mais incrível. Venha fazer parte do nosso time! Fortes habilidades Pyspark e Python para desenvolver, depurar e manter códigos de transformação de dados;