Job Description
Criar data ingestion pipelines para recolher dados de várias fontes, como bases de dados, API e ficheiros;Criar pipelines de processamento de dados para limpar, filtrar e pré-processar dados para análise;Otimizar os pipelines de dados, código framework, e a utilização e configuração do cluster para garantir o melhor desempenho dos pipelines;Criar, manter e aplicar data governance e data catalogue;Manter uma documentação coerente sobre a framework, cluster e projetos;Colaborar com data scientists, data analysts e stakeholders para obter requisitos de dados e fornecer soluções eficazes;Comunicar eficazmente conceitos técnicos complexos a stakeholders não técnicos;Avaliar e recomendar novas ferramentas, frameworks e técnicas para melhorar os projetos e a plataforma de engenharia de dados;Trabalhar numa framework de desenvolvimento contínuo com entregas frequentes, respeitando os prazos e seguindo ativamente as tarefas.Perfil:Formação Superior na área das Tecnologias de Informação;Experiência profissional superior a 3 anos como Data Analyst;Experiência comprovada em desenvolvimento com Python;Bons conhecimentos em Apache Spark, Apache Hadoop, Airflow e Presto;Experiência em queries SQL e uma boa compreensão da arquitetura das bases de dados;Experiência na criação de data sources e dashboards em software de visualização de dados como Tableau e PowerBI (bem como capacidade de efetuar análises exploratórias);Bons conhecimentos de modelação de dados, estruturas de dados, gestão de dados e best practices;Conhecimento sólido dos princípios de computação distribuída e processamento paralelo;Fluência em Português e Inglês;Excelentes capacidades analíticas;Excelentes competências de comunicação e capacidade de trabalhar eficazmente num ambiente de equipa colaborativo e multicultural;Sentido de responsabilidade, proatividade e dinamismo.Trabalhar connosco:Com mais de 30 anos de experiência, a Rumos Consulting conta com uma equipa de profissionais especializados em TI;Na Rumos Consulting, os consultores integram projetos altamente desafiantes, com base em tecnologia de ponta e nos mais diversos setores de atividade;Os consultores Rumos Consulting têm acesso a um plano de formação certificada, o que lhes proporciona uma constante atualização de competências técnicas;A Rumos Consulting, enquanto empregador, dispõe de oportunidades de emprego com base na equidade, integridade e diversidade. Tendo por base estes valores, trabalhamos para que que nenhuma pessoa seja discriminada com base na idade, grau de deficiência, género, estado civil, gravidez e maternidade, raça, crenças ou orientação sexual. Acreditamos nas capacidades de todos, porque temos no nosso ADN espírito de equipa e de entreajuda, empatia e respeito.Rumos
Apply
Go Back