Estás pronto para oferecer a excelência connosco?

Procuramos um perfil de Data Engineer Azure para integrar a nossa equipa.

O que procuramos?

• Desenhar, desenvolver e manter plataformas de dados escaláveis;
• Recolher, processar e analisar grandes volumes de dados complexos provenientes de diferentes fontes;
• Desenvolver e implementar workflows de processamento de dados utilizando tecnologias como Spark e Apache Beam;
• Colaborar com equipas multidisciplinares para garantir a precisão e integridade dos dados;
• Garantir a segurança e privacidade dos dados através da implementação de controlos de acesso e encriptação;
• Extrair dados de várias fontes, incluindo bases de dados, sistemas de ficheiros e APIs;
• Monitorizar a performance dos sistemas e otimizar disponibilidade e escalabilidade.

O que precisas saber?

• Experiência com plataformas cloud e serviços de data engineering (Azure);
• Proficiência em linguagens de programação como Python, Java ou Scala;
• Experiência com ferramentas Big Data como Spark, Flink, Kafka, Elastic Search, Hadoop, Hive, Sqoop, Flume, Impala, Kafka Streams and Connect, Druid, entre outras;
• Conhecimentos de modelação de dados e princípios de desenho de bases de dados;
• Familiaridade com ferramentas de integração de dados e ETL (ex.: Apache Kafka, Talend);
• Conhecimentos de sistemas distribuídos e arquiteturas de processamento de dados;
• Bons conhecimentos de SQL e experiência com bases de dados relacionais e NoSQL;
• Familiaridade com plataformas cloud e serviços para data engineering (ex.: AWS S3, Azure Data Factory);
• Experiência com ferramentas de controlo de versão como Git.