Data Engineer
Estamos com uma oportunidade para um dos nossos parceiros, uma empresa com projetos nacionais e internacionais e que está em um crescimento impressionante no mercado português e Europeu.
Venha fazer parte dessa equipa de sucesso!
• Data Engineer para apoiar a migração de um projeto de Big Data da GCP (Google Cloud Platform) para a Azure, garantindo otimizações e documentação ao longo do processo.
• Principais Responsabilidades: Migrar processos implementados em Scala para PySpark na Azure.
• Identificar e implementar melhorias de performance e boas práticas durante a migração.
• Documentar as regras de negócio implementadas no sistema.
• Garantir a consistência e a integridade dos dados e processos migrados.
Requisitos:
• Experiência comprovada com GCP,
• Azure,
• Scala
• PySpark.
• Familiaridade com Big Data pipelines e ferramentas como Apache Spark.
• Capacidade de documentar sistemas complexos e identificar oportunidades de melhoria.
• Experiência mínima 3 anos.
• Contrato longa duração;
• Localização: Lisboa, híbrido (1/2 vezes escritório);