Engenharia de Dados Sr - 128184 (Alphaville - Barueri, BR, 06.454-000) bei GFT Technologies | Let's Go Beyond The Hype
GFT Technologies | Let's Go Beyond The Hype · Alphaville, Brasilien · Onsite
- Senior
- Optionales Büro in Alphaville
O que buscamos:
Buscamos um(a) profissional com sólida experiência em dados para atuar como ponto focal técnico em uma Squad, liderando decisões de arquitetura e implementações. O papel envolve desenvolvimento e otimização de pipelines de dados em PySpark e Python, utilizando serviços AWS para garantir escalabilidade, performance e qualidade das entregas.
Responsabilidades:
- Atuar como ponto focal técnico da Squad, orientando e suportando a equipe em decisões e implementações técnicas;
- Desenvolver, implementar e otimizar pipelines de dados utilizando PySpark e Python;
- Trabalhar com arquiteturas de dados na AWS para garantir escalabilidade e eficiência;
- Monitorar e manter a integridade e performance dos sistemas de dados, utilizando CloudWatch;
- Colaborar com equipes multifuncionais para entender requisitos e entregar soluções de qualidade;
- Documentar processos e criar relatórios sobre status e performance dos sistemas de dados;
- Aplicar metodologias ágeis para garantir entregas contínuas e incrementais de valor.
Requisitos e qualificações:
• Capacidade comprovada de liderar tecnicamente projetos complexos e colaborar com equipes multifuncionais;
• Conhecimentos sólidos em PySpark e Python;
• Experiência com processamento de grandes volumes de dados;
• Vivência com serviços AWS, incluindo:
- EventBridge: Para arquiteturas de eventos escaláveis.
- Lambda: Para execução de código em resposta a eventos de forma Serverless
- EMR (Elastic MapReduce): Para processamento de grandes volumes de dados utilizando frameworks como Apache Hadoop e Apache Spark.
- Step Functions: Para orquestração de fluxos de trabalho complexos.
- CloudWatch: Para monitoramento e logging de recursos e aplicações.
- S3 (Simple Storage Service): Para armazenamento escalável de dados.
- EC2 (Elastic Compute Cloud): Para provisionamento e gerenciamento de capacidade computacional na nuvem.
• Experiência com metodologias ágeis (Scrum ou Kanban);
• Conhecimento avançado em SQL;
• Experiência com Apache Parquet.
Requisitos Diferenciais:
- Certificação AWS Cloud Practitioner
Descrição comportamental:
Procuramos uma pessoa que:
- Goste de trabalhar em equipe e seja colaborativa em suas atribuições;
- Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento;
- Transforme ideias em soluções criativas e busque qualidade em toda sua rotina;
- Tenha habilidades de resolução de problemas;
- Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo;
- Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.
Big enough to deliver – small enough to care.
#VempraGFT
#VamosVoarJuntos
#ProudToBeGFT
Jetzt bewerben