Senior Data Engineer (aws & Python)

Proxify's mission é conectar os melhores desenvolvedores ao redor do mundo com as oportunidades que merecem. Desde o nosso lançamento, os desenvolvedores da Proxify trabalharam com mais de 1200 clientes satisfeitos para construir seus produtos e recursos de crescimento. Mais de 5000 desenvolvedores talentosos confiam na Proxify e sua rede para realizar seus sonhos e objetivos.

A Proxify é moldada por uma rede global de desenvolvedores talentosos e solidários interessados em empregos remotos em tempo integral.

A função

Estamos à procura de um Engenheiro de Dados Sênior especializado em plataformas de dados nativas da nuvem, com forte foco em Amazon Web Services (AWS) e Python. Você será responsável por projetar, construir e otimizar pipelines ETL/ELT escaláveis e confiáveis e armazéns de dados que alimentam análises, aprendizado de máquina e inteligência de negócios para nossos clientes.

O que estamos procurando

• Mais de 5 anos de experiência profissional em engenharia de dados
• Proficiência avançada em Python para manipulação de dados, scripting e desenvolvimento de pipelines (por exemplo, Pandas, Py Spark)
• Experiência prática profunda com a plataforma de nuvem AWS, especificamente os serviços principais usados para ingestão, armazenamento e processamento de dados (S3, Glue, Lambda, EMR)
• Experiência comprovada trabalhando com armazéns de dados modernos (Snowflake, Amazon Redshift ou Google Big Query/Azure Synapse)
• Expertise sólida em SQL e escrita/otimização de consultas complexas
• Forte compreensão de conceitos de containerização e orquestração (Docker, Kubernetes)
• Localizado no fuso horário CET (+/- 3 horas), não podemos considerar candidaturas de candidatos em outros fusos horários

Desejável

• Experiência com Infraestrutura como Código (Terraform ou Cloud Formation)
• Proficiência com uma ferramenta de orquestração moderna como Apache Airflow
• Familiaridade com tecnologias de streaming de dados (Kafka, Kinesis ou Flink)
• Certificações AWS

Responsabilidades

• Arquitetar, implementar e manter pipelines de dados escaláveis (ETL/ELT) usando Python e serviços nativos da AWS para ingerir dados de várias fontes (APIs, bancos de dados, serviços de streaming) em lagos e armazéns de dados
• Servir como especialista nos principais serviços de dados da AWS, incluindo S3, Glue, EMR, Kinesis/MSK e Redshift ou Amazon Aurora
• Projetar modelos de dados robustos e eficientes (por exemplo, esquema estrela, snowflake, data vault) para necessidades analíticas e de relatórios
• Realizar ajuste de desempenho e otimização de consultas em grandes conjuntos de dados dentro de armazéns de dados em nuvem para garantir entrega rápida de dados
• Implementar infraestrutura como código (IaC) usando Terraform ou Cloud Formation e integrar pipelines de dados em processos modernos de CI/CD
• Estabelecer padrões de monitoramento de qualidade de dados, registro, alerta e governança em toda a plataforma de dados

O que oferecemos

• Receba pagamento, não jogadas. Sem mais clientes não confiáveis. Aproveite pagamentos mensais pontuais com opções de retirada flexíveis.
• Horas de projeto previsíveis. Aproveite um equilíbrio harmonioso entre trabalho e vida pessoal com dias de trabalho consistentes de 8 horas com clientes.
• Dias flexíveis, para você recarregar. Aproveite até 24 dias flexíveis de folga por ano sem perder pagamento, para posições em tempo integral encontradas através da Proxify.
• Posições que aceleram a carreira em empresas de ponta. Descubra posições remotas exclusivas de longo prazo nas empresas mais emocionantes do mundo.
• Oportunidades selecionadas, apenas para você. Pule os obstáculos e preconceitos típicos de recrutamento com posições pessoalmente correspondidas.