Senior Web Scraper

A rápida evolução do e-commerce hoje dá acesso a milhares de informações. Esses dados são difíceis de explorar pelas empresas, que então têm dificuldade em escolher os melhores caminhos de ação e medir seu impacto. É aqui que a NIQ para o Comércio Digital entra! Todos os dias, coletamos mais de 60 bilhões de informações, processamo-las e utilizamo-las em ferramentas inovadoras de monitoramento e ação para profissionais do setor. Nosso objetivo: dar aos nossos clientes e consumidores visibilidade em tempo real do mercado. A NIQ para o Comércio Digital é uma start-up líder no setor de 'Retail Analytics'. Em pleno crescimento, particularmente internacionalmente, estamos à procura de novos colaboradores para se juntarem à nossa equipe fabulosa!

Descrição do Trabalho: Como Desenvolvedor Python dentro da equipe de scraping, você estará entre nossa equipe talentosa e apaixonada ajudando-nos a otimizar a coleta de dados!

• Projetar, implementar e documentar robustos spiders Scrapy, garantindo resiliência contra futuras mudanças de sites enquanto mantém os existentes.
• Realizar revisões de código abrangentes e validação de dados para manter os mais altos padrões de qualidade de código e dados.
• Utilizar conhecimento profundo do protocolo HTTP, os mecanismos de navegadores web modernos e nossas próprias ferramentas internas para projetar soluções sofisticadas de crawling web que contornem contramedidas avançadas contra bots.
• Arquitetar e contribuir para novos desenvolvimentos significativos em múltiplas bases de código, fornecendo documentação técnica clara e conduzindo sessões de treinamento para equipes relevantes quando necessário.

Qualificações:

• Mestrado em Ciência da Computação, TI ou área relacionada.
• Pelo menos 3 anos de experiência profissional em engenharia de software.
• Conhecimento do framework BeautifulSoup ou Scrapy.
• Familiaridade com HTML e JavaScript, com uma sólida compreensão de aplicações de página única.
• Experiência com APIs RESTful e/ou GraphQL.
• Experiência prática com principais frameworks web Python como Django, FastAPI ou similares.
• Conhecimento do framework de scraping, Scrapy é um diferencial.
• Experiência com bancos de dados de séries temporais, como InfluxDB, é vantajosa.
• Fortes habilidades em Docker, Git, pandas, expressões regulares, Linux e scripting bash.
• Experiência comprovada com principais provedores de nuvem como AWS, GCP ou Azure.
• Você é entusiástico, motivado e autônomo.
• Você gosta de enfrentar desafios estimulantes em engenharia de software.
• Você é apaixonado por tecnologia e aprender coisas novas.

Informações Adicionais: Nossos Benefícios incluem um ambiente de trabalho flexível, tempo livre para voluntariado e programas de assistência ao empregado (EAP).

A NIQ pode utilizar ferramentas de inteligência artificial (IA) em várias etapas do processo de recrutamento, incluindo triagem de currículos, avaliações de candidatos, agendamento de entrevistas, correspondência de empregos, suporte à comunicação e certas tarefas administrativas que ajudam a agilizar fluxos de trabalho. Todas as decisões finais de contratação são feitas exclusivamente por humanos.

Compromisso com Diversidade, Equidade e Inclusão: Na NIQ, estamos firmemente comprometidos em promover um local de trabalho inclusivo que reflita a rica diversidade das comunidades e mercados que servimos. Todas as decisões de emprego na NIQ são tomadas sem considerar raça, cor, religião, sexo (incluindo gravidez, orientação sexual ou identidade de gênero), origem nacional, idade, deficiência, informações genéticas, estado civil, status de veterano ou qualquer outra característica protegida por leis aplicáveis.