Political Science QA Lead – Remote in Lisbon

Sobre este papel, neste trabalho remoto por horas, você atuará como um Líder de Garantia de Qualidade em Ciência Política para supervisionar a qualidade, consistência e desempenho dos treinadores em projetos de treinamento de IA em ciência política. Você revisará o conteúdo gerado por IA em ciência política e o trabalho de treinadores/QA, avaliará a qualidade da produção em relação às diretrizes do projeto, fornecerá feedback escrito preciso e garantirá que todos os colaboradores sigam os padrões de qualidade esperados.

Você avaliará o trabalho quanto à precisão conceitual, conhecimento institucional, contexto comparativo, precisão da teoria política, raciocínio político, consciência de fontes, sensibilidade ao viés, clareza, formatação, cumprimento de instruções e adesão a rubricas específicas do projeto. Você identificará problemas recorrentes de qualidade, comunicará atualizações aos treinadores e QAs, apoiará a integração, manterá a documentação e ajudará a ativar colaboradores que não estão trabalhando de forma consistente.

Este papel requer forte expertise em ciência política, habilidades de comunicação em inglês, excelente atenção aos detalhes, comunicação estruturada e a capacidade de gerenciar fluxos de trabalho de qualidade em equipes de especialistas remotas. Sua liderança em qualidade de ciência política ajudará diretamente a melhorar os principais modelos de IA do mundo, garantindo que os dados de treinamento em ciência política sejam precisos, equilibrados, bem contextualizados, analiticamente sólidos e alinhados com as expectativas dos clientes.

O processo de seleção envolve uma entrevista com IA, uma tarefa específica do domínio e uma entrevista com um recrutador. Importante: Não há projeto imediato para este papel; no entanto, se qualificado, você estará entre os primeiros especialistas que contataremos quando oportunidades relevantes surgirem. Isso também lhe dará acesso a futuros projetos disponíveis através da nossa rede de especialistas.

Seu Perfil

• Graduação, Mestrado ou Doutorado em Ciência Política, Relações Internacionais, Políticas Públicas, Governo, Teoria Política, Estudos de Segurança, Direito, Sociologia, Economia ou um campo de ciências sociais intimamente relacionado.
• Forte domínio da língua inglesa para seguir diretrizes do projeto, comunicar-se com equipes e fornecer feedback escrito claro.
• Mais de 3 anos de experiência em pesquisa em ciência política, ensino, análise de políticas, assuntos públicos, relações internacionais, redação política, revisão acadêmica ou fluxos de trabalho analíticos relacionados.
• Forte compreensão das instituições políticas, política comparativa, relações internacionais, políticas públicas, teoria política, sistemas eleitorais, governança, capacidade estatal, sociedade civil e comportamento político.
• Capacidade de avaliar conteúdo de ciência política em relação a rubricas detalhadas e identificar problemas como simplificação excessiva, viés ideológico, afirmações não suportadas, descrições institucionais incorretas, raciocínio causal enganoso ou análise comparativa fraca.
• Familiaridade com áreas como democracia e autoritarismo, economia política, administração pública, sistemas constitucionais, política eleitoral, estudos de conflito, organizações internacionais, avaliação de políticas ou pesquisa de survey é preferida.
• Experiência liderando ou apoiando equipes remotas de analistas, pesquisadores, revisores, educadores, anotadores ou QAs é fortemente preferida.
• Confortável trabalhando em ambientes remotos dinâmicos usando ferramentas como Discord, Google Sheets, Google Docs, rastreadores, painéis e sistemas de gerenciamento de projetos.
• Altamente detalhista e organizado, com a capacidade de manter guias de estilo, FAQs, rastreadores, materiais de integração, tarefas de calibração e documentação.
• Experiência com treinamento de IA, anotação de dados, avaliação de LLM, QA de políticas, revisão acadêmica, verificação de fatos ou revisão baseada em rubricas é um grande diferencial.

Principais Responsabilidades

• Monitoramento de qualidade: Verificar itens de ciência política, identificar problemas de qualidade, fornecer feedback contínuo através de DMs e elevar questões recorrentes ou críticas.
• Revisão de ciência política: Avaliar explicações de ciência política geradas por IA, análises comparativas, resumos de políticas, discussões de teoria política, descrições institucionais e raciocínio quanto à precisão e equilíbrio.
• Comunicação com treinadores e QA: Atualizar treinadores e QAs no Discord sobre novas diretrizes de itens, mudanças de projeto, atualizações de fluxo de trabalho, expectativas de qualidade e padrões de revisão específicos de ciência política.
• Gerenciamento de ativação de treinadores/QA: Enviar mensagens diretas a colaboradores que estão inativos ou não estão trabalhando, incentivar a ativação, acompanhar follow-ups e sinalizar problemas de disponibilidade quando necessário.
• Documentação: Criar e manter documentação de projetos de ciência política, incluindo guias de estilo, rastreadores, FAQs, notas de qualidade, exemplos, honeypots, tarefas de calibração e materiais de integração.
• Integração e treinamento: Agendar e realizar chamadas de integração/treinamento com treinadores e QAs para explicar expectativas do projeto, fluxos de trabalho, rubricas, padrões de qualidade e requisitos de revisão específicos de ciência política.
• Alinhamento de qualidade: Garantir que todos os treinadores e QAs apliquem as diretrizes de revisão de ciência política de forma consistente e compreendam as atualizações à medida que os projetos evoluem.
• Revisão de viés e risco: Sinalizar afirmações enganosas, ideologicamente tendenciosas, não suportadas, desatualizadas, politicamente inflamadas ou mal contextualizadas.
• Melhoria de processos: Identificar lacunas recorrentes de qualidade, propor melhorias de fluxo de trabalho e ajudar a construir processos de QA escaláveis para projetos de treinamento de IA em ciência política.