Portuguese Audio Evaluations Specialist in Lisbon

Estamos a recrutar Especialistas em Avaliação de Áudio independentes para um projeto de avaliação de benchmark de IA que avalia modelos de áudio avançados. À medida que os modelos de IA lidam cada vez mais com fluxos de trabalho complexos neste domínio—especificamente cenários reais de suporte ao cliente, como reservas de voos, serviços financeiros e telecomunicações—sua precisão depende inteiramente de dados de treinamento robustos e elaborados por especialistas.

O objetivo deste projeto é produzir autonomamente tarefas de avaliação de alta qualidade através de interações simuladas, auditar saídas de IA conversacional e gerar conjuntos de dados limpos e confiáveis para otimizar o desempenho do modelo.

Entregáveis do Projeto & Escopo

• Execução de Cenários de Role-Play: Criar e executar cenários de avaliação complexos baseados em role-play que simulem interações realistas de serviço ao cliente nos domínios de viagens, finanças e suporte técnico.
• Auditoria de Desempenho do Modelo: Avaliar o desempenho do modelo de IA com base em métricas qualitativas e quantitativas padronizadas, focando estritamente na precisão da conclusão da tarefa, naturalidade da conversa e compreensão do áudio.
• Avaliação de Métricas Técnicas: Avaliar a literacia básica em programação de computadores do modelo, incluindo sua compreensão de estruturas JSON, funções, métodos e capacidade de raciocinar sobre dados estruturados dentro de um contexto de suporte.
• Geração de Conjuntos de Dados Representativos: Contribuir para o desenvolvimento de conjuntos de dados de áudio diversos e de alta qualidade que reflitam com precisão as expectativas reais dos clientes em termos de clareza, eficiência e fluxo de conversa natural.

Expertise Necessária

Para cumprir com sucesso os entregáveis deste projeto, os contratantes devem possuir um profundo conhecimento da indústria para elaborar cenários profissionais realistas. O conjunto de habilidades essenciais inclui:

• Experiência profissional demonstrável em suporte ao cliente complexo, resolução técnica de problemas ou avaliação de IA conversacional.
• Proficiência nativa ou bilíngue na língua-alvo, incluindo fluência em todas as habilidades linguísticas (leitura, audição, escrita e fala), juntamente com fortes habilidades analíticas e de comunicação verbal para conduzir com confiança simulações de suporte ao cliente.
• Literacia básica em programação de computadores, especificamente uma compreensão confortável de estruturas JSON, funções, métodos e lógica simples.
• Uma abordagem meticulosa e orientada para detalhes ao trabalhar com prompts estruturados, rubricas de avaliação complexas e diretrizes técnicas.

Equipamento Necessário: Acesso a um microfone de alta qualidade para garantir entrada de áudio limpa e confiável durante as avaliações de voz.

Oferecemos uma faixa salarial de $6 a $65 por hora, com a taxa exata determinada após avaliar sua experiência, expertise e localização geográfica. Os valores finais das ofertas podem variar da faixa salarial listada acima. Como contratante, você deve fornecer um computador seguro e internet de alta velocidade; benefícios patrocinados pela empresa, como seguro de saúde e PTO, não se aplicam.

Tipo de Engajamento: Freelance / Contratante Independente

Tipo de Local de Trabalho: Remoto