GUIA

Como evitar fraudes em avaliações on-line, inclusive com IA

Como evitar fraudes em avaliações on-line, inclusive com IA: defina regras para o uso de ferramentas, crie tarefas resistentes a fraudes, interprete os sinais de integridade de forma justa e mantenha uma pessoa responsável pelas decisões.

A resposta curta

Como evitar fraudes em avaliações on-line, inclusive com IA: defina regras claras sobre quais ferramentas são permitidas, use testes curtos e cronometrados com perguntas aleatórias, crie tarefas que exijam o raciocínio do próprio candidato, registre sinais de integridade para análise, não como prova, e confirme as habilidades em uma etapa de acompanhamento estruturada. Nenhum método impede todos os casos, então mantenha uma pessoa responsável por cada decisão.

Comece pelo guia do empregador

Se você ainda não conhece as fraudes com ajuda de IA, o guia para empregadores sobre ferramentas de IA usadas para trapacear em entrevistas explica as principais categorias de ferramentas e apresenta um processo de cinco etapas para entrevistas e testes. Para saber mais sobre ferramentas específicas, consulte Cluely pode ser detectado? e Cluely vs Interview Coder. Este guia prático mostra como prevenir fraudes em avaliações online, com mais detalhes sobre quais ferramentas permitir em cada etapa, perguntas difíceis de delegar, o que o navegador pode e não pode observar, como analisar os sinais de integridade como evidências e como manter o monitoramento proporcional.

Diagrama que mostra sinais de integridade, como trocas de aba, eventos de colagem e tempo, contribuindo para uma pontuação que uma pessoa analisa.ComeçarAlternância de abaColagemResposta rápidaConcluir
Os sinais de integridade são evidências para análise, não uma prova.

RESUMO

Defina quais ferramentas são permitidas, crie tarefas úteis e investigue questões de integridade sem fazer afirmações exageradas.

Para quem é este guia

Este guia é para empregadores que aplicam avaliações online e querem que os resultados reflitam as habilidades de cada candidato. O foco está nas decisões que você pode controlar: o que cada etapa deve avaliar, como as perguntas são elaboradas, quais sinais são coletados, como analisar uma preocupação e como confirmar as habilidades posteriormente. O guia não explica em detalhes como funcionam as ferramentas de assistência e não ensina a usá-las ou ocultá-las.

Faça este exercício com uma avaliação real aberta ao seu lado. Para cada tarefa dessa avaliação, anote três coisas: o que ela deve demonstrar, quais ferramentas o candidato pode usar e o que você faria se algo parecesse incomum. Essas três anotações são a base de uma abordagem de integridade que os candidatos podem entender e quem faz a análise pode aplicar.

Todos os cenários abaixo são ilustrativos. O objetivo é criar uma defesa em camadas: testes que dificultem o uso de ajuda externa, evidências que mostrem o que aconteceu e uma análise justa quando algo parecer incomum.

Por que ficou mais difícil avaliar se houve fraude em testes online?

Durante anos, as principais preocupações com testes sem supervisão eram a presença de um amigo por perto ou o compartilhamento de respostas entre candidatos. Os assistentes de IA de uso geral mudaram esse cenário. Agora, um candidato pode colar uma pergunta em uma ferramenta de chat, usar um aplicativo que lê a tela e sugere respostas ou manter um segundo dispositivo fora de vista. Algumas dessas ferramentas são divulgadas especificamente para entrevistas e avaliações.

Duas consequências decorrem disso para os empregadores. Primeiro, respostas escritas bem elaboradas já não são, por si só, uma evidência sólida, porque é barato produzir textos fluentes. Segundo, qualquer sinal técnico isolado se tornou menos decisivo, pois o mesmo evento pode ter uma causa inocente ou resultar de ajuda externa. A resposta não é monitorar tudo, mas planejar etapas em que a ajuda externa seja menos útil e tratar os sinais como motivos para uma análise mais detalhada.

Para conhecer as categorias de ferramentas e como elas afetam entrevistas e testes, leia o guia para empregadores sobre ferramentas de trapaça com IA em entrevistas. Se um nome de produto específico aparecer com frequência, as páginas sobre se o Cluely pode ser detectado e Interview Coder para empregadores apresentam uma perspectiva voltada aos empregadores.

Defina o que cada etapa deve avaliar por si só

A integridade começa com uma definição. Se você não decidiu o que significa trabalhar de forma independente em cada etapa, nem você nem a pessoa candidata conseguem saber se uma regra foi violada. Muitos processos seletivos têm várias etapas, e a resposta adequada pode ser diferente em cada uma.

Um teste curto de seleção geralmente serve para demonstrar raciocínio, discernimento ou habilidades essenciais sem ajuda. Uma amostra de trabalho em uma etapa posterior pode se aproximar mais do trabalho real, em que normalmente há colegas e ferramentas disponíveis. Definir a regra para cada etapa evita tanto uma proibição geral, que não condiz com o trabalho moderno, quanto uma permissão geral, que tornaria inútil a seleção inicial.

Um plano de ferramentas permitidas por etapa

A tabela abaixo mostra um plano hipotético para uma vaga de analista júnior. O seu plano será diferente, mas vale a pena seguir essa estrutura.

| Etapa | O que deve demonstrar | Ferramentas permitidas | Ferramentas não permitidas | | --- | --- | --- | --- | | Teste de triagem online | Raciocínio e fundamentos de SQL | Calculadora integrada, tecnologia assistiva | Assistentes de IA, outras pessoas, buscas | | Tarefa para fazer em casa | Limpeza e resumo de um pequeno conjunto de dados | Planilha, documentação, IA com a informação de que foi usada | Outra pessoa fazendo o trabalho | | Entrevista estruturada | Explicação das escolhas feitas na tarefa para fazer em casa | O próprio trabalho enviado pelo candidato | Ferramentas de sugestões em tempo real |

Observe que as tecnologias assistivas estão listadas como permitidas. Uma regra que proíba por engano um leitor de tela ou um programa de ditado transforma uma política de integridade em uma barreira de acessibilidade.

Redija a regra que o candidato vai ler

Transforme o plano em uma ou duas frases por etapa, usando uma linguagem simples, e inclua essas informações no convite e na primeira tela da avaliação. Exemplo hipotético: "Neste teste de 25 minutos, trabalhe individualmente e não use ferramentas de IA, mecanismos de busca nem a ajuda de outras pessoas. Leitores de tela, ampliadores e outras tecnologias assistivas são bem-vindos."

Uma regra clara cumpre dois objetivos. Ela define uma expectativa que a maioria das pessoas candidatas seguirá e oferece uma base justa para fazer uma pergunta de acompanhamento se algo parecer incomum. Sem essa regra, uma pessoa candidata que usou uma ferramenta de boa-fé não fez nada de errado.

Elabore perguntas que sejam menos úteis para delegar a outras pessoas

A medida de integridade mais eficaz costuma ser a própria pergunta. Enunciados genéricos levam a respostas genéricas, que podem ser geradas facilmente. Tarefas específicas, baseadas em detalhes fornecidos, restrições realistas e um limite de tempo compatível com o trabalho tornam a ajuda externa mais demorada e menos útil, sem deixar de dar uma oportunidade justa aos candidatos que fazem o teste por conta própria.

Crie tarefas com base nos detalhes fornecidos

Inclua na própria pergunta as informações de que o candidato precisa: uma mensagem curta de um cliente, uma pequena tabela de números, um trecho de uma política ou um fragmento de código. Depois, peça uma decisão que dependa desses detalhes. Qualquer ferramenta que conheça o assunto pode responder a uma pergunta de conhecimentos gerais; uma pergunta sobre esta tabela, estas restrições e este prazo exige leitura atenta e capacidade de escolha.

Cenários de julgamento situacional funcionam bem aqui quando as opções apresentam diferenças sutis, mas significativas. Nosso artigo sobre exemplos de julgamento situacional explica como elaborar opções que revelem diferenças reais de abordagem e como registrar os motivos da pontuação, em vez de apenas um gabarito.

Ajuste os limites de tempo à tarefa

O limite de tempo não deve causar ansiedade. Ele serve para avaliar o que uma pessoa consegue fazer com os próprios conhecimentos em um período realista. Faça cada seção você mesmo e com um colega. Depois, defina um limite que permita que uma pessoa competente termine sem precisar correr. Um limite que só os leitores mais rápidos conseguem cumprir mede a velocidade de leitura e prejudica candidatos que precisam de mais tempo.

Selecione questões de conjuntos e varie a ordem

Quando todos os candidatos veem as mesmas perguntas na mesma ordem, as respostas podem ser compartilhadas entre eles e consultadas com antecedência. Usar perguntas de um banco de questões maior, com as alternativas em ordem aleatória, reduz esse risco. Os testes da HireValid selecionam perguntas de bancos aleatorizados, por isso é raro que dois candidatos à mesma função vejam uma sequência idêntica.

Peça que expliquem seu raciocínio em uma etapa posterior

Uma conversa breve de acompanhamento, em que a pessoa candidata explica uma ou duas das próprias respostas, é uma das verificações mais informativas disponíveis. Não é uma armadilha: quem chegou a uma resposta por meio do próprio raciocínio geralmente consegue explicar o caminho, enquanto quem contou com ajuda externa pode ter dificuldade para explicar escolhas que não fez. Planeje esse acompanhamento para todas as pessoas pré-selecionadas, não apenas para aquelas que apresentarem sinais.

Especificamente sobre testes de raciocínio, nosso artigo sobre o que os testes de habilidade cognitiva avaliam explica como diferenciar raciocínio de conhecimento sobre o trabalho e como as exigências linguísticas podem afetar um resultado.

O que uma avaliação feita no navegador pode observar?

Uma avaliação bem elaborada registra muitos dados. Dependendo das configurações que você ativar, a HireValid registra quando o candidato sai da janela da avaliação ou do modo de tela cheia e por quanto tempo, quando cola texto em uma resposta, quando aparece texto que não foi digitado e quando as respostas chegam mais rápido do que alguém conseguiria ler a pergunta. Com o consentimento do candidato, fotos da webcam, tiradas em momentos aleatórios, são verificadas para identificar a ausência de rostos, a presença de mais de um rosto ou um rosto virado para o lado. Uma foto de identificação também é tirada antes do início do teste. O sistema também registra quando outro candidato à mesma vaga usa o mesmo dispositivo ou a mesma rede.

Analise cada sinal no contexto. Situações do dia a dia também podem gerar alguns deles: notificações, conexões instáveis, gerenciadores de senhas e softwares assistivos podem parecer eventos incomuns. Por isso, quem decide é uma pessoa, não o software.

A HireValid combina os sinais registrados em um Integrity Score para cada tentativa e lista os eventos que contribuíram para ele, para que uma pessoa responsável pela análise possa ver o que o gerou. A página sobre integridade explica os sinais em mais detalhes, e o artigo de ajuda sobre como entender os sinais de integridade mostra como interpretá-los em um resultado.

Como interpretar um Integrity Score?

Interprete o Integrity Score como um resumo de quantos eventos observados precisam de contexto, não como um veredito sobre a honestidade. Uma pontuação alta significa que há menos eventos que merecem ser questionados. Uma pontuação mais baixa significa que a pessoa responsável pela análise deve examinar a linha do tempo e considerar explicações plausíveis antes de formar uma opinião. Nunca é prova de que um candidato trapaceou.

Uma análise hipotética

Suponha que duas pessoas candidatas a uma função de suporte tenham resultados semelhantes nos testes. Uma tem um histórico sem ocorrências. A outra saiu da janela duas vezes, por cerca de dez segundos cada, no início do teste, e não apresenta eventos de colagem nem anomalias de tempo. Uma pessoa avaliadora razoável registraria os eventos, consideraria que uma notificação ou uma consulta rápida ao prazo provavelmente os explica e avançaria a pessoa candidata com base no resultado. Se ainda houvesse dúvidas, a entrevista de acompanhamento poderia incluir um breve cenário ao vivo.

Agora suponha que uma terceira pessoa candidata tenha várias ausências longas, seguidas de respostas completas e bem elaboradas, coladas em perguntas que a maioria das pessoas responde digitando. Esse padrão merece uma conversa. Mesmo assim, não justifica chegar a uma conclusão sem conversar com a pessoa, pois ela pode ter escrito as respostas em outro aplicativo por motivos de acessibilidade ou não ter entendido as regras.

Analise uma preocupação com um procedimento justo

Defina o procedimento antes de precisar dele. Quando surgir uma preocupação e houver pouco tempo, um processo por escrito ajuda a manter a consistência entre os avaliadores e protege os candidatos de julgamentos precipitados.

Etapas para uma análise proporcional

  • Confira os fatos: quais eventos foram registrados, quando e em quais questões.
  • Considere explicações inocentes, incluindo ferramentas de acessibilidade e problemas técnicos.
  • Compare o padrão com outras evidências sobre a pessoa candidata, como respostas por escrito e desempenho na entrevista.
  • Se ainda houver dúvidas, faça uma pergunta neutra, como "Percebemos que a janela do teste perdeu o foco várias vezes. Algo estava interrompendo você?"
  • Ofereça uma maneira justa de demonstrar a habilidade novamente, como uma tarefa curta supervisionada ou uma conversa ao vivo.
  • Registre a decisão e os motivos, separando o que foi observado do que foi concluído.

As palavras que você usa fazem diferença. "O sistema mostra que você trapaceou" afirma algo que as evidências não permitem concluir. "Gostaríamos de entender alguns eventos registrados" abre espaço para uma explicação e deixa a decisão nas mãos de uma pessoa. Nosso artigo sobre como evitar trapaças com IA em avaliações explica como considerar os sinais do navegador como contexto e por que estimativas da probabilidade de um texto ter sido gerado por IA devem ser usadas com cautela, se forem usadas.

Confirme as habilidades nas etapas seguintes

Nenhuma etapa deve ser responsável sozinha por garantir a integridade de todo o processo. Um teste de triagem razoavelmente resistente à ajuda externa, seguido de uma entrevista estruturada e de uma tarefa prática curta, oferece um panorama muito mais difícil de distorcer do que qualquer componente isolado.

Na entrevista, volte às evidências. Peça ao candidato que explique como abordou um cenário que respondeu ou apresente uma variação de uma pergunta, alterando um detalhe, e pergunte como a resposta mudaria. Nosso guia sobre entrevistas estruturadas mostra como elaborar essas perguntas e avaliar as respostas de forma consistente entre os entrevistadores.

Uma amostra de trabalho feita pelas pessoas pré-selecionadas, ao vivo ou em um curto período, é o mais perto que você pode chegar do trabalho real. Se a função permite o uso de ferramentas de IA, considere permiti-las também na amostra de trabalho, desde que isso seja informado, e peça à pessoa candidata que explique o que aceitou, alterou ou rejeitou. Isso permite avaliar o discernimento de uma forma que uma proibição não permite.

Você deve permitir o uso de IA em uma avaliação?

Às vezes, sim. Se a função usará ferramentas de IA todos os dias, uma etapa que as proíbe pode avaliar uma versão do trabalho que já não existe. O importante é deixar a regra explícita e criar uma tarefa adequada a ela. Uma tarefa que permite o uso de IA deve pedir algo que a ferramenta não consiga fornecer por conta própria: uma escolha entre opções com base no contexto fornecido, uma análise crítica de um rascunho gerado ou uma decisão que dependa do conhecimento sobre seus clientes.

Mantenha pelo menos uma etapa, geralmente a triagem inicial, em que seja necessário trabalhar de forma independente. Assim, você terá uma referência comparável entre as pessoas candidatas e poderá interpretar com mais facilidade as etapas posteriores, que permitem o uso de ferramentas.

Mantenha o monitoramento proporcional

Todo sinal coletado tem um custo para a confiança das pessoas candidatas, a privacidade e, às vezes, a acessibilidade. Antes de ativar uma configuração, pergunte-se se ela responde a uma questão que você realmente tem para essa função. Exigir tela cheia e restringir a função de colar pode ser adequado para um teste curto de triagem; capturas da webcam podem ser desnecessárias para muitas funções.

Informe às pessoas candidatas quais configurações estão ativadas, o que é registrado, quem pode ver essas informações e por quanto tempo elas são mantidas. O aviso de privacidade para candidatos e a política de dados biométricos descrevem como a HireValid trata essas informações, e as pessoas candidatas podem saber mais sobre a experiência na página de informações para candidatos.

Verifique cada configuração de acordo com o processo de adaptações. Uma pessoa candidata que use um software de ditado pode gerar sinais de digitação em rajadas; quem precisa fazer pausas pode sair da janela. Combine com antecedência que as adaptações aprovadas sejam anexadas a cada resultado, para que os avaliadores não as confundam com motivos de preocupação. As pessoas candidatas encontram informações sobre como solicitar adaptações na nossa página de ajuda para solicitações de adaptações.

A integridade das avaliações no processo seletivo como um todo

A integridade das avaliações é uma parte de um processo seletivo justo, não um projeto separado. Os mesmos princípios que ajudam a evitar o uso de ajuda externa em um teste, como relevância, regras claras e análise consistente, também facilitam a defesa do processo e demonstram mais respeito pelos candidatos. Se você está implementando avaliações pela primeira vez, comece pelo guia prático de testes pré-contratação e volte aqui quando souber quais avaliações vai usar.

A página de testes de contratação resistentes à IA explica como as escolhas de design da HireValid se complementam. Tenha cautela com as alegações de proteção completa de qualquer fornecedor, inclusive as nossas: o objetivo realista é oferecer avaliações resistentes à IA e uma análise cuidadosa, não garantir que seja impossível receber ajuda.

Sua ficha de análise de integridade

Para cada tarefa da sua avaliação, preencha uma linha com estas colunas. O exercício costuma revelar pelo menos uma tarefa que seria melhor reformular do que monitorar com mais atenção.

  • A tarefa e o que ela deve demonstrar sem ajuda.
  • As ferramentas permitidas, descritas exatamente como serão apresentadas à pessoa candidata.
  • Os sinais ativados para esta tarefa e o motivo de cada um.
  • Possíveis explicações inocentes para cada sinal.
  • A pergunta neutra de acompanhamento que a pessoa responsável pela análise faria.
  • Evidências alternativas que a pessoa candidata poderia apresentar, como uma tarefa ao vivo.
  • Quem toma a decisão e onde ela é registrada.

Atualize a planilha após cada rodada de contratação. Anote quais sinais levaram a conversas úteis e quais apenas geraram ruído, e remova as configurações que não ajudaram.

Perguntas a responder antes de ativar uma configuração

  • Quais etapas exigem que a pessoa trabalhe de forma independente, e isso está informado no convite?
  • Cada questão depende de detalhes que tornam menos útil a ajuda externa?
  • Cada sinal é descrito às pessoas responsáveis pela análise como uma observação, e não como uma conclusão?
  • As adaptações aprovadas aparecem no resultado para que não sejam confundidas com motivos de preocupação?
  • Há uma pessoa designada para analisar possíveis preocupações e conversar com as pessoas candidatas?
  • Resultados importantes serão confirmados em uma entrevista ou amostra de trabalho?

Quando conseguir responder a cada uma dessas perguntas, você terá um plano prático para prevenir fraudes em avaliações online sem tratar candidatos honestos como suspeitos. Antes de enviar seu primeiro convite, experimente a experiência do candidato com o teste de exemplo gratuito.

Sobre a equipe editorial

Escrito e verificado pela equipe editorial da HireValid. Fontes consultadas . Leia a política editorial.

Qual é a maneira mais eficaz de evitar fraudes em testes online?+

O que mais importa é o formato, não o monitoramento. Limites de tempo curtos, perguntas selecionadas aleatoriamente de um conjunto e tarefas que exigem o raciocínio do próprio candidato tornam a ajuda externa menos útil. Acrescente regras claras, sinais de integridade para análise e um acompanhamento estruturado, e mantenha uma pessoa responsável pelas decisões.

Avaliações resistentes à IA são a mesma coisa que avaliações à prova de IA?+

Eles descrevem o mesmo objetivo. Uma avaliação à prova de IA é criada para dificultar o uso de ajuda da IA: as perguntas são cronometradas, selecionadas aleatoriamente e apresentadas uma por vez, e a cópia é bloqueada. Além disso, a avaliação registra evidências de possíveis fraudes quando alguém tenta usar ajuda. Procure as duas camadas e confirme os resultados importantes em uma entrevista estruturada ou em uma atividade prática.

Devo proibir ferramentas de IA em todas as avaliações?+

Não necessariamente. Muitos empregadores mantêm testes cronometrados de triagem para serem feitos sem ajuda e permitem o uso de IA, desde que isso seja informado, em uma etapa posterior de avaliação prática, quando a função envolver seu uso. Seja qual for sua decisão, explique a regra de cada etapa antes de os candidatos começarem.

O que devo fazer se um sinal de integridade indicar possível uso de IA?+

Considere isso um motivo para analisar melhor, não uma prova. Avalie o sinal no contexto e, em seguida, dê ao candidato uma oportunidade justa de explicar ou de realizar uma tarefa breve de acompanhamento, com regras claras. Registre o que você observou e decidiu, e deixe uma pessoa responsável pela decisão final.

Continue explorando

MENOS SUPOSIÇÕES. MAIS GENTE BOA.

A IA pode aprimorar uma resposta.
Contrate pela capacidade por trás disso.

Conheça avaliações avançadas para contratação e ferramentas de integridade desenvolvidas para a era da IA.

Comece grátisOu experimente um teste de exemplo Sem cartão de crédito. Sem compromisso anual.