A verdade sobre a IA e os testes de personalidade: poderá ela realmente falsificar resultados?
Publicou uma vaga e está a receber inúmeros currículos. Mas onde termina o esforço do candidato e onde é que a IA entra em ação?
Todos os profissionais de RH estão a fazer a mesma pergunta. Uma rápida pesquisa no LinkedIn mostra os recrutadores a lamentarem o facto da Inteligência Artificial (IA) estar agora a escrever cartas de apresentação, a editar currículos, a realizar tarefas de entrevista, e a afirmar que os candidatos estão até a tentar fraudar os testes psicométricos. Isto está a mudar totalmente o jogo do recrutamento. É difícil contrariar. E está a tornar o processo de contratação muito mais exigente.
Mas isso deixou-nos intrigados. Será que a IA consegue mesmo falsificar os dados psicométricos de personalidade? E será que isso beneficia os candidatos? Decidimos testar.
Antes de mais nada, sejamos claros. Na Thomas, somos firmemente a favor da IA. Ela pode acelerar a triagem de currículos, otimizar as entrevistas e aprimorar a comunicação no ambiente de trabalho.
Mas, embora existam milhares de ótimos casos de utilização da Inteligência Artificial, usá-la para falsificar ou manipular testes psicométricos de personalidade não é um deles. Na verdade, isso nem sequer oferece uma vantagem aos potenciais candidatos.
A investigação¹ demonstrou que, quando existe uma resposta “correta” clara (por exemplo, num teste de QI sem limite de tempo), a IA pode apresentar um desempenho muito bom. Mas, em avaliações com o tempo limitado, frequentemente utilizadas em recrutamento (como a Avaliação de Inteligência Geral da Thomas), a IA atualmente não consegue igualar o desempenho humano, sendo, portanto, inútil para falsificar um resultado.
O que ainda não se compreende totalmente é se a IA consegue prever as respostas “corretas” ou “ideais” numa avaliação de personalidade. Será que tem o que é preciso para prever com exatidão a adequação de um candidato a uma vaga de emprego?
Será que a IA consegue simular a personalidade que precisa para ter sucesso?
Testámos se a IA, ou até mesmo um ser humano, seria capaz de concluir a nossa avaliação de personalidade no contexto de trabalho (HPTI) e simular as características que determinam o sucesso em determinadas funções.
O teste de personalidade da Thomas avalia seis traços: Ajustamento, Ambiguidade, Conscienciosidade, Audácia, Curiosidade e Competitividade. É composto por 78 questões e demora cerca de 7 a 8 minutos a ser concluído.
O sistema proprietário de perfil de cargos da Thomas permite que as equipas de recrutamento criem um perfil de função e comparem os resultados da avaliação dos candidatos com esse perfil ideal, com base no nosso algoritmo amplamente testado. Os candidatos cuja pontuação se aproxima de 5 estrelas no geral estarão mais alinhados com as exigências da função, o que o ajuda a contratar a pessoa mais adequada às suas necessidades.
A experiência:
- Solicitámos a cinco plataformas de IA diferentes que gerassem as respostas “ideais” para cada uma das perguntas de personalidade (HPTI) em cada uma das funções. As nossas instruções pediam especificamente que a IA respondesse de forma favorável, como se estivesse a realizar a avaliação como parte de um processo de recrutamento;
- Também solicitámos a uma amostra de 18 indivíduos que respondessem à avaliação de personalidade (HPTI) de uma forma socialmente desejável para três das funções profissionais. Queríamos que tentassem deliberadamente simular ou manipular a avaliação;
- Para fundamentar ainda mais as nossas conclusões, recorremos às nossas bases de dados para analisar a informação de pessoas que já ocupavam esses cargos, o que nos permitiu compreender as avaliações médias em estrelas das pessoas que já desempenhavam cada uma dessas funções.
O Resultado
Em todas as 10 funções testadas, os colaboradores reais superaram sempre a IA e os simuladores humanos nas avaliações de personalidade. Os ocupantes dos cargos apresentaram consistentemente uma classificação global de personalidade mais elevada, quando comparada com a pontuação média gerada pela IA e com as respostas simuladas por humanos. Curiosamente, isto demonstra que tanto a IA como os humanos têm dificuldade em manipular as avaliações de personalidade para parecerem mais adequados. E parece que os ocupantes dos cargos incorporam características que se alinham com a sua função, como seria de esperar.
De um modo geral, parece que os humanos e a IA tendem a apresentar classificações por estrelas semelhantes, embora estas não se alinhem muito bem com uma escala tradicional de 5 estrelas. Isto sugere que nem a IA nem os humanos sabem ao certo “o que é uma boa aparência” e podem, na verdade, basear as suas respostas em estereótipos gerais. Por exemplo, no caso de um vendedor, tanto a IA como os humanos foram, de forma geral, bastante precisos ao retratar um elevado nível de “competitividade”, mas o mesmo não se verificou em relação a outras características. Como a IA é treinada com os dados produzidos por humanos, não é particularmente surpreendente que as simulações de ambos sejam tão semelhantes.
Curiosamente, também observámos inconsistências e grande variação nas respostas dos diferentes sistemas de IA e nas simulações humanas quando analisámos a classificação global por estrelas. Assim, não só a IA, como os humanos desconhecem o que realmente determina um desempenho de excelência numa função, como também podem ser inconsistentes e ter dificuldade em mascarar a sua falta de compreensão sobre o que lhes é pedido. As respostas da IA variaram amplamente entre plataformas, evidenciando a dificuldade em manter consistência.
Conclusão: Falsificar os testes psicométricos prejudica mais do que ajuda
Felizmente para os profissionais de RH, a IA é tão fraca a simular psicometria quanto as próprias pessoas. Importa, contudo, salientar que o nosso sistema de perfis de funções, assente em investigação, garante que o sucesso se baseia em preditores reais, e não em estereótipos. Isto pode ajudar a explicar porque é que a IA teve dificuldades em simular os resultados: os perfis de funções não assentam em personalidades estereotipadas para determinados cargos, mas sim no que sabemos, com base em evidência, que torna os ocupantes mais bem-sucedidos.
É igualmente importante notar que esta investigação foi conduzida com base na nossa própria avaliação de personalidade (HPTI). A forma como a IA simula perfis pode diferir noutros inventários de personalidade.
Nota de rodapé:
Leitura complementar:
Quando as máquinas tomam decisões de contratação: examinando os riscos e as limitações das ferramentas de recrutamento baseadas em IA – (Taylor O’Brien, 2024)
Fique a par de todo o nosso conteúdo, através das nossas redes sociais Facebook, Linkedin e Instagram
Fique também a conhecer as plataformas CVGuard Biz, CVGuard Gov e Thomas Hub