Na primavera passada, quando Karim Lakhani começou a testar como o ChatGPT afetava o trabalho de consultores de negócios de elite, ele pensou que eles ficariam encantados com a ferramenta. Num estudo preliminar com duas dúzias de trabalhadores, o bot linguístico ajudou-os a concluir duas horas de tarefas em 20 minutos.
“Presumi que eles, assim como eu, pensariam: ‘Ótimo! Posso fazer muito mais!” disse o Dr. Lakhani, professor da Harvard Business School.
Em vez disso, os consultores tiveram sentimentos de desconforto. Eles apreciaram o fato de terem feito um trabalho melhor em menos tempo. Mas o trabalho rápido do ChatGPT ameaçava o sentimento de que eram trabalhadores altamente qualificados, e alguns temiam confiar demais nele. “Eles estavam realmente preocupados e achavam que isso iria denegri-los e ser uma espécie de calorias vazias para seus cérebros”, disse Lakhani.
Após esses testes preliminares, o Dr. Lakhani e seus colegas desenvolveram um experimento maior e controlado para medir como o ChatGPT afetaria mais de 750 trabalhadores administrativos. Que estudar, que está sendo revisado em uma revista científica, indicou resultados bastante mistos no produto do trabalho dos consultores. O ChatGPT melhorou muito a velocidade e a qualidade do trabalho em uma tarefa de brainstorming, mas desviou muitos consultores ao realizarem um trabalho mais analítico.
O estudo também detalhou os diversos sentimentos dos trabalhadores em relação à ferramenta. Um participante comparou isso ao fogo que Prometeu roubou dos deuses para ajudar os mortais. Outro disse ao colega do Dr. Lakhani, Fabrizio Dell’Acqua, que o ChatGPT parecia junk food – difícil de resistir, fácil de consumir, mas, em última análise, ruim para o consumidor.
Num futuro próximo, espera-se que bots de idiomas como ChatGPT da OpenAI, Llama da Meta e Gemini do Google assumam muitas tarefas de colarinho branco, como copywriting, preparação de resumos jurídicos e redação de cartas de recomendação. O estudo é um dos primeiros a mostrar como a tecnologia pode afetar o trabalho real de escritório – e os trabalhadores de escritório.
“É um estudo bem concebido, especialmente numa área emergente como esta”, disse Maryam Alavi, professora do Scheller College of Business do Georgia Institute of Technology, que não esteve envolvida nas experiências. Alavi, que estudou o impacto das novas tecnologias digitais nos trabalhadores e nas organizações, também observou que o estudo “realmente aponta o quanto mais precisamos aprender”.
O estudo recrutou consultores de gestão do Boston Consulting Group, uma das maiores empresas de consultoria de gestão do mundo. A empresa proibiu seus consultores de usar bots de IA em seu trabalho.
“Queríamos que envolvesse um grande conjunto de trabalhadores reais trabalhando em tarefas reais”, disse François Candelon, diretor-gerente da empresa que ajudou a projetar os experimentos.
Os voluntários foram divididos em dois grupos, cada um trabalhando em um problema diferente de consultoria de gestão. Dentro de cada grupo, alguns consultores utilizaram o ChatGPT após 30 minutos de treinamento, alguns utilizaram sem instruções e outros não utilizaram.
Uma das tarefas era fazer um brainstorming sobre um novo tipo de calçado, esboçar um plano de negócios persuasivo para fabricá-lo e escrever sobre ele de forma persuasiva. Alguns pesquisadores acreditavam que apenas os humanos poderiam realizar tais tarefas criativas.
Eles estavam errados. Os consultores que usaram o ChatGPT produziram trabalhos que os avaliadores independentes avaliaram em média cerca de 40% melhor. Na verdade, as pessoas que simplesmente recortaram e colaram o resultado do ChatGPT foram avaliadas mais bem do que os colegas que combinaram seu trabalho com seus próprios pensamentos. E os consultores assistidos por IA foram mais de 20% mais rápidos.
Estuda este ano o ChatGPT em análise jurídica e tarefas de escrita de colarinho branco descobriram que o bot ajuda mais as pessoas com baixo desempenho do que as mais qualificadas. Dr. Lakhani e seus colegas encontraram o mesmo efeito em seu estudo.
Em uma tarefa que exigia raciocínio baseado em evidências, entretanto, o ChatGPT não ajudou em nada. Neste grupo, os voluntários foram convidados a aconselhar uma empresa que havia sido inventada para o estudo. Eles precisavam interpretar dados de planilhas e relacioná-los com transcrições simuladas de entrevistas com executivos.
Aqui, o ChatGPT convenceu os funcionários a confiarem demais nele. Humanos sem ajuda tiveram a resposta correta 85% das vezes. Pessoas que usaram o ChatGPT sem treinamento obtiveram pontuação pouco mais de 70%. Aqueles que foram treinados tiveram resultados ainda piores, obtendo a resposta apenas 60% das vezes.
Em entrevistas realizadas após a experiência, “as pessoas disseram-nos que negligenciaram a verificação porque é tão polido que parece tão correcto”, disse Hila Lifshitz-Assaf, professora de gestão na Warwick Business School, na Grã-Bretanha.
Muitos consultores disseram que o ChatGPT os deixou inquietos sobre como a ferramenta mudaria sua profissão e até mesmo seu senso de si mesmos. Quase três em cada quatro participantes disseram aos pesquisadores que temiam que o uso do ChatGPT pudesse causar atrofia de seus próprios músculos criativos, disse Candelon, do Boston Consulting Group.
“Se você não teve uma crise existencial em relação a esta ferramenta, então ainda não a usou muito”, disse outro coautor, Ethan Mollick, professor de administração da Wharton School da Universidade da Pensilvânia.
