When AI Teammates Come On Board, Performance Drops

Autores: Bruce Kogut (Columbia Business School), Fabrizio Dell’Acqua (Harvard Business School), Patryk Perkowski (Yeshiva University) | Publicação: HBR, Mai-Jun 2024

Tese central: Introduzir um agente de IA em um time — mesmo quando esse agente tem desempenho individual 17% superior aos humanos — prejudica o desempenho do time, porque reduz a sociabilidade, motivação, esforço e confiança dos membros humanos. E o impacto negativo se espalha para times adjacentes que nem sequer interagem diretamente com a IA (“efeito de spillover”).

O experimento

  • 110 times de 2 pessoas jogando Super Mario Party (Dash and Dine)
  • Após 6 rodadas, um membro de alguns times foi substituído por um agente de IA
  • AI coletava em média 7,5 ingredientes/rodada vs. 6,4 dos humanos (17% melhor)
  • Apenas 3% dos humanos superaram o agente de IA

Os resultados

Paradoxo: times com AI coletaram em média 3 ingredientes a MENOS que times totalmente humanos nas 6 rodadas seguintes

  • Na primeira rodada após a IA entrar: -8% de ingredientes vs. times que mantiveram membros originais
  • A diferença reduziu para a metade nas próximas 4 rodadas e desapareceu na última
  • 84% dos participantes preferiram jogar com parceiros humanos apesar da AI ser objetivamente melhor

Efeito de spillover: times adjacentes ALL-HUMAN (que apenas observavam a interação com IA) também sofreram queda de desempenho na primeira rodada após a mudança — contribuindo igualmente para a queda de produtividade total da “firma”

Por que acontece

“AI causes team sociability to fall, and that lessens members’ motivation, effort, and trust.”

A introdução de AI disrupta rotinas e processos colaborativos estabelecidos. Mas — distintamente de quando um humano novo entra — a disruption com AI se estende para times adjacentes através do spillover.

Notas geradas

Citações-âncora

“We learned that AI causes team sociability to fall, and that lessens members’ motivation, effort, and trust.”

“The weaker the players on a human team, the more that team suffered when given an AI member. The highly proficient players were better able to integrate new AI players.”

O que mudou minha forma de pensar

A maioria das conversas sobre IA foca no desempenho individual (mais rápido, mais preciso). Este estudo mostra que o nível de análise errado: o que importa é o desempenho do time, não do indivíduo. E o impacto da IA no time pode ser negativo mesmo quando ela é individualmente superior — porque destrói o tecido social que sustenta colaboração, confiança e esforço coletivo.