L’integrazione dell’intelligenza artificiale all’interno delle aziende solleva numerose domande riguardo alle sue capacità e ai suoi limiti. Un recente progetto condotto da ricercatori dell’università Carnegie Mellon ha rivelato che quando agenti di IA sono incaricati di gestire un’azienda, i risultati possono rivelarsi deludenti. Gli agenti, rappresentanti di tecnologie diverse come Claude di Anthropic e Gemini di Google, hanno fallito nel completare la maggior parte dei compiti loro assegnati. Questo articolo esamina questo fiasco e cosa significa per il futuro dell’IA nel mondo professionale.
Gli obiettivi dell’esperimentazione
Il progetto realizzato da questi ricercatori aveva lo scopo di simulare un’azienda assegnando ruoli specifici agli agenti di intelligenza artificiale, come analista finanziario o project manager. In parallelo, il gruppo ha utilizzato una piattaforma diversa per simulare colleghi umani con cui questi agenti dovevano interagire. L’obiettivo era chiaro: valutare l’autonomia e la capacità di queste IA di gestire compiti complessi equivalenti a quelli di un team umano.
Risultati deludenti degli agenti di IA
I risultati di questa esperienza sono stati rivelatori. Gli agenti di IA hanno fallito in oltre tre quarti dei compiti che erano stati loro affidati. Nonostante specifiche relativamente semplici, come l’analisi di database o l’organizzazione di visite per nuovi uffici, le prestazioni sono state allarmanti. Ad esempio, Claude 3.5 Sonnet, uno dei migliori agenti, è riuscito a completare solo il 24 % dei compiti, con un punteggio aggregato del 34,4 % considerando i compiti parzialmente completati.
Le sfide incontrate nell’uso dell’IA
Le difficoltà incontrate da questi agenti evidenziano le limitazioni attuali dell’intelligenza artificiale. I ricercatori hanno osservato che spesso questi sistemi non comprendevano le istruzioni implicite. Ad esempio, quando erano incaricati di registrare i risultati in un file nel formato « .docx », non comprendevano che si trattava di un formato Microsoft Word. Inoltre, la navigazione web rappresentava una grande sfida, in particolare quando si trattava di bypassare pop-up o reindirizzamenti.
Le insufficienti competenze sociali degli agenti
Oltre alle difficoltà tecniche, l’assenza di competenze sociali delle IA è stata anche identificata come un problema principale. Quando un agente si trovava in difficoltà, spesso tentava di eludere fasi complesse invece di risolvere i problemi in modo proattivo, portando a errori nell’esecuzione dei compiti.
La questione del costo di funzionamento
Un altro aspetto interessante di questa esperienza è stata l’analisi dei costi di funzionamento dei diversi agenti. Claude 3.5 Sonnet, sebbene più performante, costava 6,34 dollari per compito, mentre Gemini 2.0 Flash rappresentava un’opzione più economica a 0,79 dollaro. Tuttavia, questi cifre sollevano un’altra domanda: a cosa serve investire in un’IA costosa se le sue prestazioni sono ancora largamente insufficienti?
Le implicazioni per il futuro delle aziende
Il fiasco osservato in questa sperimentazione solleva interrogativi importanti sull’integrazione dell’intelligenza artificiale nella gestione delle aziende. Anche se alcune aziende, come Meta di Mark Zuckerberg, aspirano a far sì che l’IA giochi un ruolo chiave nella gestione delle operazioni, la realtà di questa simulazione ricorda che l’IA è ancora lontana dal poter funzionare in modo autonomo ed efficace. Questi risultati dimostrano che è cruciale rimanere vigili riguardo all’uso di queste tecnologie per evitare situazioni in cui una fiducia eccessiva nelle capacità dell’IA possa portare a insuccessi significativi.
