Anthropic: più l'AI migliora, meno la mettiamo in discussione

Cosa è successo?

Anthropic ha pubblicato l'AI Fluency Index, il primo tentativo su larga scala di misurare non quanto le persone usino l'AI, ma quanto bene la usino. I ricercatori hanno analizzato 9.830 conversazioni su Claude nel corso di una settimana del gennaio scorso, tracciando 11 comportamenti specifici che rappresentano una collaborazione efficace tra umano e modello. Tra questi: la capacità di iterare sulle risposte, di dare istruzioni chiare, di verificare i fatti e di mettere in discussione il ragionamento del modello.

Perché è importante?

I risultati confermano un'intuizione diffusa ma finora poco quantificata. L'85,7% degli utenti itera sulle risposte di Claude — il che è incoraggiante — ma solo il 15,8% ne mette in discussione il ragionamento; e appena l'8,7% verifica i fatti. Il dato più significativo riguarda però quello che i ricercatori chiamano "effetto artefatto": quando Claude produce output strutturati e dall'aspetto professionale (codice, documenti, app), gli utenti diventano più bravi a dare istruzioni a monte ma meno inclini a valutare criticamente il risultato. In altre parole, più il prodotto sembra finito, meno lo si mette in discussione — un paradosso verosimilmente destinato ad amplificarsi man mano che i modelli migliorano. C'è poi un aspetto che il report non copre ma che vale la pena considerare: come nota Ethan Mollick (Wharton), molte delle lamentele sull'AI che producono risultati scadenti vengono da utenti che usano modelli gratuiti, che sono tendenzialmente meno affidabili. Il che introduce una variabile di selezione non banale: chi usa modelli a pagamento tende a essere più esperto e motivato, e probabilmente anche più fluente nelle interazioni. Il campione di Anthropic — utenti Claude.ai con conversazioni multi-turno — riflette almeno in parte questa distorsione.

E adesso?

Anthropic prevede di trasformare l'indice in uno strumento longitudinale, confrontando nel tempo utenti nuovi ed esperti per capire se l'AI fluency si sviluppa naturalmente con l'uso o richiede interventi specifici. Nel frattempo, un dato vale come promemoria: solo il 30% degli utenti dice a Claude come vorrebbe che interagisse con loro. Tradotto: la maggioranza usa uno degli strumenti più potenti oggi disponibili senza mai personalizzare l'esperienza.