In Breve
- Quali funzioni ha superato ChatGPT nel test?
- ChatGPT ha superato test su previsioni meteorologiche, calcoli matematici, suggerimenti di film e identificazione di piante.
- Quali funzioni hanno ottenuto risultati parziali?
- I giochi di parole, l'identificazione del cielo stellato, la pianificazione di percorsi e l'apprendimento di una lingua hanno ottenuto risultati parziali.
- Quali funzioni sono fallite nel test?
- Le funzioni di cronometro, sveglia, meditazione guidata e supporto al food delivery hanno fallito nel test.
Un recente test ha esaminato le capacità di ChatGPT nell’eseguire 12 attività quotidiane comunemente svolte tramite app su smartphone. I risultati sono stati misti, con quattro successi, quattro passaggi parziali e quattro fallimenti. È importante notare che l’esperimento è stato condotto senza un’integrazione profonda con il sistema operativo del telefono, limitando l’accesso dell’IA a email, app di messaggistica e wallet.
ChatGPT ha mostrato buone performance in alcune aree. Le previsioni meteorologiche fornite si sono rivelate accurate, i calcoli matematici sono stati corretti, seppur con qualche ritardo, e le raccomandazioni cinematografiche sono risultate ben calibrate sui gusti dell’utente. Inoltre, l’identificazione botanica delle piante attraverso foto ha dato risultati soddisfacenti, grazie a verifiche incrociate.
Tuttavia, ci sono stati anche risultati parziali. Funzioni come i giochi di parole, l’identificazione del cielo stellato, la pianificazione di percorsi e l’apprendimento di una lingua hanno mostrato limiti. ChatGPT ha riprodotto la meccanica dei giochi, ma non ha eguagliato l’esperienza d’uso delle app dedicate. Ha riconosciuto costellazioni da singole foto, ma non ha offerto un’esplorazione AR continua. Nella pianificazione dei viaggi, ha fornito opzioni utili, ma ha richiesto chiarimenti e generato azioni non desiderate, come la creazione di promemoria. Le esercitazioni linguistiche, infine, hanno mostrato conversazioni naturali quando funzionanti, ma soggette a pause e malfunzionamenti.
Le funzioni più utilitaristiche, come cronometro, sveglia, meditazione guidata e supporto al food delivery, hanno mostrato risultati deludenti. ChatGPT non è stato in grado di misurare il tempo come un cronometro nativo; la sveglia non ha allertato l’utente nonostante l’impostazione di un avviso. La guida vocale per la meditazione ha presentato intonazioni disturbanti, mentre nella scelta di ristoranti, l’assistente ha suggerito locali chiusi o non disponibili sulle piattaforme di consegna, evidenziando il divario tra raccomandazione e azione concreta.
Questo esperimento mette in luce che, con l’attuale implementazione come app separata e senza accesso profondo ai dati e ai servizi del dispositivo, ChatGPT è più adatto a sostituire app informazionali che forniscono conoscenze o spiegazioni. Al contrario, fatica a sostituire app che devono eseguire azioni rapide e integrate con il sistema operativo, come timer, navigazione turn-by-turn e gestione di ordini. Inoltre, emergono criticità comuni, come la generazione di risposte errate ma sicure e la mancanza di integrazione con banche dati specialistiche.
Un’ulteriore considerazione riguarda l’integrazione nativa dell’IA nel sistema operativo, che potrebbe modificare i risultati, consentendo l’accesso a calendari, timer e impostazioni. Tuttavia, rimangono richieste garanzie su accuratezza, fonti affidabili e la possibilità di uscire dall’interfaccia conversazionale quando l’esperienza utente richiede strumenti più diretti.
