Un recente studio ha rivelato che ChatGPT commette errori in più della metà delle domande, sollevando dubbi sulla sua affidabilità come risorsa per gli sviluppatori. Nonostante ciò, OpenAI si impegna a migliorare il modello per fornire risposte più accurate e complete nel campo della programmazione.
Nonostante i limiti evidenziati dallo studio, OpenAI ha dichiarato di essere consapevole dei problemi e di lavorare costantemente per migliorare le capacità di ChatGPT.
Errori su errori da parte di Chat GPT
Un recente studio della Purdue University (pubblicato su The Register) ha rivelato che ChatGPT, un modello di intelligenza artificiale sviluppato da OpenAI, commette errori in oltre il 50% delle domande relative al campo della programmazione.
Più precisamente, lo strumento di OpenAI ha risposto correttamente solo al 48% delle domande, mentre il 77% è stato descritto come “prolisso”, rispetto alle risposte che si sarebbero ottenute dalla controparte umana.
Per saperne di più: Intelligenza artificiale: cos’è e come funziona, tutto sulla AI
ChatGPT è un sistema di generazione di testo basato su trasformatori che si basa su un vasto corpus di dati per generare risposte a domande poste dagli utenti. Tuttavia, secondo gli esperti, il modello sembra non essere in grado di comprendere correttamente le domande relative alla programmazione.
Lo studio ha coinvolto una serie di domande di programmazione poste a ChatGPT, e i risultati sono stati sorprendenti. Il modello ha fornito risposte errate o incomplete in più della metà dei casi, dimostrando una mancanza di conoscenza accurata e dettagliata nel campo della programmazione.
Perché l’IA commette questi errori
Gli esperti hanno evidenziato che ChatGPT sembra avere difficoltà a comprendere le domande complesse e a fornire risposte precise. Inoltre, il modello sembra non essere in grado di distinguere tra diverse lingue di programmazione o di comprendere a fondo i concetti chiave della programmazione.
Questi risultati sollevano preoccupazioni sulla fiducia che si può riporre in ChatGPT come risorsa affidabile per le domande di programmazione. Gli sviluppatori e gli utenti potrebbero trovarsi in difficoltà nel ricevere risposte accurate e adeguate alle loro esigenze.
L’azienda ha sottolineato che il modello è ancora in fase di sviluppo e che sono previsti aggiornamenti futuri per affrontare le lacune attuali, oltre a potenziarlo nella scansione biometrica.
