Immagine copertina generata con l’intelligenza artificiale
La gestione delle emergenze attraverso l’intelligenza artificiale entra in una nuova fase grazie a PromptAId Arena, la prima piattaforma pensata per mettere alla prova i principali modelli linguistici e valutare il loro reale contributo nelle situazioni di crisi. L’obiettivo è capire se strumenti come ChatGPT, Gemini e Claude possano diventare un supporto concreto per soccorritori e operatori, evidenziando allo stesso tempo i limiti ancora presenti.
I primi risultati mostrano un quadro particolare: gli LLM sono molto efficaci nell’elaborazione dei dati, ma incontrano difficoltà quando devono interpretare mappe e informazioni geospaziali, elementi fondamentali durante molte emergenze.
PromptAId Arena: un banco di prova per l’AI nelle emergenze
PromptAId Arena nasce per colmare una lacuna nel settore della gestione dei disastri: la mancanza di standard oggettivi per valutare le prestazioni dell’intelligenza artificiale in scenari reali. La piattaforma è stata sviluppata da Jean-Baptiste Bove nell’ambito del suo dottorato sull’intelligenza artificiale applicata al monitoraggio dei disastri, finanziato dalla Croce Rossa Italiana e realizzato con la collaborazione della Fondazione Cima.
Il progetto non è un prodotto commerciale, ma uno strumento di ricerca aperto che permette di confrontare diversi modelli linguistici attraverso simulazioni vicine alle condizioni operative degli interventi di emergenza.
La piattaforma crea scenari realistici scegliendo diversi elementi, come il Paese coinvolto, il tipo di catastrofe, la fase della gestione dell’emergenza e il ruolo dell’utente. Il sistema genera quindi richieste simili a quelle che un operatore potrebbe sottoporre all’intelligenza artificiale durante una crisi.
Gli LLM eccellono con i dati, ma faticano con le mappe
I test effettuati attraverso PromptAId Arena hanno evidenziato capacità e limiti molto specifici dei modelli linguistici. Da un lato, gli LLM dimostrano una notevole abilità nel raccogliere informazioni da fonti diverse e trasformare dati non strutturati in contenuti più facilmente utilizzabili.
Questa caratteristica può essere utile per attività come la preparazione di report, l’organizzazione delle informazioni disponibili e la conversione di dati grezzi in formati compatibili con strumenti operativi.
Dall’altro lato, emerge una criticità significativa: la gestione delle mappe. Secondo le prime valutazioni raccolte, i modelli risultano meno efficaci quando devono generare o interpretare rappresentazioni cartografiche. Questo limite può diventare rilevante in situazioni in cui la posizione precisa delle aree colpite è determinante per coordinare i soccorsi.
La valutazione passa dagli esperti sul campo
Uno degli aspetti distintivi di PromptAId Arena riguarda il metodo con cui vengono giudicate le risposte degli algoritmi. Molti benchmark tradizionali utilizzano altri sistemi di intelligenza artificiale per valutare gli output prodotti dai modelli, ma questo approccio rischia di non considerare la complessità delle situazioni reali.
La piattaforma utilizza invece il contributo di persone con esperienza diretta nella gestione delle emergenze, chiamate a valutare le risposte secondo parametri come precisione, utilità e capacità di spiegare il ragionamento seguito.
I primi dati raccolti dai volontari della Croce Rossa Italiana stanno permettendo di delineare un quadro più preciso delle capacità degli strumenti. L’obiettivo non è stabilire quale modello sia il migliore in assoluto, ma capire in quali attività l’AI possa rappresentare un aiuto concreto e dove invece sia necessario mantenere un controllo umano.
Verso nuovi strumenti AI dedicati alle crisi
PromptAId Arena potrebbe rappresentare il punto di partenza per lo sviluppo di sistemi di intelligenza artificiale più specializzati nella gestione delle emergenze. L’idea alla base del progetto è utilizzare i risultati raccolti per creare un sistema agentico dedicato al settore, capace di supportare meglio operatori e organizzazioni impegnate nelle crisi.
Restano però alcune difficoltà, soprattutto legate alla necessità di ottenere un numero maggiore di valutazioni professionali. Attualmente il progetto si basa anche sul contributo volontario degli esperti, mentre una campagna di test intensivi con gruppi dedicati permetterebbe di raccogliere dati ancora più approfonditi.
La sfida principale resta quindi comprendere fino a dove può arrivare l’intelligenza artificiale senza sostituire il giudizio umano. Prima di affidarle decisioni che possono influire sulla sicurezza delle persone, diventa essenziale sapere con precisione quali sono le sue capacità e quali i suoi limiti.
Funzionalità ridotte fino a 16:12. Le risposte potrebbero essere di qualità inferiore e alcuni strumenti non sono disponibili. Fai l’upgrade per l’accesso premium.Prova Plus gratuitamente
Fonte: Wired
