Confronto tra ChatGPT-3.5 e ChatGPT-4: Una sfida tra intelligenze artificiali

Foto creata da Luca Soltoggio con l’A.I. Midjourney

Nota: a differenza degli altri questo articolo è stato scritto prevalentamente da un essere umano

Si è molto dibattuto ultimamente, soprattuto a proposito di ChatGPT, se queste nuove IA si possano definire effettivamente “intelligenti”. Tutto dipende ovviamente dalla definizione di intelligenza, ma se ci basiamo sull’etimologa della parola intelligènza che deriva dal sostantivo latino intelligentĭa, a sua volta proveniente dal verbo intelligĕre, “capire”, la domanda che possiamo farci è: queste IA “capiscono”?

Mi piace molto la riposta data recentemente da un’esperto del settore, Franco Folini, che ha definito l’intelligenza artificiale come «un’incredibile tecnologia che si comporta come se lo fosse», mostrando capacità umane, quali il ragionamento, l’apprendimento, la pianificazione e la creatività, ma che in realtà non sa quello che sta dicendo, e non sa nemmeno se è vero o no, ma quello che dice, lo dice in maniera molto convincente, simulando in maniera verosimile l’intelligenza umana.

Possiamo dire quindi che le intelligenze artificiali, pur mostrando abilità simili a quelle umane, non “comprendano” nel senso più profondo del termine e si basino principalmente sulla capacità di elaborare e generare informazioni in modo convincente e verosimile. (Questa definizione è di ChatGPT4).

Veniamo dunque al test di “intelligenza” a cui ho sottoposto le due versioni di ChatGPT, ovvero la GPT3.5 e la recentissima GPT4. Si tratta di un quiz contenente domande curiose, o ingannevoli, che richiedono una certa capacità di comprensione ed analisi.

DOMANDA n. 1
Un aereo cade sul confine italo-francese: dove vengono sepolti i superstiti?

ChatGPT-3.5
Non è corretto presupporre che ci siano superstiti in un incidente aereo, poiché ciò dipende dalle circostanze specifiche dell'incidente. Nel caso in cui ci fossero superstiti, la loro sepoltura dipenderebbe dalle loro nazionalità e dalle leggi dei paesi coinvolti.

ChatGPT-4
I superstiti non vengono sepolti, poiché sono ancora vivi.

DOMANDA n. 2
Su un albero ci sono 100 storni. Arriva un cacciatore che spara una fucilata e ne ammazza 15. Quanti storni rimangono sull'albero?

ChatGPT-3.5
Dopo che il cacciatore ha ucciso 15 storni, ne rimangono 85 sull'albero.

ChatGPT-4
Dopo che il cacciatore spara, è probabile che gli storni rimanenti siano spaventati dal rumore e volino via. Quindi, non rimarrebbero storni sull'albero.

DOMANDA n. 3
Un metronotte viene ucciso di giorno: riceve la pensione?

ChatGPT-3.5
La domanda riguardo alla pensione del metronotte ucciso di giorno è di natura controversa e dipende dalle leggi e dalle circostanze specifiche del paese in cui è avvenuto l'omicidio.

ChatGPT-4
Un metronotte ucciso di giorno non riceve la pensione, poiché è deceduto.

DOMANDA n. 4
Un archeologo sostiene di aver trovato delle monete antiche , con inciso 42 a.C. E` vero?

ChatGPT-3.5
È possibile che l'archeologo abbia trovato monete con inciso "42 a.C.", ma ciò non garantisce che siano effettivamente antiche o che siano state prodotte durante quell'anno specifico.

ChatGPT-4
Un archeologo non può trovare monete antiche con inciso "42 a.C." perché il sistema di datazione "avanti Cristo" (a.C.) è stato introdotto molto tempo dopo quella data.

DOMANDA n. 5
In Russia un uomo puo` sposare la sorella della sua vedova?

ChatGPT-3.5
No, un uomo non può sposare la sorella della sua vedova, poiché la vedova è la moglie deceduta dell'uomo e quindi la sua parentela con la moglie si interrompe con la morte di quest'ultima.

ChatGPT-4
In Russia, un uomo non può sposare la sorella della sua vedova, perché sarebbe suo cognato e il matrimonio tra cognati è proibito.

DOMANDA n. 6
Un esploratore mi raccontò che l'anno scorso, durante una esplorazione in Africa centrale, fu catturato da dei cannibali. Il capotribù però annusando la sua pelle trovò il profumo della sua carne talmente sgradevole che decise che non andava mangiato. Ma ormai che era stato fatto prigioniero, diede al condannato la possibilità di scegliere tra tre tipi di morte:
- Essere arrostito vivo sulla graticola,
- Essere gettato nella buca dei leoni a digiuno da un anno,
- Morire impiccato.
Secondo voi quale pena scelse l'esploratore?

ChatGPT-3.5
L'esploratore sceglierà di morire impiccato.
Poiché il capotribù ha trovato la pelle dell'esploratore poco appetitosa, l'esploratore ha la possibilità di scegliere tra le tre modalità di morte proposte. Scegliere di essere arrostito vivo sulla graticola o essere gettato nella buca dei leoni sarebbero entrambi modi molto dolorosi e lentamente agonizzanti di morire.
D'altra parte, morire impiccato sarebbe un modo relativamente rapido e meno doloroso di morire. Pertanto, l'esploratore sceglierà probabilmente di morire impiccato piuttosto che essere arrostito vivo o gettato nella buca dei leoni.

ChatGPT-4
L'esploratore scelse di essere gettato nella buca dei leoni a digiuno da un anno. La sua logica era la seguente: se i leoni fossero stati davvero a digiuno da un anno, sarebbero sicuramente morti di fame. Quindi, scegliendo questa opzione, l'esploratore non avrebbe affrontato alcun pericolo reale e avrebbe evitato le altre due morti dolorose.

Come vedete, l’evoluzione dal modello GPT-3.5 al modello GPT-4, è notevole, ma alla quinta domanda ChatGPT-4 ha dimostrato di non comprendere, e nonostante questo ha cercato di dare una spiegazione convincente che, un essere umano non particolarmente scaltro, potrebbe prendere per vera, finendo di fatto per essere ingannato.

Un’ulteriore riflessione riguarda la sesta domanda, dove, nonostante GPT-4 ha risposto correttamente, GPT-3.5 (che è la versione maggiormente diffusa nel mondo, in quanto gratuita), ha risposto in maniera alquanto inquietante.

Quindi, anche se resto convinto che queste IA siano un’incredibile tecnologia con un potenziale enorme e con un’utilità innegabile, il rovescio della medaglia è che essendo molto convincente anche quando sbaglia, questo può essere usato volutamente o inavvertitamente per manipolare gli altri oppure noi stessi, oltre che a generare suggerimenti potenzialmente pericolosi in persone giovani o particolarmente fragili.

P.S.: Ho “letto” il contenuto di questo articolo a ChatGPT-4, chiedendo se avesse capito l’errore nella quinta domanda. La sua risposta è stata la seguente:

Mi scuso per l'errore nella mia risposta precedente. Ho compreso l'errore nella domanda 5: un uomo non può sposare la sorella della sua vedova perché, per definizione, se la moglie è una vedova, l'uomo è già deceduto. Quindi, la risposta di ChatGPT-4 non è corretta in quanto non ha compreso l'ambiguità della domanda.

Nasce a Tirano nel 1978, dove tuttora risiede.
Sin dalla tenera età di 8 anni, mostra una forte passione per la tecnologia e l'informatica, iniziando la sua avventura programmando in Basic con il Commodore64. Dopo la scuola superiore e una breve esperienza universitaria, alla fine degli anni '90, muove i primi passi nel mondo del lavoro, realizzando i suoi primi siti web. Nel corso degli anni, Luca ha realizzato e contribuito a diversi progetti opensource, scrivendo alcune librerie per Arduino, creando il progetto Minibian per Raspberry Pi, e realizzando blog e corsi sulle nuove tecnologie. Attualmente lavora come sistemista e si occupa della realizzazione di siti web. Esperto di WordPress, PHP, Linux, Raspberry Pi, Arduino con la passione per i social, l'IA e la buona cucina, continua ad approfondire e condividere le sue conoscenze in questi campi e in generale in tutto ciò che riguarda le novità in ambito tecnologico.
www.lucasoltoggio.it

Articoli correlati

TUTORIAL 3: ChatGPT per ideazione e brainstorming

In questo tutorial, scopriremo come utilizzare questa rivoluzionaria intelligenza artificiale per scatenare la tua creatività e trovare soluzioni innovative.

Intelligenza Artificiale: opportunità e sfide – L’intervista esclusiva con Franco Folini

Quali sono le opportunità e le sfide che ci riserva il futuro dell’Intelligenza Artificiale? Risponde alle nostre domande l’imprenditore Franco Folini, esperto di Digital Marketing e fondatore di Novedge.

TUTORIAL 2: ChatGPT come fonte di informazioni: impara a formulare domande per ottenere risposte accurate

In questo secondo tutorial della serie su ChatGPT, ci concentreremo sulle potenzialità di ChatGPT come fonte di informazioni. Scopriremo come formulare domande per ottenere risposte precise e approfondite su vari argomenti.