Come fare in modo che ChatGPT fornisca fonti e citazioni migliori

Non fidarti mai solo delle fonti di ChatGPT. Verifica sempre.

Una delle maggiori lamentele su ChatGPT è che fornisce informazioni di cui è difficile verificare l'accuratezza. Queste lamentele esistono perché ChatGPT non sempre fornisce le fonti, le note a piè di pagina o i collegamenti da cui ha ricavato le informazioni nelle sue risposte.

Ecco come ChatGPT descrive l'approccio: "GPT-4o in modalità gratuita fornisce citazioni di base ed essenziali, concentrandosi su riferimenti rapidi e concisi per garantire che le informazioni siano tracciabili. Al contrario, GPT-4o in modalità a pagamento offre citazioni migliorate, dettagliate e frequenti, tra cui più fonti e annotazioni contestuali per fornire una verifica e una comprensione complete delle informazioni. Ciò garantisce un'esperienza solida e affidabile, particolarmente vantaggiosa per gli utenti che richiedono informazioni approfondite e una verifica approfondita della fonte".

Anche con le citazioni fornite in GPT-4o, ci sono modi per migliorare i risultati.

Come fare in modo che ChatGPT fornisca fonti e citazioni

1. Scrivi una query e chiedi a ChatGPT

Per iniziare, devi chiedere a ChatGPT qualcosa che necessita di fonti o citazioni. Ho scoperto che è meglio fare una domanda con una risposta più lunga, quindi c'è più "carne" da masticare per ChatGPT.

Tieni presente che ChatGPT non può fornire alcuna informazione dopo gennaio 2022 per GPT-3.5, aprile 2023 per GPT-4 e ottobre 2023 per GPT-4o, e le richieste di informazioni pre-internet (ad esempio, per un documento sulla presidenza di Ronald Reagan) avranno molte meno fonti disponibili.

Ecco un esempio di un suggerimento che ho scritto su un argomento su cui ho lavorato molto quando ero alla scuola di specializzazione:

Descrivere le teorie dell'apprendimento del cognitivismo, del comportamentismo e del costruttivismo

2. Chiedi a ChatGPT di fornire fonti

È qui che entra in gioco un po' di ingegneria rapida. Un buon punto di partenza è con questa query:

Si prega di fornire le fonti per la risposta precedente

Ho scoperto che questo prompt fornisce spesso fonti offline, libri, documenti, ecc. Il problema con le fonti offline è che non puoi verificarne la veridicità. Tuttavia, è un punto di partenza. Una query migliore è questa:

Si prega di fornire le fonti URL

Questo prompt indica specificamente a ChatGPT che desideri collegamenti cliccabili alle fonti. Puoi anche modificare questo prompt chiedendo una quantità specifica di fonti, anche se il tuo chilometraggio potrebbe variare in termini di quante ne ricevi indietro:

Si prega di fornire 10 fonti URL

3. Spingi ChatGPT per fornirti fonti di qualità superiore

La maggior parte dei modelli linguistici di grandi dimensioni risponde bene ai dettagli e alla specificità. Quindi, se stai chiedendo fonti, puoi spingere per fonti di qualità superiore. Dovrai specificare che hai bisogno di fonti affidabili e accurate. Anche se questo approccio non funzionerà necessariamente, potrebbe ricordare al chatbot AI di darti risposte più utili. Per esempio:

Per favore forniscimi fonti attendibili a sostegno della mia tesi su... (qualunque sia l'argomento che stai guardando)

Puoi anche dire a ChatGPT i tipi di fonti che desideri. Se stai cercando articoli accademici, riviste peer-reviewed, libri o siti web autorevoli, menziona esplicitamente queste preferenze. Per esempio:

Si prega di consigliare riviste peer-reviewed che discutono... (e qui, ripeti ciò di cui hai discusso in precedenza nella tua conversazione)

Quando si tratta di concetti o teorie astratte, richiedere a ChatGPT di fornire un quadro concettuale ed esempi del mondo reale. Ecco un esempio:

Puoi descrivere i principi della Teoria dello Sviluppo Sociale di Vygotskij e fornire esempi reali in cui questi principi sono stati applicati, comprese le fonti per questi esempi?

Questo approccio fornisce una spiegazione teorica e istanze pratiche per rintracciare le fonti originali o i casi di studio.

Un'altra idea è quella di utilizzare fonti che non hanno link rot (cioè, non sono più online all'URL che ChatGPT potrebbe conoscere). Fai attenzione a questa idea, però, perché ChatGPT non conosce le cose dopo gennaio 2022 per GPT-3.5, aprile 2023 per GPT-4 e ottobre 2023 per GPT-4o. Quindi, anche se potresti essere tentato di utilizzare un prompt come questo:

Per favore forniscimi le fonti pubblicate negli ultimi cinque anni.

Invece, prendi in considerazione l'utilizzo di un prompt come questo:

Si prega di fornire le fonti pubblicate dal 2019 all'aprile 2023.

E, come sempre, non dare per scontato che l'output che ChatGPT ti offre sia accurato. È ancora del tutto possibile che l'intelligenza artificiale fabbrichi completamente le risposte, fino al punto di inventare i nomi di quelle che sembrano riviste accademiche. È uno strumento a volte utile, ma è anche una bufala.

Si prega di fare una ricerca sul web per trovare fonti più aggiornate.

GPT-4o utilizzando il piano Plus effettuerà ricerche sul web. Tieni presente che ChatGPT non convalida realmente i risultati web, quindi anche se potrebbe fornirti fonti successive a ottobre 2023, non c'è alcuna garanzia che le fonti stesse siano accurate.

4. Tentare di verificare/convalidare le fonti fornite

Tieni a mente questa regola d'oro sulle fonti fornite da ChatGPT: ChatGPT è più spesso sbagliato che giusto.

Nelle molte volte in cui ho chiesto a ChatGPT le fonti degli URL, circa la metà erano semplicemente link errati. Un altro 25% o più dei link andava ad argomenti completamente o in qualche modo non correlati a quello che stavo cercando di reperire. GPT-4 e GPT-4o sono leggermente più affidabili, ma non di molto.

Ad esempio, ho chiesto fonti su un background per la frase "fidarsi ma verificare", generalmente resa popolare dal presidente degli Stati Uniti Ronald Reagan. Ho ricevuto molte fonti, ma la maggior parte non esisteva. Ne ho ricevuti alcuni che mi hanno portato correttamente alle pagine attive sul sito della Reagan Presidential Library, ma l'argomento della pagina non aveva nulla a che fare con la frase.

Ho avuto più fortuna con la mia domanda sulla teoria dell'apprendimento del passaggio 1. Lì, ho ricevuto messaggi offline da persone che conoscevo dai miei studi e che avevano lavorato su quelle teorie. Ho anche ricevuto gli URL. Ancora una volta, solo circa due su 10 hanno funzionato o sono stati accurati.

Non disperare. L'idea non è quella di aspettarsi che ChatGPT fornisca fonti che puoi utilizzare immediatamente. Se invece pensi a ChatGPT come a un assistente di ricerca, ti darà degli ottimi punti di partenza. Usa i nomi degli articoli (che potrebbero essere completamente falsi o semplicemente non accessibili) e inseriscili su Google. Questo processo ti darà alcune query di ricerca interessanti che probabilmente portano a materiale interessante che può legittimamente entrare nella tua ricerca.

Inoltre, tieni presente che non sei limitato all'utilizzo di ChatGPT. Non dimenticare tutti gli strumenti a disposizione di ricercatori e studenti. Fai le tue ricerche sul web. Verifica con fonti primarie ed esperti in materia se sono disponibili. Se sei a scuola, puoi anche chiedere aiuto al tuo amichevole bibliotecario di quartiere.

Non dimenticare che ci sono molte ottime fonti tradizionali. Ad esempio, Google Scholar e JSTOR forniscono l'accesso a un'ampia gamma di risorse accademicamente accettabili che puoi citare con ragionevole sicurezza.

Un ultimo punto: se ti limiti a tagliare e incollare le fonti di ChatGPT nella tua ricerca, è probabile che tu venga punto. Usa l'IA per gli indizi, non come un modo per evitare il vero lavoro di ricerca.

Domande frequenti

Diversi LLM di ChatGPT forniranno risultati diversi?

Sì. Discutiamo i principali LLM attualmente disponibili:

GPT-3.5: Questo è l'OG ChatGPT e non è più così comune poiché GPT-4 è disponibile anche con la versione gratuita. 3.5 non poteva citare o verificare le fonti e tendeva a inventare cose abbastanza spesso.
GPT-4: Anche questa è una sorta di versione legacy, ma è disponibile per gli abbonati Plus e per alcuni utenti API. Aveva anche la tendenza ad avere allucinazioni e non forniva URL a meno che non fosse richiesto (e gli URL erano spesso sbagliati).
GPT-4o: questa è ora la versione principale di GPT disponibile sia per gli utenti gratuiti che per quelli Plus. Fornisce citazioni di qualità superiore, fonti con un certo contesto e URL più accurati. Tuttavia, la versione gratuita alloca risorse di calcolo sostanzialmente ridotte, il che si traduce in una minore frequenza e in una riduzione dei dettagli nelle sorgenti perché la versione gratuita ottimizza l'accesso piuttosto che la profondità. La versione a pagamento fornisce la ricerca sul web, che ti consentirà di ottenere fonti (di vari gradi di qualità) a partire dalla data limite della knowledge base di ottobre 2023.
GPT-o1: questo è il modello "pensante" di OpenAI, che richiede un po' più di tempo per elaborare le risposte. Detto questo, non aspettatevi citazioni di fonti di qualità superiore perché, anche se elabora i concetti più intensamente, non ha più dati o migliori con cui lavorare rispetto a GPT-4o.

La linea di fondo è che GPT-4o fornirà le migliori fonti in questo momento e se desideri le migliori offerte di ChatGPT quando si tratta di profondità delle fonti e citazioni, ti consigliamo di pagare per la versione Plus da $20 al mese.

Come si mettono le fonti in formato APA?

Lo stile APA è uno stile di citazione spesso richiesto nei programmi accademici. APA è l'acronimo di American Psychological Association. Ho spesso pensato che si siano inventati queste regole di stile per avere più clienti. Il punto di partenza definitivo per lo stile APA è il Purdue OWL, che fornisce un'ampia gamma di linee guida di stile.

Fai attenzione: i formattatori di stile online potrebbero non fare un lavoro completo e potresti ricevere il tuo lavoro restituito dal tuo professore. Vale la pena fare il lavoro da soli e fare attenzione a farlo.

Come posso fare in modo che ChatGPT fornisca fonti più affidabili per le sue risposte?

Questa è una buona domanda. Ho scoperto che a volte, a volte, se chiedi a ChatGPT di fornirti più fonti o di chiedere nuovamente le fonti, ti darà nuovi elenchi. Se dici a ChatGPT che le fonti che ha fornito erano errate, a volte te ne darà di migliori. Il bot può anche scusarsi e fornire scuse. Un altro approccio consiste nel riformulare la domanda originale con un focus o una direzione diversa, quindi chiedere le fonti per la nuova risposta.

Ancora una volta, il mio miglior consiglio è di evitare di trattare ChatGPT come uno strumento che scrive per te e più come un assistente alla scrittura. Chiedere alle fonti di copiare e incollare una risposta di ChatGPT è praticamente plagio. Detto questo, utilizzare le risposte di ChatGPT e tutte le fonti che puoi estrarre, come indizi per ulteriori ricerche e scrittura è un modo legittimo per utilizzare questo strumento.

Perché le fonti di ChatGPT sono spesso così sbagliate?

Per alcuni link, è solo link rot. Alcuni link potrebbero essere cambiati, dato che molte fonti hanno più di tre anni. Altre fonti sono di età indeterminata. Dal momento che non abbiamo un elenco completo delle fonti di ChatGPT, è impossibile dire quanto siano valide o lo fossero.

Poiché ChatGPT è stato addestrato per lo più senza supervisione umana, sappiamo che la maggior parte delle sue fonti non sono state controllate e potrebbero essere sbagliate, inventate o completamente inesistenti.

Fidati, ma verifica.