Perché un solo modello non basta
L'argomento consueto a favore di più modelli di IA è che ognuno è più bravo in qualcosa, quindi conviene scegliere il migliore per ogni compito. È vero, ma è la ragione meno interessante.
La ragione migliore è che un modello non riesce a vedere i propri punti ciechi. Chiedi a un modello di controllare il proprio lavoro e nella maggior parte dei casi te lo confermerà, perché gli stessi pesi che hanno prodotto l'errore hanno prodotto anche la sicurezza. Chiedilo a un modello diverso, addestrato in modo diverso su dati diversi e con difetti diversi, e noterà cose che il primo non poteva vedere. Non è un trucco: è la stessa ragione per cui chiedi a un collega di rileggere la tua email prima di inviarla al cliente.
La seconda ragione è pratica: la classifica dei modelli cambia di continuo. Chi è il migliore nella programmazione in questo trimestre potrebbe non esserlo nel prossimo. Un flusso di lavoro costruito su un unico fornitore va rifatto ogni volta che la classifica si muove. Un flusso di lavoro costruito sull'idea che i modelli si cambiano non ha questo problema.
Qui sotto trovi quattro schemi, in ordine di valore rispetto alla fatica richiesta. Non ti servono tutti e quattro. La maggior parte delle persone ottiene quasi tutto dai primi due.
Schema 1: prima la bozza, poi la critica di un altro modello
Lo schema con il valore più alto, e quello che quasi nessuno usa. Scrivi con un modello, fai rivedere a un altro.
Funziona perché generare e valutare sono due mestieri diversi. Un modello che produce testo punta a una continuazione coerente. Un modello che valuta un testo che non ha scritto non ha nulla da difendere, quindi ti dirà che il terzo paragrafo non regge invece di ammorbidire il problema.
Qui il prompt conta enormemente. Chiedere "che ne pensi di questo testo" ti procura solo complimenti. Chiedi invece così:
Non hai scritto tu il testo qui sotto e non hai alcun interesse in gioco. Rivedilo come un editor scettico. Elenca, in quest'ordine: 1) ogni affermazione fattuale sbagliata, non supportata o troppo netta, 2) ogni punto in cui il ragionamento non regge davvero, 3) il singolo paragrafo più debole e il motivo preciso. Non riscrivere nulla. Non dirmi cosa funziona bene.
Le tre istruzioni finali fanno il lavoro vero. "Non riscrivere" gli impedisce di produrre una versione con la sua voce, che non è quello che hai chiesto. "Non dirmi cosa funziona bene" elimina i complimenti automatici che gonfiano quasi tutti i commenti dell'IA. "Non hai scritto tu questo testo" è un'inquadratura sorprendentemente efficace, perché impedisce al modello di difendere scelte che crede proprie.
Poi riporta la critica al primo modello, con le parti che condividi. Sei tu l'editor che decide quali osservazioni accettare, e questa è esattamente la divisione dei compiti giusta.
Quando vale i due minuti in più: tutto ciò che va a un cliente, tutto ciò che diventa pubblico, tutto ciò in cui sbagliare costa caro. Quando non vale: un messaggio su Slack, una scaletta di primo getto, una lista della spesa.
Schema 2: il controllo dei disaccordi
È la cosa più simile a un rilevatore di allucinazioni affidabile che non richieda di verificare tutto a mano.
Fai la stessa domanda fattuale a due modelli diversi, separatamente, con lo stesso prompt. Poi confronta. Dove concordano, probabilmente va bene. Dove divergono, hai trovato il punto esatto da controllare.
La tecnica è tutta qui, ed è potente perché le allucinazioni di solito non sono condivise. Quando un modello inventa una statistica, il nome di una sentenza, la firma di una funzione o una data, un modello diverso addestrato in modo diverso raramente inventa la stessa cosa. L'accordo è un indizio debole di correttezza. Il disaccordo è un indizio forte che qualcosa non va, e punta dritto al problema.
Se le affermazioni sono parecchie, lascia che sia il confronto a lavorare per te:
Qui sotto trovi due risposte alla stessa domanda, indicate come A e B. Ignora stile e lunghezza. Elenca ogni punto sostanziale in cui divergono, comprese le differenze di numeri, date, nomi e di quanto un'affermazione sia netta. Per ogni disaccordo, dimmi quale versione è più probabilmente corretta e quale singola fonte lo chiarirebbe.
Ti ritrovi con una lista breve di cose da controllare invece che con un documento lungo da verificare riga per riga, e di solito la lista indica davvero dove sono i problemi.
Due avvertenze. Primo: i modelli possono condividere un errore se è diffuso in rete, quindi il metodo scopre le invenzioni, non la disinformazione molto diffusa. Secondo: non saltare la verifica solo perché due modelli concordano. Questo restringe ciò che devi controllare, non elimina il controllo.
Usalo per: statistiche, affermazioni legali e mediche, fatti storici, dettagli di API, tutto ciò di cui potresti essere citato. Saltalo per: opinioni, lavori creativi e tutto ciò in cui andare vicino basta.
Schema 3: smista in base al compito
Lo schema ovvio, che però vale la pena fare bene. Manda ogni tipo di lavoro al modello che se la cava meglio, invece di mandare tutto a quello che hai già aperto.
| Compito | Scegli | Perché |
|---|---|---|
| Prima bozza di un testo | Il modello più forte nella scrittura | Stai risparmiando tempo di revisione |
| Revisione di quella bozza | Un modello diverso | Occhi nuovi, difetti diversi |
| Qualcosa su questa settimana | Un modello con ricerca dal vivo | I dati di addestramento sono sempre indietro |
| Un documento o un codice molto lungo | Un modello con contesto ampio | Deve entrarci prima di poter essere capito |
| Logica difficile, matematica, bug ostici | Un modello di ragionamento esteso | Più lento e molto più preciso sui problemi a più passaggi |
| Lavoro ripetitivo ad alto volume | Un modello economico e veloce | La qualità di punta è sprecata per classificare ed etichettare |
| Qualcosa di sensibile | Quello conforme alle tue regole sui dati | Le capacità non superano i tuoi obblighi |
L'unica abitudine che vale la pena costruire: smetti di usare sempre lo stesso. Quasi tutti usano per ogni cosa il modello incluso nel loro abbonamento, anche per compiti in cui è debole, e poi concludono che l'IA su quei compiti non funziona. Dieci secondi di riflessione su quale modello sia adatto cambiano il risultato più di un'ora passata a limare il prompt.
Per la versione più completa di questa decisione, leggi come scegliere un modello di IA, e cos'è una finestra di contesto per capire perché esiste la riga sui documenti lunghi.
Schema 4: la staffetta con un passaggio scritto
Nei lavori che attraversano più fasi, il punto debole è lo spazio tra una fase e l'altra. Spieghi il progetto a un modello, arrivi a qualcosa di utile, poi passi a un altro modello e incolli un muro di cronologia oppure rispieghi tutto male.
Risolvi chiedendo il passaggio in modo esplicito prima di cambiare:
Scrivi un briefing di passaggio per un altro assistente che non ha visto questa conversazione. Includi: cosa stiamo cercando di produrre, le decisioni già prese e il perché, i vincoli e le cose da evitare, cosa è stato provato e scartato, ed esattamente cosa mi serve adesso. Sii abbastanza preciso da permettergli di continuare senza farmi nessuna domanda.
Serve anche quando non stai cambiando modello. È il modo più pulito per uscire da una conversazione lunga diventata lenta e vaga, perché conservi la sostanza e butti via il rumore accumulato. Incolla il briefing in una chat nuova e la qualità di solito risale subito.
Una staffetta realistica va così. Dai un report di 200 pagine a un modello con contesto ampio e chiedi un riassunto strutturato con i dieci passaggi che contano, citati. Porta quelli in un modello forte nella scrittura e produci la nota per il cliente. Esegui il passaggio di critica dello schema uno con un terzo modello. Tempo totale, circa quindici minuti, e ogni fase ha usato lo strumento adatto.
Quando non vale la pena
I flussi di lavoro con più modelli hanno un costo di gestione, e fingere il contrario è il modo in cui si finisce con un processo elaborato per scrivere un'email di due righe.
Usa un solo modello quando: il compito è piccolo, sbagliare costa poco, stai esplorando invece di produrre, stai procedendo in fretta e l'attrito ti spezzerebbe il ritmo, oppure il lavoro è davvero creativo e un secondo parere intorbidisce solo la tua voce.
Usane due o più quando: il risultato va a qualcun altro, l'accuratezza dei fatti conta, il compito ha fasi distinte che richiedono capacità diverse, sei bloccato e ti serve un punto di vista davvero diverso, oppure stai per prendere una decisione basata su quello che ti ha detto il modello.
Una regola ragionevole: se lo faresti guardare a un collega, chiedilo a un secondo modello. Se non lo faresti, lascia perdere.
Renderlo praticabile
Tutto questo è semplice in teoria e fastidioso in pratica se ogni modello vive dietro un abbonamento diverso. L'attrito è reale: schede separate, cronologie separate, il contesto da copiare da una parte all'altra, la formattazione che si perde e quella piccola resistenza per cui salti il passaggio di critica proprio nel giorno in cui ti servirebbe di più.
È esattamente per questo attrito che gli schemi qui sopra vengono usati poco. Non sono difficili, sono solo abbastanza noiosi da saltare quando hai fretta.
È a questo che serve uno spazio di lavoro multimodello. In Whizi, i modelli stanno nella stessa conversazione, quindi un passaggio di critica significa cambiare modello e chiedere, non aprire un altro prodotto e incollare la bozza. Una sola cronologia, una sola ricerca su tutto ciò che hai mai chiesto, una sola fattura. Guarda come cambiare modello a metà conversazione e come confrontare i modelli fianco a fianco per vedere come funzionano davvero quei due passaggi.
Se preferisci metterti insieme il tutto con abbonamenti separati, questi schemi funzionano lo stesso e vale comunque la pena usarli. L'unica cosa che cambia è quanto spesso avrai voglia di farlo. Se stai già pagando due o tre piani per rendere possibile tutto questo, prova prima il calcolatore di risparmio, perché di solito quella è la via più cara per ottenere lo stesso risultato.
Comincia dallo schema uno. Prendi la prossima cosa che scrivi e che qualcun altro leggerà, passa il prompt di critica a un modello diverso e guarda cosa salta fuori. Quella singola abitudine vale più di tutto il resto di questo articolo.
- Scrivi la bozza con un modello e falla criticare da un altro prima che esca.
- Usa il prompt di critica che vieta la riscrittura e vieta i complimenti.
- Fai la stessa domanda fattuale a due modelli e controlla ogni punto in cui divergono.
- Smista documenti lunghi, logica difficile e domande di attualità ai modelli adatti.
- Chiedi un briefing di passaggio scritto prima di cambiare modello o aprire una chat nuova.
- Salta tutto questo per i lavori piccoli, poco rischiosi o esplorativi.
Domande frequenti
Perché usare più di un modello di IA?
Perché un modello non riesce a vedere i propri punti ciechi. Un secondo modello, addestrato in modo diverso, scopre errori su cui il primo era sicurissimo. In più il tuo flusso di lavoro non si rompe ogni volta che un altro laboratorio passa in testa su un certo tipo di compito.
Come scopro le allucinazioni dell'IA?
Fai la stessa domanda a due modelli diversi separatamente e confronta. I fatti inventati raramente vengono inventati due volte allo stesso modo, quindi ogni punto in cui le risposte divergono è dove devi verificare. L'accordo restringe i controlli, ma non li elimina.
Quale modello deve scrivere e quale deve rivedere?
Scrivi la bozza con il modello che richiede meno correzioni per il tuo tipo di lavoro, di solito un modello forte nella scrittura, e fai rivedere a un altro. Chi revisiona conta meno del fatto che sia un modello diverso, con difetti diversi.
Usare più modelli vale il tempo in più?
Per tutto ciò che va a un'altra persona o di cui rispondi, sì, e il passaggio di critica richiede circa due minuti. Per lavori rapidi, poco rischiosi o esplorativi è una complicazione inutile. Se lo faresti controllare a un collega, chiedilo a un secondo modello.
Servono più abbonamenti per farlo?
No. Uno spazio di lavoro multimodello ti dà i modelli principali con un solo piano e una sola cronologia, il che elimina l'attrito che spinge le persone a saltare questi passaggi. Anche gli abbonamenti separati funzionano, rendono solo più difficile mantenere le buone abitudini.