Aprenent IA

Com evitar que la teva IA escrigui igual que totes

Un estudi de Jiayi Zhang i sis autors més proposa Verbalized Sampling, una estratègia de prompting que no exigeix reentrenar el model, per esquivar el col·lapse de mode: la pèrdua de diversitat que sovint provoca el post-entrenament d'alineament en els models de llenguatge. L'origen, segons Jiayi Zhang i els seus coautors, és el biaix de tipicitat de les dades de preferències. Els autors ho van provar en escriptura creativa (poemes, relats i acudits), simulació de diàleg i generació de dades sintètiques; aquesta guia trasllada aquestes proves a la pràctica, tot i que l'estudi no en va mesurar l'efecte en els textos propis del lector.

Il·lustració: en una aula, una professora desconcertada mostra tres dibuixos idèntics d'una palmera a la posta de sol; al costat somriuen tres alumnes amb samarretes d'OpenAI, Claude i Gemini, i una alumna asseguda riu.
📷 Imatge generada amb IA

En resum

  • Després del post-entrenament d'alineament, els models de llenguatge sovint perden diversitat: és el col·lapse de mode.
  • Una causa clau, segons els autors, és el biaix de tipicitat: qui puntua les respostes prefereix el text familiar.
  • En escriptura creativa, segons els autors, demanar diverses respostes amb la seva probabilitat multiplica la diversitat per 1,6-2,1 respecte del prompt directe.
  • Un consell pràctic, segons la documentació de Claude: donar 3–5 exemples pertinents i variats del to que es busca.

Per què la teva IA sona igual que la de tothom

Que molts textos generats amb IA s'assemblin té explicació. La proposa un treball publicat al repositori arXiv amb l'identificador 2510.01171 i signat per Jiayi Zhang, Simon Yu, Derek Chong, Anthony Sicilia, Michael R. Tomz, Christopher D. Manning i Weiyan Shi, de Northeastern University, Stanford University i West Virginia University. La primera versió és de l'1 d'octubre de 2025 i l'última revisió, del 15 de juliol de 2026.

El seu punt de partida és conegut: el post-entrenament d'alineament, la fase que ajusta un model per conversar, en redueix sovint la diversitat. Aquest fenomen s'anomena col·lapse de mode.

L'origen és a les preferències humanes

Pes estimat de la tipicitat en les preferències
Model base de referència Pes estimat de la tipicitat
Llama-3.1-405B 0,57 ± 0,07
GLM-4.5 0,65 ± 0,07
Parells de respostes del conjunt HelpSteer amb la mateixa valoració d'exactitud; els dos resultats són estadísticament significatius. Dades segons Jiayi Zhang i el seu equip.
Il·lustració: cinc persones en un taulell tasten gelats de cinc gustos; al costat de cada terrina hi ha un pot de vidre amb bales, i el de la vainilla és el més ple.
📷 Imatge generada amb IA

Altres treballs atribuïen el col·lapse de mode a limitacions dels algorismes. Hi ha, a més, una causa a les dades, segons Jiayi Zhang i els seus coautors: els anotadors afavoreixen sistemàticament el text familiar, cosa que encaixa amb troballes consolidades de la psicologia cognitiva. Els autors formalitzen aquest biaix en teoria i sostenen que hi té un paper central.

També el van mesurar en dades de preferències, del tipus que s'utilitza per ajustar models amb aprenentatge per reforç amb retroalimentació humana (RLHF, reinforcement learning from human feedback). Van estimar quant pesa la tipicitat en allò que trien les persones, independentment de la qualitat real de la resposta, i el biaix va ser estadísticament significatiu amb els dos models base que van fer servir com a referència, segons Jiayi Zhang i el seu equip; la taula en recull les estimacions. Dit planerament: amb la mateixa qualitat, qui puntua tendeix a preferir la resposta que al model base li resulta més típica.

La tècnica: demanar diverses respostes amb la seva probabilitat

Resultats de VS en escriptura creativa
Què es va mesurar Resultat amb VS Comparat amb
Diversitat Multiplicada per 1,6-2,1 Prompt directe
Diversitat valorada per avaluadors humans +25,7 % en les puntuacions Sense precisar pels autors
Xifres comunicades pels autors, no recalculades. Dades segons Jiayi Zhang i el seu equip.
Il·lustració: en una cafeteria, un jove entusiasmat tria entre diverses begudes de cafè arrenglerades a la barra, cadascuna amb una pesa de llautó al davant, mentre el cambrer somriu.
📷 Imatge generada amb IA

La proposta de l'estudi es diu Verbalized Sampling (VS). Funciona, segons Jiayi Zhang i els seus coautors, perquè cada tipus de petició col·lapsa cap a un mode diferent: quan es demana un sol text, la resposta modal tendeix a l'estereotip; quan es demana una distribució, s'acosta a la diversitat que el model va aprendre en el preentrenament.

Els autors ho van provar en poemes, relats i acudits, en simulació de diàlegs i en generació de dades sintètiques. En escriptura creativa, segons Jiayi Zhang i el seu equip, VS augmenta la diversitat sense sacrificar la precisió factual ni la seguretat; la taula recull les xifres que comuniquen.

El mètode no necessita accedir a les puntuacions internes del model (logits), i l'estudi el va provar en models tancats, entre els quals diversos de la sèrie Claude, i en models oberts. A més, es pot combinar amb la temperatura i altres paràmetres de mostreig.

Practica amb el teu pròxim text

Pràctica: d'una resposta a diverses
Pas Què demanes (exemple didàctic) Què cal observar
Petició directa Escriu el primer paràgraf d'un relat sobre un far. El to, les imatges i l'estructura que surten per defecte.
Diverses respostes amb la seva probabilitat Escriu cinc primers paràgrafs diferents d'un relat sobre un far i indica la probabilitat que assignes a cadascun. Si les versions es distingeixen de debò o només canvien paraules.
Llindar baix Escriu cinc primers paràgrafs diferents d'un relat sobre un far, tots amb una probabilitat inferior a la que triïs. Si apareixen opcions menys previsibles i si continuen sent útils per al teu text.
Prompts creats per a aquesta guia. El mètode i l'ajust per llindar, segons Jiayi Zhang i els seus coautors.

La taula proposa tres passos. Els prompts són exemples didàctics creats per a aquesta guia, no els de l'estudi ni resultats d'una prova: serveixen perquè comparis el que obtens. El segon pas aplica VS; el tercer, l'ajust que descriu el treball: segons Jiayi Zhang i els seus coautors, com més baix és el llindar de probabilitat que es demana, més diversa és la sortida.

Què aconsella la documentació de Claude

La segona via no prové de l'estudi, sinó de la guia oficial de prompting de Claude, i es refereix a aquest model. Els exemples són una de les maneres més fiables d'orientar el format, el to i l'estructura de la resposta, segons la documentació de Claude, que recomana incloure 3–5 exemples pertinents i variats, perquè el model no copiï patrons no buscats.

La mateixa guia aconsella dir què cal fer en lloc de què no cal fer, i ajustar l'estil del prompt al del text que es vol, perquè el format del prompt pot influir en el de la resposta, segons la documentació de Claude. Adverteix, a més, que quan un consell esmenta un model concret, es va provar en aquell model, i convé comprovar-lo amb avaluacions pròpies abans d'aplicar-lo a un altre: són recomanacions del proveïdor, no resultats d'un experiment.

Els límits del mètode

Il·lustració: una dona somrient col·loca peses de llautó damunt de cafès de mida decreixent, la més grossa amb la paraula HEAVY; una altra dona, desconfiada, assenyala una bàscula carregada de peses.
📷 Imatge generada amb IA

El mateix treball n'enumera els límits. Generar una distribució de candidats, segons Jiayi Zhang i els seus coautors, costa més en latència i en tokens que demanar una sola resposta, cosa que en pot restringir l'ús quan el temps o els recursos són escassos. Els models més capaços es beneficien més de VS, mentre que els menys capaços podrien no tenir el raonament necessari i, de vegades, empitjorar la qualitat.

Per prudència, convé llegir les probabilitats que dona el model com una guia per triar entre versions, no com una mesura exacta; segons els autors, els guanys de diversitat no depenen d'un calibratge numèric exacte. L'elecció final continua sent de qui escriu.

Conclusió

Que la IA escrigui com totes no és inevitable. El col·lapse de mode, segons Jiayi Zhang i els seus coautors, es pot mitigar en el moment de la inferència, només amb el prompt, i els models alineats conserven una diversitat notable. Demanar diverses versions amb la seva probabilitat és la primera eina; amb Claude, a més, hi ajuden, segons la documentació de Claude, els exemples variats del to que es busca i un prompt amb el mateix format que es vol a la resposta.

Fonts primàries

Comentaris

Sigues respectuós. Els comentaris es moderen.

    La continuació natural

    Aprèn IA al teu ritme amb els nostres cursos gratuïts.

    A la nostra plataforma d'aprenentatge TAKU podràs accedir a aquest i a molts altres cursos de manera totalment gratuïta.

    APRENDRE AMB TAKU

    ← Torna al blog