Modell finomhangolás a gyakorlatban · Lecke 04

Az adat, amin az egész múlik

A finomhangolás minősége a példapárokon dől el. Mennyi kell, milyen legyen, és mire jó a szintetikus adat.

Vissza a tananyaghoz


A mennyiség mítosza

A leggyakoribb kérdés, hogy hány példa kell. A tapasztalat és a kutatások iránya egybevág. Egy szűk feladatra pár száz kifogástalan példa is látványos javulást hoz, pár ezer jó példa pedig a legtöbb céges feladatot lefedi. A mennyiségnél sokkal többet számít a tisztaság, mert a modell a hibákat ugyanolyan szorgalmasan tanulja meg, mint az erényeket.

Ez visszavezet az adatközpontú alapszabályhoz. A rossz példa nem semleges, hanem méreg. Ezer példából száz hibás nem tíz százalék veszteség, hanem beépített hibázási hajlam.

1
A forrás a valós munka. A legjobb példapárok a ténylegesen jól megoldott esetekből jönnek, a legjobb kollégák kimeneteiből.
2
A formátum kőbe vésve. Minden példa ugyanabban a szerkezetben, a modell saját beszélgetési sablonjával.
3
A változatosság tudatos. A ritka, nehéz esetek szándékosan felülreprezentálva, mert a gyakoriakat amúgy is megtanulja.
4
A kiértékelő készlet elkülönítve. Már az adatgyűjtésnél félreteszünk egy sosem tanított részt a méréshez.

A szintetikus adat helye

A nagy modellel gyártott tanítópélda a finomhangolás bevett eszköze lett, és jól használva sokat ér. A tipikus munkamenet az, hogy a nagy modell legyártja a példák első hullámát, ember válogatja és javítja, és a kis modell ezen tanul. Így a nagy modell tudásának egy szelete átcsorog a kicsibe, ezt hívja a szakma desztillálásnak.

Két korlát tartozik hozzá. A szintetikus példát ember nézze át, mielőtt tanítóadat lesz, mert a nagy modell hibái különben átöröklődnek. És a szolgáltatók felhasználási feltételei eltérnek abban, szabad-e a kimenetükön rivális modellt tanítani, ezt a választott szolgáltatónál ellenőrizni kell.


Források és további olvasnivaló

A tananyag gerince a Hugging Face ingyenes smol-course kurzusa, amely kis nyelvi modellek instrukciókövetésre hangolását és igazítását tanítja. Az adatminőség módszertana az Adatközpontú AI tananyagban, a szintetikus adat leckében is.