Miért kell egyáltalán darabolni
Egy hatvan oldalas szabályzat egészében nem használható visszakeresésre. Ha egyetlen egységként kezeljük, akkor vagy mindig kikerül, vagy soha, és egyik sem jó. Ezért bontjuk kisebb részekre, amelyek külön kereshetők.
A kérdés az, hol vágjunk. Ez a döntés határozza meg, hogy a megtalált darab önmagában értelmes lesz-e, vagy egy mondat közepén kezdődik és sehova nem vezet.
A határ helye fontosabb, mint a méret
A leggyakoribb megoldás az, hogy fix karakterszámonként vágunk. Ez egyszerű, és pontosan ezért rossz. Nem veszi figyelembe, hogy a dokumentumnak szerkezete van.
Sokkal jobb a dokumentum saját határai mentén vágni. Bekezdés, alfejezet, szakasz. Egy szabályzatnál a paragrafus, egy jegyzőkönyvnél a napirendi pont, egy termékleírásnál a termék.
Ha a forrás strukturált, például táblázat vagy kód, akkor végképp nem szabad karakterszám szerint vágni. Egy félbevágott táblázat rosszabb, mint a semmi, mert a modell értelmezni fogja, és tévesen.
Egy egyszerű minőségpróba. Olvass el találomra tíz darabot úgy, ahogy vannak, kontextus nélkül. Ha nem érted, miről szólnak, akkor a modell sem fogja érteni, és rossz lesz a válasz még akkor is, ha a keresés eltalálta.
Az átfedés
Szokás a szomszédos darabok között kis átfedést hagyni, hogy a határon átnyúló gondolat ne vesszen el. Ez hasznos, de mértékkel. A nagy átfedés megsokszorozza a tárolt adatot, és a keresés ugyanazt a tartalmat többször fogja visszaadni.
Ennél gyakran hatékonyabb, ha minden darab elé odaírjuk, honnan származik. A dokumentum címe, a fejezet neve, a dátum. Ez néhány szó, viszont a darab önmagában értelmessé válik tőle.
A metaadat, amit érdemes megőrizni
Minden darab mellé kerüljön oda a forrás azonosítója, a dokumentum címe, a keletkezés vagy módosítás dátuma, és ha van, a jogosultsági besorolás.
Ez a négy adat teszi lehetővé, hogy a válasz mellé hivatkozást tegyünk, hogy szűrni tudjunk időszakra, és hogy senki ne kapjon vissza olyan tartalmat, amit nem láthat. Az utólagos hozzáadás mindig fájdalmas, ezért az elején kell megcsinálni.
Workshop
AI Transformation Day
Egésznapos, vezetőknek szóló program. Feltérképezzük, hol tart a szervezet, mi az első reális lépés, és milyen belső feltételek szükségesek a sikerhez. A nap végén konkrét, prioritizált cselekvési lista.
Érdekel a program →