Műszaki ÚTMUTATÓ

Ütemezett mintavétel és expozíciós torzítás

Az expozíciós torzítás az a rés, amely akkor jelenik meg, amikor a csak tökéletes előtagokra oktatott modellnek a következtetés során saját tökéletlen kimeneteit kell feltételhez kötnie.

2 perc olvasásUtoljára frissítve

Áttekintés

Scheduled sampling is a curriculum that gradually closes that gap.

Mély merülés

A tanárkényszerrel kiképzett modellek mindig csak az alapigazság jelzőket látják kontextusként, de generációs időkben saját előrejelzéseikre adnak visszajelzést. Amikor egy korai hiba olyan állapotba hozza a modellt, amellyel soha nem találkozott az edzés során, a hibák hógolyókat okozhatnak, ezt a hibamódot expozíciós torzításnak nevezik. A Bengio és munkatársai által 2015-ben bevezetett ütemezett mintavétel ezt úgy kezeli, hogy a képzés során minden dekódolási lépésnél feldob egy érmét: bizonyos valószínűséggel a valódi tokent (tanári kényszer), egyébként pedig a modell saját mintavételezett előrejelzését táplálja. Az alapigazság használatának valószínűsége egynél kezdődik, és az ütemterv (lineáris, exponenciális vagy inverz szigmoid) képzése során csökken, így a modell fokozatosan ki van téve saját kimeneteinek, és megtanulja kiheverni a hibáit.

Technikai betekintés

A t lépésben a modell mintavételez egy Bernoulli-változót epsilon_i valószínűséggel az arany token kiválasztására; Az epsilon_i az edzés előrehaladtával csökken. Egy finomság az, hogy a mintavételezett tokenek betáplálása az objektívet torzítottá teszi, a diszkrét mintavételezést pedig nem lehet megkülönböztetni, így a gradiensek nem áramlanak át tisztán a visszacsatolt tokenen. A változatok egyenes Gumbel-softmax-ot vagy differenciálható relaxációt alkalmaznak ennek enyhítésére, a szekvenciaszintű módszerek pedig közvetlenül optimalizálnak egy olyan mérőszámot, mint a BLEU.

Stratégiai hatás

Költség és költségvetés

Az építészeti döntések évekig növelik a teljesítményt és a működési költségeket.

Tisztább döntések

A technikai oktatás segít a csapatoknak a megfelelő verem kiválasztásában, nem csak a legújabb készletben.

Minőségellenőrzés

A jobb mérnöki döntések csökkentik a termelés megbízhatósági incidenseit.

Az ütemezett mintavétel és az expozíciós torzítás jövője

A nagy Transformer nyelvi modellek esetében az expozíciós torzítás gyakorlati hatása vita tárgyát képezi, mivel a hatalmas adatok és léptékek tompítják azt, és az olyan módszerek, mint az RLHF, közvetlenül alakítják át a generációs viselkedést. Ennek ellenére az ütemezett mintavétel és annak leszármazottai továbbra is relevánsak a kisebb modellek, a strukturált generálás és a szigorú pontossági követelményeket támasztó feladatok esetében. A jövőbeni munka ötvözi a tanterv bemutatását, a megerősítés stílusú sorozatcélokat és a minimális kockázatú képzést, hogy összehangolja a modellek képzését a tényleges dekódolási módszerekkel.

Valós megvalósítás

Képaláírási modell betanítása ütemezett mintavétellel, hogy megtanulja kecsesen folytatni egy tökéletlen előrejelzett szó után

A tanár kényszerítő valószínűségének csökkentése inverz szigmoid ütemezéssel neurális gépi fordító rendszerben

Egy inkoherens hurkokba sodródó chatbot diagnosztizálása a puszta tanári kényszerből eredő expozíciós torzítás tüneteként

A teljes tanári kényszerrel kiképzett összegző BLEU-pontszámainak összehasonlítása az ütemezett mintavétellel kiképzett összesítővel

Kockázatok és védőkorlátok

Egy benchmark optimalizálása elrejtheti a rendszer általános hiányosságait.

Az infrastrukturális és karbantartási költségeket gyakran alábecsülik.

A biztonsági és megfigyelhetőségi hiányosságok a rendszerek bonyolultabbá válásával nőhetnek.

Végrehajtási ütemterv

1

Határozza meg a késleltetési, minőségi és költségcélokat a megvalósítás előtt.

2

Benchmark reális terhelési és adatviszonyok mellett.

3

Műszerfigyelés a hibák, az eltolódás és a felhasználói hatások szempontjából.

4

A méretezés előtt készítse elő a visszagörgetési és az incidensre adott válaszútvonalakat.

Folytassa a felfedezést

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Scheduled Sampling and Exposure Bias quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Kezdő kvíz

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Következő útmutató

Negatív mintavétel és zaj kontrasztív becslés

Gyakran ismételt kérdések

What is Scheduled Sampling and Exposure Bias?

Az expozíciós torzítás az a rés, amely akkor jelenik meg, amikor a csak tökéletes előtagokra oktatott modellnek a következtetés során saját tökéletlen kimeneteit kell feltételhez kötnie. Az ütemezett mintavétel egy olyan tanterv, amely fokozatosan megszünteti ezt a hiányt.

Mit csinál az ütemezett mintavétel a képzés során?

Az ütemezett mintavétel sztochasztikusan keveri az alapigazságot és a modell által generált tokeneket dekódoló bemenetként, amelyeket egy csökkenő valószínűség vezérel.

Hogyan változik az alap-igazság token használatának valószínűsége az ütemezett mintavétel során végzett képzés során?

Az ütemterv a teljes tanári kényszer közelében kezdődik, és csökken, így a modell egyre inkább ki van téve saját előrejelzéseinek, ahogy javul.

Ki vezette be az ütemezett mintavételt, és nagyjából mikor?

Az ütemezett mintavételezést Samy Bengio és munkatársai javasolták 2015-ben a szekvencia előrejelzésére visszatérő hálózatokkal.

Melyik órarendi alakzatot szokták idézni a tanárkényszer valószínűségének lecsökkentésére?

Az eredeti munka lineáris, exponenciális és inverz szigmoid csillapítási ütemtervet javasolt a talaj-igazság mintavételi valószínűségének csökkentésére.