VolgendeVolgende gids
Speculatieve streaming en voorspelling van meerdere tokens
Technisch
Technische GIDS
Conformele voorspelling omvat elk model om een set of interval uit te voeren die gegarandeerd het ware antwoord bevat met een gekozen waarschijnlijkheid, zoals 90%.
Luister naar deze gidsAI-verteld · ~2 min
It turns a single guess into a trustworthy range with a mathematical coverage promise.
De meeste modellen geven u een puntvoorspelling of een softmax-score die op vertrouwen lijkt, maar dat vaak niet is. Conformele voorspelling lost dit op. Je neemt een getraind model, beoordeelt hoe 'vreemd' elk voorbeeld is met behulp van een non-conformiteitsmaatstaf (bijvoorbeeld de fout of één minus de voorspelde waarschijnlijkheid), en berekent die scores op basis van een uitgestelde kalibratieset. Om een nieuw punt te voorspellen, neemt u elk label op waarvan de non-conformiteitsscore niet slechter is dan ongeveer het 90e percentiel van de kalibratiescores. Het resultaat is een voorspellingsset, mogelijk meerdere labels voor classificatie of een interval voor regressie. De kopgarantie is distributievrij: zolang uw gegevens uitwisselbaar zijn, dekt de set de werkelijke waarde tegen het gekozen tarief, ongeacht welk onderliggend model u heeft gebruikt.
Een huidlaesieclassificator retourneert bij twijfel de set {melanoom, naevus}, wat aanleiding geeft tot een beoordeling door een dermatoloog in plaats van een enkel overmoedig label.
Een huizenprijsmodel levert een interval van $310.000 tot $365.000 op, waarbij de verkoopprijs gegarandeerd 90% van de tijd voor kopersonderhandelingen wordt vastgehouden.
Een LLM-vraag-antwoordsysteem koppelt een kleine reeks kandidaten aan antwoorden met een dekkingsgarantie, waarbij grote reeksen worden gemarkeerd als gevallen die menselijke beoordeling behoeven.
Een pijplijn voor screening op medicijntoxiciteit zendt voorspellingsintervallen uit, zodat scheikundigen weten welke verbindingen betrouwbaar smalle schattingen hebben en welke onzekere.
Onderzoek gaat voorbij aan de eis van uitwisselbaarheid en richt zich op tijdreeksen en verschuivende distributies, waarbij gebruik wordt gemaakt van adaptieve en gewogen conforme methoden die drempels online aanpassen. Voorwaardelijke dekking, die garandeert dat de rente geldt voor elke subgroep in plaats van alleen voor het gemiddelde, is een belangrijke open grens. Verwacht dat conforme lagen binnen LLM-pijplijnen, medische triage-instrumenten en autonome systemen zullen worden verzonden, aangezien toezichthouders steeds meer gekalibreerde, controleerbare onzekerheid eisen in plaats van kale voorspellingen.
Gratis nieuwsbrief
Drie verifieerde AI-verhalen elke weekdagmorgen, geschreven in eenvoudig Engels. Gratis voor altijd, geen advertenties.
Eén e-mail elke weekdag. Afmelden met één klik. We verkopen of delen je adres nooit.
Test jezelf
Directe feedback op elke antwoord, en een deelbare certificaat met een verifieerbare ID zodra je een cursus hebt afgerond.
Ondersteun gratis AI-onderwijs. AI Understanding is een 501(c)(3) non-profit — geen advertenties, geen betaalmuur, nooit. Doe een donatie
Conformele voorspelling omvat elk model om een set of interval uit te voeren die gegarandeerd het ware antwoord bevat met een gekozen waarschijnlijkheid, zoals 90%. Het verandert een enkele gok in een betrouwbaar bereik met een wiskundige dekkingsbelofte.
Conformele voorspelling retourneert een set (classificatie) of interval (regressie) die is ontworpen om de werkelijke waarde te bevatten met een gekozen snelheid van bijvoorbeeld 90%.
De garantie is gebaseerd op uitwisselbaarheid, wat betekent dat de gezamenlijke verdeling ongewijzigd blijft door het herschikken van de punten. Er zijn geen aannames over het model nodig.
Non-conformiteitsscores worden berekend op basis van de vastgehouden kalibratieset, en hun kwantiel bepaalt welke labels moeten worden opgenomen voor nieuwe punten.
De dekking is gelijk aan 1 min alfa, dus alfa = 0,1 streeft naar een dekking van 90% van de werkelijke waarde.
Hardere inputs leveren meer labels op waarvan de scores onder de drempel vallen, dus grotere sets duiden op een grotere onzekerheid.
Blijf leren
Er zijn meer handleidingen voor dit onderwerp geselecteerd
VolgendeVolgende gids
Speculatieve streaming en voorspelling van meerdere tokens
Technisch