VolgendeVolgende gids
Entiteitskoppeling en ondubbelzinnig maken
Taal AI
Taal AI-GIDS
Named Entity Recognition, of NER, identificeert tekstreeksen die verwijzen naar categorieën zoals mensen, organisaties en plaatsen.
Luister naar deze gidsAI-verteld · ~2 min
Het vindt vermeldingen onder een gekozen schema. Het koppelen van een vermelding aan een bepaald record uit de echte wereld is een afzonderlijke taak voor het koppelen van entiteiten.
Definieer de entiteitstypen en spanregels vóór de training of evaluatie. Moet er een bedrijfsachtervoegsel worden opgenomen? Is een product een organisatie, een apart type of buiten het schema? Inconsistente annotatieregels kunnen een dataset intern tegenstrijdig maken. NER-systemen kunnen labels op tokenniveau toewijzen en aangrenzende tokens combineren tot reeksen. Het tokeniseren van subwoorden vereist zorgvuldigheid bij het uitlijnen van labels met de originele tekst. Behoud tekenverschuivingen, zodat toepassingen precies kunnen laten zien welke passage een geëxtraheerde waarde heeft opgeleverd. Evalueer zowel grenzen als typen. Als u alleen 'Northstar' identificeert wanneer de geannoteerde organisatie 'Northstar Research Labs' is, kan dit als een spanfout gelden, zelfs als de algemene categorie correct is. Rapporteer de matchingconventie nauwkeurig en onthoud zodat scores kunnen worden geïnterpreteerd. Context kan het label wijzigen. ‘Jordanië’ kan in verschillende passages een persoon, land of organisatie identificeren. Een herkende naam is geen geverifieerde identiteitsinformatie. Wanneer u extractie gebruikt voor redactie, zoeken of matchen van records, test dan de uitkomst verderop in de bron en behandel dubbelzinnige of gemiste vermeldingen expliciet.
04Uitgewerkt voorbeeld
Gebruik de verzonnen zin “Jordan is in juni lid geworden van Northstar Research Labs.”
Mark Jordan als persoonsvermelding en Northstar Research Labs als organisatievermelding onder een gedocumenteerd schema.
Voeg geen specifieke biografie of bedrijfsregistratie toe, tenzij een afzonderlijke koppelingsstap bewijs voor die match oplevert.
Wat het laat zien
Het geconstrueerde voorbeeld scheidt het lokaliseren van een naam van het oplossen van wie of wat deze identificeert.
Markeer organisaties die in een nieuwsartikel worden genoemd met originele tekstverschuivingen.
Bouw een beoordelingswachtrij op voor mogelijke namen voordat u een geredigeerd document goedkeurt.
Gratis nieuwsbrief
Drie verifieerde AI-verhalen elke weekdagmorgen, geschreven in eenvoudig Engels. Gratis voor altijd, geen advertenties.
Eén e-mail elke weekdag. Afmelden met één klik. We verkopen of delen je adres nooit.
Test jezelf
Directe feedback op elke antwoord, en een deelbare certificaat met een verifieerbare ID zodra je een cursus hebt afgerond.
Ondersteun gratis AI-onderwijs. AI Understanding is een 501(c)(3) non-profit — geen advertenties, geen betaalmuur, nooit. Doe een donatie
Nee. Een tekstvermelding kan dubbelzinnig zijn. Om het aan een bepaalde persoon over te dragen, zijn aanvullend bewijsmateriaal en een afzonderlijk koppelingsproces vereist.
Blijf leren
Er zijn meer handleidingen voor dit onderwerp geselecteerd
VolgendeVolgende gids
Entiteitskoppeling en ondubbelzinnig maken
Taal AI