NastępnyNastępny poradnik
Łączenie i ujednoznacznianie jednostek
Językowa sztuczna inteligencja
PRZEWODNIK Językowy AI
Rozpoznawanie jednostek nazwanych (NER) identyfikuje zakresy tekstu odnoszące się do takich kategorii, jak ludzie, organizacje i miejsca.
Posłuchaj tego przewodnikaOpowiadane przez sztuczną inteligencję · ~2 min
Wyszukuje wzmianki w ramach wybranego schematu. Łączenie wzmianki z konkretnym rekordem świata rzeczywistego jest odrębnym zadaniem łączenia encji.
Zdefiniuj typy jednostek i reguły zakresu przed szkoleniem lub oceną. Czy należy uwzględnić przyrostek firmy? Czy produkt jest organizacją, odrębnym typem, czy może wykracza poza schemat? Niespójne zasady adnotacji mogą spowodować, że zbiór danych będzie wewnętrznie sprzeczny. Systemy NER mogą przypisywać etykiety na poziomie tokenów i łączyć sąsiednie tokeny w zakresy. Tokenizacja podsłów wymaga ostrożności podczas dopasowywania etykiet do oryginalnego tekstu. Zachowaj przesunięcia znaków, aby aplikacje mogły dokładnie pokazać, który fragment wygenerował wyodrębnioną wartość. Oceń zarówno granice, jak i typy. Identyfikacja wyłącznie „Northstar”, gdy organizacja z adnotacją to „Northstar Research Labs”, może zostać uznana za błąd w zakresie zakresu, nawet jeśli kategoria ogólna jest prawidłowa. Zgłaszaj konwencję dopasowywania z precyzją i przypominaj sobie, aby można było zinterpretować wyniki. Kontekst może zmienić etykietę. „Jordan” może identyfikować osobę, kraj lub organizację w różnych fragmentach. Rozpoznane imię i nazwisko nie jest zweryfikowaną informacją o tożsamości. Używając ekstrakcji do redakcji, wyszukiwania lub dopasowywania rekordów, przetestuj dalszy wynik i wyraźnie obsłuż niejednoznaczne lub pominięte wzmianki.
04Działający przykład
Użyj wymyślonego zdania „Jordan dołączył do Northstar Research Labs w czerwcu”.
Mark Jordan jako wzmianka o osobie i Northstar Research Labs jako wzmianka o organizacji w ramach udokumentowanego schematu.
Nie dołączaj konkretnej biografii ani rejestracji firmy, chyba że osobny etap łączenia zawiera dowody na to dopasowanie.
Co pokazuje
Skonstruowany przykład oddziela lokalizację nazwy od ustalenia, kogo lub co ona identyfikuje.
Wyróżnij organizacje wspomniane w artykule prasowym za pomocą oryginalnych przesunięć tekstu.
Zbuduj kolejkę recenzji dla możliwych nazw przed zatwierdzeniem zredagowanego dokumentu.
Darmowy newsletter
Trzy zweryfikowane historie AI każdego poranka w dni robocze, napisane prostym angielskim. Bezpłatne na zawsze, bez reklam.
Jedno e‑mail każdego dnia roboczego. Wypisz się jednym kliknięciem. Nigdy nie sprzedajemy ani nie udostępniamy Twojego adresu.
Sprawdź się
Natychmiastowa informacja zwrotna na każde pytanie oraz udostępnialny certyfikat z weryfikowalnym ID po zaliczeniu kursu.
Wspieraj darmową edukację AI. AI Understanding jest organizacją non-profit 501(c)(3) — bez reklam, bez płatnej ściany, zawsze. Przekaż darowiznę
Nie. Wzmianka tekstowa może być niejednoznaczna. Rozwiązanie go dla konkretnej osoby wymaga dodatkowych dowodów i odrębnego procesu powiązania.
Ucz się dalej
Wybrano więcej przewodników na ten temat
NastępnyNastępny poradnik
Łączenie i ujednoznacznianie jednostek
Językowa sztuczna inteligencja