Il prossimoProssima guida
Screening dei media negativi con l'NLP
Intelligenza artificiale linguistica
GUIDA ALL'AI linguistica
L'elaborazione del linguaggio naturale, o PNL, è lo studio e l'ingegneria di sistemi che funzionano con il linguaggio umano.
Ascolta questa guidaNarrato dall'IA · ~2 min
Le attività includono la classificazione di documenti, la ricerca di entità denominate, la traduzione di testo, il recupero di informazioni e la generazione di risposte. Compiti diversi richiedono risultati e metodi di valutazione diversi.
Il testo deve essere rappresentato in una forma che un sistema computazionale possa elaborare. La tokenizzazione lo divide in unità come parole o pezzi di parole; le rappresentazioni numeriche supportano quindi regole, modelli statistici o reti neurali. I confini dei token sono una scelta di modellazione e non sempre si allineano con ciò che un lettore considera una parola. Alcune attività restituiscono un'etichetta per un intero documento. Altri identificano delle campate al suo interno o producono una nuova sequenza. Un classificatore di sentiment, un riconoscimento di entità e un riepilogo risolvono quindi problemi diversi anche se utilizzano tutti lo stesso modello linguistico sottostante. Il contesto conta. Il significato di una parola può cambiare tra frasi, domini e comunità. La negazione, i riferimenti ambigui, il sarcasmo, le variazioni ortografiche e le lingue miste possono mettere in discussione un sistema che appare accurato su esempi chiari. Costruisci materiale di valutazione dalle condizioni effettivamente incontrate dall'applicazione. Un'applicazione PNL funzionante necessita anche di regole relative alla lunghezza dell'input, ai limiti del documento e all'incertezza. Controlla se il troncamento rimuove silenziosamente sezioni importanti. Conserva il passaggio originale accanto alle informazioni estratte in modo che il lettore possa confermare il risultato. Confrontalo con una regola semplice o una base di parole chiave quando l'attività è sufficientemente ristretta per uno.
04Esempio lavorato
Usa la frase inventata "Mina di Northstar Labs ha detto che il lancio ritardato è stato deludente".
Un'attività relativa a un'entità potrebbe contrassegnare Mina come persona e Northstar Labs come organizzazione. Un compito sul sentimento potrebbe classificare la reazione espressa come negativa.
Un riassunto potrebbe affermare che Mina ha criticato un ritardo nel lancio. Controlla che non inventi il motivo del ritardo.
Cosa mostra
La stessa frase supporta output diversi; ognuno ha bisogno dei propri criteri di correttezza.
Trova i nomi delle organizzazioni in un articolo fornito mantenendo le porzioni di testo.
Indirizza le richieste in entrata in un insieme documentato di categorie.
Newsletter gratuita
Tre storie verificate sull'IA ogni mattina nei giorni feriali, scritte in un inglese semplice. Gratuito per sempre, senza pubblicità.
Un'email ogni giorno feriale. Disiscriviti con un clic. Non vendiamo né condividiamo mai il tuo indirizzo.
Mettiti alla prova
Feedback immediato su ogni risposta e un certificato condivisibile con un ID verificabile una volta superato un corso.
Sostieni l'istruzione gratuita sull'IA. AI Understanding è un'organizzazione non profit 501(c)(3) — nessun annuncio, nessun paywall, mai. Fai una donazione
No. La PNL è un campo che copre molti metodi e compiti. I modelli linguistici di grandi dimensioni sono una famiglia di strumenti utilizzati al suo interno.
Continua a imparare
Altre guide selezionate per questo argomento
Il prossimoProssima guida
Screening dei media negativi con l'NLP
Intelligenza artificiale linguistica