Als nächstesNächster Leitfaden
KI in der Entschlüsselung alter Sprachen
Anwendungen
Anwendungsleitfaden
Die Forschung zur Gebärdensprachübersetzung ordnet Videos in Gebärdensprache dem Text oder der Sprachdarstellung einer anderen Sprache zu.
Hören Sie sich diesen Leitfaden anKI-erzählt · ~2 min
Gebärdensprachen haben ihre eigene Grammatik und umfassen manuelle und nicht-manuelle Informationen, daher handelt es sich hierbei eher um eine Sprachaufgabe als um eine universelle Gesten-zu-Wort-Suche.
ASL und andere Gebärdensprachen sind natürliche Sprachen und unterscheiden sich von der bloßen Gestik der Wörter einer gesprochenen Sprache. Handform, Bewegung, Position und nicht-manuelle Merkmale wie Gesichts- und Körperbewegungen können sprachliche Informationen enthalten. Kontinuierliches Gebärden umfasst Übergänge und Koartikulation, daher sind Grenzen nicht immer explizite Pausen. Forschungspipelines können RGB-Video oder extrahierte Posenschlüsselpunkte verwenden und Erkennungs- und Übersetzungskomponenten gemeinsam trainieren. Ein Gloss ist eine Textbezeichnung für ein Zeichen, das in Anmerkungen verwendet wird. Eine Glossensequenz ist nicht automatisch eine grammatikalische Übersetzung der gesprochenen Sprache. Die Arbeit von Camgoz und Kollegen aus dem Jahr 2018 stellte PHOENIX-2014T unter Verwendung von Wetterübertragungen in Deutscher Gebärdensprache und deutschem Text vor. Seine Sprache und Domäne begründen nicht die Leistung für jede Gebärdensprache oder Alltagssituation. Für die Bewertung sind die Datenabdeckung und die Beteiligung der Gemeinschaft von Bedeutung.
Bewertung eines Forschungsmodells anhand eines definierten Video- und Textdatensatzes in Gebärdensprache.
Vergleich von Hand-, Gesichts- und Körperinformationen in einem multiartikulatorischen Übersetzungsmodell.
Verwendung von Glanzanmerkungen auf Sequenzebene als Zwischendarstellung in einer Forschungspipeline.
Arbeiten Sie mit gehörlosen Teilnehmern und Sprachexperten zusammen, um nützliche Aufgaben und Bewertungskriterien zu definieren.
Die Forschung untersucht eine breitere Datenabdeckung, unterschiedliche Darstellungen und Übersetzungsqualität. Gehörlosengemeinschaften und Sprachexperten helfen dabei, die Bedürfnisse, den kulturellen Kontext und die Bewertung dieser Tools zu definieren. Eine begrenzte Forschungsdemonstration sollte nicht in jeder Situation als verlässlicher Ersatz für einen Dolmetscher angesehen werden, und sprachspezifische Ergebnisse erfordern eine entsprechend umfassende Bewertung.
Kostenloser Newsletter
Drei verifizierte KI-Geschichten jeden Werktagmorgen, in einfachem Englisch geschrieben. Für immer kostenlos, keine Werbung.
Eine E‑Mail jeden Werktag. Abmelden mit einem Klick. Wir verkaufen oder teilen Ihre Adresse nie.
Testen Sie sich selbst
Sofortiges Feedback zu jeder Antwort und ein teilbares Zertifikat mit verifizierbarer ID, sobald Sie einen Kurs bestanden haben.
Unterstützen Sie kostenlose KI-Bildung. AI Understanding ist eine 501(c)(3) gemeinnützige Organisation – keine Werbung, keine Paywall, nie. Machen Sie eine Spende
Die Forschung zur Gebärdensprachübersetzung ordnet Videos in Gebärdensprache dem Text oder der Sprachdarstellung einer anderen Sprache zu. Gebärdensprachen haben ihre eigene Grammatik und umfassen manuelle und nicht-manuelle Informationen, daher handelt es sich hierbei eher um eine Sprachaufgabe als um eine universelle Gesten-zu-Wort-Suche.
Gebärdensprachen wie ASL verfügen über eine ausgeprägte Grammatik und nutzen räumliche und nicht-manuelle Informationen, sodass die Übersetzung eine Sprachaufgabe ist.
Das Anheben der Augenbrauen, das Neigen des Kopfes und die Form des Mundes können eine Aussage in eine Frage verwandeln oder die Bedeutung ändern, daher muss die KI das Gesicht verfolgen, nicht nur die Hände.
Keypoints are a visual representation for later processing, not an automatic translation or privacy guarantee.
Sequence modeling handles the relationship between visual observations and linguistic units over time.
The interdisciplinary perspective emphasizes relevant participants and expertise in defining and evaluating tools.
Lerne weiter
Weitere Leitfäden zu diesem Thema ausgewählt
Als nächstesNächster Leitfaden
KI in der Entschlüsselung alter Sprachen
Anwendungen