Logo von GlobalAnnotateGlobalAnnotate
Alle Referenzen
KI-DatenannotationBildung9-wöchiges Programm

Datensatz zur Absichtserkennung in 8 indischen Sprachen

Ein Bildungstechnologie-Unternehmen für den ländlichen Raum in Indien

Ein ausgewogener Datensatz für Absichten und Entitäten in 8 indischen Sprachen – einschließlich der gemischtsprachigen Äußerungen, die echte Nutzer häufig verwenden –, der im Produktivbetrieb den F1-Wert des Modells um 9,2 % gesteigert hat.

240.000
Äußerungen
8
Sprachen
+9,2 %
Steigerung des F1-Werts

Dieses Projekt gehört zu unserer Leistung KI-Datenannotation – sehen Sie in unseren Referenzen, wie derselbe Ansatz auch anderen Teams hilft.

Ausgangslage

Womit wir es zu tun hatten.

Die Sprachverarbeitung des Produkts musste acht indische Sprachen beherrschen, einschließlich der in der ländlichen Nutzerschaft verbreiteten Mischungen aus Hindi und Englisch sowie Tamil und Englisch. Verfügbare Absichtsdaten bildeten die tatsächliche Sprechweise der Nutzer nicht ab, und die schwache Genauigkeit in diesen Sprachen drückte die Gesamtleistung des Assistenten.

Vorgehen

Die Arbeit, Schritt für Schritt.

  1. Festlegung eines Schemas für Absichten und Entitäten mit dem Produktteam und Gewinnung muttersprachlicher Annotatoren in jeder Sprache

  2. Erhebung und Ausbalancierung von 240.000 Äußerungen in förmlicher, umgangssprachlicher und gemischtsprachiger Ausprägung

  3. Kalibrierung der Annotatoren anhand eines zurückgehaltenen Goldstandard-Datensatzes je Sprache und laufende Messung der Übereinstimmung zwischen Annotatoren

  4. Wöchentliche Lieferungen mit Qualitätsberichten je Sprache, rückgekoppelt an die Fehleranalyse des Modells

Ergebnisse

Was das Projekt erreicht hat.

Gemessen an den vorab vereinbarten Zielen – nicht an Eitelkeitskennzahlen.

  • Äußerungen
    240.000
  • Sprachen
    8
  • Steigerung des F1-Werts
    +9,2 %

Bereit für internationales Wachstum?

Schildern Sie uns Ihr Projekt – wir melden uns innerhalb eines Werktags.