ADAPTIVE TRAINING DATA AUGMENTATION TO FACILITATE TRAINING NAMED ENTITY RECOGNITION MODELS

Techniques are disclosed herein for adaptive training data augmentation to facilitate training named entity recognition (NER) models. Adaptive augmentation techniques are disclosed herein that take into consideration the distribution of different entity types within training data. The adaptive augme...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: NEZAMI, Omid Mohamad, SAHA, Budhaditya, SHAH, Shubham Pawankumar, VU, Thanh Tien
Format: Patent
Sprache:eng ; fre
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:Techniques are disclosed herein for adaptive training data augmentation to facilitate training named entity recognition (NER) models. Adaptive augmentation techniques are disclosed herein that take into consideration the distribution of different entity types within training data. The adaptive augmentation techniques generate adaptive numbers of augmented examples (e.g., utterances) based on the distribution of entities to make sure enough numbers of examples for minority class entities are generated during augmentation of the training data. L'invention divulgue des techniques d'augmentation adaptative de données d'apprentissage pour faciliter l'apprentissage de modèles de reconnaissance d'entité nommée (NER). L'invention divulgue des techniques d'augmentation adaptative qui prennent en considération la distribution de différents types d'entité dans des données d'apprentissage. Les techniques d'augmentation adaptative génèrent des nombres adaptatifs d'exemples augmentés (par exemple, des énoncés) sur la base de la distribution d'entités pour s'assurer qu'un nombre suffisant d'exemples pour des entités de classe minoritaire est généré pendant l'augmentation des données d'apprentissage.