METHODS AND SYSTEMS FOR PREDICTIVE ENGINE EVALUATION, TUNING, AND REPLAY OF ENGINE PERFORMANCE

Methods and systems of tracking the deployment of a predictive engine for machine learning are disclosed, including steps to deploy an engine variant of the predictive engine based on an engine parameter set, wherein the engine parameter set identifies at least one data source and at least one algorithm; receive one or more queries to the deployed engine variant from one or more end-user devices, and in response, generate predicted results; receive one or more actual results corresponding to the predicted results; associate the queries, the predicted results, and the actual results with a replay tag; and record them with the corresponding deployed engine variant. The present invention helps data scientists and developers develop, deploy, and debug machine learning systems. Cette invention concerne des procédés et des systèmes de suivi du déploiement d'un moteur de recherche prédictif pour l'apprentissage automatique, comprenant les étapes consistant à : déployer une variante de moteur du moteur de recherche prédictif basée sur un ensemble de paramètres de moteur, ledit ensemble de paramètres de moteur identifiant au moins une source de données et au moins un algorithme ; recevoir une ou plusieurs requêtes à la variante de moteur déployée à partir d'un ou plusieurs dispositifs d'utilisateur final, et en réponse, générer des résultats prédits ; recevoir un ou plusieurs résultats réels correspondant aux résultats prédits ; associer les requêtes, les résultats prédits, et les résultats réels à une étiquette de relecture ; et les enregistrer avec la variante de moteur déployée correspondante. L'invention permet aux scientifiques de données et développeurs de développer, déployer et mettre au point des systèmes d'apprentissage automatique.