SYSTEM AND METHOD OF USING TASK FINGERPRINTING TO PREDICT TASK PERFORMANCE

A novel method of using task fingerprinting to predict outcome measures such quality, errors, and the likelihood of cheating, particularly as applied to crowd sourced tasks. The technique focuses on the way workers work rather than the products they produce. The technique captures behavioral traces from online crowd workers and uses them to build predictive models of task performance. The effectiveness of the approach is evaluated across three contexts including classification, generation, and comprehension tasks. L'invention concerne un nouveau procédé d'utilisation de prise d'empreinte de tâche pour prédire des mesures de résultat, telles que la qualité, des erreurs et la probabilité de fraude, en particulier telles qu'appliquées à des tâches externalisées. La technique se concentre sur la manière dont les travailleurs travaillent plutôt que sur les produits qu'ils produisent. La technique capture des traces de comportement à partir de travailleurs en masse en ligne et les utilise pour construire des modèles prédictifs de performances de tâche. L'efficacité de l'approche est évaluée à travers trois contextes, comprenant des tâches de classification, de génération et de compréhension.