SURGICAL SIMULATOR PROVIDING LABELED DATA

A surgical simulator for simulating a surgical scenario comprises a display system, a user interface, and a controller. The controller includes one or more processors coupled to memory that stores instructions that when executed cause the system to perform operations. The operations include generating simulated surgical videos, each representative of the surgical scenario. The operations further include associating simulated ground truth data from the simulation with the simulated surgical videos. The ground truth data corresponds to context information of at least one of a simulated surgical instrument, a simulated anatomical region, a simulated surgical task, or a simulated action. The operations further include annotating features of the simulated surgical videos based, at least in part, on the simulated ground truth data for training a machine learning model. Selon l'invention, un simulateur chirurgical permettant de simuler un scénario chirurgical comprend un système d'affichage, une interface utilisateur et un dispositif de commande. Le dispositif de commande comprend un ou plusieurs processeurs couplés à une mémoire stockant des instructions qui, lorsqu'elles sont exécutées, amènent le système à effectuer des opérations. Les opérations consistent à générer des vidéos chirurgicales simulées, chacune représentant le scénario chirurgical. Les opérations consistent également à associer des données de réalité de terrain simulées issues de la simulation avec les vidéos chirurgicales simulées. Les données de réalité de terrain correspondent aux informations contextuelles d'un instrument chirurgical simulé et/ou d'une région anatomique simulée et/ou d'une tâche chirurgicale simulée et/ou d'une action simulée. Les opérations consistent également à annoter les caractéristiques des vidéos chirurgicales simulées d'après au moins en partie les données de réalité de terrain simulées pour apprendre un modèle d'apprentissage automatique.