MULTI-MODAL PATIENT REPRESENTATION

A method implemented by one or more computer device includes accessing a set of medical data associated with a patient, in which the set of medical data includes a plurality of modalities of medical data. The method includes inputting one or more one of the plurality of modalities of medical data into a first machine-learning model trained to generate a first vector representation and inputting another one of the plurality of modalities of medical data into a second machine-learning model trained to generate a second vector representation. The method includes generating a combined vector representation based on the first vector representation and the second vector representation,and storing the combined vector representation to a database associated with the one or more computing devices. Une méthode mise en œuvre par un ou plusieurs dispositifs informatiques comprend l'accès à un ensemble de données médicales associées à un patient, l'ensemble de données médicales contenant une pluralité de modalités de données médicales. La méthode comprend également l'entrée d'une ou de plusieurs modalités de la pluralité de modalités de données médicales dans un premier modèle d'apprentissage automatique entraîné pour générer une première représentation vectorielle et l'entrée d'une autre modalité de la pluralité de modalités de données médicales dans un second modèle d'apprentissage automatique entraîné pour générer une seconde représentation vectorielle. La méthode comprend en outre la génération d'une représentation vectorielle combinée sur la base de la première représentation vectorielle et de la seconde représentation vectorielle, et à stocker la représentation vectorielle combinée dans une base de données associée au ou aux dispositifs informatiques.