SYSTEMS AND METHODS FOR RECONSTRUCTION OF 3D IMAGES FROM ULTRASOUND AND CAMERA IMAGES

There is provided a method for reconstructing a 3D image, comprising: obtaining Doppler ultrasound images depicting a blood vessel and measurement of blood flow in the blood vessel, and 2D camera images captured by a camera depicting fiducial objects randomly distributed within a viscous material and spaced apart by random distances on a surface of the individual, computing 3D coordinates within a world coordinate system for pixels of the Doppler images using an external reference of an ultrasound transducer pose computed by analysis of relative changes in locations of the fiducial objects within sequential camera images, and computing a respective estimated blood flow for pixels of the Doppler images at locations within the blood vessel, reconstructing a 3D image from 3D voxels computed from the 3D coordinates of pixels of the Doppler images, including respective estimated blood flow, wherein the 3D image depicts the blood vessel and blood flow. L'invention concerne un procédé de reconstruction d'une image 3D, consistant à : obtenir des images ultrasonores Doppler représentant un vaisseau sanguin et une mesure du flux sanguin dans le vaisseau sanguin, et des images de caméra 2D capturées par une caméra représentant des objets repères répartis de manière aléatoire à l'intérieur d'un matériau visqueux et espacés par des distances aléatoires sur une surface de l'individu, calculer des coordonnées 3D à l'intérieur d'un système de coordonnées universelles pour les pixels des images Doppler à l'aide d'une référence externe d'une pose de transducteur ultrasonore calculée par l'analyse de changements relatifs d'emplacements des objets repères à l'intérieur des images de caméra séquentielles, et calculer un flux sanguin estimé respectif pour les pixels des images Doppler au niveau des emplacements à l'intérieur du vaisseau sanguin, reconstruire une image 3D à partir de voxels 3D calculés à partir des coordonnées 3D de pixels des images Doppler, comprenant un flux sanguin estimé respectif, l'image 3D représentant le vaisseau sanguin et le flux sanguin.