OPERATIONAL ASSISTANCE SYSTEM AND OPERATIONAL ASSISTANCE METHOD

The present invention provides operational assistance by establishing a communication connection between a head-mounted display (HMD) and an operational assistance server. The HMD captures an image of a to-be-operated device subject to operational assistance, and then transmits the captured image to the operational assistance server. On the basis of the captured image, the operational assistance server determines in what operating condition is the to-be-operated device, selects, from a virtual image dataset containing one or more virtual images that indicate operational assistance information for the to-be-operated device, at least one virtual image corresponding to the determined operating condition as a proposed virtual image, and transmits said virtual image to the HMD. The HMD displays the proposed virtual image. La présente invention fournit une assistance opérationnelle en établissant une connexion de communication entre un visiocasque (HMD) et un serveur d'assistance opérationnelle. Le HMD capture une image d'un dispositif à actionner soumis à une assistance opérationnelle, puis transmet l'image capturée au serveur d'assistance opérationnelle. Sur la base de l'image capturée, le serveur d'assistance opérationnelle détermine dans quelle condition de fonctionnement est le dispositif à actionner, sélectionne, à partir d'un ensemble de données d'image virtuelle contenant une ou plusieurs images virtuelles indiquant des informations d'assistance opérationnelle pour le dispositif à actionner, au moins une image virtuelle correspondant à la condition de fonctionnement déterminée en tant qu'image virtuelle proposée, et transmet ladite image virtuelle au HMD. Le HMD affiche l'image virtuelle proposée. ヘッドマウントディスプレイ（ＨＭＤ）と操作支援サーバとを通信接続して操作支援を行う。ＨＭＤは、操作支援の対象となる被操作機器を撮像し、撮像画像を操作支援サーバに送信する。操作支援サーバは、撮像画像に基づいて被操作機器の動作状態を判定し、被操作機器の操作支援情報を示す仮想画像を少なくとも一つ以上含む仮想画像データセットから、判定した動作状態に対応する少なくとも一つ以上の仮想画像を提案仮想画像として選択し、ＨＭＤに送信する。ＨＭＤは、提案仮想画像を表示する。