INFORMATION PROCESSING METHOD, INFORMATION PROCESSING SYSTEM, AND INFORMATION PROCESSING PROGRAM

This evaluation device: acquires an inference result of an image to be evaluated by an image recognition model generated by machine learning, and uncertainty information indicating the degree of instability of the inference result; generates inference index information in which a certainty factor indicating the degree of certainty of an inference result is given to information indicating whether the inference result is correct or incorrect by using a correct answer label associated with the image to be evaluated, the inference result, and the uncertainty information; and evaluates the inference accuracy of the image recognition model on the basis of the inference index information. Un dispositif d'évaluation : acquiert un résultat de déduction d'une image à évaluer par un modèle de reconnaissance d'image généré par apprentissage automatique, et des informations d'incertitude indiquant le degré d'instabilité du résultat de déduction ; génère des informations d'indice de déduction dans lesquelles un facteur de certitude indiquant le degré de certitude d'un résultat de déduction est donné à des informations indiquant si le résultat de déduction est correct ou incorrect à l'aide d'une étiquette de réponse correcte associée à l'image à évaluer, du résultat de déduction et des informations d'incertitude ; et évalue la précision de déduction du modèle de reconnaissance d'image sur la base des informations d'indice de déduction. 評価装置は、機械学習により生成された画像認識モデルによる評価対象画像の推論結果と、推論結果の不安定度合いを示す不確実性情報とを取得し、評価対象画像に対応付けられた正解ラベルと推論結果と不確実性情報とを用いて、推論結果が正解及び不正解のいずれであるかを示す情報に推論結果がどの程度確実であるかを示す確信度を付与した推論指標情報を生成し、推論指標情報に基づいて画像認識モデルの推論精度を評価する。