EVALUATION PROGRAM, EVALUATION METHOD, EVALUATION DEVICE, AND INFORMATION PROCESSING UNIT

PROBLEM TO BE SOLVED: To provide an evaluation program which detects abnormality of operation of specific software.SOLUTION: A bench mark operation table 150 associatively holds API methods and parameters output by specific software (customer application 110 or bench mark 160) to services 210a-c. The bench mark generates an API request based upon the bench mark operation table, and then a service is called to execute processing. First log information including the API request, response details from the service, communication time, etc., is generated, and output to a log gathering function unit 270, and the bench mark operation table is updated by reference to an API call pattern table 250. A log gathering function unit generates a log pattern table 260 based upon the first log information gathered from the bench mark, generates an API call pattern table based upon the second log information gathered from the service, and analyzes the log pattern table to perform evaluation associated with the bench mark, thereby outputting an evaluation result.SELECTED DRAWING: Figure 1 【課題】特定のソフトウェアの動作の異常を検出する評価プログラムを提供する。【解決手段】ベンチマーク動作表１５０は、特定のソフトウェア（顧客アプリ１１０又はベンチマーク１６０）によってサービス２１０ａ〜ｃに出力されたＡＰＩメソッド及びパラメータを対応付けて保持する。ベンチマークは、ベンチマーク動作表を基に、ＡＰＩリクエストを生成し、サービスを呼び出し、処理を実行させる。ＡＰＩリクエスト、サービスからのレスポンス内容、通信時刻等を含む第１ログ情報を生成し、ログ収集機能部２７０に出力し、ＡＰＩ呼び出しパターン表２５０を参照し、ベンチマーク動作表を更新する。ログ収集機能部は、ベンチマークから収集した第１ログ情報を基に、ログパターン表２６０を生成し、サービスから収集した第２ログ情報を基に、ＡＰＩ呼び出しパターン表を生成し、ログパターン表を解析し、ベンチマークに関する評価を実行し、評価結果を出力する。【選択図】図１