Method for monitoring authentication based on video call using neural network and system for the method

As a method for monitoring authentication based on a video call using a neural network, the present invention may comprise: a step of receiving a facial image or an identification image of a user; a step of receiving the consultation data of a consultant for a non-face-to-face authentication during a video call; a step of calculating a prediction result for an existence probability per identification element included in the received facial image or identification image through the neural network; a step of comparing the calculated prediction result with the consultation data of the consultant; and a step of requesting inspection of the consultation data according to the comparison result. According to the present invention, an authentication rate of the non-face-to-face authentication using the non-face-to-face-based video call and a quality of the consultation work can be improved by monitoring the consultation contents in real-time while the consultation work of the consultant is in progress. 본 발명은 신경망을 이용한 영상통화 기반의 인증 모니터링 방법으로, 사용자의 안면 이미지 또는 신분증 이미지를 수신하는 단계; 상기 영상통화 중 비대면 인증에 대한 상담원의 상담 데이터를 수신하는 단계; 신경망을 통해 상기 수신된 안면 이미지 또는 신분증 이미지에 포함된 식별 요소 별 존재 확률에 대한 예측 결과를 산출하는 단계; 상기 산출된 예측 결과와 상기 상담원의 상담 데이터를 비교하는 단계; 및 비교 결과에 따라 상기 상담 데이터의 검수를 요청하는 단계를 포함할 수 있다. 본 발명에 따르면 상담원의 상담 업무를 진행 중에 실시간으로 상담 내용을 모니터링하여 비대면 기반의 영상통화를 이용한 비대면 인증의 인증율과 상담 업무의 품질을 높일 수 있다.