space-time correspondence learning system and method

본 발명은 자기 순환 일관성(self-cycle consistency)과 멀티 홉 경로를 대조 학습에 적용한 시공간 대응점 학습 시스템 및 방법에 관한 것이다. 본 발명에 따른 시공간 대응점 학습 시스템은, 복수의 키프레임들로 구성된 동영상 클립을 입력받아 각각의 키프레임을 기설정된 개수의 복수의 패치들로 분할하고 각 패치로부터 특징값을 추출하는 인코더와, 복수의 키프레임들의 각 패치를 노드로 설정하고 시작 키프레임의 쿼리 노드와 유사한 최종 키프레임의 타겟 노드를 추적하는 노드 추적부, 및 쿼리 노드와 유사한 타겟 노드의 추적 결과를 기반으로 손실 함수를 산출하고 인코더가 손실 함수를 기반으로 학습하도록 하는 손실함수 산출부를 포함한다.