Method apparatus system and computer program for device control using camera image

The present invention relates to a method for controlling a device using a camera image, apparatus, system, and computer program, which identify a device from a camera image and provide a control interface corresponding to the device so that a user controls the device conveniently. According to one embodiment of the present invention, the method comprises: a first information receiving step of receiving, by a terminal, first information for controlling a device by using an image displayed on the terminal from a server; a device identification step in which the terminal identifies a first device in a first image; a device control image providing step of displaying, by the terminal, a device control image in which a user interface (UI) for controlling the first device is added to the first image; and a device control step of transmitting, by the terminal, a signal for controlling the first device according to an input value of the user interface (UI). 본 출원은 카메라 영상에서 디바이스를 인식하고 상기 디바이스에 대응하는 제어 인터페이스를 제공하여 사용자가 보다 편리하게 디바이스를 제어할 수 있도록 하는 카메라 영상을 이용한 디바이스 제어 방법, 장치, 시스템 및 컴퓨터 프로그램에 관한 것으로서, 본 발명의 일 실시예에 의한 디바이스 제어 방법은, 단말이, 서버로부터 상기 단말에 디스플레이되는 영상을 이용하여 디바이스를 제어하기 위한 제1 정보를 수신받는 제1 정보 수신 단계; 상기 단말이 제1 영상에서 제1 디바이스를 인식하는 디바이스 인식 단계; 상기 단말이 상기 제1 영상에 상기 제1 디바이스의 제어를 위한 사용자 인터페이스(UI)를 추가하여 디스플레이하는 디바이스 제어 영상 제공 단계; 및 상기 단말이 상기 사용자 인터페이스(UI)의 입력치에 따라 상기 제1 디바이스를 제어하기 위한 신호를 전송하는 디바이스 제어 단계;를 포함할 수 있다.