AI Method for processing AI operation on input image and camera device using the same

카메라 장치는, 피사체로부터 영상을 촬상하는 이미지 센서와, 상기 촬상된 영상에 대한 AI 연산을 요청하고, 상기 요청에 따른 AI 처리 결과를 이용하여 상기 촬상된 영상에 대한 비디오 분석을 수행하는 AI 어플리케이션과, 상기 카메라 장치에 임베드 된 복수의 AI 소스와, 상기 AI 연산 요청에 따라, 상기 복수의 AI 소스의 현재 자원을 모니터링 하고, 상기 복수의 AI 소스의 우선 순위에 따라 상기 복수의 AI 소스 중에서 적어도 일부에 의해 AI 연산을 처리하게 하는 NPU 컨트롤러와, 상기 AI 어플리케이션과 상기 NPU...

Ausführliche Beschreibung

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: YI IN GEON, CHOI JIN HYUK, LEE SONG HO, HA BYEONG YEOP, AN BYOUNG MAN, KWON YOUNG SANG
Format: Patent
Sprache:eng ; kor
Schlagworte:
Online-Zugang:Volltext bestellen
Tags: Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
Beschreibung
Zusammenfassung:카메라 장치는, 피사체로부터 영상을 촬상하는 이미지 센서와, 상기 촬상된 영상에 대한 AI 연산을 요청하고, 상기 요청에 따른 AI 처리 결과를 이용하여 상기 촬상된 영상에 대한 비디오 분석을 수행하는 AI 어플리케이션과, 상기 카메라 장치에 임베드 된 복수의 AI 소스와, 상기 AI 연산 요청에 따라, 상기 복수의 AI 소스의 현재 자원을 모니터링 하고, 상기 복수의 AI 소스의 우선 순위에 따라 상기 복수의 AI 소스 중에서 적어도 일부에 의해 AI 연산을 처리하게 하는 NPU 컨트롤러와, 상기 AI 어플리케이션과 상기 NPU 컨트롤러 사이에서 상기 AI 연산의 요청 및 상기 AI 연산의 처리된 결과를 전달하며, 상기 AI 어플리케이션과 상기 NPU 컨트롤러 사이의 명령어를 호환 가능하도록 변환하는 NPU 드라이버로 이루어진다. A camera device provided with a processor and a memory storing instructions executable by the processor is provided. The camera device comprises an image sensor for capturing an image of a subject, an AI application for requesting an AI operation on the captured image, and performing video analysis on the captured image using a processing result of the AI operation according to the request, a plurality of AI sources embedded in the camera device, an NPU controller for monitoring a current resource of the plurality of AI sources according to the AI operation request, and processing an AI operation by at least some of the plurality of AI sources according to priorities of the plurality of AI sources, and an NPU driver for transmitting the AI operation request and a processing result of the AI operation between the AI application and the NPU controller.