Система для розпізнавання і пошуку об'єктів на відео з використанням нейронних мереж

Abstract

Бакалаврська кваліфікаційна робота виконана студентом групи КН-414 Поставкою Маркіяном Богдановичем. Тема “Система для розпізнавання і пошуку об'єктів на відео з використанням нейронних мереж”. Робота направлена на здобуття ступеня бакалавра за спеціальністю 122 «Комп’ютерні науки». Метою дипломної роботи є підвищення доступності засобів розпізнавання і пошуку об'єктів на відео для малознайомих з областю комп'ютерного зору та штучного інтелекту людей, шляхом створення такої системи. Об’єктом дослідження є процес розпізнавання об'єктів на відео, пошуку об'єктів та взаємодії із користувачем. Було проведено опис предметного середовища, проаналізовано наукові джерела по темі роботи, оглянуто наявні аналоги. Було проаналізовано: наявні підходи до image-to-text, підходи до розпізнавання об'єктів, засоби розробки GUI, датасети, потреби користувача. Було наведено перелік вимог до технічного і програмного забезпечення, проведено тренування моделі розпізнавання і описано програмну реалізацію системи. У результаті виконання дипломної роботи було розроблено таку систему з двох частин: Telegram-бота як GUI, та детектора на основі YOLOv8. Користувачі можуть надсилати відео боту, а бот виявляє об’єкти та повертає відео з обмежувальними рамками навколо об’єктів. Бот надає метадані відео та інформацію про знайдені класи об’єктів. Користувачі можуть фільтрувати знайдені класи, після чого отримують інтервали появи об'єктів та можливість завантажити фрейми з об’єктами у вигляді архіву, чи переглядати їх поодинці. Дана система може використовуватися на практиці для полегшення та прискорення роботи чи хобі людей, котрі займаються опрацюванням та аналізом відео, пошуком інформації. Загальний обсяг роботи: 81 сторінки, 47 рисунків, 81 посилання. Bachelor qualification work was written by a student of the group KN-414 Postavka Markiian Bohdanovych. The theme is "A system for recognition and search of objects on video using neural networks". The work is aimed at obtaining a bachelor's degree in the specialty 122 "Computer Science". The goal of the thesis is to increase the availability of means of recognition and search for objects on video for people who are not familiar with the field of computer vision and artificial intelligence, by creating such a system. The object of the study is the process of object recognition on video, object search and interaction with the user.