Machine learning and similar image-based techniques based on Nash game theory

Abstract

Використання методів комп'ютерного зору для вирішення завдання пошуку зображень відоме як система пошуку зображень на основі контенту (CBIR). Це система, призначена для пошуку та отримання відповідного цифрового зображення з великої бази даних за допомогою зображення-запиту. Протягом останніх кількох років алгоритми машинного навчання досягли вражаючих результатів у завданнях пошуку зображень завдяки своїй здатності навчатися на великих обсягах різноманітних даних та підвищувати точність розпізнавання та пошуку зображень. Наша команда розробила систему CBIR, яка підкріплена двома алгоритмами машинного навчання та використовує множинну кластеризацію та низькорівневе вилучення ознак зображення, таких як колір, форма та текстура, для формулювання гри Неша. Отже, ми стикаємося із задачею багатокритеріальної оптимізації. Щоб вирішити цю проблему, ми сформулювали статичну гру Неша для трьох гравців, де кожен гравець використовує різну стратегію (дескриптор кольору, дескриптор Церніке та дескриптор SFTA) на основі своєї цільової функції. Рівновага Неша визначається як класи належності зображення запиту.

The use of computer vision techniques to address the task of image retrieval is known as a Content-Based Image Retrieval (CBIR) system. It is a system designed to locate and retrieve the appropriate digital image from a large database by utilizing a query image. Over the last few years, machine learning algorithms have achieved impressive results in image retrieval tasks due to their ability to learn from large amounts of diverse data and improve their accuracy in image recognition and retrieval. Our team has developed a CBIR system that is reinforced by two machine learning algorithms and employs multiple clustering and low-level image feature extraction, such as color, shape, and texture, to formulate a Nash game. Consequently, we are faced with a multicriteria optimization problem. To solve this problem, we have formulated a three-player static Nash game, where each player utilizes a different strategy (color descriptor, Zernike descriptor, and SFTA descriptor) based on their objective function. The Nash equilibrium is defined as the membership classes of the query image.