Как повысить точность поиска фотографий одинаковых объектов/локаций, снятых с разных ракурсов?
Добрый день!
Стоит задача поиска фотографий одинаковых объектов/локаций, снятых с разных ракурсов. На данный момент мы используем YOLOv8, с помощью которого происходит классификация и подсчет объектов на каждом фото. Пары фотографий со схожим содержанием (виды и количество объектов совпадают более чем на 80%) считаем подходящими. Для увеличения точности полученные пары сравниваем по цветовой гамме (доминирующему цвету). Данный метод находит часть нужных нам пар фотографий, однако в наборе из 3 тыс. пар, только 10% оказались валидны.
Подскажите, какие ещё существуют методы для увеличения точности поиска?
Спасибо за ответ! Протестировали - предложенный метод на небольшой выборке (около 30 изображений) дает невысокую точность. Больше подходит для решения задачи поиска дубликатов. Однако нам требуется найти фотографии одних и тех же событий, но снятых с разных ракурсов.
Поэкспериментировали - оптимальным решением для нас стала библиотека Kornia, которая дала наилучшие результаты при тестировании.
Нам удалось расширить пул найденных фотографий в 2,2 раза, при этом увеличив точность в 7 раз!