Если речь идет именно про архив фотографий, то я рекомендую использовать менеджер архива фотографий
Tonfotos. В нём, кроме кучи других полезных функций, есть еще и удаление дубликатов. Есть много других программ, специализированных на поиске дубликатов разной степени бесплатности - в инете полно "обзоров". Но у них обычно переусложненный интерфейс.
Вот есть видео, с объяснением, как это работает в ...
В любом случае, какой бы программой не воспользоваться всегда будет первый этап сканирование всего архива фоток. Для такого объема он займет несколько часов. Нужно быть готовым. У Tonfotos преимущество в том, что он за это время создаст полноценный индекс архива, и если программу закрыть - он никуда не денется. Можно в любой момент вернуться и продолжить работу.