Можно ещё загрузить файл в Таблицы Google и применить к массиву функцию фильтрации UNIQUE(массив) которая: «Возвращает уникальные строки из исходного массива, пропуская дублирующиеся. Порядок строк в новом массиве соответствует очередности их расположения в исходном.»