Как синхронизировать товары?

Question

[Vitaly Vitaly]

Добрый день.

Думаю, как можно легче реализовать поиск одинаковых товаров при парсинге.

Допустим есть товар:
1 Источник: AMD RYZEN 3 1300X, OEM
2 Источник: AMD Ryzen 3 1300X, SocketAM4 OEM

Товар одинаковый, но названия разные. Какой алгоритм можно использовать для более точного определения, что эти строки (товар) похожи (один и тот же)?

Пробовал Джаро-Винклера, не помогло.

Comments

[sim3x]

Обьем какой?

[Vitaly Vitaly]

sim3x, миллионы позиций

[sim3x]

Vitaly Vitaly, нанимать людей, чтоб распознавали копии, создавать выборки и обучать нейронку

Answer 1

[Леонид Николаев]

переводим все слова в upper, каждому слову присваиваем степень 2ки, в зависимости от веса (кол-ва слова в выборке), суммируем все слова.

при поиске делаем and, чтобы проверить есть ли то или иное слова в названии.

потом как-то считаем вес попаданий и все.

я как-то так делал. работало

Comments

[Леонид Николаев]

и да, я не знаком со сложными алгоритмами, может мой и не оптимальный. даже скорее всего. Джаро-Винклера наверное правильнее.