Как по ссылке понять, что это сайт интернет-магазин?

Question

[VitaliyBorys]

Есть список из тысяч сайтов. Как создать список только из тех, которые являются магазинами?
Надо использовать только нативный php, без сторонних библиотек.

Comments

[Максим Федоров]

эвристически: искать по наличию кнопок купить/buy и корзины

[user49981]

define('SHOP_KEYWORDS', ["shop", "cart"]);
$site = file_get_contents('url');
$words = implode("|", SHOP_KEYWORDS);
preg_match_all("/($words)/", $site, $matches);
switch (count($matches)) {
    case 10 : echo 'not shop'; break;
    case 30 : echo  "shop, or not"; break;
    case 90 : echo  "shop"; break;
}

[sim3x]

user49981, "karznk", "magasin"....

Answer 1

[dollar]

Можно по ключевым словам, признакам и т.д.

Если по-модному, то нужно обучить нейронную сеть на распознавание магазинов.

Понятное дело, что в пару строчек кода не получится. И готовое решение вряд ли кто-то предложит.

Comments

[sim3x]

Для НС требуется размеченная руками обучающая выборка измеряющаяся тысячами примеров

[dollar]

sim3x, несомненно.

Answer 2

[ThunderCat]

Есть список из тысяч сайтов. Как создать список только из тех, которые являются магазинами?

Сходу вижу несколько решений, но не зная ни вашего уровня ни целей постановки такой задачи сложно что-то порекомендовать.
Как самый простой вариант - cURL + поиск регулярками "в лоб" по ключевым словам. Список ключевых слов тоже не совсем тривиальная задача, + и на обычных сайтах они могут встречаться. Короче, задача не на 5 минут, удачи в реализации )

Answer 3

[alex-1917]

размести задание на апворке.
если не жаль пары долларов...
очередь километровая будет.

Answer 4

[Dimonchik]

https://api.builtwith.com/

Answer 5

[xmoonlight]

Если "в лоб": buy, price, cart - любое из слов 33% вероятнсть того, что это - интернет-магазин.