Как парсить все страницы интернет-магазина, кроме карточек товаров?

rPman, спасибо!

Как парсить все страницы интернет-магазина, кроме карточек товаров?

По поводу регулярок: можно ведь задать несколько универсальных шаблонов для поиска всех мейлов, ссылок vk.com и t.me и не нужно будет указывать CSS/XPath/JQuery селекторы для каждого сайта по отдельности.
А так понятно, по содержимому значит только и искать

Как собрать такое количество интернет-магазинов в каталог?

о, толковый ответ, спасибо!)

Как на сегодняшний день интернет-магазины парсят товары?

так понимаю, речь идет именно о парсерах?

Почему Postman выдает ошибку 403?

Алексей Уколов, спасибо. Видимо, разработчики adidas постарались на славу...

Почему Postman выдает ошибку 403?

Алексей Уколов, возможно. В сниппете - это просто cURL. А мне бы опцию PHP - cURL, можете скопипастить?

Почему Postman выдает ошибку 403?

Алексей Уколов, не могли бы Вы привести сюда пример кода из Code Snippets/PHP cURL самого Postman? Т. к. у Вас нормально открывается.

Почему Postman выдает ошибку 403?

Алексей Уколов, Вы копировали именно сURL? У меня headers не 23, а 19 . Пользуюсь веб-версией Postman

Как сопоставлять товары при парсинге?

Спасибо за ответ. А нейросеть придется свою разрабатывать или бывают уже готовые решения?

Почему возникает ошибка Maximum execution time exceeded?

Виктор Кожухарь, все верно - ответила техподдержка хостинга и выяснилось, что max_execution_time в 120 секунд было задано в fastpanel, которая установлена на сайте. Поменял на 86400 сек., теперь работает как надо)

Почему возникает ошибка Maximum execution time exceeded?

Виктор Кожухарь, в том то и дело, что абсолютно нигде такого нету. И в php.ini задержек в 120 секунд тоже нет...

Почему возникает ошибка Maximum execution time exceeded?

Олег, а вот это уже интересно...
Не могли бы Вы просто скинуть ссылку на обычный гайд по консолям или очередям, или о чем там речь в том примере про шары? Как нужно это все переделать и на какую это тему вообще?)

Почему возникает ошибка Maximum execution time exceeded?

Олег, понял. Ну это вариант с переработкой всего проекта в корень, нужно устранить баг что есть. Может, в том же php.ini есть настройка еще других таймаутов? Хотя посмотрю, что еще техподдержка хостинга ответит..

Почему возникает ошибка Maximum execution time exceeded?

Вы под чем вообще?

Почему возникает ошибка Maximum execution time exceeded?

Это сайт облачный онлайн парсер интернет-магазинов для всех желающих, какая консоль?

Почему возникает ошибка Maximum execution time exceeded?

Дмитрий, да, это парсер и в нем есть цикл, в котором обрабатывается (парсится) 1692 товара. Но почему появляется ошибка с таймаутом в 120 секунд? Вот это непонятно.
Обратился уже и в техподдержку VPS, на котором сам сайт, жду отклика от них...

Как вычислить высоту картинки, подгруженной через Ajax?

Все сделал, пашет) Дожидаюсь загрузки изображения вот так:

var img = new Image();
img.src = "путь к картинке";
img.onload = function(){
    console.log($("#contentImg").height());
}

Спасибо за наводки :)

Как вычислить высоту картинки, подгруженной через Ajax?

Дело в том, что контейнер, в который подгружается разметка, имеет фиксированную высоту height 120 px, заданную в css.

Как вычислить высоту картинки, подгруженной через Ajax?

Пробовал так в succsess делать - console.log($("#contentImg").height()) возвращает 0. Единственное, может это из-за того, что не дожидался отрисовки самой картинки. А как в JQuery можно дождаться отрисовки?

Как вычислить высоту картинки, подгруженной через Ajax?

IvanU7n, вообще загружается вся разметка с изображением, да.