Как победить ошибку curl?

Question

[posters]

При попытке получить содержимое страницы через curl с использованием прокси получаю ошибку:

Can't complete SOCKS4 connection to 0.0.0.0:0. (91), request rejected or failed.

Именно такая, с нулями. Как победить?
С прокси вроде бы все нормально (при обращении к другим сайтам ошибки нет), ошибка появляется при обращении к сайту с отечественным сертификатом The Ministry of Digital Development and Communications (не знаю важно это или нет)

P.S. Тега cURL не нашел.

Answer 1

[Taulan Khatuaev]

Ошибка указывает на то что соединение по протоколу SOCKS4 не может быть установлено с вашим прокси-сервером.
Попробуйтеcurl --socks5 <адрес_прокси>:<порт> <адрес_сайта>

Comments

[posters]

1) ошибка именно такая, с нулями
2) при обращении к другим сайтами через этот же самый прокси через протокол SOCKS4 ошибки нет
3) при подключении через socks5 я конечно же получаю другую ошибку (соединение закрыто), потому что этот прокси работает через SOCKS4.
4) я пробовал менять этот прокси на другие SOCKS4 и все равно Can't complete SOCKS4 connection to 0.0.0.0:0. (91), request rejected or failed.

[AUser0]

Сначала узнать бы, cURL запускается из-под PHP или с консоли?

И поддержка GOST вообще в OpenSSL добавлена? (проверяется через openssl ciphers в консоли)

И не помешает обновить корневые сертификаты. Ну так, для уверенности.

[posters]

AUser0, через php
Разве этого недостаточно?

// Отключаем проверку SSL сертификата:
curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, 0);
curl_setopt($curl, CURLOPT_SSL_VERIFYHOST, 0);

[AUser0]

posters, для работы с GOST-шифрованием? Конечно нет.

[posters]

AUser0, нашел рабочий socks5 прокси. Прокси работает очень медленно и он из-за этого он мне не подходит, но в данном случае важно, что через него содержимое страницы приходит. Не работают с сайтом почему-то только SOCKS4.

[Drno]

posters, значит используй socks5
Впринципе их валом в инете
Ну и причина скорее всего - у этого прокси нет доступа к сайту. Ограничения или бан

[posters]

Drno, сайт государственный. Тут нужен российский, их очень мало.

Answer 2

[zkrvndm]

с отечественным сертификатом (не знаю важно это или нет)

Важно. Отключите проверку SSL сертификата:

<?php

// Включаем отображение ошибок:

ini_set('error_reporting', E_ALL);
ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);

$curl = curl_init(); // Инициируем запрос

// Указываем адрес для отправки данных:

curl_setopt($curl, CURLOPT_URL, $link);

// Отключаем проверку SSL сертификатов:

curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, 0);
curl_setopt($curl, CURLOPT_SSL_VERIFYHOST, 0);

// ...

Также очень желательно отправлять правильные заголовки: точно те же, что обычно отправляет браузер.

Comments

[posters]

Проверку на SSL отключил сразу же. С заголовками сейчас буду экспериментировать, но нет уверенности, что причина ошибки кроется в этом.

[zkrvndm]

posters, кстати, вы отправляете запрос явно на какой-то гос. ресурс. Прикол том, в что они зачастую банят подсети с проксями превентивно и заранее, при том бан вечный, т. е. не всякий прокси здесь подойдет. Например, когда я пилил авторизацию на госуслугах, то в какой-то момент перестали работать прокси, вообще все. Списался с тех. поддержкой и узнал, что данные подсети в вечном бане. Разблокировать какой-то конкретный IP адрес можно, но надо заявление писать по специальной форме.

[posters]

zkrvndm, пока ваш вариант самый реалистичный, тоже об этом начал догадываться.

[posters]

zkrvndm, но мне казалось, если прокси в бане, то ответ мне должен был бы сразу об этом сказать (forbidden)

[zkrvndm]

posters, кстати, редкий случай из практики: исходящий порт с которого запрос идет может быть заблокирован. У меня уже было однажды так, все запросы норм, а конкретно один не идет, только потом спустя время выяснил, что проблема была в том, что фаервол блокировал нужный исходящий порт из-за чего прокси возвращал ошибку.

Answer 3

[zlo1]

Много быстрых HTTPS прокси на порту 9002. большой выбор регионов (есть РФ),curl умеет с ними работать

curl --proxy-insecure -k --proxy 'https://146.70.52.228:9002' -o - https://api.my-ip.io/ip