Как реализовать прокси чекер для cURL?

Question

[Matthew Stafford]

Всем привет, у меня такая проблема.

Я пользуюсь бесплатными проксями и они быстро становятся невалидными для меня. Как я могу реализовать такую сис-му, чтобы я мог загружать список прокси, а скрипт уже сам выбирал работающую и присваивал ее к cURL?

Answer 1

[Антон Шаманов]

class HttpProxyList
{
    /**
     * @param array[] список прокси серверов `[host: string, port: int]`
     */
    private array $proxyList = [];

    public function __construct(array $proxyList)
    {
        $this->proxyList = $proxyList;
    }

    protected function checkProxy(string $host, int $port): bool
    {
        $errorCode = $errorMessage = null;
        try {
            $handler = fsockopen($host, $port, $errorCode, $errorMessage, 3);
            if ($handler !== false) {
                fclose($handler);
                return true;
            }
        } catch (Throwable $e) {
            error_log("Proxy server '$host:$port' not available: $errorMessage [$errorCode]"):
        }

        return false;
    }

    public function getActiveProxy(): ?array
    {
        foreach ($this->proxyList as $key => $proxy) {
            if ($this->checkProxy($proxy['host'], $proxy['port'])) {
                return $proxy;
            }
            unset($this->proxyList[$key]);
        }

        return null;
    }
}

Comments

[Matthew Stafford]

А если мне надо проверить прокси к конкретному сайту?

[Dimonchik]

по куску кода сайта чекаешь

[Matthew Stafford]

dimonchik2013, я не получаю кусок кода, потому что сайт блокирует большинство прокси.

[Антон Шаманов]

Matthew Stafford,

$handler = curl_init($url);
curl_setopt_array(
    $handler,
    [
        CURLOPT_PROXY => $proxy['host'],
        CURLOPT_PROXYPORT => $proxy['port'],
        CURLOPT_HTTPPROXYTUNNEL => TRUE,
        CURLOPT_CONNECTTIMEOUT => 15,
        CURLOPT_TIMEOUT => 15,
        CURLOPT_RETURNTRANSFER => FALSE,
    ]
);
curl_exec($handler);
$error = curl_errno($handler);
curl_close($handler);

[Сергей c0re]

Matthew Stafford, ну если сайт блокирует прокси, значит этот прокси выкидывается из списка и проверяется следующий прокси, логично же? )

[Dimonchik]

Matthew Stafford, гонишь

не не получаю, а получаю None