Почему не получается извлечь json через curl?

Question

[DemonFromIrk]

Есть такой код:

spoiler

$url= 'https://www.mos.ru/altmosmvc/api/v1/taxi/getInfo/?Region=&RegNum=&FullName=&LicenseNum=&Condition=&pagenumber=1';


$cookie = tmpfile();
$userAgent = 'Mozilla/5.0 (Windows NT 6.2; WOW64) AppleWebKit/537.31 (KHTML, like Gecko) Chrome/26.0.1410.64 Safari/537.31' ;    
$ch = curl_init($url);    
$options = array(
    CURLOPT_CONNECTTIMEOUT => 20 ,
    CURLOPT_USERAGENT => $userAgent,
    CURLOPT_AUTOREFERER => true,
    CURLOPT_FOLLOWLOCATION => true,
    CURLOPT_RETURNTRANSFER => true,
    CURLOPT_COOKIEFILE => $cookie,
    CURLOPT_COOKIEJAR => $cookie ,
    CURLOPT_SSL_VERIFYPEER => 0 ,
    CURLOPT_SSL_VERIFYHOST => 0
);    
curl_setopt_array($ch, $options);
$kl = curl_exec($ch);
curl_close($ch);
echo $kl;

Если через браузер открыть, то выдает нормальный json. Через этот код - "Страница не найдена".
В чем проблема? Как заставить работать?

Comments

[Kirill Mokevnin]

Если есть возможность используйте https://github.com/guzzle/guzzle все станет гораздо проще.

[imdeveloper]

юзайте апи https://apidata.mos.ru/Docs

[DemonFromIrk]

imdeveloper, боюсь, что через оф. апи рано или поздно ограничат получение мне инфы, мне надо много выкачать

[imdeveloper]

DemonFromIrk, тогда реально guzzle

[Дмитрий]

Прокиньте заголовок

curl_setopt($ch, CURLOPT_HTTPHEADER, array("X-Requested-With: XMLHttpRequest", "Content-Type: application/x-www-form-urlencoded; charset=UTF-8"));

curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 0);
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, 0);

[DemonFromIrk]

Kirill Mokevnin, установил, но что-то пока не смог разобраться. Не могли бы вы помочь с моим примером в реалиях guzzle?
Так тоже не получается

spoiler

use GuzzleHttp\Client;
use GuzzleHttp\Cookie\CookieJar;

$client = new Client([
  'base_url' => $url,
  'cookies' => $jar,
  'allow_redirects' => true,
  'decode_content' => true
]);

$req = $client->request('get', $url)->getBody()->getContents();
$req = $client->request('get', $url)->getHeaders();
echo "<pre>";
print_r($req);

[Дмитрий]

DemonFromIrk, мои три строчки не помогли?

[DemonFromIrk]

Дмитрий, не помогло :с

[DemonFromIrk]

Хмм, посмотрите-ка, видимо от user agent зависит выдача?

spoiler

[DemonFromIrk]

заменил user-agent на "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:44.0) Gecko/20100101 Firefox/44.0", но это не помогло :с

[DemonFromIrk]

Заметил такую вещь:
первый раз ссылку открываешь -- ошибка, не найдено.
обновляешь страницу или переходишь по ссылке снова -- отдает json

[Kirill Mokevnin]

DemonFromIrk, Вам не нужен base_url, это ведь урл конкретного запроса. А вообще я предлагаю создать код на repl.it, тогда его легко можно будет проверить участникам дискуссии. Крайне важно видеть вывод запуска вашего кода.

[DemonFromIrk]

Kirill Mokevnin, что-то я не понял, как на repl.it залить мой код, чтобы он хоть как-то работал

[Kirill Mokevnin]

DemonFromIrk, оу извиняюсь, оно же не поддерживает внешние либы для php(, я забыл. Тогда на https://gist.github.com и добавьте туда вывод после запроса.

[DemonFromIrk]

Kirill Mokevnin, https://gist.github.com/KiraSokolov/bc8ef8afb47862...