Как скачать файл, генерируемый скриптом?

Question

[Евгений]

Есть ссылка, которая не содержит в себе файл, а генерирует php скриптом.
что-то типа: http://www.site.ru/content/v/?brand_type[]=10&toke...
Пытаюсь скачать функцией ниже, ничего не выходит. Она отлично скачивает, когда есть прямая ссылка на файл, типа site.com/wert.avi

function downloadDistantFile($url, $dest)
  {
    $options = array(
      CURLOPT_FILE => is_resource($dest) ? $dest : fopen($dest, 'w'),
      CURLOPT_FOLLOWLOCATION => true,
      CURLOPT_URL => $url,
      CURLOPT_FAILONERROR => true, // HTTP code > 400 will throw curl error
    );

    $ch = curl_init();
    curl_setopt_array($ch, $options);
    $return = curl_exec($ch);

    if ($return === false) {
      return curl_error($ch);
    } else {
      return true;
    }
  }

В браузере сервер возвращает ответ:

HTTP/1.1 200 OK
Server: nginx/1.12.2
Date: Wed, 03 Jul 2019 07:47:48 GMT
Content-Type: text/csv;charset=UTF-8
Transfer-Encoding: chunked
Connection: keep-alive
P3P: policyref="/bitrix/p3p.xml", CP="NON DSP COR CUR ADM DEV PSA PSD OUR UNR BUS UNI COM NAV INT DEM STA"
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate
Pragma: no-cache
<b>Content-Disposition: attachment; filename=content_03_07_2019_10_47.csv; size=91472684;</b>
X-Frame-Options: SAMEORIGIN

Как сделать так, чтобы curl скачал мне этот файл.

Comments

[Владислав Лысков]

генерировать прямую ссылку на php самому? content_03_07_2019_10_47.csv тут же видно, что это дата, время и . ".csv"

[Евгений]

Владислав Лысков, я так понимаю он формируется когда я делаю запрос и удаляется когда получаю ответ. Добавление в конце url имени файла ничего не дает. Не находит его.

Answer 1

[Pavel]

Отбросьте заголовки, в теле ответа должен быть контент файла.

Comments

[Евгений]

Сейчас в файл сохраняется "Нет авторизации"
Я качаю по этой ссылке через wget url >file.csv, все качается без проблем.

[Pavel]

Сейчас в файл сохраняется "Нет авторизации"

По-моему проблема очевидна, не? Добавьте cookie в курл запрос

[Евгений]

Pavel, а почему он скачивается в неавторизованных браузерах и через wget? Эта ссылка не должна требовать авторизацию.

[Евгений]

Насколько я понимаю токен это и есть авторизация и по нему система выдает куки. Потом нужно отправить эти куки и получить файл. В том же wget это происходит автоматом. Но как это сделать через curl php?

[Pavel]

Попробуйте так:

function connect($link) {
	$ch = curl_init(); 
	curl_setopt($ch, CURLOPT_URL,$link);
	curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (iPad; CPU OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1");
	curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
	curl_setopt($ch, CURLOPT_FOLLOWLOCATION,1);
	curl_setopt($ch, CURLOPT_TIMEOUT, 0);
	curl_setopt($ch, CURLOPT_HEADER, 0);
	
	$response = curl_exec($ch);
	curl_close($ch);
        
	return $response;
}
file_put_contents('test.csv', connect("http://your_link.here/script?token=qweqwe"));

[Евгений]

Pavel, Спасибо за помощь!
Дело было не в curl. URL приходил из формы и там было & вместо &
Ни var_dump, ни echo этого не показывали. Увидел что что-то не так когда сравнил 2 переменные в условии. Потом увидел через var_dump что у них разная длинна, затем залез и посмотрел на эту строку в БД.