Как определить отдает ли прокси кэш страницы?

Question

[romaaa32]

Нужна обновленная страница, как узнать отдает ли прокси кэш страницы?
При парсинге сайтов с использованием прокси, как можно узнать когда прокси отдает кеш страницы, а когда свежую, актуальную.

Answer 1

[Just A Bit]

В HTTP Headere обычно пишется кеш это или нет и когда он истечет.

Comments

[romaaa32]

А можете написать как выглядит когда кеш и как когда нет?
например это[pragma] => Array ( [0] => no-cache ) не кеш?

[Stalker_RED]

romaaa32, нет

[romaaa32]

Stalker_RED, что нет?

[Stalker_RED]

romaaa32, нет, Pragma: no-cache это не кэш.
Посмотрите любой справочник по HTTP-заголовкам или гайд по кешированию, например.

Я бы и рад подсказать что-то подробнее, но мне отсюда не видно какие там у вас заголовки, и телепатия пока плохо прокачана.

[romaaa32]

С использованием прокси который не отдает кеш, в данный момент не могу найти тот, который отдает кеш, когда они попадаются - появляются проблемы
Array
(
[server] => Array
(
[0] => nginx
)

[date] => Array
(
[0] => Tue, 20 Nov 2018 23:55:56 GMT
)

[content-type] => Array
(
[0] => text/html; charset=utf-8
)

[transfer-encoding] => Array
(
[0] => chunked
)

[vary] => Array
(
[0] => Accept-Encoding
)

[status] => Array
(
[0] => 200 OK
)

[x-runtime] => Array
(
[0] => 42
)

[cache-control] => Array
(
[0] => private, max-age=0, must-revalidate
)

[set-cookie] => Array
(
[0] => _wk_session=BAh7CjoPc2Vzc2lvbl9pZEkiJTIzZTEyZTBjN2MxZGE5YmI0YWQ0NTc3NjA5YmI2MmZmBjoGRUZJIgpmbGFzaAY7BlRJQzonQWN0aW9uQ29udHJvbGxlcjo6Rmxhc2g6OkZsYXNoSGFzaHsGOgtub3RpY2UwBjoKQHVzZWR7BjsIRjoTc2ltcGxlX2NhcHRjaGFJIi03OWU4NzVkNGQxNTliOTM3Y2JlMmQxOTM0ZjZkMjdiZmMwZjMxMmNkBjsGRjoOcmV0dXJuX3RvSSIbaHR0cDovL3dla2luZ3MucnUvZ2FtZQY7BlQ6CXVzZXJpAxSgOg%3D%3D--659bea65a935ce139b4770cca8cf219a505d2bc0; path=/; expires=Wed, 20-Nov-2019 23:55:56 GMT; HttpOnly
)

[x-powered-by] => Array
(
[0] => Phusion Passenger 4.0.50
)

[pragma] => Array
(
[0] => no-cache
)

)

[Stalker_RED]

romaaa32, я не понимаю о чем вы. Что за проблемы? Кто мешает установить или написать кеширующий прокси?

[romaaa32]

Stalker_RED, Нужна обновленная страница, как узнать отдает ли прокси кэш страницы?
Вопрос задан 11 часов назад

На сайте данные обновляются, прокси отдают старые данные.
Для парсинга используются прокси.

[Just A Bit]

Зависит от того чьи прокси вы используете и добавляет ли прокси заголовки в HTTP ответ. Судя по тому, что вы отписали выше, заголовка нет да и врядли будет... Единственное что можно попробовать проверить это поле "date". Проверьте ответы, будет ли значение этого поля "актуальным" или из "прошлого". Тем самым можно будет проверить, кэш или лайв ответ. Не зная деталей вашего прокси и сайта которые вы парсите, сложно будет дать точный ответ.

[Stalker_RED]

romaaa32, если http, то "вражеский и злой" прокси может подменить любые заголовки. Если https - то не может.
Это я уже начал угадывать, потому что вопрос хоть и задан 11 часов назад, но до сих пор непонятно о чем он.
Ждете лекцию о http протоколе, заголовках и кешировании?

[romaaa32]

justabit, Спасибо

[romaaa32]

Stalker_RED, элементарный вопрос как по мне. Повторюсь: Как узнать когда прокси, используемый при парсинге, отдает кеш страницы, вместо свежей (актуальной) страницы. Спасибо человеку выше, понял и нонятно ответил.

[Stalker_RED]

romaaa32, что мешает "злому прокси" отдать вам кеш, подставив при этом всежий date?

[Just A Bit]

Stalker_RED, можно так же ответить что вообще мешает отдать прокси "жопу" когда спросил "сайт". Если вдаваться в подробности как можно нагадить через прокси, то тут на целую лекцию хватит. Но это не являлось начальным вопросом.