Как парсить фото с сайта если там есть форма по которой получает фото?

Question

[Jony1337]

Привет
есть на одном сайте такая форма

<div class="row">
		<div class="col-md-8 col-xs-6" id="left-col">
			<div class="aplication">
				<div class="aplication-inner">
								<h2 class="title">Text !</h2>
				<p class="subtitle">Introdu numele tau</p>
				<form id="form1" class="formapp" method="post" action="http://www.example.com/tm1" name="userinput" enctype="multipart/form-data">
				  <input type="hidden" value="sa" name="pic">
					<span class="input input--minoru fiir">
						<input type="text" name="nume" placeholder="Ex. Adrian" maxlength="14" class="input__field input__field--minoru">
						<label for="input-13" class="input__label input__label--minoru">
							<span id="nume-label" class="input__label-content input__label-content--minoru">Name</span>
						</label>
					</span>
					<span class="input select--monoru sec">
						<select name="sex" class="input__field input__field--minoru">
							<option value="masculin">Masculin</option>
						    <option value="feminin">Feminin</option>							
						</select>
						
						<label for="input-13" class="input__label input__label--minoru">
							<span class="input__label-content input__label-content--minoru">Genul</span>
						</label>
					</span>
					<div class="submit-div">
						<input type="submit" class="submit" value="Find">
					</div>
										
				</form>

после того как нажата кнопка Find нас перенаправляет на тот же адрес просто вместо формы уже фото
как спарсити это фото у кого какие мысль ?

Answer 1

[Нурлан]

curl'ом шлем post и парсим выдачу.
file_get_contens'ом шлем post и парсим выдачу.
nightmarejs'ом заходим, нажимаем Find и парсим выдачу.

Comments

[Jony1337]

<?
/**
* @param string $url
* @param array $postFields
* return array
*/
function fetchUrl($url, $postFields = array())
{
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_HEADER, false);
curl_setopt($ch, CURLOPT_POST, true);
if(!empty($postFields)) {
curl_setopt($ch, CURLOPT_POSTFIELDS, $postFields);
}
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
$response = array();
$response['html'] = curl_exec($ch);
$response['err'] = curl_errno($ch);
$response['errmsg'] = curl_error($ch);
$response['header'] = curl_getinfo($ch);
curl_close($ch);
return $response;
}
$url = "example.ru/tm1";
fetchUrl ($url);
?>
не работает

[Максим Тимофеев]

Jony1337: Вероятно они проверяют referer, так что со своего послать не получится. Возьмите ПО типа contentdownloader и эмулируйте клик с отправкой формы, парсите результат.

[Нурлан]

Jony1337: функция рабочая, просто вы не умеете в php. Она возвращает массив с которым вы ничего не делаете. print_r(fetchUrl ($url)); и увидите, что данные есть, тело страницы и заголовки.

Answer 2

[Ilya]

День добрый.

Как вариант:

$post['pic'] = 'sa';
$post['nume'] = 'value';
$post['sex'] = 'masculin';

$ch = curl_init('http://www.example.com/tm1');
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, TRUE);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, TRUE);
curl_setopt($ch, CURLOPT_POST, TRUE);
curl_setopt($ch, CURLOPT_POSTFIELDS, $post);
$result = curl_exec($ch);
curl_close($ch);

Дальше смотрите $result на наличие картинки. Ну и не стесняйтесь адаптировать код под свои нужды.

Comments

[Jony1337]

страница зависает и ничего не происходит

[Ilya]

Jony1337: Я специально отметил "Ну и не стесняйтесь адаптировать код под свои нужды.", потому как парсинг всегда зависит от контекста и надо смотреть для каждого конкретного сайта свои тонкости и условия. Так как url сайта вы не дали, то ничего конкретного посоветовать не могу.
Вы дали код формы, в которой после отправки POST-запроса отображается нужна вам информация. Я написал код отправки POST-запроса curl'ом. Дальше - вы сами его допиливаете, проверяете и экспериментируете.

[Jony1337]

Ilya: Warning: curl_setopt() [function.curl-setopt]: CURLOPT_FOLLOWLOCATION cannot be activated when safe_mode is enabled or an open_basedir is set in /home/deceb799/public_html/hk.php on line 12
301 Moved Permanently

nginx/1.6.3

[Ilya]

Jony1337: Ну сделайте его FALSE, вдруг сработает. Но на будущее
1. не стесняйтесь читать документацию
2. смело используйте гугл, где вы почти всегда найдете ответы на том же stackoverflow.

[Jony1337]

Ilya: страница зависает и ничего не происходит , вот url откуда хочу парсить appline.ro/place

[Ilya]

Jony1337: Слушайте, ну вот я сейчас на скорую руку написал код

$url = 'http://www.appline.ro/place';
$post['sa'] = 'pic';
$post['nume'] = 'Ilya G';
$post['sa'] = 'pic';
$post['sex'] = 'masculin';

$headers = array("Content-Type:multipart/form-data"); // работает и без этого

$ch = curl_init();
curl_setopt($ch, CURLOPT_RETURNTRANSFER, TRUE);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION,  TRUE); // работает и без этого
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_POST, true);
curl_setopt($ch, CURLOPT_POSTFIELDS, $post);
curl_setopt($ch, CURLOPT_HTTPHEADER, $headers); // работает и без этого
$data = curl_exec($ch);
echo $data;
</php>
И получил нужный результат - готовый html с картинкой.
Работает и без заголовков и без FOLLOWLOCATION. 
Самый просто POST-запрос работает отлично.
Проблему ищите не в коде.

[Jony1337]

Ilya: your-battles.space/hk.php всё равно не работает , может и за хостинга не работает ?

[Ilya]

Jony1337: либо хостинг, либо вы где-то сами допускаете ошибку. Можете попробовать переписать код под file_get_contents() - пример тут stackoverflow.com/questions/2445276/how-to-post-da...

[Jony1337]

Ilya: $postdata = http_build_query(
array(
'sa' => 'pic',
'nume' => 'text',
'sa' => 'pic',
'sex' => 'masculin'
)
);

$opts = array('http' =>
array(
'method' => 'POST',
'header' => 'Content-type: application/x-www-form-urlencoded',
'content' => $postdata
)
);

$context = stream_context_create($opts);

$result = file_get_contents('www.appline.ro/place', false, $context);
как вывести содержания ?

[Ilya]

Jony1337:
$result = file_get_contents('www.appline.ro/place', false, $context); // http:// забыли
echo $result;

[Jony1337]

Ilya: Warning: file_get_contents( appline.ro/place) [function.file-get-contents]: failed to open stream: No such file or directory

[Ilya]

Jony1337: вы точно http:// добавили?

$result = file_get_contents('http://www.appline.ro/place', false, $context); // http:// забыли
echo $result;

Если и с http:// не работает, то я не могу вам помочь. Мой код, что дал во всех случаях полностью рабочий.

[Jony1337]

Ilya: теперь выводит белую страницу

[Ilya]

Jony1337: Я не могу вам ничем помочь.

[Jony1337]

Ilya: проблемы и за хостинга ? в коде всё верно сделал

[Нурлан]

Ilya: удивляюсь вашей выдержке. Браво!

[Ilya]

Нурлан: Ну и такое бывает, да ( К сожалению, все чаще вопросы на Тостере походят на задания.