Комментарии пользователя animr

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Никита Полевой, а это строка POST запрос не отправляет ?
curl_setopt($this->ch, CURLOPT_POSTFIELDS, $body);

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

<?php

class ParsNalog
{
	private $url_pars;
	private $ch;
	public $numberOGRN;

	public function __construct($print = false) {
		$headers = array (
			"accept:application/json, text/javascript, */*; q=0.01",
			"accept-language:ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7",
			"cache-control:no-cache",
			"content-type:application/x-www-form-urlencoded",
			"pragma:no-cache",
			"sec-fetch-mode:cors",
			"sec-fetch-site:same-origin",
			"x-requested-with:XMLHttpRequest"
			
		);

		$body = "mode=quick&page=1&query=1192225018655&pageSize=10&sortField=NAME_EX&sort=ASC";

		$this->ch = curl_init();
		if (!$print) {
			curl_setopt($this->ch, CURLOPT_HTTPHEADER, $headers);
			curl_setopt($this->ch, CURLOPT_RETURNTRANSFER, true);
			curl_setopt($this->ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36');
			curl_setopt($this->ch, CURLOPT_REFERER, "https://ofd.nalog.ru/index.html");
			curl_setopt($this->ch, CURLOPT_POSTFIELDS, $body);
			curl_setopt($this->ch, CURLOPT_FOLLOWLOCATION, true);
		}
	}

	public function set($name, $value) {
		curl_setopt($this->ch, $name, $value);
		return $this;
	}

	public function exec($url_pars) {
		curl_setopt($this->ch, CURLOPT_URL, $url_pars);
		return curl_exec($this->ch);
	}

	public function __destruct() {
		curl_close($this->ch);
	}
}

и сама функция:

public static function checkExistsCompanyRegisterSandMEnterprises () {
        $obParseData = new ParsNalog();
        $url_pars = 'https://ofd.nalog.ru/index.html#pnlSearchResult';
        $obPQDoc = phpQuery::newDocument($obParseData->exec($url_pars));  
        $obPQDoc->find('#tblResultData');
        $strValueFindData = pq($obPQDoc);
        echo '<<<<< '. $strValueFindData->find('.rsmp-result span')->text() .' >>>>>';
        //var_dump($strValueFindData);
    }

Пустой результат.

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

сURL как его воспринимает я не знаю, ему все эти заголовки мне надо прописать чтоб он получил контент?

curl "https://ofd.nalog.ru/search-proc.json" 
- H "Sec-Fetch-Mode: cors" 
- H "Origin: https://ofd.nalog.ru" 
- H "Accept-Encoding: gzip, deflate, br" 
- H "Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7" 
- H "X-Requested-With: XMLHttpRequest" 
- H "Cookie: _ym_uid=1559550956125437272; _ym_d=1559550956; _ga=GA1.2.899122039.1560429815; top100_id=t1.-1.760106474.1561622629137; last_visit=1567586822127::1567597622127; _ym_isad=2; _ym_visorc_23729197=w; JSESSIONID=B01A40C97FA5EDF96137A187C59315A1" - H "Connection: keep-alive" - H "Pragma: no-cache" - H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" - H "Content-Type: application/x-www-form-urlencoded" - H "Accept: application/json, text/javascript, */*; q=0.01" - H "Cache-Control: no-cache" - H "Referer: https://ofd.nalog.ru/index.html" - H "Sec-Fetch-Site: same-origin"--data "mode=quick^&page=^&query=5187746013934^&pageSize=10^&sortField=NAME_EX^&sort=ASC"--compressedcurl "https://ofd.nalog.ru/search-proc.json" - H "Sec-Fetch-Mode: cors" - H "Origin: https://ofd.nalog.ru" - H "Accept-Encoding: gzip, deflate, br" - H "Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7" - H "X-Requested-With: XMLHttpRequest" - H "Cookie: _ym_uid=1559550956125437272; _ym_d=1559550956; _ga=GA1.2.899122039.1560429815; top100_id=t1.-1.760106474.1561622629137; last_visit=1567586822127::1567597622127; _ym_isad=2; _ym_visorc_23729197=w; JSESSIONID=B01A40C97FA5EDF96137A187C59315A1" 
- H "Connection: keep-alive" 
- H "Pragma: no-cache" 
- H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" 
- H "Content-Type: application/x-www-form-urlencoded" 
- H "Accept: application/json, text/javascript, */*; q=0.01" 
- H "Cache-Control: no-cache" 
- H "Referer: https://ofd.nalog.ru/index.html"

Вообщем я не понимаю что нужно дальше делать

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Допустим так:

$url_pars = 'mode=quick^&page=^&query=' . $ogrn . '^&pageSize=10^&sortField=NAME_EX^&sort=ASC';

public static function checkExistsCompanyRegisterSandMEnterprises ($url_pars) {
        $obParseData = new Pars();
        $obPQDoc = phpQuery::newDocument($obParseData->exec($url_pars));  
        $obPQDoc->find('#tblResultData');
        $strValueFindData = pq($obPQDoc);
       var_dump($strValueFindData);
    }

Может не так, мне бы понять как сформировать у меня тут этот запрос, и отправлять

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Вооооот, теперь я чуть начал понимать.
Есть класс для парсинга данных:

<?php
class Pars
{
	private $url_pars;
	private $ch;

	public function __construct($print = false) {
		$headers = array (
			"Content-Type:text/html; charset=utf-8",
		);
		$this->ch = curl_init();
		if (!$print) {
			curl_setopt($this->ch, CURLOPT_HTTPHEADER, $headers);
			curl_setopt($this->ch, CURLOPT_RETURNTRANSFER, true);
			curl_setopt($this->ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36');
			curl_setopt($this->ch, CURLOPT_FOLLOWLOCATION, true);
		}
	}

	public function set($name, $value) {
		curl_setopt($this->ch, $name, $value);
		return $this;
	}

	public function exec($url_pars) {
		curl_setopt($this->ch, CURLOPT_URL, $url_pars);
		return curl_exec($this->ch);
	}

	public function __destruct() {
		curl_close($this->ch);
	}
}

Есть функция парсинга:

public static function checkExistsCompanyRegisterSandMEnterprises () {
        $obParseData = new Pars();
        $url_pars = 'https://ofd.nalog.ru/index.html#pnlSearchResult'; 
        $obPQDoc = phpQuery::newDocument($obParseData->exec($url_pars));  
        $obPQDoc->find('#tblResultData');
        $strValueFindData = pq($obPQDoc);
       var_dump($strValueFindData);
    }

Эту строку

mode=quick^&page=^&query=1192225018655^&pageSize=10^&sortField=NAME_EX^&sort=ASC

мне надо подставить сюда

$url_pars = 'mode=quick^&page=^&query=1192225018655^&pageSize=10^&sortField=NAME_EX^&sort=ASC';

чтобы функция парсинга мне вернула данные...
Но не получается ...

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Допустим Скопировать как cURL (cmd)
выдал следующее:

curl "https://ofd.nalog.ru/search-proc.json" 
- H "Sec-Fetch-Mode: cors" 
- H "Origin: https://ofd.nalog.ru" 
- H "Accept-Encoding: gzip, deflate, br" 
- H "Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7" 
- H "X-Requested-With: XMLHttpRequest" 
- H "Cookie: _ym_uid=1559550956125437272; _ym_d=1559550956; _ga=GA1.2.899122039.1560429815; top100_id=t1.-1.760106474.1561622629137; last_visit=1567586822127::1567597622127; _ym_isad=2; _ym_visorc_23729197=w; JSESSIONID=B01A40C97FA5EDF96137A187C59315A1" - H "Connection: keep-alive" - H "Pragma: no-cache" - H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" - H "Content-Type: application/x-www-form-urlencoded" - H "Accept: application/json, text/javascript, */*; q=0.01" - H "Cache-Control: no-cache" - H "Referer: https://ofd.nalog.ru/index.html" - H "Sec-Fetch-Site: same-origin"--data "mode=quick^&page=^&query=5187746013934^&pageSize=10^&sortField=NAME_EX^&sort=ASC"--compressedcurl "https://ofd.nalog.ru/search-proc.json" - H "Sec-Fetch-Mode: cors" - H "Origin: https://ofd.nalog.ru" - H "Accept-Encoding: gzip, deflate, br" - H "Accept-Language: ru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7" - H "X-Requested-With: XMLHttpRequest" - H "Cookie: _ym_uid=1559550956125437272; _ym_d=1559550956; _ga=GA1.2.899122039.1560429815; top100_id=t1.-1.760106474.1561622629137; last_visit=1567586822127::1567597622127; _ym_isad=2; _ym_visorc_23729197=w; JSESSIONID=B01A40C97FA5EDF96137A187C59315A1" 
- H "Connection: keep-alive" 
- H "Pragma: no-cache" 
- H "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36" 
- H "Content-Type: application/x-www-form-urlencoded" 
- H "Accept: application/json, text/javascript, */*; q=0.01" 
- H "Cache-Control: no-cache" 
- H "Referer: https://ofd.nalog.ru/index.html" 
- H "Sec-Fetch-Site: same-origin"--data "mode=quick^&page=^&query=1192225018655^&pageSize=10^&sortField=NAME_EX^&sort=ASC"--compressed

В php откорректировал под себя допустим и как мне его отправить post запросом
"mode=quick^&page=^&query=1192225018655^&pageSize=10^&sortField=NAME_EX^&sort=ASC"
чтоб получить в ответ

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Я реально не догоняю, прощу прощения, можно гифку еще одну?

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Где он запрос )) Заголовок запроса копировать?

и как его отправить?

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Вот сам запрос которую я хочу отправить
https://ofd.nalog.ru/index.html?mode=quick&page=&q...
подставляю переменную в коде вместо 1192225018655 и формируется мой запрос, далее что мн с ним делать? честно не понимаю дальше
( а потом составьте запрос на основе тех данных которые вам дают инструменты разработчика: там есть очень крутой функционал копирования запроса, надо нажать правой кнопкой на запрос и выбрать нужный формат. )

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Никита Полевой, Скорее всего я не понимаю, знаний не хватает, пример можно если не трудно?

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Никита Полевой, Отправляю, на главную выкидывает. Не обрабатывается.

Написано более трёх лет назад

Как передается поисковое значение на сайте?

animr @animr Автор вопроса

Спасибо огромное, а можно как нибудь внедриться в этот запрос, если да как его так же асинхронно отправить? Например: mode=quick&page=&query=1192225018655&pageSize=10&sortField=NAME_EX&sort=ASC

Мне программно нужно парсить выдаваемую информацию, мучаюсь сижу не знаю как получить эту страницу поиска с ОГРН фирмы.

Написано более трёх лет назад

Почему вместо большой буквы "Р" русского алфавита появляется вопросительный знак?

animr @animr Автор вопроса

mad_maximus, Спасибо большое, разобрался... благодаря Вам... решение, явно нужно было указывать кодировку при парсинге данных с сайте до того как загонять их базу.

Написано более трёх лет назад

Почему вместо большой буквы "Р" русского алфавита появляется вопросительный знак?

animr @animr Автор вопроса

кодировка стоит utf8 - и почему только буква "Р" в чем магия? И ничего не обрезаю вроде.

Написано более трёх лет назад

Почему for загоняет все значения ассоциативного массива в один ключ?

animr @animr Автор вопроса

Ужас ))) Спасибо огромное ))) ууууффф вот что значит не спать ))))

Написано более трёх лет назад

Почему for загоняет все значения ассоциативного массива в один ключ?

animr @animr Автор вопроса

Спасибо! ))) с тупил реально )))

Написано более трёх лет назад

Какую СУБД выбрать для работы с Delphi, Android приложения и ios приложения?

animr @animr Автор вопроса

Ок, понял благодарен, за ответ, буду работать по api!

Написано более трёх лет назад

Какую СУБД выбрать для работы с Delphi, Android приложения и ios приложения?

animr @animr Автор вопроса

Спасибо большое, придется работать с api

Написано более трёх лет назад

На каком CMS сделать сайт каталог с 7000000 позициями товаров?

animr @animr Автор вопроса

Олег Муравейко, Ладно, спасибо за информацию... Будем поднимать цену и будут работать три спеца в начале этапа! Спасибо большое.

Написано более трёх лет назад

На каком CMS сделать сайт каталог с 7000000 позициями товаров?

animr @animr Автор вопроса

Да были и 100K 300K но не на CMS. Не уверен, что вы компетентны в этом вопросе, я думаю я сам разберусь благодаря коллегам которые нормально мне ответили! Спасибо!

Написано более трёх лет назад

Войдите на сайт