Почему неправильно отображается время публикации новости в вк при автоматизации?

Question

[Сергей]

При добавлении таймера в публикацию новости присваиваю значение календарю и времени.

Нашел три параметра, которые могли бы отвечать за время:

Document.getElementsByclassName('resultField').value
Document.getElementsByclassName('selector_input selected').value
Document.getElementById('postpone_time1').value

Но при вызове метода публикации все равно присваивается значение времени выбранное изначально при добавлении календаря. На рисунке новость опубликуется в 19:25.

Значение defaultvalue для класса "selectedItems", которому принадлежит выпадющий список, тоже менял. Но есть вариант, что там есть какой-то метод, который должен отработать, но я не могу его найти.
Большое спасибо за помощь.

Answer 1

[azarij]

а пробовали fidlerom перехватить трафик и посмотреть что браузер отсылает когда вы вручную заполняете и отправляете форму?

Comments

[Сергей]

Не пробовал. Первый раз слышу об этом инструменте. Да и вообще, т.к. я не веб-разработчик, то о многом не слышал. Попробую. Только вопрос, а в каком виде там информация? Мы же знаем, какие неправильные числовые значения уходят. Я уже даже нашел элементы списка, на которые забиты значения часов и минут. Когда наводим, то им присваивается класс "active". И еще на них висят сыбытия "onmouseover" и "onmousedown". Вот, собственно, мне кажется, что надо как-то повторить клик на требуемом . Не могу найти как:(

[azarij]

отличный инструмент когда надо посмотреть что отправляет/получает браузер в ответ на действия пользователя. его аналоги есть почти в любом браузере (дев тулс).
я посоветовал посмотреть что шлет браузер в надежде, что это вам поможет понять куда и как нужно в ДОМе "кликнуть", чтобы получить желаемый результат.

я раньше тоже автоматизировал сайты через элементы и события ДОМ, но потом осознал, что скрипты перестают работать, как только на сайте что-то меняется. ненадежно это.
перешел на прямые ПОСТ/ГЕТ запросы на сервера и парсинг ответов. тоже есть шанс, что форма запросов/ответов изменится на сайте, но значительно меньше, чем шанс того, что кто-то поменяет имя/ИД/класс элемента в хтмл коде.
принцип достаточно прост: запускаем фидлер, он пропускает через себя весь хттп/с трафик, заходим на сайт, производим нужные действия, смотрим что записал фидлер в виде ПОСТ/ГЕТ запросов и что он на них получал в ответ. повторяем ту же последовательность запросов через invoke-webrequest, curl, wget, etc. PROFIT (с переменным успехом)! по крайней мере, мне удалось так автоматизировать мой интернет банк и он мне уже пятый год powershell'oм смс шлет на телефон, когда меняется сумма на счете.

не все сайты так можно автоматизировать. на некоторых дополнительные запросы отправляются из JS скриптов. тогда уже нужен браузер, чтобы JS исполнять. тогда уже нужно что-то типа selenium и watin .net библиотек.

некоторые сайты невозможно автоматизировать в принципе.

[Сергей]

azarij: я уже несколько вариантов рассмотрел:
1. invoke-webrequest. Не удается пробиться через форму авторизации в ВК. Вроде все шлю по документации.
$a = invoke-webrequest vk.com -SessionVariable $vk
$a.Forms[0].Fields.quick_email = 'email'
$a.Forms[0].Fields.quick_pass = 'pass'
$req = invoke-webrequest $a.Forms[0].Action -body $a -method POST -SessionVariable $vk

Возвращается та же страница. С теми же полями, а я так понимаю, что сервер должен вернуть страницу пользователя.

2. Посмотрел через фидлер: посылается такой же POST запрос, какой прописан в API социальной сети. Если использовать API и заморочиться с токеном (что я тоже попробовал), то возникает ошибка error_code":15,"error_msg":"Access denied: no access to call this method". Распространенная проблема, не могу понять, решаема ли она в рамках моей задачи.

3. Остается вопрос, в какую сторону копать. Еще думал над вариантом, как послать пост запрос самим браузером, когда я использую -comObject "InternetExplorer.application"

[azarij]

1. fiddler показывает, что тело (параметр body в invoke-webrequest) ПОСТ запроса выглядит так:

act=login&role=al_frame&expire=&captcha_sid=&captcha_key=&_origin=http%3A%2F%2Fvk.com&ip_h=значение_ип_х&lg_h=значение_лг_х&email=емаил&pass=пароль

ip_h - скорее всего хэш вашего IP.
lg_h - возможно, какой-то ID сессии.

значение обоих можно выдрать из хтмл кода ответа на первичный ГЕТ запрос к vk.com:

но проблема не в этом, а в том, что логин с каждого нового браузера должен быть подтвержден через телефон (я не нашел как отключить). учитывая, что командой invoke-webrequest мы пытаемся имитировать браузер, нам придется вводить телефонный код подтверждения каждый раз, когда мы запустим наш скрипт - это не дело. можно покопаться в печеньках и подставлять их, но это отдельный геморрой.

если можно отключить двух-факторную аутентификацию, то алгоритм будет грубо таким:

#задаем юзерагента
$useragent = "Mozilla/5.0 (Windows NT 10.0; WOW64; rv:45.0) Gecko/20100101 Firefox/45.0"

#задаем адрес куда будем слать первый запрос
$uri1 = "vk.com"

#отсылаем ГЕТ запрос
$req1 = invoke-webrequest -uri $uri1 -method get -useragent $useragent -sessionvariable vk

#из полученного ответа выдираем значения ip_h и lg_h. способов много.
$ip_h = $req1.content bla bla bla
$lg_h = $req1.content bla bla bla

#задаем новый урл для собственно запроса на логин
$uri2 = "https://login.vk.com/?act=login"

#задаем тело ПОСТ запроса
$body2 = "act=login&role=al_frame&expire=&captcha_sid=&captcha_key=&_origin=http%3A%2F%2Fvk.com&ip_h=$ip_h&lg_h=$lg_h&email=емаил&pass=пароль"

#отправляем ПОСТ запрос на логин
$req2 = invoke-webrequest -uri $uri2 -method POST -body $body2 -useragent $useragent -websession $vk

в теории, ответ на этот запрос даст нам уже хтмл код страницы залогиненного пользователя.

вот как-то так. возможно с некоторыми небольшими вариациями в зависимости от полученных результатов. и это только логин. дальше опять смотрим через фиддлер какие запросы уходят, когда мы делаем то, что нам нужно и повторяем их в коде.

2. с их АПИ незнаком. однако там, вроде как, нужен oauth. я только однажды заморочился с ним для другого сайта - тот еще секс, я вам доложу.

3. я сам еще покопаюсь. может найду как можно отключить двух-факторную аутентификацию... в идеале нужно использовать их АПИ, чтобы добиться результатов кратчайшим путем.

[azarij]

вот тут можно посмотреть как люди с АПИ работают: https://www.google.ie/search?q=вконтакте+api+powershell

[azarij]

разобрался с апи.
создаем stanalone приложение здесь https://vk.com/apps?act=manage.

в настройках созданного приложения берем ID приложения.

получаем access token:
https://oauth.vk.com/authorize?client_id=ID_ПРИЛОЖ...,friends,notes,pages,status,wall,groups,messages,email,notifications,stats,offline&response_type=token&v=5.50
scope в этой ссылке указывает на что будет запрошен доступ для этой access token. параметр offline означает, что у токена не будет срока годности и его не нужно будет запрашивать опять. наверно не очень безопасно, но очень удобно.

когда браузер вернет ответ, предварительно попросив подтвердить доступ к запрошенному функционалу, в адресной строке будет адрес вида:
http://api.vk.com/blank.html#access_token=ДЛИННАЯ_...

все, что вам из него надо это ДЛИННАЯ_СТРОКА_ЦИФР_И_БУКВ и ВАШ_ЮЗЕР_АЙДИ_ВКОНТАКТЕ. не советую допустить попадания токена в чужие руки ;).

теперь чтобы написать сообщение на стену, нужно отправить запрос (ПОСТ или ГЕТ) вида:
https://api.vk.com/method/wall.post?owner_id=АЙДИ_...
ответы приходят в JSON. если {"response":{"post_id":ЧИСЛО}}, то сообщение прошло успешно.

для отложенных сообщений:
https://api.vk.com/method/wall.post?owner_id=АЙДИ_...

подробнее https://vk.com/dev/apiusage

если парсер покорежил ссылки в моём комментарии, дайте емаил - вышлю туда.

[azarij]

подлый парсер!

[Сергей]

azarij: Во-первых, большое спасибо за вашу помощь! Особенно удивительны ответы на выходных, но я прям загорелся и даже вне работы решил подумать над этой задачей.

По теме:
С апи я разобрался и успешно могу выполнять запросы POST. Но почему-то конкретно метод wall.post возвращает ошибку(про которую я писал выше). Может это как-то связано с тем, что STANDALONE приложение и скрипт PS слегка разные вещи? Много на форумах про это написано, все заканчивается тем, что людям пишут "этот метод только для "STANDALONE" приложений. А какая разница, токен же получаю и доступ норм.
Написал им в ТП по поводу этого, может прояснят ситуацию.

По поводу invoke-webrequest. У меня простая авторизация, не двухфакторная.
Из вашего ответа почти все понял, кроме того, почему ПОСТ запрос формируется именно так:
"#задаем тело ПОСТ запроса
$body2 = "act=login&role=al_frame&expire=&captcha_sid=&captcha_key=&_origin=http%3A%2F%2Fvk.com&ip_h=$ip_h&lg_h=$lg_h&email=емаил&pass=пароль"
#отправляем ПОСТ запрос на логин

т.е. если я заполню ip_h и lh_h своими значениями, то по идее должна вернуться авторизованная страничка?
а вот эти поля не влияют?

quick_expire_input
quick_captcha_sid
quick_captcha_key

Вот вывод полей при обычной авторизации:
PS C:\Users\Admin> $tan.Forms[0].Fields

Key Value
--- -----
act login
role al_frame
quick_expire_input
quick_captcha_sid
quick_captcha_key
_origin vk.com
ip_h 54fba515563f7f0573
lg_h c6d86dcd67962a6d98
quick_email
quick_pass

В общем, сейчас попробую сделать.

[Сергей]

в кукбуке 3-ей версии, кстати, рассмотрен пример с авторизацией на facebook(376стр.). Там еще используют куки и system.Net.web.client.

[azarij]

для человека, у которого, как здесь говорят "no life outside of work" и которому всегда скучно, выходных не существует. =)

мне кажется, мы с вами путаем мягкое с теплым, так сказать.
давайте разложим мух и котлеты по полкам.

1. какая стоит задача?

2. если вам нужно просто отправить отложенное сообщение на стену, то есть 3 способа сделать это:
а. через АПИ путем получения access token для standalone ВК приложения и отправки нескольких запросов (ПОСТ или ГЕТ - неважно). чем вы будете отправлять эти запросы - powershell'oм или браузером или еще как-то - неважно. никакой логин для этого не нужен - только access token в каждом запросе. это самый простой способ и ВК специально написали АПИ для этого. работает, проверено.
б. путем имитации браузера в powershell только через ПОСТ/ГЕТ запросы. это сложнее и вцелом, я думаю, не сильно приветствуется ВК. тут нужно все - логин, передача всех параметров как это делает браузер. access token не используется. значения ip_h и lg_h берутся из ГЕТ запроса на vk.com до того как отсылать ПОСТ запрос на логин. если их нет в ПОСТ запросе или они не такие же как в оригинальном запросе, авторизация не произойдет. у меня не получилось так сделать из-за двух-факторной авторизации на сайте.
в. используя только елементы и события в ДОМ (найти елемент с айди таким-то и кликнуть на нем, ввести текст) через powershell. ненадежно. это у вас вроде получилось, но сообщения на стену приходят в неправильное время.

теперь нам просто нужно выбрать способ, которым мы хотим выполнить поставленную задачу. учитывая все наши недавние приключения, я бы выбрал способ а.
если задача другая - давайте обсудим.

[Сергей]

azarij: Все верно!
И я абсолютно согласен, что самое правильное, логичное и удобное - использовать API. Тем более, что после того, как я попробовал сделать пару других (не wall.post) запросов через invoke все отлично сработало.

Теперь надо понять, будет ли работать в скрипте метод wall.post в принципе. Потому что я генерирую токен по инструкции к АПИ, но выдает ошибку. Конечно, хотелось бы разобраться, потому что парсить верстку это костыль, конечно же.

[Сергей]

Ну, и я опять параллельно нашел функцию, которая отвечает за присваивание времени

addEvent(this.container, 'mouseout', function() {
self.mouseIsOver = false;
if (self.disabled) return;
setTimeout(function() {
if (self.mouseIsOver) return;
if (!self.select.isVisible()) {
self.fadeButtonToWhite();
} else {
var rtl = vk && vk.rtl || window.is_rtl;
self.dropdownButton.style.backgroundColor = self.dropdownButton.style[rtl ? 'borderRightColor' : 'borderLeftColor'] = '';
}
}, 0);
});

Вот она вызывается при клике на список: setTimeout(function()

Нет идеи, как ее можно вызвать отдельно?

[azarij]

у меня метод wall.post как для прямых, так и для отложенных сообщений работает на ура.
покажите запрос, которым вы запрашиваете access token.

я не специалист в JS, но мне кажется это не та функция. эта что-то делает с кнопками и их цветами.

[Сергей]

azarij: https://oauth.vk.com/authorize?client_id=%id_прило...,friends,groups,offline&redirect_uri=https://oauth.vk.com/blank.html&display=page&v=5.5...'

[azarij]

cool. теперь какая ошибка выдается при отправке этого запроса?

[Сергей]

azarij: Я выбираю клиентскую авторизацию, а может надо делать серверную?

[Сергей]

azarij: нет, при этом запросе никакой ошибки нет. я нормально получаю всплывающее окно с подтверждением прав. Жмякаю и меня перекидывает на страницу с токеном в адресной строке. Беру этот токен и формирую запрос:

$token = 'мой токен'
$uri = "https://api.vk.com/method/wall.post?owner_id=-'id_моей_группы, куда хочу запостить'&message=test&publish_date=1457918090&v=5.5&access_token="+$token
$requ = Invoke-WebRequest -Uri $uri -Method POST

[azarij]

ок. тогда после какого запроса и какая ошибка выдается?
ПОСТ запрос в последнем комментарии написан неправильно. вы не указываете -body, то есть то, что нужно отправить. измените его на ГЕТ.

[Сергей]

azarij: я пробовал и get тоже вчера. Ну вот, сейчас еще раз попробовал c гет

{"error":{"error_code":15,"error_msg":"Access denied: no access to call this method","request_params":[{"key":"oauth","value":"1"},{"key"
:"method","value":"wall.post"},{"key":"owner_id","value":"-id_group"},{"key":"message","value":"test"},{"key":"publish_date","value":"145
7918090"},{"key":"v","value":"5.5"}]}}

[azarij]

если вы создали standalone приложение, то авторизация должна быть клиентская.
возможно не хватает прав доступа запрошенных через oauth.
перезапросите access token со следующим значением scope:
notify,friends,notes,pages,status,wall,groups,messages,email,notifications,stats,offline
потом вы сможете убирать значения по одному, чтобы выяснить какого не хватало.

$uri = "https://api.vk.com/method/wall.post?owner_id=-'id_моей_группы, куда хочу запостить'&message=test&publish_date=1457918090&v=5.5&access_token="+$token
вместо +$токен в конце попробуйте ...&access_token=$token"

[azarij]

кстати, если не в группу постить, а на стену простого пользователя - owner_id без минус. так работает?

[Сергей]

azarij: OMG! Я нашел проблему. Как всегда, все оказалось очень банально. То приложение, которое у меня было зарегистрировано не являлось stand-alone, а было типа "веб-сайт". В настройках тип приложения нигде не отображается, поэтому я думал, что оно по умолчанию является таковым.

А потом решил его пересоздать и увидел, что там есть и другие варианты.

Все отлично работает и огромное спасибо вам за помощь и терпение. Безмерно благодарен, жаль приплачивать за помощь тут нельзя."

[azarij]

=) рад был помочь.

Answer 2

[Сергей]

Задача решается через официальное API vk.com.
1. создаем stand-alone приложение
2. получаем токен:

'https://oauth.vk.com/authorize?client_id=Your_ID_APP&scope=notify,friends,notes,pages,status,wall,groups,messages,email,notifications,stats,offline&redirect_uri=https://oauth.vk.com/blank.html&display=page&v=5.24&response_type=token'

Токен будет в адресной строке
3. формируем запрос к API через invoke-webrequest

$token = your_token #str
$uri = "https://api.vk.com/method/wall.post?owner_id=-YOUR_PAGE&message=test&publish_date=1458120019&v=5.5&access_token=$token"
$requ = Invoke-WebRequest -Uri $uri -Method get

Документация по методу: wall.post

Answer 3

[Danil Sapegin]

Может у вас какая-нибудь проблема с таймзонами? Проверьте настройки локальные на компе и указанные в настройках ВК..

Comments

[Сергей]

Время отложенной публикации никак не зависит от тайм зоны. Если я опубликую 4 поста подряд, то разница между ними будет 4 часа(по умолчанию в вк). Т.е. на сервер не отправляется то, что я вбиваю в формы. Когда я в ручную выбираю выпадающий список и значение в нем, то происходит событие(какое я не могу понять) и время публикации норм. Но ни change() ни select().