• Как выполнить bat скрипт перед гибернацией Windows?

    InSys
    @InSys Автор вопроса
    Да, у меня была подобная мысль и я пробовал эксперементировать в эту сторону. Но тригера по уходу в гибернацию я не нашел. Есть общее событие и для спящего режима и для гибернации - System/Kernel-Power/event ID 42

    Но, как показали эксперементы, событие обрабатывается уже ПОСЛЕ того как компьютер вышел из гибернации. Т.е. смотрим лог:
    5af9fe548d113541529446.png
    при этом скрипт:
    ECHO sleep42 %date% %time% >> "test.log"
    по этому событию выполнен:
    sleep42 15.05.2018 0:09:49,31
    т.е. аж после пробуждения.

    Это же касается и спящего режима тоже. Т.е. само событие обрабатывается не до ухода в гибернацию/спящий режим, а после пробуждения из оного. Что соответственно мне не подходит(
  • Существуют трекеры сна с поддержкой монитора дыхания?

    InSys
    @InSys Автор вопроса
    InoMono,

    А почему вы считаете, что прибор на руке будет точнее, чем смартфон, который можно прямо возле головы положить?

    Сложно сказать. Я не особо в курсе новых технологий. Может существуют какие нибудь специфичные датчики способные определять по реакции кожи/пульса/еще_чего_нибудь определять дыхание. Все таки в век нанотехнологий живем)
  • Существуют трекеры сна с поддержкой монитора дыхания?

    InSys
    @InSys Автор вопроса
    InoMono, Вроде как некий JAWBONE UP3 может мониторить дыхание. Но мне не подходит - у него часов нет) Плюс эта фирма к сожалению в этом году объявила о своем закрытии. Так что поддержки этого устройства не будет.

    Смартфоны с приложениями не расматриваются, так как да, это лажа.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    @malvin
    1 апреля 2017 г. будут прекращены продажи Google Site Search – платной версии Системы пользовательского поиска. Любые операции по покупке или обновлению системы поиска следует выполнить до этого срока. Платный сервис полностью перестанет действовать 1 апреля 2018 г. Система пользовательского поиска будет работать в прежнем режиме.

    к сожалению тут я опоздал

    Нужна не просто выдача в 1000 результатов. А максимально полная выдача. Т.е. если гугл предлагает к выдаче 50 страниц по 100 результатов, или 1 страницу с 5 результатами, нужны все.

    За полную выдачу, хз, вопрос в том сколько за нее просят. В день ориентировочно - 1000-2000 выдач.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    Почти то что нужно, но тут речь о Топ 100, а нужна вся доступная выдача по одному запросу. Т.е. тысячи результатов. Но попробую написать им. Спасибо.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    Фёдор проблема в том что вы не понимаете или не хотите понять что именно мне требуется. В наш проект не интегрируешь прикладные утилиты под WIN. Поэтому я не зря упоминал про онлайн сервисы.

    Дело не в том что то что вы предлагаете - слишком сложно. Наоборот - это слишком просто, и впринципе как решение не рассматривается. Это очень ненадежно и нестабильно. Для меня написать утилиту для парсинга с поддержкой проксей, капчей и прочей ерунды - дело одного вечера. Но после этого мне будет необходимо поддерживать ее работоспособность, следить за тем чтобы верстка у гугла не поменялась, контролировать новые алгоритмы бана, постоянно добавлять прокси, следить за их валидностью, пополнять счет в антигейте, и куча еще других "И". Тогда как со сторонним сервисом вся ответственность за это переходит на них.

    При всем при этом объемы парсинга будут достаточно внушитильными, что
    контент даунлоадер без проксей и антикапчи

    просто звучит смешно. А в целом вы зря иронизируете, и считаете себя умнее других. Позволю себе аналогию на вашем примере нашего диалога:
    - нам нужен такой-то такой-то станок на завод
    - возьмите кухонный комбайн, подумаешь, будете менять в нем насадки, загружать продукт руками, и объем продукции будет меньше, да и продукция на выходе совсем не та.
    - нет, это не то, нам нужен именно производственный станок
    - ну вам не угодишь

    Надеюсь, мы поняли друг друга.

    Насчет цены за одну страницу в 50 копеек вы загнули. За полную спаршенную выдачу по одному запросу мы готовы предложить сколько-нибудь рублей. Но нужно именно АПИ для интеграции с нашим проектом, дерзайте.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    zamboga да, хожу. альпинизм, горные лыжи)

    В целом, спасибо, попробую поискать еще среди предложенных вариантов.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    zamboga о, вот Яндекс.XML, то что надо. Но нужно что то еще и под гугл.

    Да нужно что то типа Selka, но опять же, это утилита под винду, и она нам не совсем подходит, ее с нашим проектом не интегрируешь, плюс проблемы с подключением антикапчи, проксей, и прочей ерунды.

    Из всех сервисов что вы привели по ссылке, да выдача есть у некоторых - но как правило первые 50 строк. Что очень-очень мало. Такое мы можем сделать и сами. Нужен какой то сервис который мог бы вернуть минимум 1000 результатов по одному запросу.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    zamboga мы точно об одном и том же говорим?

    Мне не нужна база запросов. Ровно как и ключевые слова и прочая ерунда. Мне нужна именно выдача. Т.е. грубо говоря список сайтов который гугл отдаст по запросу "игрушечные машинки".

    >Купили прокси, купили/зарегали аккаунты, закинули баланс на рукапчу, и включили парсинг на пару часов / на ночь.
    Проблема в том что как раз вот этих ручных действий мы и хотим избежать.

    >сервисы, которые парсят за вас есть
    вот как раз они и нужны :)
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    iBird Rose слышал ес-но, но во первых эта утилита под винду, во вторых у ней нет никакого вменяемого АПИ для интеграции с нашим сервисом, в третьих это просто абсолютно не то.
    Что то похожее мы можем написать и самостоятельно. Но у нас нет лишнего времени на это, и желания следить за этим и поддерживать в работоспособном состоянии. Проще было бы воспользоваться каким либо готовым сервисом.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    К сожалению у всех этих трех вариантов есть геморой с обработкой капчей, проксей и прочей ерунды.
    Мы готовы платить за то решение, в котором эти проблемы уже решены.
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    Нужен именно онлайн. Подымать всю инфраструктуру с автоматической обработкой капчей, сменой прокси, нет ни сил ни желания. Проще было бы платить какому то готовому сервису, у которого есть для этого АПИ.

    >можно чуть ли не у самого Гугла воспользоваться
    что вы имеете ввиду?
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    Михаил Конюхов только к сожалению, ни одного публичного, пусть и платного, так до сих пор и нет
  • Есть ли сервисы парсинга поисковой выдачи?

    InSys
    @InSys Автор вопроса
    Спасибо, но это все совсем не то(( Локальные утилиты не подходят совсем.

    Нужен сервис именно онлайн. Такой где весь гемор с антикапчами и проксями уже решен. И я вполне себе отдаю отчет о том что такой сервис будет платен.

    Пытался гуглить но кроме предложенных вами утилит ничего не нашел(
  • Как проксировать и кешировать статику на длительный период?

    InSys
    @InSys Автор вопроса
    Ну если вы хотите намекнуть на то что я не искал ответ на вопрос прежде чем его задать, то это вы зря. Суть в том что я не спрашиваю какую то конкретику. Мне нужен совет в какую сторону лучше смотреть, идеи и схемы того как бы сделали это вы. А настроить nginx - я настрою.

    По теме, с nginx есть проблема, которую я не знаю как разрешить. Допустим кеш устарел, и при этом в этот же момент упал удаленный сервис. Как сделать так что бы nginx в этом случае отдавал бы устаревший контент?
  • Как подобрать сервер под нагрузку?

    InSys
    @InSys Автор вопроса
    Ну тоесть я правильно понимаю, для статики даже 100 тысяч(!) уников висящих(!) онлайн - хватит и двуядерного впс?
  • HTTPS и подгрузка картинок по HTTP. Есть ли подходящий CDN?

    InSys
    @InSys Автор вопроса
    Не, их там полмиллиона, не вариант =)
  • HTTPS и подгрузка картинок по HTTP. Есть ли подходящий CDN?

    InSys
    @InSys Автор вопроса
    Да, я смотрел. CloudFlare вроде не подходит, у него нету похожего Api. Хотя возможно я не нашел. Но насколько я понял он работает через проксирование DNS, а это категорически не подходит.