• При парсинге выдает ошибку 503. В чем может проблема?

    Mike_Ro
    @Mike_Ro Куратор тега Python
    Python, JS, WordPress, SEO, Bots, Adversting
    При парсинге выдает ошибку 503. В чем может проблема?

    В данном исполнение - никак. requests возвращает html, который сервер вернул при первом запросе, а сервер первым возвращает 503 ответ, затем js loader (загрузку), а уже затем необходимую страницу.
    КартинкО
    65fbd419a63e3055208155.png

    Буду рад, если распишите более подробно, как обходить данную ошибку.

    В данном случае - использовать selenium + undetected_chromedriver/selenium-stealth.
    Я сильно сомневаюсь, что этот сайт без антибот защиты

    MagicMight прав, а DmitriyKLN еще придется с этой защитой столкнуться.
    Ответ написан
    1 комментарий
  • Как создают текстуры для игр?

    GavriKos
    @GavriKos Куратор тега Разработка игр
    Ну так вы можете не знаю. ту же фотографию своего лица открыть на мониторе с разрешением 16к. И она там будет показываться ) Вы же не делаете фотографии под каждое разрешение? Не делаете. ВОт и тут абсолютно то же самое.

    Будет работать != будут 32к текстуры.
    Ответ написан
    2 комментария
  • Как скачать видео, начинающееся с blob?

    @TheSima
    Гуглится именно эта страница, но нормального ответа так и нет(не у всех Chrome), решил дополнить от себя.
    Решение(отсюда) для видео HLS такое(для других случаев пока что не нашёл решение):
    1) Определить m3u8 список для того видео которое Вы хотите скачать. Обычно это делается так:
    - Включаем режим разработчика в браузере и открываем(в этом режиме) вкладку сеть.
    - Открываем страницу с видео
    - В появившихся строчках ищем "что-то".m3u8 Например:
    http://example.com/video_url.m3u8
    Это и будет нужная ссылка на "список"
    2) Скачать ffmpeg и скачать с его помощью видео:
    - Под Windows можно здесь(ссылка устарела) здесьскачать из Assets файл ...-full_build.zip или 7z по вкусу, распаковать. Открыть папку bin, зажать Shift и кликнуть правой кнопкой в пустое место в окне папки bin, нажать "Открыть окно команд".
    Под линуксы я думаю, ребята разберуться ;)
    - И ввести следующую команду, заменив ссылку из примера на ссылку из пункта 1:
    ffmpeg -i "http://example.com/video_url.m3u8" -c copy -bsf:a aac_adtstoasc "output.mp4"

    output.mp4 - будет ваше видео) имя файла в команде можно менять ;)
    Ответ написан
    2 комментария
  • Как заражаются файлы и почему только exe?

    TrueBers
    @TrueBers
    Гуглю за еду
    Никак не определить.
    Код вируса отличается от легитимного кода только намерением того, кто его применяет. Ничем больше.

    С таким же успехом можно спросить:
    — Как отличить нож, которым кого-то зарежут, от обычного кухонного ножа?
    — Если вы не умеете читать мысли тех, кто берёт этот нож в руки, то никак.

    Можно просто отправить почту, написав код. А можно, используя этот же код, отправить данные банковской карты на почту хаццкиру Василию. Код будет одинаков, вы его никак не отличите от обычного полезного кода.
    Здесь нужно анализировать миллионы других косвенных факторов, которые могут подсказать, что есть вероятность, что в почту пошли не те данные, которые должны.
    Ответ написан
    4 комментария
  • Кому реально нужны правила по использованию cookie на сайте?

    Mike_Ro
    @Mike_Ro
    Python, JS, WordPress, SEO, Bots, Adversting
    Зачем, зачем и кому нужен этот бред с необходимостью показывать эти гребаные уведомления.

    На основание Европейского закона о персональных данных и т.д..

    Грубо говоря, если Ваш сайт обслуживает граждан ЕС, то Вы обязаны следовать закону. На территории РФ подобное требование отсутствует.

    UPDATE 15.10.2020:
    В связи с изменением законодательства РФ, при сборе и (или) обработке / передаче ЛЮБЫХ данных пользователя - необходимо брать разрешение у пользователя на любое взаимодействие с его данными, либо уведомлять его в стиле "если ты тут, значит согласен, в ином случае кыш от сюда". В ином случае рекомендую изучить инфо ниже:
    Административная ответственность по статье 13.11 в текущей редакции предусматривает дифференциацию в зависимости от последствий нарушения. Так ответственность для юридического лица предусматривает наложение штрафа в размере от 15 тысяч до 6 миллионов рублей, а при повторном нарушении — до 18 миллионов рублей.

    P.S. clientid Яндекс.Метрики так же является персональными данными (случай из личной практики).
    P.S.2 любой символ (например точка), который был создал и сохранен на основание действия пользователя - персональные данные (случай из личной практики).
    Ответ написан
    Комментировать
  • Кому реально нужны правила по использованию cookie на сайте?

    @wadimko81
    Моё мнение, что этим сообщения о использовании кук, просто издевательство над посетителем, и владельцем сайта.

    На самом деле, в любом браузере, есть настройки безопасности.
    Есть так называемые уровни безопасности. При желании, пользователь может настроить свой браузер, таким образом, чтобы ему показывал сообщения именно его браузер о том, какие данные о нём собираются на данном сайте.

    При том, тут пугали разными версиями сайта, при разном сборе данных.
    Как раз, для браузеров, есть расширения, которые фильтруют содержимое страницы.
    Не загружают всё те же скрипты, Гугл аналитикс, и так далее. Всякие счётчики.
    Есть расширение, которое вообще отключает какие либо скрипты, либо определённые.

    Пользователь, если его беспокоит собственная безопасность, анонимность, может настроить это так, как ему нужно. При том, с различными уровнями, для различных сайтов. То есть, запретить определённым счётчикам собирать о себе данные, а определённым разрешить.

    На мой взгляд дело всё в том, что подобные вещи делаются, как бы это сказать.
    Для людей, с ограниченными умственными способностями в определённой области, которые по какой-то причине не считают необходимым настроить свой ПК так, как нужно.
    И на самом деле, подстройка по подобные гриппы лиц весьма неприятная тенденция и в чём-то опасная.

    Например, в браузере Файрфокс, убрали из настроек возможность отключать скрипты, мотивируя это, на официальном сайте тем, что пользователи этой кнопкой “ломают их браузер, который становистя не пригодным для просмотра” или как-то примерно так.

    На самом деле, если кого-то, на самом деле, из тех, кто разрабатывает и продвигает подобные вещи, заботит безопасность конфиденциальности граждан своей страны, то имело бы более действенно прописать немного другие механизмы. А именно. Например, для локализованной под определённую страну, то есть язык, браузер. Ну к пмриеру, когда пользователь устанавливает на свой ПК Оперу, выбирает при установки язык, чтобы вместе с этим, автоматически прописывались настройки по умолчанию по информировании пользователя о том, какие данные о нём собираются.
    То есть, пользователь установивший Оперу, на французиком, при посещении любого сайта, будет получать такое же сообщение, как сейчас, не на размытое, а конкретное, о том, какие данные переданы, какие крипты запущены, какая информация о нём собиралась, и какой именно файл записан, где он находится на его ПК. Кнопку удалить, принять и так далее.
    Чтобы это можно было отключить, и настроить по желанию пользователя.
    На самом деле, это можно сделать и сейчас, при желании. Но суть проблемы, чтобы было включено по умолчанию, и при желании можно было отключить.

    А отображения окошка на сайте, которое не кто не читает, и нажимает “ОК”
    Это, какое-то, не знаю, похоже на бутафорию и издевательство.

    Про слежку за пользователями через куки, а как же лог сервера?
    Получается, лог сервера, программы его обработки, тоже своего рода слежка.
    При том, от этого уже не откажешься не как.

    Когда пользователь, пользуется чем-то, например тем же ПК, он для пользования этим, должен иметь определённый набор навыков и знаний.
    Но почему-то, в капиталистическом обществе, стала развиваться опасная тенденция, подстраиваться под группу людей, которая не считает нужным получать какие либо навыки. И это негативно сказывается на тех, кто имеет такие навыки и хочет их улучшить. Как пример, всё с тем же удалением возможности отключить скрипты в файрфоксе.
    Да и вообще, интерфейс многим программ в последнее время становится своеобразным.

    На самом деле, браузеров, которым пользуются люди, можно сказать около 10 шт.
    Файрфокс, Опера, Хром и так далее. Обязать прописывать там настройки безопасности по умолчанию, в 10 программах, гораздо эффективнее, чем на все сайты, вешать таблички, которые не кто не читает.

    Тему эту ещё можно продолжить в данном русле, но и так много текста.
    Специально зарегистрировался, чтобы ответить на этот вопрос.
    Всё написанное, это личное мнение, на истину не претендует.

    На вопрос, кому это нужно, вероятно тем, кому выгодно создавать проблемы людям.
    Вероятно какой-то способ подавить конкурентов, какими-то требованиями.
    Ничего общего с заботой о людях, это на практике, как кажется не имеет.
    p.s Если некая программа, загружает массив данных на ваш пк...
    Сработает файрвол, правила доступа к папкам, правила учётной записи, на установку программ, сработает файрвол, антивирус, и так далее.
    Ответ написан
    1 комментарий
  • Кому реально нужны правила по использованию cookie на сайте?

    Kozack
    @Kozack
    Thinking about a11y
    Большинство сайтов используют cookie, так сказать косвенно. Вот на пример, вы ведёте свой личный блог. В нем нет никаких форм, комментариев, ничего. Пользователи просто зашли, почитали и ушли. Ваш сайт не использует cookie. Но стоит вам поставить аналитику — и уже аналитика будет добавлять для каждого посетителя cookie.

    Дело в том, что с их помощью вы можете отслеживать любую активность человека. Откуда он пришел, что смотрел, что делал. Об этом и стоит информировать пользователя. Поведение пользователя в интернете — это его личная, приватная информация. И вы обязаны его информировать о том, какие данные вы о нем собираете, и что вы с ними делаете.

    Вот вы когда приходите в магазин — там обязано быть уведомление о том, что ведётся видеозапись. То же самое и тут.

    UPD
    Недавно законы в этом отношении несколько ужесточились. Большие мешающие просмотру плашки с вопросом "А можно мы будем использовать cookie?" это на самом деле не такая серёзная проблема. Куда серёзнее:
    1. Сайт не предлагает вам вариант НЕ разрешать слежение за собой. Он просто информирует. "Ты уже тут, и я уже всё о тебе знаю"
    2. Сайт предлагает вариант "Не следить" но лишь формально. Не зависимо от вашего выбора, cookie всё равно будут собираться и обрабатываться.
    3. При выборе варианта "Не следить" вас попросу не пускают на сайт. Потому что дешевле заблокировать вам просмотр, чем переделать сайт таким образом, чтобы он корректно работал без cookie.
    Ответ написан
    8 комментариев
  • Недорогой роутер где можно установить linux или похожую операционную систему?

    @Drno
    Есть. Называется микротик.
    Или- сделать роутер на базе raspberry pi
    Или - купить подписку за 200р .... (там же вроде до 6ти устройств?)как чашка кофе, или пачка сигарет, или шаверма...
    Ответ написан
  • Какой дистрибутив Linux выбрать для системного администратора и\или DevOps инженера на свой ПК?

    @Drno
    Для новичка - linux Mint. Раб стол сами по вкусу выбирайте.
    По сути - любой удобный на основе дебиана
    Ответ написан
    Комментировать
  • Какой дистрибутив Linux выбрать для системного администратора и\или DevOps инженера на свой ПК?

    xez
    @xez
    TL Junior Roo
    Системный администратор и\или DevOps инженер сам должен знать какой ему линукс нужен и для чего.
    Ответ написан
    7 комментариев
  • Какой дистрибутив Linux выбрать для системного администратора и\или DevOps инженера на свой ПК?

    @bankinobi
    В какой DE удобно работать, ту и ставте. А что будет под капотом в большей степени не важно. Весь софт ставиться из реп производителей софта.

    PS: года 3 сижу на manjaro+gnome.
    Ответ написан
    3 комментария
  • Какой дистрибутив Linux выбрать для системного администратора и\или DevOps инженера на свой ПК?

    Adamos
    @Adamos
    Уж не знаю, как для сисадмина или девопса, а для человека, задающего такие вопросы, ответ однозначен - Убунту как наиболее дружественный к чайникам дистрибутив.
    Точнее, не сама Убунту, а ближайшие деривативы - Kubuntu, Xubuntu, Mint.
    Ответ написан
  • Формирование зарплаты у веб разработчиков?

    sergey-gornostaev
    @sergey-gornostaev
    Седой и строгий
    Просто вы видите в этих колонках спрос на самый ходовой товар. Для найма - это мидлы, для фриланса - простые разовые заказы. Если проанализировать ситуацию глубже, то увидите в найме огромное количество джунов, согласных работать натурально за еду, и увидите на фрилансе исполнителей со ставкой $100 в час.
    Ответ написан
    Комментировать
  • Как не утонуть в океане информации?

    xmoonlight
    @xmoonlight
    https://sitecoder.blogspot.com
    0. На хабре мир не замкнулся так же, как и на вконтакте)
    1. Когда "наткнулись" при "рабочем" поиске (когда делаете работу по текущему проекту) на интересную информацию - кладите статью (+линк) в папку рядом с проектом, применительно к которому Вы на нее набрели или отталкиваясь от темы статьи (рядом с другим проектом).
    2. По тематически-узконаправленному ("лучевому") поиску - вы найдете не более 5 статей. Это первоисточники и образовательные (примеры, производительность и т.д.) Все другие - "адский trash" и плагиат.
    3. Не ищите "от нечего делать": время потратите - толку 0.
    4. Используйте всю мощь поисковой строки гугла (символы управления приоритетами и т.д.) для отсеивания "мусорных" ссылок.
    5. На любую тему обсуждений - есть только 1 ресурс-лидер, который цитируют во всем интернете. Интересна тема - станьте участником такого сообщества и получайте уведомления по почте.
    6. Сначала планируете цель, затем идёте "в лес по грибы" за информацией. Если наоборот - всё...: Вас "засосёт" чёрная дыра технологий и читать Вы будете ВЕЧНО!!!
    7. Главное правило: статья должна прочитываться сразу или "привязываться" к вашей цели и отправляться в папку (см. п.1)
    И помните:
    тостер - для отдыха
    гугл - для работы

    UPD: Как правильно искать информацию
    Ответ написан
    14 комментариев
  • Может ли интернет провайдер ограничить трафик так чтобы только одно устройство могло нормально работать?

    CityCat4
    @CityCat4
    Внимание! Изменился адрес почты!
    Провайдер ваших устройств за роутером не видит. Хотя конечно же, все перечисленное Владимир Коротенко - он может делать (и наверное делает - если он глуп. По крайней мере мой провайдер такой шляпой не занимается).
    Ответ написан
    3 комментария
  • Нужно ли высшее образование C#-программисту в Майкрософт?

    @Mirkss
    всякое бывало)
    Все ок, отличные планы, предыдущий комментарий про 10 лет - не совсем правильный)

    Варианты отъезда в Европу есть, некоторые требуют денег, некоторые времени и/или всяких скиллов типа опыта, образования etc (пишу по своему опыту - 10 лет прожил там), голубая карточка не единственный способ, хотя для айтишников комфортный, кто спорит)

    Помню, при собеседовании в европейский ДЕЛЛ никто у меня особо не интересовался образованием, но умения и опыт были важны (включая знание хотя бы иностранных языков), так что нарабатывайте.

    Ну и понятно, что МС (и ДЕЛЛом, и Гуглом)) рынок труда не ограничивается, если что умеете - можно найти много вариантов устроиться, хоть программером, хоть инженером, причем не обязательно ориентироваться на Чехию и т.п. страны (ну разве что у вас свои причины думать именно о них) - немцы хорошо берут наших инженеров, например (и отлично платят), хотя для работы там свои тонкости - они обожают бумажки - дипломы и сертификаты об окончании чего-то)

    Английский для айти-компаний очень важен, немецкий тоже хорош.

    Вы можете столкнуться с ситуацией, что гиганту будет пофигу ваше незнание местного языка, если у вас свободный технический английский + А1-А2 разговорный.

    Спрашивайте если что)
    Ответ написан
    Комментировать
  • Как называется данная программа?

    @evgeniy_lm
    Данная программа ни как не называется. 100% эта фигня написана для курсового на Delphi. Я писал подобную лет 10 назад. Могу и вам написать если че
    Ответ написан
    Комментировать
  • Как называется данная программа?

    anthtml
    @anthtml
    Системный администратор программист радиолюбитель
    Чей-то типичный курсач на делфи 7 по теме базы данных
    Ответ написан
    Комментировать
  • Как называется данная программа?

    Adamos
    @Adamos
    Какой-то самопис на Дельфи, судя по иконке.
    Судя по ней же, широко программа не распространялась, используется в каком-то узком кругу ограниченных сотрудников.
    Ответ написан
    2 комментария
  • Что читать программисту, чтобы улучшить серьезную алгоритмическую базу, необходимую в корпоративном секторе?

    @Robotex
    Пробуй уже сейчас работать. Фриланс, для себя что-то пиши. Можно прочитать кучу книг, но ничему так и не научиться.
    Я, когда год проработал программистом со второго по третий курс, и сейчас, проработав 2 месяца будучи на пятом, научился гораздо большему, чем за все время универа.
    Ответ написан
    3 комментария