Создание парсинга, этапы?

Alex_87, я тоже много кого повидал. А все нормальные противники регулярных выражений знают их наизусть и применять умеют в 100% случаев, где могут чем-то заменить, чтобы сделать без них.

Создание парсинга, этапы?

Выписал несколько актуальных полезных ссылок по регулярным выражениям.
Надеюсь, эта информация будет полезна.

Начать с нуля можно со статей. Прочитать лучше все статьи.

Справочники понадобятся позже, на практике.
В википедии самая короткая статья по регуляркам. Никакой воды. Можно использовать как шпоргалку-справочник.

Среди инструментов выберите один, который понравится больше.

Если после прочтения всех статей, всё равно не понятно, можно посмотреть видео.

В последний раздел “тренировки ” я собрал несколько ресурсов, полностью посвященных изучению регулярных выражений.
Несмотря на то, что эти ресурсы с “тренировками” английские, в конце каждого урока есть упражениния для закрепления.
Чтобы выполнять упражения английский знать не обязательно.

_______________  ________    __  __   ____     ________  __
  / ____/_  __/   |/_  __/ /_  / / / /  / __ \  _/   / __ \/ /
 / /     / / / /| | / / / __ \/ / / /  / / / /_/_// / /_/   / 
/ /___  / / / ___ |/ / / /_/ / /_/ /  / /_/ //_/ / /\__,   /  
\____/ /_/ /_/  |_/_/ /_.___/\____/  /_____/_/  /_//____/_/   
                                                              
    __  _____   __  __ ___       ______    __  ______  _________ 
   / / / /   | / / / //   |    _/   / /_  / / / / __ \/____/ __ \
  / /_/ / /| |/ /_/ // /| |  _/_// / __ \/ /_/ / / / / /  / / / /
 / __  / ___ /__  _// ___ |_/_/ / / /_/ / __  / /_/ / /  / /_/ / 
/_/ /_/_/  |_|  /_//_/  |_/_/  /_/_.___/_/ /_/\____/_/   \____/  
                                                                 
   ____  __________  ____  ________  ____  ______  __
  / __ \/ ____/ __ )/ __ \/ ____/ / / / / / / __ \/ /
 / / / / /   / __  / / / / __/ / /_/ / / / / /_/   / 
/ /_/ / /___/ /_/ / /_/ / /___/ __  / /_/ /\__,   /  
\____/\____/_____/\____/_____/_/ /_/\____//____/_/

Регулярные выражения

Регулярные выражения, пособие для новичков. Часть 1

Регулярные выражения для новичков

________________  ___    ____  ____  __  __ __  ____  ____ ____  __
  / ____/ __  / __ \/   |  / __ )/ __ \/ / / // / / / / / / //_/ / / /
 / /   / / / / /_/ / /| | / __  / / / / / / // /_/ / / / / ,< / / / / 
/ /___/ / / / ____/ ___ |/ /_/ / /_/ /___  // __  / /_/ / /| / /_/ /  
\____/_/ /_/_/   /_/  |_/_____/\____/   /_//_/ /_/\____/_/ |_\____/

Википедия. Регулярные выражения.

30 примеров полезных регулярных выражений.

Примеры регулярных выражений

__  ____  ____________________  ____  ___________  __________     __
  / / / / / / / ____/_  __/ __ \ \/ /  |/  / ____/ / / /_  __/ /_   / /
 / / / / /_/ / /     / / / /_/ /\  / /|_/ / __/ / /_/ / / / / __ \ / /  
/ /_/ / __  / /___  / / / ____/ / / /  / / /___/ __  / / / / /_/ // /   
\____/_/ /_/\____/ /_/ /_/     /_/_/  /_/_____/_/ /_/ /_/ /_.___/__/

Конструктор регулярных выражений

regex101.com

regexr.com

____  __  ______  __________ 
   / __ )/ / / / __ \/ ____/ __ \
  / __  / / / / / / / __/ / / / /
 / /_/ / /_/ / /_/ / /___/ /_/ / 
/_____/\____/_____/_____/\____/

Регулярные выражения для новичков и не только [Gee...

022. Регулярные выражения - Максим Ширшин

Не бойтесь регулярных выражений. Regex за 20 минут!

Регулярные Выражения. Основы / Regular Expressions...

Регулярные выражения в JavaScript #1 – Символьные ...

Learn Regex (Regular Expressions) In Under 12 Minutes

_________  ______ ____  _____  ____  ___  __ ____  __
/_  __/ _ \/ __/ // / / / / _ \/ __ \/ _ )/ //_/ / / /
 / / / ___/ _// _  / /_/ / ___/ /_/ / _  / ,< / /_/ / 
/_/ /_/  /___/_//_/\____/_/   \____/____/_/|_|\____/

Regular expression excercise - Sketch Engine

Regular Expressions Crash Course

Learn Regular Expressions with simple, interactive...

Rex Eats Regular Expressions for Breakfast

The regular expression game

Создание парсинга, этапы?

Alex_87, смотрите, парсинг - это процесс извлечения необходимых данных из бесконечного потока (или массива) информации.

То есть, в теории, что нужно для парсинга?
1. Обозначить какие данные нам необходимы.
2. Найти тот бесконечный поток информации. откуда эти данные можно извлекать.

Кстати, забыл отметить важную деталь - начать надо с изучения регулярных выражений. В википедии отличная статья. Правила регулярных выражений почти одинаковы для всех языков программирования. Освоение их сильно расширит ваши возможности. Я их использую ежедневно - не было ни дня, когда регулярные выражения бы не пригодились. Они помогают и на работе и дома. Дома, например, автоматически рассортировать по папкам коллекцию mp3-музыки или коллекцию книг.

Для тренировки парсинга есть отличные универсальные упражнения.
В качестве бесконечнго потока данных я обычно беру выдачу яндекса - первые 10-100 найденных сайтов.

Задача. Составить список телефонных номеров на первых найденных в Яндексе 100 сайтах по запросу "ремонт компьютеров". Просто список телефонов. без описаний. Оформить это дело обычным скриптом.

Когда с этим справишься - задача посложнее. Читай то же самое, только не номера телефонов, а адреса офисов. В адресе больше слов и чисел. Поэтому адрес на странице чуть сложнее опознать.

Как связать создаваемое расширение chrome со страницей?

Зачем расширения для chrome, когда есть userscript?
https://chrome.google.com/webstore/detail/tampermo...
Попробуйте, их писать проще, и работают сразу во всех браузерах.
Есть конвертер из userscript в extension.

Как оптимизировать простой алгоритм поиска строки по всей странице?

Denioo, babel не поможет, только хуже сделает, он может конвертировать новый синтаксис в старый, а логику работы window.find() и window.getSelection() он вряд ли исправит. На это legacy полифилов не придумали.
Отдебажил. Тормозит метод window.find(). Да я и так догадывался. А что дальше делать? Чем его заменить? Будет ли по-другому работать быстрее? Там логику надо выносить в отдельный worker. А в отдельном процессе искать по элементам не получится, либо реализовывать в отдельных процессах весь рендеринг html в готовый для отображения canvas.

Как сделать график?

тоже подумал над замкнутой безье, но контрольные точки там с обоих сторон и внутри и снаружи и на каждый поворот по точке, то есть, на каждую волну будет по две точки прохождения и по 4 точки направляющие

Как подключиться по ssh с винды?

Господи, ну куда вы все лезете со своим cmd.
Виндовый олдскул: https://www.hostinger.com/tutorials/vps/how-to-gen...

Рабочий скрипт JS для работы с Google Sheets на сайтах?

Comeodore, По вопросу с Именем и Фамилией немного не понял. Вы имеете в виду фильтрацию данных по нескольким параметрам?

Это нормально что в Macbook приходится сбрасывать SMC каждый раз, когда подключаешь зарядник?

lamer350, У меня не пропадает даже через 24 часа. Диск пустой. За это время процесс deleted прочитал с диска 512Кб информации, а процесс diskarbitrationd прочитал с диска 4Мб информации. Не знаю, что они там делают, но если они индексируют инфу на дисках, то они ооооочень медленные. А проц жрут неплохо так. Хотя с другой стороны вроде ничего и не тормозит. Но, как я понял, лучше отчет о системе не запускать по пустякам конечно.

Рабочий скрипт JS для работы с Google Sheets на сайтах?

Comeodore, Тем постом про Go я выразился немного неоднозначно. Я хотел дать своё субъективную сравнительную оценку ЯП, представленных в списке поддерживаемых ЯП для доступа к API в рамках одного и того же кода, написанного на всех этих ЯП.

PHP - это оптимальный вариант для shared-хостинга. Я не рекомендую устанавливать PHP на свои VDS. Shared-хостинг подходит для PHP всегда лучше выделенной VDS.
Для VDS подходит любое из остальных решений.

Python - это самый простой вариант. Python имеет богатый понятный синтаксис, который позволяет прощать незнание архитектурных сложностей принципов работы ПК. По своей гениальности сравним только с, к сожалению, утратившему былую популярность, VisualBasic. К сожалению, в своё время Microsoft сделали ставку на развитие C# в ущерб VisualBasic, чем увеличили расслоение грани между программистами и непрограммистами.

JavaScript - это язык краткости. Решения на JS почти всегда обладают в 3-5 раз меньшим объёмом кода, что позволяет зрительно охватить больше функциональности на меньших мониторах. Идеально подходит для стариков, страдающих потерями кратковременной памяти.

Go - это результат эволюции языка Си исключающей недостатков С++. Идеально точная работа с памятью. Каждый байт памяти требует учёта и, соответственно, требует своевременных выделения и освобождения. Чем, в принципе, одновременно сложен для людей без опыта работы на Си, и лёгким для людей, которые имеют опыт работы с СИ, и которые требуют от ЯП этой строгости распределения ресурсов ПК.

Долго формулировал мысль. Надеюсь, это будет для вас полезной информацией.

Рабочий скрипт JS для работы с Google Sheets на сайтах?

Comeodore, Приношу извинения, работа. Специально удалил все проекты из Google APIs и создал новый. Смотрите, когда вы создаёте проект подключенный к доступу API вы выбираете тип проекта "Web Server". Не надо выбирать "Web Server", надо "Desktop App". Тогда он выдаст вам только токен и секретный ключ без авторизаций сервера.

Это нормально что в Macbook приходится сбрасывать SMC каждый раз, когда подключаешь зарядник?

lamer350, Dmitry Bay, Я заметил странную особенность в моём экземпляре макбука. Когда я открываю в меню "Об этом Мас" и там кнопочку "Отчет о системе", у меня начинает усиленно грузить проц два процесса: на первом месте - deleted, на втором месте diskarbitrationd. Причем, они продолжают жрать весь проц даже после полного закрытия всех приложений кроме терминала (терминал чтобы я смог наблюдать за ними). Что это может быть?

Это нормально что в Macbook приходится сбрасывать SMC каждый раз, когда подключаешь зарядник?

lamer350, Нет, как раз кстати на линуксе с зарядкой проблем не возникало, они начали проявляться в большей части в Catalina. Причем, даже в чистой только установленной.

Это нормально что в Macbook приходится сбрасывать SMC каждый раз, когда подключаешь зарядник?

Dmitry Bay, Ну я работаю, все в порядке.

А про понимание я имел в виду то, что в линуксе у меня не работает 65% подсистем ноутбука. На фоне этого автоматизировать сброс SMC - это сущий пустяк. Тут хотя бы рецепт найден.

Мне просто это нравится. Повышает скилы. Еще в 2011 проходил Матрешку в Амперке. А теперь платы сам травить научился. В чистом c/asm тоже надо практиковаться, а то уйдут навыки.

Рабочий скрипт JS для работы с Google Sheets на сайтах?

Comeodore, Я просто авторизован в гугле, у меня Google Sheets доступны прямо хоть с главной страницы google.com.

Рабочий скрипт JS для работы с Google Sheets на сайтах?

Comeodore, Ааа это вроде ничего страшного. Помоему, там не нужна регистрация, аккаунта на gmail.com там вроде достаточно. А тут они толи сами накосячили, толи россия самоизолировалась. У меня с зарубежных ip нормально видит контент, а с российского ip - болт.

PouchDB (CouchDB) как правильно организовать GIS поиск по имени сущности?

demon24ru, вы просто поймите, в mongo есть geo-модуль, в postgis тоже логика уже спрограммирована и готова к использованию. Да, прямо функция выбрать все точки в радиусе 5000 метров! А также многие-многие другие связанные с позиционированием на сфере функции.
В PouchDB вам нужно программировать, тестировать, оптимизировать эти механизмы с нуля.

PouchDB (CouchDB) как правильно организовать GIS поиск по имени сущности?

demon24ru, Вы что, прикалываетесь? Где PouchDB, а где Realm? PouchDB на мобильниках использует наверное два с половиной программиста на миллион общих. Realm используют остальные 99.99% мобильных разработчиков.

Базы данных в pouchDB они реплицируются на мобильное устройство, там они только читаются и должна делаться указанная выше выборка, поэтому выбор ограничен только pouchDB.

Откуда вы это взяли?

Какой способ хранения данных использовать для хранения и легкого добавления данных?

Денис, Полностью прочитайте, а не поверхностно, со всеми ссылками на связанные статьи и ссылками на источники. Если вы собираетесь этим заниматься, вам следует это знать, чтобы понимать, с чем будете иметь дело, заранее.

Какой способ хранения данных использовать для хранения и легкого добавления данных?

Денис, вы не так поняли статью, она не про лингвистику, она про программирование. Прочитайте русскую версию статьи.