Как правильно сформировать запрос к mysql?

Евгений Безымянников: Хорошая мысль про NO CACHE. Сейчас посмотрим~

Как правильно сформировать запрос к mysql?

Евгений Безымянников:

/* Affected rows: 0  Found rows: 750 510  Warnings: 0  Duration for 1 query: 0,109 sec. (+ 1,653 sec. network) */
/* Affected rows: 0  Found rows: 1 750 510  Warnings: 0  Duration for 1 query: 0,156 sec. (+ 4,321 sec. network) */
/* Affected rows: 0  Found rows: 3 351 829  Warnings: 0  Duration for 1 query: 0,109 sec. (+ 7,722 sec. network) */

Чтож такое... =)

Как правильно сформировать запрос к mysql?

Евгений Безымянников: Типа в память часть загрузилась.
Сейчас попробую на принципиально разных таблицах, каждый раз.
Количество строк там варьируется от 8 до 15 миллионов.

Как правильно сформировать запрос к mysql?

Евгений Безымянников:

/* Affected rows: 0  Found rows: 150 510  Warnings: 0  Duration for 1 query: 0,047 sec. (+ 0,343 sec. network) */
/* Affected rows: 0  Found rows: 250 510  Warnings: 0  Duration for 1 query: 0,016 sec. (+ 0,593 sec. network) */
/* Affected rows: 0  Found rows: 1 250 510  Warnings: 0  Duration for 1 query: 0,015 sec. (+ 2,855 sec. network) */

Как правильно сформировать запрос к mysql?

Евгений Безымянников: На самом деле Вы правы про то, что при NOT IN MySQL решает выгрузить всю таблицу, поскольку исключённых NOT IN всё-равно будет меньше, чем остальной результат.

На практике я, впрочем, не столкнулся со значительным снижением скорости запроса, даже в том примере про 100 тысяч статей, из которых нужно скрыть 120.

Параметры взял даже больше, 150к статей и не видим 200 статей:

SELECT * FROM `160226_logs`.`picklog` WHERE `id` NOT IN (SELECT `hide_id` FROM `160331_logs`.`hide`) LIMIT 150510;
/* Affected rows: 0  Found rows: 150 510  Warnings: 0  Duration for 1 query: 0,031 sec. (+ 0,499 sec. network) */

(это не SSD и не кэш)

Так что тезис про тормоза могут быть преувеличены, надо рассматривать ситуацию на месте.

Как правильно сформировать запрос к mysql?

Евгений Безымянников: Выдача большого количества результатов займёт какое-то время в любом сценарии, независимо от того, как происходит выборка. NOT IN в этом случае на скорость не влияет. =)

Как правильно сформировать запрос к mysql?

Евгений Безымянников: Выборка 500 значений по трём NOT IN из другой таблицы в 15кк записей:
Duration for 1 query: 0,016 sec.

Как правильно сформировать запрос к mysql?

Евгений Безымянников: Вы правы, но достаточно указать LIMIT, чтобы запрос стал идентичен по скорости.

Так-то любая выборка, независимо от IN/не IN, будет выдаваться ровно столько, сколько значений в таблице, если она ничем не ограничена.

Как правильно сформировать запрос к mysql?

Евгений Безымянников: i.imgur.com/xBxJqv2.png

Время исполнения селекта в таблице на 15кк значений:
/* Affected rows: 0 Found rows: 3 Warnings: 0 Duration for 1 query: 0,047 sec. */

Для этого и нужны индексы. =)

Как правильно сформировать запрос к mysql?

Тормозов не должно быть, у колонки скорее всего PRIMARY KEY

Бесплатный или довольно дешевый фаерволл для Windows?

WayMax: Забавно, что так совпало про правило на SQL. =)
Впрочем, мы все его когда-нибудь открывали.

Бесплатный или довольно дешевый фаерволл для Windows?

WayMax: Вообще, против телеметрии (если это самоцель) уже есть в сети разные инструменты, препятствующие её работе.
Мне кажется избыточным закрытие всех портов (каким бы то ни было фаерволом) только для того, чтобы избежать телеметрии. Придётся вручную обеспечивать доступ всем нужным приложениям, отводя много времени на отладку, почему оно не работает, как ожидается, хотя оказалось, что оно использует незадокументированный порт (или, бывает, что у приложения вообще нет такой документации).

Бесплатный или довольно дешевый фаерволл для Windows?

WayMax: Ага, я понял.
Если включить строгий запрет всего исходящего трафика, и выключить все правила, то никакие исходящие соединения возможны не будут. Можно проверить на практике наличие открытых соединений разными инструментами.

Бесплатный или довольно дешевый фаерволл для Windows?

WayMax: Вы ведь уже пользовались вот этим?
i.imgur.com/BQ2jnUj.png

Бесплатный или довольно дешевый фаерволл для Windows?

WayMax: Погодите.
Вы же понимаете, что "Брандмауэр Windows" и "Брандмауэр Windows в режиме повышенной безопасности" - это две разные технологии?

Во втором, вы можете закрыть на исходящее всё. Вы можете изменить порядок, что сначала - Allow,Deny, или Deny,Allow. Вы можете применить эти настройки для определённых типов сетей - доменных, общих и т.д.

Бесплатный или довольно дешевый фаерволл для Windows?

Почему фаерволу в Windows нет доверия?
Вы ведь пользовались "Брандмауэр Windows в режиме повышенной безопасности" из раздела "Администрирование", а не пользовательским "Брандмауэр Windows", верно?

Какой функционал вам от него требуется?
Если железные правила на вход/выход, то встроенный "Брандмауэр Windows в режиме повышенной безопасности" их исправно соблюдает и используется промышленно на серверах в крупных компаниях.

Как в sublime text настроить подсветку ошибок синтаксиса php, js, json, html?

semki_1: Обновил пост с учётом этого. =)

Как перенести траффик со старого домена на новый, с минимальными потерями?

ummahusla: Тогда за что именно Вы опасаетесь? Какие Вы сами видите риски?
Потому, что на вопрос в его нынешнем виде, Вы уже ответили сами - достаточно форварда в ввиде кода 301.

Понять, что это не скам, читатель сможет по надписи ex. oldbrand в логотипе, или явном обозначении где нибудь в новом месте сайта, временной плашкой над статьями по переезд.

Но вообще, пользователь и так увидит, что прежний адрес автоматически теперь перенаправляет на новый, у него нет повода для сомнений в легитимности этого поведения, особенно если конечный сай идентичен по тематике и содержимому, так что провода для дополнительных действий особо и нет.

Что использовать для администрирования MySQL?

Никогда не подводил. Отличный клиент.

Как перенести траффик со старого домена на новый, с минимальными потерями?

Насколько сильно отличаются сайты между собой? Почему простого HTTP 301 может быть недостаточно?