Стоит ли использовать Elasticsearch в качестве основной бд?

Иван Шумов,

А в SQL по-другому?

во-первых не в SQL, а в реляционных базах данных, а во-вторых - да

AFAIK, в MySQL and Postgres это так. (Да, я знаю, что есть и другие реляционные БД, я говорю про широко используемые)

Эта фраза всегда подразумевала что эластик есть много и чтобы работать адекватно быстро ему приходится постоянно увеличивать лимит сколько он будет жрать

Это релевантно для любых баз данных, ИМХО, а для полнотекстового поиска - вдвойне.

Ну, то есть только последние полгода.

Но и раньше это не было showstopper - всегда были методы организовать access control.

Стоит ли использовать Elasticsearch в качестве основной бд?

эластик ест столько памяти сколько есть на виртуалке

Это не так.
См. настройки JVM.

управление доступом только в коммерческой версии за много денег

Это уже не так - начиная с 6.8/7.1

чтобы изменить тип данных в документе надо изменить маппинг только через полное пересоздание индекса

А в SQL по-другому?

Как удалить стандартный конфиг виртуального хоста apache2?

Арсений Латыпов,

вы можете проверить синтакс с помощью

apachectl -t

первый блок должен быть внутри

https://httpd.apache.org/docs/2.4/mod/core.html#al...

Можно ли nginx использовать как буфер с мгновенным ответом для исходящих POST-запросов с сервера?

Сергей Соколов, попробуйте что-то из этого (я сам на PHP не пишу)

www.callstack.in/tech/question/how-to-send-php-cur...
https://stackoverflow.com/questions/8024821/php-cu...

Впрочем, сейчас я перечитал ваш вопрос и теперь вообще не понимаю, чем вам мешает то что

На каждое событие отправляется HTTP-запрос на сервер API Telegram. Это занимает время.

Насколько понимаю, у вас все прекрасно - сервер пишет в лог через Seldaek/monolog и ничего не ждет, раз в несколько минут или через какой-то цикл вы выбираете из лога нужные строчки и посылаете в Телеграм.

Почему Apticron не шлет писма на почту?

Чтобы понять есть ли upgrade в последние дни, посмотрите на

tail /var/log/dpkg.log

Отключать ли автоматические updates? На production машине я бы отключил, и ставил сам или скриптом раз в неделю например, предварительно проверив на тестовом сервере.

Как сделать резервное копирование и восстановление точки?

new-profile-web,
(сорри за занудство если вы это уже знаете)
Важно понимать разницу между разными типами бэкапа -
файлы <-> образ всей машины
Первый дает возможность восстановить пользовательские файлы если потерялись.
Во втором случае мы можем восстановить сервер заново если наш сервер сгорит целиком. Так вот Veem как раз вроде бы умеет восстанавливать целую машины, tar - нет.

Как сделать резервное копирование и восстановление точки?

new-profile-web, Evgeniy_27 - большое спасибо, я пропустил эту новость. Почитал сейчас, выглядит очень здорово. Скоро попробую.

Как сделать резервное копирование и восстановление точки?

Evgeniy_27 подскажите пож-ста - veeam умеет делать image всей системы и потом восстановить на другом железе? Или только для виртуалок?

Synology NAS загрузка CPU всегда 99% почему?

отключил SMB и нагрузка сразу упала, как это понимать?

Что какой-то из клиентов SMB нагружал NAS.
Как найти какой? Если продолжать этим старым ненаучным методом, отключить все клиенты SMB и подключать по одному.
Если двигаться более научным способом, то можно пытаться анализировать кто из клиентов больше всего использует NAS - по активным директориям, по network traffic и т.п.
Правда, странно, что network traffic при отключении SMB не изменился.

Еще вариант - попробуйте вернуть SMB но отключить сервис индексирования.

Почему Apticron не шлет писма на почту?

1) Не уверен 100%, но по-моему, шлет только если есть неустановленные обновления.
Посмотрите в /var/log/dpkg.log - если там есть пакеты установленные недавно значит у вас активно auto-update.

Сколько нужно number_of_shards в индексе?

Евгений Девисок, советую по кол-ву виртуальных. Насчет hyperthreading - честно говоря, не знаю.

Почему Apticron не шлет писма на почту?

modcode,
1) а при логине вы видите что есть пакеты для update? :
XX packages can be updated.
YY updates are security updates.

2) /etc/cron.d/apticron существует?

Есть ли базы данных, хранилища, бэкенды для конфиденциальных данных?

прокси - запрещенное слово :-)

Есть ли базы данных, хранилища, бэкенды для конфиденциальных данных?

Ярослав Поляков,

вы имеете в виду эти

это скорее список опасностей.
Посмотрите
https://www.owasp.org/index.php/Security_by_Design...
https://github.com/OWASP/DevGuide

По первому впечатлению, Imperva - это что-то для компаний типа боинга или кока-колы, за миллионы долларов.

Я не пользовался их database firewall, но их WAF/DDoS продукт Incapsula имеет вполне реальную цену - есть планы начиная с 300 $ в месяц, enterprise насколько помню около 2-3К $ в месяц.
Насчет open-source - посмотрите https://www.p r o x y s q l.com/

Почему Apticron не шлет писма на почту?

modcode,

root прислал письмо на почту.

отлично, значит почтовый сервер работает.

Что указано в конфигурации почты вашей апликации?

Почему процессы на CentOS иногда подвисают на 100-300 мс?

Hint я читал ваш вопрос, и не советовал инструментацию не для оптимизации приложения. ИМХО, это даст возможность получить и посмотреть на ситуацию "сверху" и, надеюсь заметить какие-то паттерны, которые не видны сейчас.
strace вещь хорошая, но вполне может быть что есть похожее поведение в других местах кода и т.д.

Почему Apticron не шлет писма на почту?

modcode, тут ничего интересного

1) посмотрите в /var/log/maillog or /var/log/mail.log

2) попробуйте послать себе почту и посмотреть что выйдет

echo "test" | mail -s "test email" [e-mail]

Как в gitlab-ci изменить строку в файле?

lilikon, хороший вопрос.
Вариантов несколько:
- несколько заготовок для разных environments, подставляем нужный файл при билде в зависимости от среды
- темпейт, в который подставляются параметры из environment variable
- здесь https://www.reddit.com/r/devops/comments/7oe5d9/se... упоминают подсовывание значений в runtime

Отдельная большая тема - хранение секретов (пароли, токены, ...).

Почему Apticron не шлет писма на почту?

без '~' -

tail -20 /var/log/syslog

MariaDB во всём лучше MySQL? Или у MySQL есть какие-то преимущества?

Иван Мельников,
производительность - штука настолько зависимая от workflow, то есть от апликации, что тут наверно надо конкретно тестировать. На бумаге только AWS хвастаются что у них производительность лучше всех, но и это уже опровергали.