Стоит ли использовать Elasticsearch в качестве основной бд?

Vitaly Karasik,

Это не так.
См. настройки JVM.

Эта фраза всегда подразумевала что эластик есть много и чтобы работать адекватно быстро ему приходится постоянно увеличивать лимит сколько он будет жрать

Это уже не так - начиная с 6.8/7.1

Ну, то есть только последние полгода. Круто, здорово. То есть я бы с удовольствием сейчас пошел почитал свежие релизы если бы в проектах был search

А в SQL по-другому?

во-первых не в SQL, а в реляционных базах данных, а во-вторых - да

Пришел счет на 1500 долларов. Что делать?

druper, или ошибка в мобильном приложении

Почему сайт vuejs.org не SPA?

Сергей Малинин, это называется SSR. Только интегрировать его не всегда стоит. Вообще надо разделять понятия статики и SPA по тому что предназначены они для разных задач. SSR для SPA придумали чтобы лечить последствия, а не корневую проблему.

Многие компании используют так называемый static render вообще

Стоит ли использовать Elasticsearch в качестве основной бд?

Иван Мельников,
- добавление отдельных таблиц/документов
- datalake
- realtime миграция базы
- трансформеры
- ETL
- ...

от проекта зависит. можно придумать много чего интересного

Стоит ли использовать Elasticsearch в качестве основной бд?

Иван Мельников, как слой кэша есть куда более вкусные инструменты)

Стоит ли использовать Elasticsearch в качестве основной бд?

Andrey Shatokhin,

База без ACID? т.е mongo у нас до 4.2 версии не юзабельна была? а Amazon DocumentDB и сейчас нельзя использовать?

Монго и сейчас это делать на самом деле не научилась, хоть и старается. MongoDB и DocumentDB только для документов. Связи есть, но лучше про них забыть ибо на втором уровне они уже проблема

Если на сервер проникли - у вас в коде/окружении/секретах/снимке памяти и так есть все для доступа к базе.

Не путаем сервер приложения и сервер базы данных. Первый доступен из интернета, как правило, а второй по хорошему нет

Reindex api - Пользуемся им часто и оно намного быстрее чем ALTER в реляционных базах при смене типа.

Поздравляю. На нагруженных проектах я не делаю ни того ни другого по тому что это сказывается на перфомансе. Лучше использовать другие подходы. На маленьких проектах пофиг

По памяти - вот реально как будто не настраивали эластик. Первый вопрос новичка с эластиком на бою - как ему дать более 2гб памяти. И в нем нет опции безлимит на память. О чем вы вообще?

Я видел эластик, которому 128Gb RAM было мало) впечатлений было море

Стоит ли использовать Elasticsearch в качестве основной бд?

Andrey Shatokhin, да и это очень болезненно. ACID нужен для управления данными, поэтому базу без этого вообще использовать не стоит. NoSQL решения они вообще разнонаправленные и то о чем говорит ТС это document DB. Там надо

По доступам - файрволы это только первая зона обороны. Мало спасает ибо если на сервер проникли то привет, а еще же надо давать разным клиентам разные права

Про пересоздлание индекса - reindex api работает с такой скоростью что лучше бы не работал вообще. Данные из базы не должны иметь задержек во время таких операций (еще раз - эластик не база, а поисковый индекс)

По памяти - ограничивать эластик плохо по тому что inverted index и работа с алгоритмами требует очень много памяти.

Стоит ли использовать Elasticsearch в качестве основной бд?

Добавлю - для работы с данными абсолютно нормально использовать:
- реляционную базу для управления данными (Mysql, Postgres, MsSQL, Oracle, ....)
- поисковый индекс (Elasticsearch, Sphinx) для поиска
- NoSQL или Cache для агрегатов (Mongo, Redis, ....)
- Колоночные базы данных для аналитики (OLAP) (Clickhouse, Hbase, ...)

Как serverless framework понимает какую ветку деплоить?

Jekson, абсолютно нормально. эту фичу serverless запилили совсем недавно и она работает через раз, увы.

Как serverless framework понимает какую ветку деплоить?

Jekson, да + все что не закомичено то тоже зальется

Как serverless framework понимает какую ветку деплоить?

а если просто из консоли то деплоится исключительно тот код что у тебя на машине и никакого отношения к репозиторию не имеет

Как serverless framework понимает какую ветку деплоить?

ты про его новый сервис? не про sls deploy?

Пришел счет на 1500 долларов. Что делать?

druper, проверять. Без доказательной базы вам все-равно не спишут ничего.

Как возобновить AWS S3 Multipart Upload имея Upload ID?

lightseeker, нет. UploadId это уникальный ключ части и его генерирует клиент. надо знать не только его, но и PartNumber.

Попробовать Azure будучи в России, но указав другую страну?

Makssof, значит санкции продлились дольше чем мы могли ожидать) Предлагаю взять другой клауд и не мучиться, особенно с учетом что это один из самых отбитых клаудов в плане управления ресурсами

Как быть уверенным, что группа запросов к базе будет выполнена?

ildar-meyker, я про них же но про фоновые операции. То что в процессе загрузки полностью отдается на откуп разработчика и надо выбирать скорость или консистентность. В зависимости от этого разные варианты. Я вообще предпочитаю не использовать файловое хранилище без необходимости и пользоваться object storage. Любым s3 или совместимым

Как быть уверенным, что группа запросов к базе будет выполнена?

ildar-meyker, никак. если изменения произошли в файловой системе то это не зона ответственности движка. Это зона Security и там совсем другие правила игры. На этом уровне вряд ли стоит заморачиваться

Как быть уверенным, что группа запросов к базе будет выполнена?

ildar-meyker, по тому что это не зона ответственности фреймворка, а зона ответственности базы данных. Фреймворк просто реализует данную функциональность. Вообще ознакомиться с теорией базы данных всегда полезно вне зависимости от того как с ней приходится работать

Как в Zappa разбить flask app.py на модули?

Владимир, по списку:
- Zappa пропагандирует использование flask, не то чтобы сильно но все-же. Мы все знаем что Lambda имеет cold start и это сильно сказывается на отзывчивости приложения. Чем тяжелее проект будет тем дольше он будет стартовать и тем дороже будет проект. Я был в этих условиях и выбрал запустить EC2 с проектом и постепенно мигрировать на бессерверную архитектуру.Для примера один из моих проектов: https://rarr.racing/ работает полностью serverless и там очень много разных технологий. Не все еще переписано по фен-шую, но я уже очень доволен
- Zappa дает очень мало вариантов как управлять ресурсами. Серьезно, после Zappa приходится все переделывать с нуля, просто по тому что работа с ним проста, но дальше hello world проектов на нем особо никто не уезжает
- с Zappa надо быть аккуратным как он работает с ресурсами. Стоит ознакомиться что и как он создает
- по сравнению с другими инструментами у него очень мало интеграций с облаком и от этого вещи, которые рано или поздно захочется делать просто придется перепридумываль или тыкать руками в консолди
- комьюнити очень маленькое и как итог - медленно двигается
- Zappa как я помню сама денег не просит, только за ресурсы AWS. Если это не так то поправь. Если просит то я точно не пойму зачем оно вообще. (это не минус, а, скорее, вопрос)

- K8s для этого, кстати, не нужен, от слова совсем
- микросервисы все-равно потом проектировать так что Zappa не потянет аутентификацию в API, AppSync (который все-равно захочется), live отладку по логам, а также локальную отладку, которая есть в sls и sam.
- тильда, кстати, тоже может быть не нужна если знаешь React или Vue.
- А еще AWS Api GW умеет в websockets, а Zappa нет.

В общем, вроде бы и интересный проект, но шаг влево, шаг вправо карается сменой фреймворка

Как в Zappa разбить flask app.py на модули?

слушай, я на полном серьезе очень хочу тебе рассказать поему в концепции serverless ты творишь чушь и почему zappa это больно