Ответы пользователя Алексей Черемисин по тегу «PostgreSQL»

Как обезопасить id SERIAL для корректной работы без промежутков значений?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Автоинкрементные ключи вообще лучше не использовать - это вселенское зло!
Используйте или uuid, или свой какой-то счетчик, или композинтый ключ или хеш, да все что угодно, только не автоинкремент.
Почему автоинкремент плохо - сотни статей в интернетах.
Вот на почитать;
- https://azimutt.app/blog/stop-using-auto-increment...
- https://www.clever-cloud.com/blog/engineering/2015...

Ответ написан более года назад

5 комментариев

Какого вида данных запрос делают на сервер при работе с пагинацией?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

https://www.postgresql.org/docs/current/queries-li...

Ответ написан более года назад

5 комментариев

Активно ли разработчики пользуются встроенными в Postgres функциями?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Я давний сторонник производить все вычисления на стороне клиента.
Проще переползать с базы на базу, не загружаем ресурсы базы, проще параллелить, поддерживать, отлаживать.
Тоже самое относится к хранимкам и триггерам, это вообще считаю за зло в современом мире. Нет триггерам и хранимкам!

Ответ написан более года назад

Комментировать

Обьединение строк с одинаковыми значениями sql. Возможно ли это сделать и как?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Да, можете. Добавьте в запрос GROUP BY имя-столбца

Ответ написан более года назад

Комментировать

Можно ли как-то отследить прогресс добавления колонки в БД?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

С sql-базами лучше такого не делать.
Расширение большой таблицы может привести к непредсказуемым результатам., как у Вас.
Вариантов несколько.
- создать дополнительную таблицу со связью 1-1 и нужными полями, ее джойнить по необходимости. Быстор, просто, молодежно.
- создать новую таблицу и в нее перелить данные, ппреливать можно постепенно.

Ответ написан более двух лет назад

Комментировать

Как сделать auto increment колонку, которая увеличивается относительно другой колонки?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Никогда, никогда, и ни при каких обстоятельствах нельзя использовать автоинкремент. Это абсолютно неправильный паттерн программирования в SQL (да и вообще в базах данных).
Более того, нормальные базы данных автоинкремента не имеют!
Что использовать, спросите Вы? Используйте GUID/UUID и прочие уникальные идентификаторы.
Для каждой записи генерируйте свой, уникальный UUID, и используйте его как первичный-вторичный ключ для ссылок на записи.

Ответ написан более двух лет назад

4 комментария

Как правильно подготовить свои проект для загрузки на GITHUB?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

1) Положите в проект схему базы и тестовые данные в виде sql-файлов, или сделайте утилиту для их загрузки из какого нибудь json/xml/yaml/edn/etc...
2) Напишите файл Readme.md, в котором опишите настройки, где они лежат и как залить схему и тестовые данные. Укажите требования к проекту, как собрать, какие типы баз использовать, какие версии явы и прочее...
3) Попробуйте собрать свой проект без использования среды разработки, только из консоли с использованием maven, gradle или что вы там используете (ant?).
4) Обязательно укажите запускаемый класс с main-методом, ну или укажите его в в файле-сборки
5) Залейте проект на гитхаб и попросите кого нибудь его протестировать
6) Необязательно, но в тесты тоже иногда смотрят. Если они есть, не отказывайте в удовольствии и их в проект пихнуть.

Ява-программисты, они умные, могут и в мавен, и в градл, и в пропертях поковыряться.

Ответ написан более трёх лет назад

3 комментария

Как составить запрос который выводит именинников?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

https://stackoverflow.com/questions/23335970/postg...

Ответ написан более трёх лет назад

6 комментариев

Как изменить запрос sql?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Добавить ... order by up.author_id asc и поменятьur.id=up.id на ur.author_id=up.author_id

Ответ написан более трёх лет назад

9 комментариев

Как реализовать динамические поля и секции для таблицы?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Да, возможно пришло время не только для монго, но и для hbase. Ваша задача, по идее очень хорошо ложится именно на hbase.

Ответ написан более трёх лет назад

Комментировать

Как лучше (дешевле) хранить справочники?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

10k в секунду, нормально - это highload, а в сутки - вообще ни о чем ~ 7 запросов в минуту
Заводить под каждый справочник отдельную таблицу - это путь в сторону битрикс и могилы.
Хранить в xml/json - зачем, если есть база данных.
Мне кажется достаточно отдельной таблицы id|name|value|type, ну пары таблиц, еще одна с описанием.
Ну и кешировать все это в redis. Считывать все при старте и загружать в него.

Ответ написан более трёх лет назад

22 комментария

Как лучше хранить список GPS-точек в PostgreSQL 9.6 с расширением postgis?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Ваш подход гораздо лучше, как минимум тем, что в какой-то момент наверняка захочется сделать интерсекцию по трекам, ли выбрать точки внутри полигона. А с проблемой производительности можно бороться партиционированием таблиц, например по времени начала трека. Старые партиции стирать и перекидывать в архив. Ваш вариант как минимум гораздо гибче.

Ответ написан более трёх лет назад

2 комментария

Адекватна ли модели БД?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Еще раз выражу свою мысль конкретнее, если упомянули :-)
Базу проектируют под типовые запросы, а не просто так. Для их ускорения используют нормализацию. Другими словами - сначала описание бизнес-модели, потом запросов, а уж потом таблицы, индексы и прочее. Конечно же на 1000-100000 записей ничего этого можно и не почувствовать, благо компухтеры уже не те. Но при переходе за шесть нулей - результат чувствуется, да еще как.
Так что рисуем схему и пишем запросы словами. Как пример: пользователь должен видеть склады фирм в радиусе 50км от своего местоположения, отсортированные по расстоянию и отфильтрованные по релевантности товаров от. 1 до 5.

Ответ написан более трёх лет назад

5 комментариев

Как построить работу с BigData?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Все достаточно просто, перестаньте думать таблицами и начните думать ДОКУМЕНТАМИ.
У вас есть всего два документа - два индекса. Индекс Пользователей, и индекс Операций.
Пользователь представляет из себя документ со всеми полями таблицы member. А Операция, состоит из конкатенации полей member-operation-operationtype. Да данные в индексе Операции будут дублировать некоторые поля из Пользователей, но это и не страшно, это правильно, так как это фактически лог.

Ответ написан более трёх лет назад

Комментировать

Как реализовать поиск по фамилиям в базе?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Странно, у меня для русских полей стоит russian аналайзер, из коробки, ищет по словоформам неплохо, но на фамилиях не тестировал. Попробуйте еще и fuzzy query.
Вот прямо сейчас проверил: "лебедь датчик", находит "Светильник Лебеди ночник с датчиком света Космос".
Ищу площадки, получаю "Серая площадка и круглая черн.ручка под замок"
Ищу лампа, находит и лампу и лампой и лампы, и лампа.
Ищу гвоздь, получаю Скоба пластиковая с гвоздем
PS. Elasticsearch 5.1.1 если чо. Специально никаких плагинов с русской морфологией не ставлю с версии 2.x

Ответ написан более трёх лет назад

1 комментарий

Как в PostgreSQL выбрать значения значения которые есть в массиве, но нет в БД?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Проще всего, и дешевле по ресурсам, это сделать не на стороне базы, а программно.
Например, на питоне это займет всего одну строку

>>> set([1,2,3,4,5,6,7]) - set([1,2,3,4,5])
set([6, 7])
>>>

PS. вытащить все ID можно одним запросом select ID from mytable

PPS. Сравнение на миллионе ID - заняло 166 милисекунды

MacBook-Pro:~ leah$ python -m timeit 'set(range(1,1000022)) - set(range(1,1000000))'
10 loops, best of 3: 166 msec per loop
MacBook-Pro:~ leah$

Ответ написан более трёх лет назад

4 комментария

На базе какого ПО можно поднять службу отчетов для PostgreSQL?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Как-то давным-давно развлекался с eclipse birt, проект вроде бы активно развивается - www.eclipse.org/birt
Дизайн отчетов делаете в эклипсе, и разворачиваете сервер, куда складываете ваши шаблоны и генерируете отчеты.
Вот таблица сравнения - www.innoventsolutions.com/comparison-matrix.html
Да, jasperreport тоже заводил, но остановился на birt, уж не помню почему, было лет 10 назад.

Ответ написан более трёх лет назад

Комментировать

В чем основные отличия mySQL от Postgre?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Алгоритмом работы (lock-based/ versioning), транзакциями, хранимыми процедурами, возможностями sql. Это по крупному, в мелочах - еще больше. Собственно, эти базы данных настолько разные, что сравнивать их напрямую нельзя. Каждая хороша для своего класса задач, хотя для магазина/cms обе будут примерно одинаковы.

Ответ написан более трёх лет назад

21 комментарий

Как разобраться и собрать вместе PostgreSQL Django и Apache?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Не очень хороший выбор вы сделали. Меняйте apache на nginx, и будет вам щазтие.
Вам нужен реверс-прокси сервер, что nginx делает в разы круче, проще и правильней, чем индеец. Индеец хорош, но не здесь.
Во здесь например - https://www.digitalocean.com/community/tutorials/h...

Ответ написан более трёх лет назад

Комментировать

Как запустить несколько python-запросов к базе postgresql одновременно?

Алексей Черемисин @leahch

3D специалист. Dолго, Dорого, Dерьмово.

Возьмите асинхронную библиотеку для постгрес https://github.com/aio-libs/aiopg
И по аналогии первого примера https://habrahabr.ru/post/337420/ запускаете кучу тасков и ждете, когда они все выполнятся.

Ответ написан более трёх лет назад

2 комментария

Войдите на сайт