Как эффективно использовать 'сервисы' для обращения к БД?

Твой вопрос начинался

Как эффективно использовать 'сервисы'

Возможно я старый и глупый. И я под эффективностью понимаю эффективность использования БД. Тоесть - перформанс и отсуствие лишних действий.

У меня вобщем нет претензий к дизайну класса. Он вполне себе нормальный. Красивый.

Я-бы createUser, updateUser просто заменил на один метод

static function upsertUser () {} //  если нет - то создает. Или если есть то обновляет

Вот. С моей точки зрения не стоит плодить методы которые делают очень похожие вещи.
Все равно тебе нужно проверять статус ошибки при createUser если таковой уже существует.

Почему transtransmission не пускает в вебпанель?

Transmission - это глючный и безтолковый проект. И он является тем самым "раком" который на "безрыбье является рыбой".

У меня бывает пару раз в день он по непонятным причинам завершает работу. Молча. Взял и закрылся.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Даша Циклаури, монго предполагает документы. И schema-less тип значения. Это означает что у нас нет строгой спецификации и мы можем на ходу добавлять другие поля. Но мы за это расплачиваемся дополнительным местом. Binary-JSON тоже имеет теговую разметку внутри и если сравнивать с классической БД то Mongo имеет обычно больше накладных расходов в расчете на 1 data-row. Тоесть монго база с 10 млрд документов создаст вам бОльшие проблемы в поддержке чем MySQL.

Много скачиваний с одного ip-адресса?

Drno, как говорил начальник Махачкалинского РОВД

- И тем не менее...

Много скачиваний с одного ip-адресса?

Игры - то не страшно. Главное следи чтоб сосед не раздавал порно с малолетками. А то к кому участковый придет?

Какой самый удобный способ реализации дерева категорий?

При работе с реляционной БД скоуп блокировки или просто транзакции распространяется на 1 строку или сет строк. Тоесть 2 бизнес-пользователя независимо друг от друга могут работать с классификатором и коммитить изменения. И при этом их действия с точки зрения бизнес-информации будут консистентны. Нарушить ничего нельзя если правильно спроектированы связи ограничения и правильно используются транзакции.

С документной БД есть риск получить либо заблокированный документ с которым кто-то долго работает. Либо есть риск получить ошибку класса "потерянное обновление" (очень коварная и злая ошибка) при атомарной работе. Или есть вариант что второй бизнес пользователь получит еще более сложную задачу - мержить свои изменнения с чужими. Что согласитесь вообще третья задача и она в рамках работы пользователя просто не решается. Вот 3 зла. И выбирайте из 3 зол то которое менее злое.

Какой самый удобный способ реализации дерева категорий?

fijj, JSONB используют в тех системах где есть документооборот. И где каждый JSON/JSONb - это отдельный документ.

Можете-ли вы в вашей задаче рассматривать классификатор категорий как отдельный документ? Я не уверен. Здесь есть какая-то натяжка.

Какой самый удобный способ реализации дерева категорий?

Непонятна проблема автора. Он говорит что если надо чего-то ковырять руками то дескыть структуры не удобны.

А что большой JSON удобен? Или как автор хочет его ковырять? И вообще зачем его ковырять. В продуктовой системе должен быть UI для работы с классификатором. А если есть UI - тогда безразлично что там внизу JSON или adjacency list.

Как сделать загрузку файлов с прогресс баром в nim-lang?

Вообще не знал что кому-то Nim интересен.

Как реализовать классификатор на датасете рукописных цифр?

Eka19, будь осторожен. Расстояние Хемминга не толерантно к сдвигу картинок. Если одна картинка будет сдвинута относительно другой - то метрика покажет дистанцию хотя с точки зрения человека - картинки очень похожи.

Но ты сам этого хотел. Хотел свой деревянный алгоритм с точностью 20%. Не знаю будет там 20 или нет. Это уж сам смотри.

Как реализовать классификатор на датасете рукописных цифр?

Eka19, ну тогда все просто. Берешь две картинки. Делаешь сложение их по модулю 2 (операция XOR) и результирующая картинка содержит биты где есть различия. Считаешь эти биты и получаешь расстояние Хемминга для картинок. Чем меньше расстояние - тем картинки более похожи.

Идея понятна?

Как реализовать классификатор на датасете рукописных цифр?

Eka19, 1-bit? Grayscale?

Как в виртуальных процессорах устроена виртуальная память?

Но виртуальные процессоры работают быстрее, чем я ожидаю. А ожидаю, я раз так в 100 минимум медленнее исполнение.

Знаешь есть старый анекдот про бабку которая "надвое" сказала. Или помру говорит или нет.

Вот мне всегда нравились такие вот рассуждения в плоскости расчетов. И всегда интересно откуда
беруться ожидания и цифры.

Это нужно быть очень синьорным системным инженером и наверное написать много эмуляторов
чтоб оперировать такого уровня прогнозом.

Как ты получил сто?

Как решить ошибку при установке Ubuntu 18.04?

У меня был слабенький комп что-то вроде AMD K5 32bit (вы даже такого не слыхали ага) со 128 Мб памяти
и мне надо было серверную ОС на него поставить. Поставил какой-то RedHat linux. Загрузил
в runlevel=3 (это терминалка в текстовом режиме и никакой графики вообще нет). И ничего. Нормально. Установил Midnight Commander.
Потом всяких пакетов. Потом скачал Oracle. Установил и норм все работало.

Можно ли без особых знаний php доработать phpgeo под работу с запросами?

Думаю да. Но в процессе доработки вам в возможно придется консультироваться с PHP разработчиками.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Text search работает не везде. Не все dbms его поддерживают.
Text search требует понятие документа. И понятие разделения документа на токены.
Поиск работает по токенам.

Я если честно говоря уже устал от твоей задачи. И главная причина в том что ты изначально
не озвучил проблему. А озвучил уже свои велосипеды и изобретения. От чего
я и участники qna запутались и стали предлагать тебе совсем уже левые решения.

Поэтому давай поставим этот вопрос на закрытие. Ты хорошенько подумай. И создай
новый вопрос где ты выдашь главную постановку а не свои придумки.

Потому что решать проблему XY никто не хочет. Это всех демотивирует.

Какую key-value БД использовать с данными в 10 млрд строк записей?

gamoyo5524, моя интуиция подсказывает мне что ты велосипедишь страшный велосипед.
Вот эти вот обрезки ключей и прочее.

И на самом деле тебе ( может быть ) нужен text-search по value. И это совсем другая задача.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Интересная эта штука clickhouse. Почитал. Мне напоминает HBase.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Я понял. Возможно причина падения индекса в том что он не выдерживает низкой кардинальности столбца.
Посчитай кардинальность каждой колонки.

select count(*) from (select distinct(key_1) from table1);
select count(*) from (select distinct(key_2) from table1);
..

До того как строить индекс.

Если значения будут порядка 10% от всего объема строк - то тогда индекс вообще строить не надо.
Он будет не эффективен.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Я понял в чем у нас основное непонимание. Ты не описал типичные запросы.
Тюнинг БД а 99% состоит из нескольких важных для бизнеса запросов которые должны
работать очень быстро. На остальные - наплевать.

Вот если ты будешь искать по 5 ключам - то мой кейс работает.
Если ты захочешь искать по 4 и 5 ключу то мой композитный индекс уже не годится
и нужно придумывать что-то другое.

Когда ты создаешь таблицу и указываешь 5 полей как primary key - то движок MySQL
автоматом создает unique композитный индекс по этим 5 полям и добавляет констрейнт ПК.