Как сделать загрузку файлов с прогресс баром в nim-lang?

Вообще не знал что кому-то Nim интересен.

Как реализовать классификатор на датасете рукописных цифр?

Eka19, будь осторожен. Расстояние Хемминга не толерантно к сдвигу картинок. Если одна картинка будет сдвинута относительно другой - то метрика покажет дистанцию хотя с точки зрения человека - картинки очень похожи.

Но ты сам этого хотел. Хотел свой деревянный алгоритм с точностью 20%. Не знаю будет там 20 или нет. Это уж сам смотри.

Как реализовать классификатор на датасете рукописных цифр?

Eka19, ну тогда все просто. Берешь две картинки. Делаешь сложение их по модулю 2 (операция XOR) и результирующая картинка содержит биты где есть различия. Считаешь эти биты и получаешь расстояние Хемминга для картинок. Чем меньше расстояние - тем картинки более похожи.

Идея понятна?

Как реализовать классификатор на датасете рукописных цифр?

Eka19, 1-bit? Grayscale?

Как в виртуальных процессорах устроена виртуальная память?

Но виртуальные процессоры работают быстрее, чем я ожидаю. А ожидаю, я раз так в 100 минимум медленнее исполнение.

Знаешь есть старый анекдот про бабку которая "надвое" сказала. Или помру говорит или нет.

Вот мне всегда нравились такие вот рассуждения в плоскости расчетов. И всегда интересно откуда
беруться ожидания и цифры.

Это нужно быть очень синьорным системным инженером и наверное написать много эмуляторов
чтоб оперировать такого уровня прогнозом.

Как ты получил сто?

Как решить ошибку при установке Ubuntu 18.04?

У меня был слабенький комп что-то вроде AMD K5 32bit (вы даже такого не слыхали ага) со 128 Мб памяти
и мне надо было серверную ОС на него поставить. Поставил какой-то RedHat linux. Загрузил
в runlevel=3 (это терминалка в текстовом режиме и никакой графики вообще нет). И ничего. Нормально. Установил Midnight Commander.
Потом всяких пакетов. Потом скачал Oracle. Установил и норм все работало.

Можно ли без особых знаний php доработать phpgeo под работу с запросами?

Думаю да. Но в процессе доработки вам в возможно придется консультироваться с PHP разработчиками.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Text search работает не везде. Не все dbms его поддерживают.
Text search требует понятие документа. И понятие разделения документа на токены.
Поиск работает по токенам.

Я если честно говоря уже устал от твоей задачи. И главная причина в том что ты изначально
не озвучил проблему. А озвучил уже свои велосипеды и изобретения. От чего
я и участники qna запутались и стали предлагать тебе совсем уже левые решения.

Поэтому давай поставим этот вопрос на закрытие. Ты хорошенько подумай. И создай
новый вопрос где ты выдашь главную постановку а не свои придумки.

Потому что решать проблему XY никто не хочет. Это всех демотивирует.

Какую key-value БД использовать с данными в 10 млрд строк записей?

gamoyo5524, моя интуиция подсказывает мне что ты велосипедишь страшный велосипед.
Вот эти вот обрезки ключей и прочее.

И на самом деле тебе ( может быть ) нужен text-search по value. И это совсем другая задача.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Интересная эта штука clickhouse. Почитал. Мне напоминает HBase.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Я понял. Возможно причина падения индекса в том что он не выдерживает низкой кардинальности столбца.
Посчитай кардинальность каждой колонки.

select count(*) from (select distinct(key_1) from table1);
select count(*) from (select distinct(key_2) from table1);
..

До того как строить индекс.

Если значения будут порядка 10% от всего объема строк - то тогда индекс вообще строить не надо.
Он будет не эффективен.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Я понял в чем у нас основное непонимание. Ты не описал типичные запросы.
Тюнинг БД а 99% состоит из нескольких важных для бизнеса запросов которые должны
работать очень быстро. На остальные - наплевать.

Вот если ты будешь искать по 5 ключам - то мой кейс работает.
Если ты захочешь искать по 4 и 5 ключу то мой композитный индекс уже не годится
и нужно придумывать что-то другое.

Когда ты создаешь таблицу и указываешь 5 полей как primary key - то движок MySQL
автоматом создает unique композитный индекс по этим 5 полям и добавляет констрейнт ПК.

Какую key-value БД использовать с данными в 10 млрд строк записей?

В этом примере у тебя все в порядке.

| key_1(5) | key_2(6) | key_3(7) | key_4(8) | key_5(9) | value(120)
1 | AbCde | AbCde1 | AbCde1B | AbCde1B2 | AbCde1B2a | asdsdsadasdasd...
2 | AbCde | AbCde4 | AbCde4h | AbCde4hG | AbCde4hGm | d21d4ff34ff34f...

Композитный индекс будет уникален поскольку key2, key3, key 4... создают достаточно
уникальности для этого.

Возможно ты - новичек в базах данных и тебя смущает терминология.

Какую key-value БД использовать с данными в 10 млрд строк записей?

gamoyo5524, это к тебе вопрос. Ты должен знать свои данные со стороны бизнеса. Если 5 ключей в совокупности уникальны - то никаких авто-инкрементов не нужно.

Если они не уникальны - тогда key-value схема здесь вообще не подходит.

Какую key-value БД использовать с данными в 10 млрд строк записей?

Не ко мне вопрос. Я не знаю что такое XAMPP.

Какую key-value БД использовать с данными в 10 млрд строк записей?

сейчас используется ENGINE=InnoDB

Отлично. Вот тестируй myisam.

Какую key-value БД использовать с данными в 10 млрд строк записей?

У тебя поле value сильно толстое. Загрузи без него. Для теста индекса этого будет достаточно а места меньше надо будет.

Какую key-value БД использовать с данными в 10 млрд строк записей?

gamoyo5524, ну я не знаю. Сбегай в магазин купи еще 4 Терабайник.
Ты же owner этой задачи. Хозйственные вопросы тоже на тебе.
Почисть что-нибудь. Убей что-нибудь.

Какую key-value БД использовать с данными в 10 млрд строк записей?

gamoyo5524, ты можешь сделать extract ddl для той таблицы которая уже создана? Надо глянуть какой ты уже использовал engine.

Тогда тебе надо не 2 эксперимента делать а только один. И можешь не убивать а создать таблицу номер два.
Пускай будут две. Тебе ж не жалко места?

Какую key-value БД использовать с данными в 10 млрд строк записей?

time-series в наше время уже не пишут в реляционки. Стали потихоньку перекладывать в influx-db.