Будет большой список значений, в перспективе >1M
Нужно будет запросами с компьютера делать следующие
1)Проверять, есть ли определённые значения уже в нашем списке
2)Добавлять определённые значения в конец списка
Таких запросов будет много и они будут ассинхронны (могут разные запросы одновременно отправляться)
Т.е. вам не нужны сами по себе элементы, а нужно просто проверять добавляли вы их или нет ?
Возьмите фильтр Блума. Он поможет вам снизить нагрузку на БД.
>>Т.е. вам не нужны сами по себе элементы, а нужно просто проверять добавляли вы их или нет ?
Правильно
Фильтр Блума это функция внутри базы данных? В MYSQL или POSTGRESQL можно так работу наладить, чтоб использовался этот принцип?