Задать вопрос
@ldmitriy
python

Куда сохранять однотипный большой набор данных в Python?

К примеру, мне нужно обработать 1 млрд целых чисел. Где их хранить? В списке будет долго.
Или к примеру сохранить 1 млрд.словарей, но куда?

Что используют для обработки больших объемов данных?
  • Вопрос задан
  • 86 просмотров
Комментировать
Подписаться 1 Простой Комментировать
Помогут разобраться в теме Все курсы
  • Яндекс Практикум
    Python-разработчик
    10 месяцев
    Далее
  • Skillfactory
    Профессия Python-разработчик
    9 месяцев
    Далее
  • Хекслет
    Python-разработчик
    10 месяцев
    Далее
Пригласить эксперта
Ответы на вопрос 3
hottabxp
@hottabxp Куратор тега Python
Сначала мы жили бедно, а потом нас обокрали..
База данных на amazon, пара косарей баксов и храните все что угодно.
Ответ написан
Комментировать
Комментировать
fox_12
@fox_12 Куратор тега Python
Расставляю биты, управляю заряженными частицами
Ну к примеру числа (и не только) - удобно хранить в массивах, с которыми справляется numpy. А с очень большими объемами можно работать с h5py который работает с данными в формате HDF5
Ответ написан
Комментировать
Комментировать
Tanner
@Tanner
Огромный человекоподобный боевой робот
sqlite3.
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Python Developer
Strikt
от 100 000 до 150 000 ₽
Python разработчик
ITK academy • Казань
от 75 000 ₽
Python разработчик
Космос Про Медиа • Москва
от 180 000 до 200 000 ₽
Ещё вакансии