Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
ldmitriy
@ldmitriy
Python
Куда сохранять однотипный большой набор данных в Python?
К примеру, мне нужно обработать 1 млрд целых чисел. Где их хранить? В списке будет долго.
Или к примеру сохранить 1 млрд.словарей, но куда?
Что используют для обработки больших объемов данных?
Вопрос задан
более трёх лет назад
82 просмотра
Комментировать
Подписаться
1
Простой
Комментировать
Facebook
Вконтакте
Twitter
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
3
Сергей Карбивничий
@hottabxp
Куратор тега Python
Сначала мы жили бедно, а потом нас обокрали..
База данных на amazon, пара косарей баксов и храните все что угодно.
Ответ написан
более трёх лет назад
Комментировать
Нравится
1
Комментировать
Facebook
Вконтакте
Twitter
Владимир Куц
@fox_12
Куратор тега Python
Расставляю биты, управляю заряженными частицами
Ну к примеру числа (и не только) - удобно хранить в массивах, с которыми справляется numpy. А с очень большими объемами можно работать с
h5py
который работает с данными в формате
HDF5
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Джок Таннер
@Tanner
Огромный человекоподобный боевой робот
sqlite3
.
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
Простой
Как проверять кодом наличие конкретно той или иной библиотеки?
2 подписчика
14 часов назад
192 просмотра
2
ответа
Python
+1 ещё
Средний
Как избавится от эффекта бандинга/постеризации градиента?
1 подписчик
вчера
109 просмотров
2
ответа
Python
+1 ещё
Простой
В чем ошибка при парсинге на python?
1 подписчик
11 мар.
173 просмотра
2
ответа
Python
+2 ещё
Средний
Почему не все упоминания юзеров Telegram кликабельны?
1 подписчик
10 мар.
482 просмотра
2
ответа
Python
+2 ещё
Простой
Как анализировать востребованность технологии?
1 подписчик
10 мар.
117 просмотров
1
ответ
Python
Простой
Есть ли в питоне файл проекта?
1 подписчик
10 мар.
198 просмотров
2
ответа
Python
+1 ещё
Средний
Как выполнить Olx парсинг номера?
3 подписчика
08 мар.
769 просмотров
2
ответа
Python
+1 ещё
Средний
Как интегрировать python код в tauri?
1 подписчик
08 мар.
137 просмотров
2
ответа
Python
+1 ещё
Средний
Playwright Python, работа с профилями браузеров?
1 подписчик
08 мар.
78 просмотров
1
ответ
Python
+1 ещё
Простой
Как правильно конвертировать .pdf -> .png -> .pdf?
1 подписчик
07 мар.
225 просмотров
2
ответа
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Старший Python разработчик/Senior Python developer
Платежное решение
•
Москва
До 300 000 ₽
Python developer
Greenway Global
•
Новосибирск
от 150 000 ₽
Руководитель группы разработки Python/Tech Lead Python
Платежное решение
•
Москва
До 500 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама