Все сервисы Хабра
Сообщество IT-специалистов
Ответы на любые вопросы об IT
Профессиональное развитие в IT
Закрыть
Задать вопрос
ldmitriy
@ldmitriy
Python
Куда сохранять однотипный большой набор данных в Python?
К примеру, мне нужно обработать 1 млрд целых чисел. Где их хранить? В списке будет долго.
Или к примеру сохранить 1 млрд.словарей, но куда?
Что используют для обработки больших объемов данных?
Вопрос задан
более трёх лет назад
82 просмотра
Комментировать
Подписаться
1
Простой
Комментировать
Facebook
Вконтакте
Twitter
Решения вопроса
0
Пригласить эксперта
Ответы на вопрос
3
Сергей Карбивничий
@hottabxp
Куратор тега Python
Сначала мы жили бедно, а потом нас обокрали..
База данных на amazon, пара косарей баксов и храните все что угодно.
Ответ написан
более трёх лет назад
Комментировать
Нравится
1
Комментировать
Facebook
Вконтакте
Twitter
Владимир Куц
@fox_12
Куратор тега Python
Расставляю биты, управляю заряженными частицами
Ну к примеру числа (и не только) - удобно хранить в массивах, с которыми справляется numpy. А с очень большими объемами можно работать с
h5py
который работает с данными в формате
HDF5
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Джок Таннер
@Tanner
Огромный человекоподобный боевой робот
sqlite3
.
Ответ написан
более трёх лет назад
Комментировать
Нравится
Комментировать
Facebook
Вконтакте
Twitter
Ваш ответ на вопрос
Войдите, чтобы написать ответ
Войти через центр авторизации
Похожие вопросы
Python
+2 ещё
Средний
Телеграмм бот не отправляет аудиофайл?
1 подписчик
5 минут назад
4 просмотра
0
ответов
Python
Простой
Как проверять кодом наличие конкретно той или иной библиотеки?
2 подписчика
19 часов назад
227 просмотров
2
ответа
Python
+1 ещё
Средний
Как избавится от эффекта бандинга/постеризации градиента?
1 подписчик
вчера
112 просмотров
2
ответа
Python
+1 ещё
Простой
В чем ошибка при парсинге на python?
1 подписчик
11 мар.
186 просмотров
2
ответа
Python
+2 ещё
Средний
Почему не все упоминания юзеров Telegram кликабельны?
1 подписчик
10 мар.
485 просмотров
2
ответа
Python
+2 ещё
Простой
Как анализировать востребованность технологии?
1 подписчик
10 мар.
121 просмотр
1
ответ
Python
Простой
Есть ли в питоне файл проекта?
1 подписчик
10 мар.
201 просмотр
2
ответа
Python
+1 ещё
Средний
Как выполнить Olx парсинг номера?
3 подписчика
08 мар.
769 просмотров
2
ответа
Python
+1 ещё
Средний
Как интегрировать python код в tauri?
1 подписчик
08 мар.
138 просмотров
2
ответа
Python
+1 ещё
Средний
Playwright Python, работа с профилями браузеров?
1 подписчик
08 мар.
78 просмотров
1
ответ
Показать ещё
Загружается…
Вакансии с Хабр Карьеры
Старший Python разработчик/Senior Python developer
Платежное решение
•
Москва
До 300 000 ₽
Python developer
Greenway Global
•
Новосибирск
от 150 000 ₽
Руководитель группы разработки Python/Tech Lead Python
Платежное решение
•
Москва
До 500 000 ₽
Минуточку внимания
Войдите на сайт
Чтобы задать вопрос и получить на него квалифицированный ответ.
Войти через центр авторизации
Закрыть
Реклама