В чём приемущество SQLite перед Excel?

Question

[Алексей Смирнов]

Сейчас я использую файлы Excel для хранения данных динамических рядов (например курсы валют, индекс ММВБ и т.д.). Для чтения и записи данных я обращаюсь к Excel файлам через программный код языков Python, C# и R.

Я задумался использовать SQLite для хранения данных. Но не знаю какую выгоду я для себя получу от перехода на SQLite (заместо Excel). Просто я думаю, стоит ли изучать SQL и переходить на SQLite или нет.

Какие выгоды и какие недостатки я получу от перехода на SQLite?

Comments

[Сергей Горностаев]

Переводить ваше приложение на использование БД или нет - должно быть виднее вам. Но вам не виднее, так как вы не умеете ими пользоваться. И это плохо, программист без знания SQL - не программист вовсе. Поэтому SQL нужно выучить однозначно, а потом на основе полученных знаний принять решение.

Answer 1

[DevMan]

преимущество sqlite в бесплатности, возможности встраивания, и, собственно, sql.
если excel вы используете только для себя и вас он устраивает, то преимущества sqlite вам ни к чему.

Answer 2

[Saboteur]

1. Excel - платный продукт, который есть не везде. SQLite - бесплатный движок, доступен под любой язык программирования, есть огромное количество бесплатных программ, которые могут с ним работать. Также можно на любой языке написать простенькую визуализацию данных из sqlite

2. Excel - электронная таблица. SQLite - база данных. Это разные продукты. По сути надо сравнивать SQLite и Access. Просто Excel достаточно мощная программа, в которой средства, чтобы справляться с рядом не слишком сложных задач, которые пора бы уже ложить в базу данных.

3. Для работы с SQLite нужно писать запросы, Excel более распространен и популярен - почти любой может в экселе посмотреть данные и что-то с ними сделать при помощи мышки.

А насчет конкретно вас - никто не скажет, ибо структура данных, требования к быстродействию и вообще - знаете только вы. Просто подучите SQL и освойте SQLite, чтобы решить надо оно вам или нет.

Comments

[x67]

Добавлю, что использование excel без расчетов в excel нецелесообразно, и ограничивает потенциал роста и производительность.
Не то, что бы sqlite хорош для бигдаты, но переход на взрослые субд сильно проще.
Плюс часть бизнес-логики иногда сильно удобнее перенести в SQL

[Saboteur]

x67, для бигдаты sql вообще не хорош.

Но я не солгашусь, что sqlite это не "взрослая субд). Sqlite - это своя отдельная ниша - отличная локальная однопользовательская база без дополнительных серверов. Например, даже конфиги в ней хранить удобно.

[x67]

Saboteur, это почему же не хорош?

Sqlite - хорошо развитый проект, но относительно других субд по возможностям ее нельзя назвать взрослой из-за ограниченности возможностей. В этом ничего плохого нет, потому что это как вы правильно сказали, нишевый продукт.

[Saboteur]

x67, потому что для бигдата нужно либо хорошо масштабируемая база данных, либо nosql база данных, которая изначально заточена под большой объем.

[x67]

Saboteur, для бигдаты нужны инструменты дл работы с бигдата. Не понимаю этой категоричности, мол ноэскьюэл в моде, значит нужен он.
СУБД прекрасно позволяют работать с огромными массивами информации. С масштабированием есть нюансы. Но очень немногим при работе с бигдатой нужно обработать десять террабоайт информации на распределенном кластере.

[Saboteur]

x67, Не понимаю вашей категоричности.
Я сказал ЛИБО масштабируемая база данных ЛИБО nosql, который заточен под большой объем.

Для маленького объема нет смысла ставить nosql - любая стандартная база данных умеет хранить обычную таблицу из пар ключ-значение и справится с нагрузкой. nosql - это решение в первую очередь для производительности на больших объемах.

И да, bigdata - это не десять терабайт, это обычно гораздо больше, либо вы неправильно понимаете этот термин, который изначально предполагает громадные объемы информации, а не просто "большую базу данных"

[x67]

Saboteur, кого не послушаешь, все в гугле работают. А остальное - прах, мелочи жизни)
NoSQL часто и наверное чаще используются по другим причинам, не все в скорость упирается.

[Saboteur]

x67, именно в скорость.
nosql это банально база данных, которая хранит всего два столбца - ключ и значение.
С этим справится ЛЮБАЯ стандартная sql база, которая чуть ли не на любом хостинге есть по дефолту.
Так зачем заморачиваться и ставить что-то нестандартное?

Самые известные носкл базы - mongoDB (от слова huMongous - огромный) и Hadoop - изначально спроектирован для распределенных вычислений.

Да, конечно можно юзать mongo для небольшой документоориентированной базы. Но проблема в том, что SQL гораздо популярнее nosql, а значит писать на mongoDB мелочь - выйдет дороже в поддержке.

p.s. Кроме гугла есть огромное количество компаний в ентерпрайзе, у которых миллионы клиентов. У гугла - миллиарды. И многим нужна бигдата. Ну и если что, могу прислать свою фотку из офиса Гугла в mountain view...

Answer 3

[SagePtr]

Как по мне, основное преимущество баз данных перед электронными таблицами - возможность быстрой обработки огромного объёма данных.
Откройте эксель-файл в несколько сот мегабайт - и насладитесь тормозами и тупняками экселя. А что, если из этого файла выдернуть сотню записей, удовлетворяющих определённым критериям? Что если это нужно делать 100 раз в секунду по запросам? А если результат должен быть возвращён не за минуту, а за секунду, иначе клиент не захочет ждать, пока программа вернёт ему то, что нужно?
Эксель и другие электронные таблицы для такого явно не годятся. В то время, как СУБД могут с лёгкостью обрабатывать гигабайты и даже терабайты данных (естественно, при условии, что структура БД, индексы и запросы составлены грамотно, иначе - быстрой обработки не видать, преимуществ перед обычным файлами при неграмотном подходе никаких не будет).

Ну и навскидку - не припомню ни одной программы, которая хранит данные в Excel. В то время, как в sqlite - хранят все современные браузеры (firefox, chrome и их производные, за Edge не скажу), а также множество прикладных программ, тут список только известных.

Answer 4

[Dimonchik]

приемущество SQLite - в SQL

Answer 5

[Adamos]

Сейчас езжу в инвалидной коляске от Майкрософт, и мне хватает.
Я задумался слезть с коляски и попробовать ходить ногами.
Но не знаю, какую выгоду я для себя получу.
Просто я думаю, стоит ли пробовать или нет.

Comments

[x67]

Не совсем. Excel - крайне мощный инструмент, но не для задач хранения данных.
Скорее "каждое утро я жарю яишницу в кастрюле, не понимаю зачем мне нужна сковородка"

[Adamos]

x67, Ёксель - крайне завязанный на Wnidows инструмент.
Сейчас, когда все уходит в сети и облака, это мощная гиря на ноге для любого движения вперед.

[x67]

Adamos, сейчас, когда уже нормально покупать лицензии, ехсель последних версий крайне приятен и быстр. Имеет кучу возможностей для подключения различных в тч облачных источников данных. И остается таким же гибким. Не говоря уже о существовании power bi.
Если вас эксель тянет вниз, это значит всего лишь что используете его вы неправильно.

[Adamos]

x67, учитывая, что я Ёксель использую только как формат вывода отчетов для тех, кто никак не может от него отлипнуть - вряд ли можно сказать, чтобы я использовал его неправильно.
Раньше, впрочем, приходилось и запускать его - разбирая навороченные в нем "продвинутые" расчеты и переводя их в нормальную интерактивную и доступную на любом устройстве форму веб-приложения.

[x67]

Adamos, учитывая это, экселем вы пользуетесь весьма ограниченно, а учитывая огромное количество красивых и разнообразных дэшбордов, использовать эксель как "формат вывода отчетов" не всегда правильно. Это ваше дело, но такой опыт как критика экселя, не показателен

[Adamos]

x67, использовать Ёксель как формат вывода отчетов правильно только в одном случае - когда этого требует заказчик. Больше мне Ёкселем пользоваться просто незачем, я на электронные таблицы еще в прошлом веке насмотрелся досыта.

[x67]

Adamos, вот именно. В таких случаях он и кажется гирей, а не мощным инструментом

[Adamos]

x67, гирей он оказывается, как только вы выходите за пределы Окошек.

[x67]

Adamos, многовато пафоса для одного коммента) окна чаще всего самый универсальный и безотказный вариант. Что не умаляет преимуществ других ос. Но вы опять таки аргументом качества или его отсутствия предъявляете свой выбор неправильного инструмента. Или неправильного подхода.

[Adamos]

x67, ну конечно, мой подход и метод априори не может быть правильным.
И ТС еще расскажите, как ему на самом деле Ёксель необходим "для хранения данных".
Пропадет же человек...