Ответы пользователя по тегу Хранение данных
  • Как лучше организовать децентрализованное хранение данных, используя свои ресурсы?

    Jump
    @Jump
    Системный администратор со стажем.
    Технология блокчейн (как концепция хранения данных) подходит под мои цели
    С каких это пор технология блокчейн подходит для хранения данных? Эта технология вообще не удобна для хранения данных, но она хороша тем, что позволяет исключить возможность фальсификации транзакций одним участником сети - в этом ее основное преимущество..

    • Смысл и преимущества блокчейна есть только когда майнеры независимы и их много - если контроль над 50% и более мощностей майнинга сосредоточен в одних руках - все преимущества блокчейна теряются, и использовать его не имеет вообще никакого смысла.

    • Децентрализованное хранение предполагает хранение данных во множестве мест, как правило это делается на мощностях участников децентрализованной сети. Соответственно доступ к данным будет у всех. Как-то ограничить доступ не получится. Только шифровать свою конфиденциальную информацию. Тогда доступ по прежнему будет у всех к зашифрованным данным, но расшифровать их сможет только владелец.

    • Надежных алгоритмов очень много и перечислять можно долго, а самые надежные зачастую и самые ресурсоемкие, поэтому нужно просто выбирать алгоритм обеспечивающий достаточную защиту ваших данных, и при этом отвечающий вашим требованиям к быстродействию. В итоге советовать можно только изучив ситуацию.
    Ответ написан
    3 комментария
  • Как хранить очень большое количество файлов? Как сохранять пути в БД?

    Jump
    @Jump
    Системный администратор со стажем.
    Насколько мне известно, в одной папке можно хранить ограниченное количество файлов, иначе могут быть проблемы (вплоть до полной потери данных).
    У каждой файловой системы есть ограничения.
    Например максимальный объем файла, или длина пути к файлу. Если вы их не превышаете - все нормально.
    Если вы сгрузите все файлы в одну папку - ну вероятно вам будет просто неудобно с ними работать и их сортировать. Возможно некоторые файловые системы будут работать медленнее при большом количестве файлов в папке. Я с таким не сталкивался.
    Сколько миллионов файлов у вас будет в одной папке?

    На данный момент я не придумал ничего лучше, как генерировать при загрузке файла GUID и, например, для 6F9619FF-8B86-D011-B42D-00CF4FC964FF хранить фото в папке 6F/6F96/6F9619FF-8B86-D011-B42D-00CF4FC964FF.jpg
    Правильно и грамотно придумали. Собственно так и делают - файл хэшируют, хэш используется как имя файла, по первым символам хэша идет разбивка на папки, если таковая нужна. Хотя это не единственный вариант, в зависимости от ситуации может быть более удобна другая разбивка.
    Ответ написан
    Комментировать
  • Как сделать распределенное файловое хранилище для windows fileshare с учетом нескольких офисов?

    Jump
    @Jump
    Системный администратор со стажем.
    Ну в данном случае мне кажется самое удачное это настройка BranchCache.
    Обращение будет идти к файловой шаре, но все популярные файлы будут в локальном кэше, и минимум трафика между офисами.
    Ответ написан
    Комментировать
  • Зачем нужны аттрибуты файла/директории?

    Jump
    @Jump Куратор тега Windows
    Системный администратор со стажем.
    А зачем сейчас нужны аттрибуты "архивный", "системеый"
    Чтобы можно было определить бит архивации, и для того чтобы определить является ли файл системным.

    Среди них "сжатый" и "зашифрованый".
    Что тут непонятного? По нему можно определить использование сжатия и шифрвования.
    Ответ написан
    2 комментария
  • Как восстановить RAID 1 массив в случае выхода одного из двух дисков? Как анализировать RAID?

    Jump
    @Jump
    Системный администратор со стажем.
    Вынимаю 1 диск загружаю по прежнему видится как Intel RAID 1 Volume, почему?
    Потому что у вас зеркальный рэйд! Сколько дисков там - системе не важно.

    То есть стоит вопрос если диск вышел из строя как узнать у меня RAID из двух дисков или просто 1 диск болтается
    Если у вас в массиве из двух дисков вышел из строя один диск, то у вас по прежнему работает (или не рабоает) массив из двух дисков. Просто массив неисправный.
    Статус массива и управление массивом приозводится средствами и софтом контроллера.

    Как управлять конкретным массивом на конкретном контроллере смотрите в инструкции к контроллеру.
    Ответ написан
    2 комментария
  • Как выбрать выносной диск?

    Jump
    @Jump Куратор тега Windows
    Системный администратор со стажем.
    В принципе без разницы.
    Любой диск у которого устраивает емкость и цена.

    диск может не использоваться и пролежать 2 года..
    При длительном отключени от питания SSD имеют свойство терять информацию, как холодное хранилище лучше не рассматривать.

    И в любом случае - если вам данные важны, не забывайте про бэкапы.
    Ответ написан
    Комментировать
  • Как сделать RAID для системного диска с существующими данными?

    Jump
    @Jump Куратор тега Резервное копирование
    Системный администратор со стажем.
    Идете в диспетчер дисков, тыкаете мышкой на системный раздел и жмете кнопку создать зеркало, или не зеркало, уж что там вам нужно, дожидаетесь ресинка, и все собственно.

    Ах да, у вас же core.
    Ну тогда все то же самое, но без мышки. PS вам в руки.
    Ответ написан
    2 комментария
  • Если было начато форматирование HDD, а потом прервано, я об этом узнаю?

    Jump
    @Jump
    Системный администратор со стажем.
    Если было начато форматирование HDD, а потом прервано, я об этом узнаю?
    Форматирование это запись служебной базы данных файловой системы на диск.
    Т.е удаляются данные старой файловой системы, и записываются данные новой.
    Если его прервать - читаться диск точно не будет.
    Ответ написан
    Комментировать
  • Возможно ли использовать SSD Samsung 850 Evo 500GB на сервере 1с7?

    Jump
    @Jump Куратор тега Твердотельные накопители
    Системный администратор со стажем.
    Возможно. И вполне оправданно.
    Проживет достаточно долго, поэтому как то заботиться о ресурсе не нужно.


    Чтобы посоветовать более конкретно нужна дополнительная информация -
    • Сколько баз?
    • Какой средний и максимальный размер одной базы?
    • Что за базы- конфигурация?
    • Общий объем всех баз?
    • Сколько пользователей в среднем работают в одной базе одновременно?
    • Работа идет в терминале или по сети?
    • На чем лежат базы и система в данный момент, и насколько устраивает текущее быстродействие.
    Ответ написан
    1 комментарий
  • Где будут храниться данные после принятия пакета Яровой?

    Jump
    @Jump
    Системный администратор со стажем.
    После принятия пакета яровой операторы будут обязаны хранить весь трафик пользователей.
    Нет.

    операторы будут обязаны создавать (читай покупать и строить) свои мощности для хранения этих данных либо смогут покупать или арендовать стойки/СХД в ЦОДах сторонних компаний?
    Как будет удобнее и выгоднее, так и будут делать.

    Если совсем прямо, для лучшего понимания вопроса, то допустим у меня свой ЦОД. Смогу ли я предоставлять услуги по хранению данных операторам и провайдерам?
    Вы сможете предложить свои услуги. А они уже решат выгодно им с вами работать или нет.
    Я сразу могу сказать - не выгодно. Простейшая логика подсказывает, что если бы у вас была компания уровня оператора связи, то вы бы на публичном ресурсе не задавали.
    Ответ написан
    34 комментария
  • Как объединить не распределённое пространство жёсткого диска?

    Jump
    @Jump Куратор тега Windows
    Системный администратор со стажем.
    Простой создайте том максимального размера.
    Ответ написан
    2 комментария
  • Как хранить данные о заказчиках?

    Jump
    @Jump
    Системный администратор со стажем.
    Раньше, когда клиентов было мало, я хранил данные о клиентах в текстовом файле с именем клиента,
    Т.е логины, пароли, краткая информация о клиенте, контактные лица, выполненные работы.
    Все это хранилось в папке на криптодиске.
    Потом сделал себе кривенькую самодельную CRM на SQLite, с шифрованием реализованным стандартными инструментами, где храню все данные о клиенте, выполненные работы, характеристики клиента, есть встроенная напоминалка о запланированных задачах при запуске.
    Храню все это дело на домашнем сервере, вместе с другой рабочей информацией.

    В общем возьмите какую-нибудь вызывающую доверие и удобную вам CRM и пользуйтесь, или делайте сами.

    Если накроется сервис (всё может быть), я останусь только с зашифрованной базой и всё.
    Храните локально.
    В экселе - сдохнет мой ssd и всё...
    Бэкапы разве отменили?
    Заказчики как дети малые - постоянно удаляют письма в почте, ленятся пролистать диалог в ВК, забывают и так далее...
    Ну почему же как дети. Нормальное поведение, оно им надо листать ваши диалоги в ВК? Они деньги платят, за то чтобы вы листали и помнили.
    Ответ написан
    Комментировать
  • Как лучше организовать хранение домашних данных?

    Jump
    @Jump Куратор тега Системное администрирование
    Системный администратор со стажем.
    У вас очень хороший метод хранения, оставьте как есть, только автоматизируйте.
    Ответ написан
    5 комментариев
  • Нужен ли Storage Spaces в малой системе?

    Jump
    @Jump Куратор тега Windows
    Системный администратор со стажем.
    Планируется сервер под 50 терминальных пользователей и файловую базу 1С средних размеров
    Файловая база на 50 пользователей? Вы шутите? Или с ней будет работать два-три человека?

    возможно, HV.
    Зачем в данной задаче может потребоваться виртуализация???

    Клиент предлагает использовать 2xHDD в зеркале + 1xSSD под кэш
    Непонятно про какой кэш идет речь.

    Кто-то имеет опыт, либо какие-то мысли на тему?

    Для начала надо знать сколько народу будут сидеть в 1с, какая конфигурация и размер базы.
    Поскольку терминал, то однозначно - все профили пользователей, файл подкачки и темпы должны быть на SSD, можно и систему до кучи.
    Для остального в принципе пойдет HDD, но опять же файловую базу и файлопомойку лучше разнести на разные диски.
    И безопасность надо будет жестко настраивать, иначе словит кто-нибудь шифровальщика и сервер встанет, и данные потеряете.
    Ответ написан
  • Парковки головок на жестких дисках WD?

    Jump
    @Jump
    Системный администратор со стажем.
    Все зависит от режима использования дисков, и ОС.
    Иногда это создает определенные проблемы, иногда наоборот.
    Ну и прошивки разные у дисков бывают.

    А вот в этой статье автор пишет что у юзеров возникали проблемы и синие экраны
    Не знаю что там пишет автор, но синие экраны не могут возникать из за частой парковки головок.
    Вообще никак.
    Единственная проблема которая может возникнуть из-за частой парковки головок это механический износ блока головок и преждевременный выход HDD из строя.
    Ответ написан
  • Как уберечься от утери файлов при синхронизации с облаком?

    Jump
    @Jump
    Системный администратор со стажем.
    Удалятся ли локальные копии файлов в этой папке, если они будут удалены из облака
    Разумеется.

    Можно ли это предотвратить
    Очень просто - запретить синхронизацию.

    или каким-то образом восстановить файлы?
    Зависит от того как удалили, если в корзину, то можно восстановить из корзины.

    Какое облако лучше всего использовать в связи с этим?
    Сервисов много, выбирайте.
    Посоветовать невозможно, потому что вы не сообщили критерии для выбора.
    Ответ написан
    6 комментариев
  • Какие HDD оптимально взять для исследовательского проекта?

    Jump
    @Jump
    Системный администратор со стажем.
    Вы издеваетесь? Или просто тролль?
    Как можно задавать такие вопросы на форуме? Собирайте команду профессионалов, и анализируйте.

    Вам же не компьютер собрать надо, вам надо крупный датацентр построить. Может вам еще подсказать сколько бетона надо будет на этот датацентр?

    100петабайт, это примерно 51000дисков. Т.е потребление энергии будет около 400киловатт.
    И по деньгам это проект тянет более чем на миллиард рублей.
    А вы вопросы на форуме задаете.
    Ответ написан
    6 комментариев
  • Как подойти к созданию офисного файлового сервера с облачным backup'ом?

    Jump
    @Jump Куратор тега Резервное копирование
    Системный администратор со стажем.
    Ну если рассматривать самое недорогое решение на 100-500Тб
    2-10шт. таких вот NAS.
    А по уму - это серверная нужна, и стоечные накопители.
    Ответ написан
    3 комментария
  • Почему скорость закачки извне резко падает?

    Jump
    @Jump
    Системный администратор со стажем.
    Если скорость нестабильная, с резкими скачками, то проблема скорее всего именно в WiFi.

    Вы качаете торрент ноутбуком на NAS. И это при том что, ноутбук подключен к NAS по WiFi.

    У вас сначала трафик от роутера идет на ноутбук по WiFi, потом этот же трафик идет по этому же WiFi обратно на NAS.
    В этом вся проблема. WIFi просто физически не может дать такую скорость, и разумеется затыкается.

    Более подробно о ситуации -
    У вас роутер теоретически может передавать данные по WiFi по стандарту n со скоростью до 300мб, если конечно клиент поддерживает такую скорость.
    Ноутбук скорее всего поддерживает стандарт n, но имеет одну антенну, т.е может работать на скорорости до 150мб.
    В итоге у вас канал WiFi между ноутом и роутером на скорости 150мб.
    Это скорость канала - по которому передаются и ваши данные, и служебная информация.
    Поскольку радиоканал вещь нестабильная, то служебной информации очень много (коды коррекции и пр.), поэтому реально рассчитывать можно на передачу ваших данных по этому каналу со скоростью около 50мб.
    Значит пока вы качаете от провайдера на hdd ноута скорость будет не более 6мегабайт (50мб/8)
    Когда вы начинаете качать на NAS вы сначала закачиваете на ноутбук со скоростью около 5-6мегабайт, потом ноут начинает сбрасывать кэш на NAS, со скоростью 5-6мегабайт, а загрузка торрента с внешки в этот момент нервно курит, т.е данные приходят на роутер, попадают в кэш, он переполняется, и данные просто уничтожаются, пиры отправляющие вам данные начинают уменьшать скорость.
    В итоге скорость загрузки торрента стремиться к нулю.
    После сброса кэша с ноута на NAS скорость начинает расти, достигает нормы, и держится пока не заполниться кэш на ноутбуке.
    Ответ написан
  • Поиск программы для индивидуального и общественного хранения файлов?

    Jump
    @Jump
    Системный администратор со стажем.
    ownCloud Позволяет все вышеперечисленное.
    Что именно затрудняетесь сделать?
    Ответ написан
    2 комментария