Задать вопрос
Ответы пользователя по тегу Хранение данных
  • Выбор софта для nas, какой софт выбрать под задачи?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    • SeaFile (многие переходят на него после использования двух следующих вариантов из "большой тройки")
    • NextCloud (если нужна "лёгкая" версия, есть образ на Alpine на их dockerhub)
    • OwnCloud
    • FileRun (сильно похож на google drive, нужно покупать лицензию)
    • SyncThing
    • Filestash
    • FileBrowser
    • Rclone
    Ответ написан
    2 комментария
  • Существуют ли файловые менеджеры с поддержкой тэгов и встроенным поиском под Windows?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Существуют ли удобные файловые менеджеры под Windows?

    У меня (уже слишком) давно в закладках лежат варианты ниже. Настолько давно, что я уже подзабыл почему выбрал именно их. При этом до сих пор руки не дошли попробовать. Но причина была, иначе они бы в закладки не попали никак.

    UPD:
    Я хочу стильно, модно, молодёжно

    Пожалуйста: https://files.community/docs/customize-settings/ap...
    Ответ написан
    5 комментариев
  • Как проверить 500 000 файлов word,exel,pdf ,txt что они не битые?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    "Новые" офисные форматы (.docx, .xlsx, ...) - это по факту zip-архивы.

    Новый (пустой) документ Excel распакуется в виде, ЕМНИП, шести папок и примерно десятка файлов.

    Соответственно, их целостность можно проверить с помощью 7-Zip.

    Но с .pdf такой фокус не пройдёт.

    Текстовые файлы можно проверить с помощью анализа энтропии. Но тут вам потребуется понимание этого дела и, с определённой вероятностью, базовое умение программировать.

    Анализаторы энтропии встроены в некоторые инструменты для data recovery, но они работают немного по-другому и с накопителями в целом.
    Утилиты для отдельных файлов я сходу не назову, хотя почти уверен, что она должна существовать. Поищите в составе инструментов для forensic в духе Kali Linux и подобного.
    Также посмотрите что используют те, кто анализируют прошивки, дампы чипов, и занимаются подобным реверс-инжинирингом.

    Когда мне несколько лет назад потребовалась схожая программа, отображающая энтропию, я подходящего ничего не нашёл, в итоге писал не самый прямой костыль сам.
    Ответ написан
    Комментировать
  • Куда класть soho/стартап бэкапы?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Каллокейшен, по традиции, в кладовке у кофаундера

    Если у вас в самом деле такое calo (что совсем не плохо, если всё работает, как надо), то что вам мешает добавить в ту же кладовку локальную железку?

    Мини-сервер, NAS, жёсткий диск в боксе, в конце концов. Имеющийся бэкап, понятно, не убирайте, чтобы было три экземпляра данных.

    Есть возможность оплачивать иностранные сервисы, но не хочется получить бана по IP(сервак в РФ)

    Нормальным провайдерам на локацию клиента плевать от слова совсем. Ну может разве что к "традиционным / старым" "кровавым режимам" придерутся. Но мы не в их числе.

    Немало кто так наоборот, обрадуется, если криптой платить будете.
    Ответ написан
  • Создание домашней файлопомойки. Домашнее облако для хранения фото?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Смотрю, кто-то советует WD red plus, кто-то говорит не брать WD red. Я прям нуб в этом деле

    Один из важных в настоящее время моментов - не купить жёсткий диск с SMR.

    Или вообще можно условную дешмань купить в виде материнки\проца за условные 5к за все

    Если не разбираетесь, а глаза разбегаются при попытке изучения, то возможно, вам подойдёт вариант взять б/у HP MicroServer. Учтите, что у них есть разные поколения (gen.) с разным (более новым/старым) железом.

    В целом же, если у вас нет точного понимания зачем вам "облако" или NAS, то возможно лучше будет обойтись внешним диском или внутренним HDD в "стакане"/боксе.

    Помните, что любую железку надо поддерживать и следить за ней. Если к этому нет интереса, то отдельный жёсткий диск будет удобнее для вас и безопаснее для информации.

    Кстати, если вы ищете что-то для хранения единственного экземпляра данных, то основательно пересмотрите затею. Две независимых копии будут лучше любых облаков и НАС-ов.
    Ответ написан
    2 комментария
  • Скачанное видио не удаляется на телефоне, что делать?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    В галерее посмотрите свойства файла, путь, где он находится.
    Перезагрузите телефон, сразу после этого, не запуская никаких приложений, подключите телефон к компьютеру и проверьте есть ли файл. Если да, попробуйте удалить в проводнике настольной ОС.
    Ответ написан
  • Бесплатные ресурсы с доступом к "чистой", ссылке есть ли такие?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Для картинок есть "старички" наподобие https://ixbt.photo/ , https://vfl.ru/ и https://postimages.org/
    Там будет прямая ссылка. Но абьюзить, как минимум, первые два себя не дадут и снесут всё, если начать мусорить (и правильно сделают).

    Для видео - найдёте очень вряд ли. Трафик и хранение - дорогие, вы интересуетесь как не платить за них свои, понятно, что мало найдётся тех, кто захочет платить за чужие.

    Серые вебмастеры в своё время изгалялись использованием каких-то китайских сервисов (скорость вряд ли обрадует) и нарезкой видео на куски с подсовыванием результата Cloudflare под видом JPEG.
    Но ничего из этого не стоит делать на проекте - рано или поздно заметят, удалят и вам придётся переделывать кучу ранее сделанной работы.

    Лучше делайте нормально сразу - берите что-то в духе storage VPS и храните своё у себя.
    Ответ написан
    Комментировать
  • Безопасно ли использование NVME SSD, у которого сильно скачет скорость чтения/записи?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Выглядит не фонтан. Я бы тоже начал разбираться.
    1. Скопируйте все важные данные с этого SSD;
    2. Смотрели ли вы у него SMART? Всё там в порядке?
    3. Обращали внимание на температуру? Типовую, при которой диск работает, и до которой доходит при операциях чтения/записи или длительных тестах;
    4. Проверяли ли вы скорость на другом компьютере?
    5. Насколько статичны данные, хранящиеся на этом ССД? Вы туда что-то скопировали/установили, и т.п. и оно долго лежит, как есть, без движения, или наоборот, вы много копируете, удаляете, затем заливаете что-то новое?
    6. Сколько места обычно у вас свободно на диске? Есть запас, или он забит под завязку?
    Ответ написан
    1 комментарий
  • Как максимально оградить данные от потери?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Всё верно, сделайте три копии важных данных:
    1. RAID - хорошо, повышает надёжность. Сделайте, к примеру, RAID 1 (зеркало) на настольном компьютере;
    2. Вторая копия - на внешний жёсткий диск, хранящийся так, что его не уронят и не ударят. В режиме "идеальной заморочки" его надо хранить в отдельном помещении на случай пожара;
    3. Третья копия - в сети. Чтобы "доверить всё", используйте софт наподобие WinSCP или rclone со включенным шифрованием.


    дома также нет вечного носителя

    Если хочется "хардкора" с долгоиграющими носителями, можно добавить ленты. Но это некоторый порог входа, как в плане поиграть и разобраться, так и с точки зрения покупки необычного для домашнего юзера железа.
    Ответ написан
    9 комментариев
  • Как выбрать внешний SSD для долгосрочного хранения данных?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Подходят ли вообще SSD как класс устройств для описанной задачи?

    В целом - нет. Если только будете регулярно подключать диск к компьютеру и держать его подключенным достаточно долго.

    В противном случае заряд ячеек "потечёт" без регулярного обновления его контроллером. 6 месяцев - многовато, я бы не держал дольше трёх для современных накопителей.

    Правда ли, что в данном контексте тип памяти MLC будет иметь преимущества перед TLC/QLC?

    Да. На мой взгляд, MLC лучше во всём, кроме цены. SLC ещё лучше, и дороже по цене.
    QLC лучше избегать.

    Где-то читал, что из-за более простой структуры памяти вероятность возникновения ошибок ниже

    В ячейке MLC 4 "уровня заряда", кодирующих её содержимое (2 бита). В TLC - 8 (3 бита).
    Когда проще прочитать содержимое ячейки, т.е. чётко отличить один вариант от другого, думаю, что понятно. Соответственно, коррекция (дополнительные операции контроллера) требуется реже.

    Подозреваю, что обычный жесткий диск в плане надежности будет гораздо лучше SSD

    Верно подозреваете.
    Основное преимущество ССД в плане надёжности - устойчивость к ударам. HDD нужно будет хранить аккуратно, вдали от шаловливых рук, детей, животных, и т.п.

    все-таки хочется более современное решение, поэтому и смотрю в сторону SSD (например, samsung 970 pro)

    Если хотите Самсунг и Про, то лучше брать 850 Pro и более старые - это проверенные временем накопители и они как раз на MLC.
    Ответ написан
    Комментировать
  • Где взять сервер с реально безлимитным высокоскоростным трафиком?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    на hetzner сказано: Выделенный сервер "Безлимит 1Gbps" ... там реально все безлимитно в этом плане?

    Я сам не пользовался этой услугой (по нашему роду деятельности нет потребности), но судя по тому, что я читал на околохостинговых ресурсах, да, там безлимит.
    Кроме того, ничего не мешает вам напрямую адресовать этот вопрос их поддержке.

    Или рекламируемый 1Gbps в итоге оказывается порт к которому подключено 10 серверов

    Вы смешиваете Unlimited / Unmetered и Dedicated.
    Сервер выше на Хетцнере точно будет shared.

    Технологии облачных хранений типа S3, для такого объема трафика стоят неимоверно дорого

    Если вам реально нужен dedicated, я полагаю, что не стоит ожидать вариантов дешевле $300 в месяц (речь о сервере, не S3).
    Начните с Hurricane Electric, у них цена на дедикейтед почти наверняка будет одной из самых низких. В более экзотических, "less connected" странах, надо будет добавить минимум, пару сотен.

    Да, и это всё актуально, если вам не нужно ничего сомнительного - торренты, DMCA-ignored, и т.п. Такие варианты однозначно будут дороже.

    С сервером от Хетцнер сделайте следующее: напишите два письма в саппорт.
    Первое - с вопросом про анлимитед, прямо сказав, что "понимаю, что вам нужно обеспечивать равные условия для клиентов, но мне вот реально нужен анлимитед, или хотя бы NN терабайт в месяц". Когда ответят - напишите второе, спросив про дедикейтед, про то, как разделяется канал из первого вопроса, и сколько будет стоить выделенный.

    С этого сервера будут скачивать порядка 80Тб в месяц

    Из бюджетных вариантов посмотрите в т.ч. на Netcup. Вот, к примеру, на 80 ТБ: https://www.netcup.de/bestellen/produkt.php?produk...
    Ответ написан
    Комментировать
  • Аналоги Nextcloud?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    FileStash, EteSync, Syncloud, HRCloud, MinIO, XBackBone, e2ee

    Но наиболее развитые варианты вы перечислили.
    Если их возможности вам не подходят, то наиболее разумный вариант - брать один из похожих проектов с гитхаба (их немало) и точечно дорабатывать под ваши нужды.
    Ответ написан
    Комментировать
  • Заменил файл, как восстановить прежний?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    возможно восстановить как-то?
    • Обеспечьте отсутствие записи на диск, на котором был перезаписанный файл;
    • Если это ССД, то либо оперативно отключите TRIM на своей машине, либо быстро выключите её, найдите другую, отключите ТРИМ там, и подключите свой диск;
    • Сделайте полное сканирование диска Р.сэйвером, не исключено, что удастся восстановить и другие версии заменённого файла (если он периодически обновлялся).
    Ответ написан
    Комментировать
  • Как удалить доступные мне файлы в Google Диске?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Ситуация "удалил несколько документов, однако, остались четыре файла" ясна не до конца, но в любом случае, попробуйте перетащить их в "Корзину" (Drag and Drop).
    Ответ написан
    1 комментарий
  • HDD, SSD в плане электрической стабильности?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    При скачке напряжения выйти из строя может как HDD, так и SSD. Соответственно, вам действительно было бы хорошо что-то сделать с питанием.

    У жёсткого диска отрицательным фактором может быть частая остановка/раскрутка, если компьютер при просадках не отключается.
    В серверных ССД (дороже бытовых) нередко установлены конденсаторы, позволяющие дописать данные при резком исчезновении питания.

    Помимо этого, вам стоит задуматься о резервных копиях, видимо, на отключаемый носитель. Именно для хранения HDD однозначно надёжнее. На современных SSD, лежащих на полке, данные имеют заметный шанс достаточно быстро "протухнуть". Основное назначение ССД - это скорость работы.
    Ответ написан
    5 комментариев
  • Какие есть WEB self-hosted решения для обмена файлами?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Комментировать
  • Как реализовать метод DOD'у или метод Гуттмана по затиранию данных на Python?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Если вы хотите затирать весь диск, то не исключаю, что это у вас вполне получится.

    Вот статья о прямом доступе к жёсткому диску из Питона: https://habr.com/ru/post/274195/ и код к ней: https://github.com/kazenniy/atapt

    Кстати, затирать каким-то специальным образом особого смысла нет, достаточно пройтись одним слоем рандомных данных.

    Если же вы хотите затирать конкретные файлы, папки, и т.п., то ваша задача сильно усложняется - вам нужно разбирать структуры файловых систем.
    Можно попробовать использовать библиотеки наподобие этой (НТФС), но про них ничего сказать не могу, не было потребности экспериментировать с чем-то подобным: https://github.com/williballenthin/python-ntfs
    Ответ написан
    Комментировать
  • Какие есть программы для "перемагничивания" жестких дисков?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Когда нет воздействия негативных внешних факторов, на жёстких дисках информация может храниться очень долго.

    Если же диск активно используется, то скорее он у вас каким-либо образом выйдет из строя, либо начнёт деградировать магнитная поверхность пластин (не размагничиваться, а именно приходить в негодность), чем начнут происходить изменения намагниченности.

    Если вдруг вы всё равно беспокоитесь на этот счёт, то можете делать следующее:
    • "Двигать данные" руками - создавать копии важных папок на том же диске, старую копию удалять, новую - сохранять. Либо переносить важные данные на другой носитель и обратно (убедившись, что второй носитель в полном порядке и потерь не возникнет);
    • Время от времени запускать тесты чтения, например, в Р.тестере (детализацию можно сделать максимальной - увидите все подробности).

    А по-хорошему, если у вас есть какие-то важные вам данные, то они должны храниться, минимум, в виде двух копий. А лучше - трёх. Бэкапы позволят забыть о различных размагниченностях.

    P.S.
    Кстати, с SSD дело обстоит радикально по-другому, долго хранить на них что-либо "в ящике стола" совсем не стоит.
    Ответ написан
    2 комментария
  • Где лучше всего хранить файлы различного размера?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    развернуть собственный сервер-хранилище (эта идея была практически сразу откинута)

    Не совсем ясно, отбросили ли вы исключительно "железный" отдельный сервер, или в т.ч. и виртуальные.
    В любом случае - один из вариантов - это "storage VPS", что-то наподобие вот этого (по ссылке просто пример): https://hosthatch.com/storage-vps

    Также можете использовать предназначенные для хранения сервисы:
    -- https://www.hetzner.com/storage/storage-box (ФТП и подобное);
    -- https://www.hetzner.com/storage/storage-share (NextCloud).

    Последние два варианта по цене побить, наверное, можно, но полагаю, что немногие из известных игроков предложат дешевле (хотя не проверял). Это уже готовые решения, которые вполне себе дёшевы и сердиты.
    Ответ написан
    Комментировать
  • Какие решения подойдут для хранения и использования фото в сети?

    Zettabyte
    @Zettabyte
    Проф. восстановление данных ▪ Вопрос? См. профиль
    Вам нужен либо т.н. "storage VPS", что-то наподобие вот этого (просто пример): https://hosthatch.com/storage-vps
    либо специальный сервис:
    -- https://www.hetzner.com/storage/storage-box (ФТП и прочее);
    -- https://www.hetzner.com/storage/storage-share (NextCloud).

    Последние два варианта по цене побить, наверное, можно, но полагаю, что немногие из известных игроков предложат дешевле (хотя не проверял). Младший план в обоих уже 100 ГБ.
    Ответ написан
    Комментировать