Форум переехал и обновился!

Для первого входа необходимо установить новый пароль через «Забыли пароль?». Укажите email, использованный при регистрации. Теперь вход выполняется по email, ваш ник на форуме сохранён.

Не помните адрес регистрации? Проверьте свои почтовые ящики: найдите старые письма по запросам club-nikon.ru или Клуб Nikon. Если восстановить доступ не получается, напишите на club-nikon@deesy.com.

Если вы уже установили новый пароль, повторять восстановление не нужно.

Организация хранения данных

Аватара пользователя
multiformat amateur
Сообщения: 8619
Зарегистрирован: Пт дек 02, 2005 11:36

Re: Организация хранения данных

Сообщение multiformat amateur »

Genn писал(а): Я думаю, что объем "стабильных" данных у меня порядка 700G (может быть и сократится при выбрасывании дубликатов), у ребенка может быть 100-200-300G, у супруги - порядка 10G.

Скорость пополнения у меня - порядка 150g в год. Ребенок - тоже. Супруга - пока не сильно все это нагружает.



Есть предположение, что можно обойтись пока одним 2T винтом.


Сегодня 700+300,

запас на 2 года +600, итого 1600 GB





В вашем случае мне представляется проще всего организовать такую схему.

(1). NAS на одиночном жестком диске максимального объема. На который:

(А) размещаются все ваши библиотеки аудио, видео, и т.п. данные общего пользования

(Б) сливаются бэкапы с персональных компьютеров ежедневно в автомате.



(2). Внешний жесткий диск, один или два, подключаемый к NAS. На который копируется содержимое NASа с некоторой периодичностью. Мне говорили, что есть насы, например у Zyxel, которые имеют для этого дела отдельную кнопку на заднице, и настройку в своем внутреннем софте. То есть, к ним по USB подключаем внешний жесткий диск, жмем кнопку на насе, и его содержимое сливается на внешний диск. Все это хозяйство – NAS, марштуризатор, хаб, внешние диски, можно запитать от одного упса.



Итого, помимо компьютеров, нужен один NAS и пара внешних жестких дисков такого же объема. Недостатки этой схемы: все известные мне насы имеют медленную реальную скорость работы по сети. То есть бэкап с рабочих компьютеров на них будет идти долго. Поскольку эта операция периодическая и частая, в идеале каждым вечером, когда-нибудь она кого-нибудь заколебет. И есть искушение, не бэкапироваться "на этот раз". это первая проблема. Вторая проблема - если захотите организовать бэкапирование рабочих данных с компьютеров с сохранением истории файлов, то места на насе может не хватить. Поскольку сейчас нет данных по объемам "рабочих, постоянно изменяемых данных", оценить этот момент не представляется возможным. Возможно, Вам придется держать два одиноких NASа в сети, либо один 4-х дисковый.
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

NAS от Synology позволяет объединять в сети маки и пк?
Да. Он может "отдавать" данные как по SMB, так и по AFP. Тем более, что Mac OS X вполне прозрачно умеет пользоваться SMB. Ну и он видится Bonjoure-ом в Finder-е или в iTunes-е (если включен iTunes Server).
Аватара пользователя
Ph-A
Сообщения: 4097
Зарегистрирован: Пт апр 08, 2005 06:18

Re: Организация хранения данных

Сообщение Ph-A »

Поскольку скупой платит а иногда и трижды, то я сразу отказался от недорогих dlink и прочей бытовухи, а ориентирусь на 3com и zyxel.
ИМХО, но zyxel все таки бытовуха ... Хотя у меня все сетевое оборудование, дома zyxel biggrin
Аватара пользователя
multiformat amateur
Сообщения: 8619
Зарегистрирован: Пт дек 02, 2005 11:36

Re: Организация хранения данных

Сообщение multiformat amateur »

Филипп, Dlink, который ставят занедорого провайдеры как роутеры для частников - ешще больше бытовуха. Мне об этом инженер рассказывал, который пришел настраивать мой роутер. Понятно, что зиксель на 5 портов - это не хайэнд. Но хоть более-менее прилично (на мой малопросвещенный взгляд). Еще я в недовольстве от Асуса - два роутера с промежутком в год было выброшено, один пришлось перепрошивать хакерской прошивкой, чтобы нормально функциклировал. Недавно пришлось менять беспроводную сетевую Асус (недешевую) - не ловит в углу квартиры, поменял на Зиксельный аналог, тот ловит м держит. Так что слова Dlink и Asus мне откровенно не нравятся. Возможно это аберрации исключительно моего частного опыта. Через мои руки прошло 7 маршрутизаторов в ценовом диапазоне до 150 долл... то есть домашних. Это немного, но какие-то выводы сделал.



Совершеннго не исключаю, что и у иных производителей есть замечательные изделия, даже значительно дешевле. Но тратить силы на их выявление, тестирование на себе, играть в рулетку стабильности - нет никакого желания. Есть желание минимизировать общение с сетевым оборудованием.

biggrin
Аватара пользователя
Ph-A
Сообщения: 4097
Зарегистрирован: Пт апр 08, 2005 06:18

Re: Организация хранения данных

Сообщение Ph-A »

Филипп, Dlink, который ставят занедорого провайдеры как роутеры для частников - ешще больше бытовуха.
Это другой вопрос smile




Мне об этом инженер рассказывал, который пришел настраивать мой роутер. Понятно, что зиксель на 5 портов - это не хайэнд. Но хоть более-менее прилично (на мой малопросвещенный взгляд).
По моему точно.




Еще я в недовольстве от Асуса - два роутера с промежутком в год было выброшено, один пришлось перепрошивать хакерской прошивкой, чтобы нормально функциклировал. Недавно пришлось менять беспроводную сетевую Асус (недешевую) - не ловит в углу квартиры, поменял на Зиксельный аналог, тот ловит м держит.
Я Asus давно не люблю. Когда они только появились на рынке, это да. А потом ... Вначале фирма где я раньше работал, выкинули все платы Asus со сборки. Говорили брак большой и глюков хватает.

Позже появились ноутбуки Asus. По цене выше брендов... Я посмотрел, посмотрел и купил Dell. Знакомые сказал что Dell не круто, купил Asus. Через полгода он накрылся. Теперь он сидит только на Dell-ах.



Но это не все. Еще у несколько моих знакомых, ноутбуки Asus сломались. Такого падежа я не видел не у кого...


Так что слова Dlink и Asus мне откровенно не нравятся. Возможно это аберрации исключительно моего частного опыта. Через мои руки прошло 7 маршрутизаторов в ценовом диапазоне до 150 долл... то есть домашних. Это немного, но какие-то выводы сделал.
Dlink не знаю. У меня в коробке от Билайна лежит Dlink, но я его не распаковывал. У меня работает Zyxel.

На старой работе у жены купили роутер Asus. Пару месяцев поработал и сломался. Тогда поинтересовались, что у меня стоит и так же купили Zyxel. Так он у них и живет...
Аватара пользователя
Genn
Сообщения: 4832
Зарегистрирован: Чт дек 06, 2007 19:33

Re: Организация хранения данных

Сообщение Genn »

Внешний жесткий диск, один или два, подключаемый к NAS. На который копируется содержимое NASа с некоторой периодичностью. ... То есть, к ним по USB подключаем внешний жесткий диск, жмем кнопку на насе, и его содержимое сливается на внешний диск.
Здорово. Но тут возникает следующая тема, которая мне (пока) не понятна:

Если делать копию диска целиком (и предположить, что скорость передачи данных по USB 2.0 - 25 MB/sec - то копия будет делаться порядка 24 часов, если через e-sata и 50 - то 12 часов). Нужно копировать только различия и при этом добавлять их в полную копию. Когда-то у программы NC это делалось путем нажатия двух комбинаций. Не могу понять - как называется этот метод. Нашел описания трех методов - полный, дифференциальный и инкрементный, но кажется, что не один из них не делает такого бэк-апа.



Опять же - дисков с e-sata нашел только одну модель у Сигейта (но есть какое-то недоверие к этой марке). Есть варианты в WD Studio Edition - но там такой интерфейс есть только в современных двухдисковых моделях.



dunno
SY, Genn
Аватара пользователя
multiformat amateur
Сообщения: 8619
Зарегистрирован: Пт дек 02, 2005 11:36

Re: Организация хранения данных

Сообщение multiformat amateur »

Genn,

Есть два рода резервирования данных.





(А) Синхронизация.

В destination добавляются новые файлы, удаляются те, что отсутствуют в источнике. Обычно просто повторяется полностью файловая система. Бэкап представляет собой простую копию директорий и файлов с источника.



(Б). Настоящий бэкап.

В рамках него могут существовать три вида архивов:

1. полный бэкап. Файл бэкапа предствляет собой один гигансткий архив, обычно сжатый, всех данных с источника на какой-то момент времени.

2. Дифференциальный бэкап. Файл бэкапа представляет собой архив, куда пишутся новые и измененные с момента последнего полного бэкапа файлы. Требует наличия полного бэкапа.

3. Инкрементальный бэкап. Файл бэкапа представляет собой архив, куда пишутся новые и измененные с момента последнего инкрементального (!) бэкапа файлы. Требует наличия полного бэкапа и всех предыдущих инкрементальных дополнений к нему.



Обычно организуют либо полный бэкап с дифференциальными дополнениями. Либо полный бэкап с инкрементальными дополнениями. Первый вариант - немного медленнее бэкапируется, но проще развернуть в случае аварии, и надежнее. (требуется только полный бэкап и любой дифференциальный). Второй вариант - быстрее бэкапируется, но гиморнее восстанавливать (требуются все файлы инкрементального бэкапа с момента полного, если какой из файлов инкрементального бэкапа поврежден, то имеем проблемы)



Я рекомендую (по своему опыту) настоящий бэкап, -- что с лифференциальной или инкрементальной схемой, -- только для бэкапирования текущей работы с рабочих компьютеров на NAS. С NASа делать резервное копирование на внешний диск методом простой односторонней синхронизации. Когда внешний диск просто и тупо повторяет изменения в NAS на уровне файловой структуры. Последняя операция довольно быстрая, на моем компутере по USB занимает не более 10-20-ти минут. Не в последнюю очередь потому, что все ваши рабочие данные уже свернуты в единые архивы, то есть шустро бегут потоком на внешний диск с максимальной скоростью и без служебных задержек.





Схема:

Рабочий компьютер --> настоящий бэкап (дифференциально либо инкрементально) --> в NAS

NAS --> быстрая односторонняя синхронизация на ---> внешний отключаемый жесткий диск. Ротация дисков по дням или по месту хранения off line.



В такой схеме Вы минимизируете время на перенос данных на внешние диски.

И вообще можно все хорошо автоматизировать, если бэкапы с рабочих компьютеров настроить на автоматический фоновый режим, у меня именно так сделано. Компьютер живет своей жизнью, в процессе свободной незанятости процессора занимается бэкапом. Когда я подключаю внешний жесткий диск, то софт обнаруживает это событие и самостоятельно начинает на него синхронизировать архивы. В результате все ежедневные действия - только подключить и отключить мобильный внешний диск, все. Но... в свое время я потратил силы и время чтобы все это спроектировать и настроить до такого уровня автоматизации. Это было связано в тем, что я проектировал систему бэкапа для своих родителей. Они старенькие, и нажимать батники не приучены, или забывают. Могут только включить и выключить мобайл рэк раз в день. Все остальное должно происходить в полном автомате надежно и без участия человека.
Аватара пользователя
multiformat amateur
Сообщения: 8619
Зарегистрирован: Пт дек 02, 2005 11:36

Re: Организация хранения данных

Сообщение multiformat amateur »

Опять же - дисков с e-sata нашел только одну модель....


А там, куда Вы собрались подключать внешний диск (то есть у NASа) есть выход eSATA?








у Сигейта (но есть какое-то недоверие к этой марке).




Эксплуатирую дома два внешних диска Сигейт на 1500 и 2000 GB. Один чисто USB (FreeAgent) второй USB + eSATA (Black Armor). Полет нормальный. Различаются комплектацией софтом для резервного копирования. Софт у сигейта мне понравится. Если бы шла речь о защите только одиночного индивидуального компьютера, без сети, то я бы рекомендовал FreeAgent. Правда, они у меня появились только в этом году, так что теста на длительность юзания еще нет. Но в целом я к жестким дискам отношусь по-любому как к потенциально ненадежному явлению, вне зависимости от марки. Другими словами, важна не марка сама по себе, а длительность гарантийного срока. Мой поставщик на голые диски Сигейт дает 3-5 лет гарантии. На внешние - 2 года. Внешние Сигейты, кстати, одни из самых компактных на рынке (кажется компактнее WD) что плюс, если будете таскать на работу или в ячейку.
Аватара пользователя
Genn
Сообщения: 4832
Зарегистрирован: Чт дек 06, 2007 19:33

Re: Организация хранения данных

Сообщение Genn »

multiformat amateur, я думаю на тему synology 109, у нее есть выход eSata. У нее есть ПО, которое вроде бы делает копии на внешний диск. Но тут начинаются новые подробности. Она нормально использует EXT3 или FAT32, может писать на отформатированный диск в NTFS.

Как раз и смотрю на указанный диск. Где вы их берете?



В вашем случае "синхронизация" идет через сетку на внешний жесткий диск, подключенный к основному компу? Используются средства Windows?

Мне бы хотелось, чтобы синхронизация шла на внешний жесткий диск, подключенный к NAS и без участия сети.

Чтобы компьютер не знал о существовании этого диска.



Кстати, у одной из фирм, производителей ПО для бэкапа - есть 4й метод. Он называется зеркальный.
SY, Genn
Аватара пользователя
multiformat amateur
Сообщения: 8619
Зарегистрирован: Пт дек 02, 2005 11:36

Re: Организация хранения данных

Сообщение multiformat amateur »

Кстати, у одной из фирм, производителей ПО для бэкапа - есть 4й метод. Он называется зеркальный.


Строго говоря, зеркалирование не является бэкапом в стором смысле. поскольку не защищает от множества угроз, например вирусной или просто ошибок пользователя.

А вообще говоря да, "зеркалирование" как метод сохранности данных имеет свое право на существование, и свои уровни сложности: от RAID1 (10) внутри компьютера, до кластера из двух компьютеров. Но это немного иная история... Если хотите нормального бэкапа то он должен быть (а) отключаемым, в большинстве времени вообще не подсключенным к компьютеру или сети (б) позволять откатиться на предыдушее состояние на заранее определенную дату.






Как раз и смотрю на указанный диск. Где вы их берете?
Pirit.ru , Flashcom.ru В последнее время больше пользуюсь второй компанией.

У второй вполне хорошая репутация в мире компьютерщиков, и безусловный манибэк 2 недели без объяснения причин.






В вашем случае "синхронизация" идет через сетку на внешний жесткий диск, подключенный к основному компу?


В моем случае накопитель архивов находится внутри моего компьютера.

(диск 1Г в описании на первой странице). Туда собираются все полные и дифференциальные бэкапы с разных мест. Далее на 2000GB внешний диск быстро сливаются сами бэкапы в режиме синхронизации. И синхронизируется раздел с моими "постоянными данными" (мультимедиа библиотекой и проч.)

Но, это мой случай. В вашем случае направление потоков может быть иным.






Используются средства Windows?


Нет, строго сторонние утилиты.

APbackup - для бэкапов переменных данных.

Allway sync - для синхронизации.

Стоят, кстати, недорого.






Мне бы хотелось, чтобы синхронизация шла на внешний жесткий диск, подключенный к NAS и без участия сети.

Чтобы компьютер не знал о существовании этого диска.
Это нужно смотреть прошивку в NAS.

собственно, только она и может сделать ваш запрос.

Вернуться в «Перекачка и хранение файлов, создание архивов (картридеры, хранилища)»

Кто сейчас на конференции

Сейчас этот форум просматривают: ClaudeBot [Bot] и 1 гость