Форум переехал и обновился!

Для первого входа необходимо установить новый пароль через «Забыли пароль?». Укажите email, использованный при регистрации. Теперь вход выполняется по email, ваш ник на форуме сохранён.

Не помните адрес регистрации? Проверьте свои почтовые ящики: найдите старые письма по запросам club-nikon.ru или Клуб Nikon. Если восстановить доступ не получается, напишите на club-nikon@deesy.com.

Если вы уже установили новый пароль, повторять восстановление не нужно.

Организация хранения данных

Аватара пользователя
Andrey
Сообщения: 7754
Зарегистрирован: Пн апр 25, 2005 14:39

Re: Организация хранения данных

Сообщение Andrey »

Andrey, У меня за последние 5 лет выходил один раз из строя жесткий диск (был в RAID, заменен по гарантии). А вообще таких случаев за всю жизнь был отнюдь не один.


У меня такой случай, слава Богу, был пока только один раз (точнее, два, но один раз я сам отформатировал не тот диск), когда полетел абсолютно новый (пару месяцев ему было) диск IBM. Заменить то его заменили по гарантии, но потерял, довольно таки, много данных (тогда вообще бэкап не делал) и фотографий в том числе ... но жизнь после этого не остановилась smile , даже не помню переживал ли я по этому поводу дольше одного дня smile


multiformat amateur писал(а): Еще много раз раз я восстанавливал родным потерянные данные. Потерянные из-за сбоя программы, например не читается база писем почтовой программы. Из-за невнимательности.

...

И еще, у меня лежит прямо сейчас умерший мобильный жесткий диск знакомой девочки.


Надеюсь, Вы не ведете бэкап всех компов у своих родных и знакомых smile , а значит, такие случаи будут вне зависимости от того как организован процесс бэкапа у Вас, и их можно не рассматривать.


Таким образом, я постоянно сталкиваюсь с ситуациями, когда бэкап весьма полезен.


Полностью с Вами согласен ... бэкап нужен .. но в пределах разумного, а этот предел каждый для себя определяет на своем уровне.


Что касается "коммерческой работы" или некоммерческой работы, то потерять последнюю фотосъемку ради которой я прошел 270 км по льду и месяц жизни... не менее, а может и более неприятно.


Вернулись из такого похода:



1) сбросили фотографии на основной диск;

2) запустили на ночь бэкап на внешний диск и утром отнесли его на работу;

3) удалили фотографии с флэшек (вдруг срочно потребуются для новой фотосессии);

4) запустили на ночь бэкап на второй внешний диск;



Т.е. в каждый физический момент времени у Вас фотографии хранятся, как минимум, на двух носителях. А вероятность того, что случится пожар именно в тот день, когда Вы копируете данные на внешний диск и у Вас одновременно сгорят и основной комп и внешний диск и флэшка, согласитесь, очень не велика. Да и в этом случае (не дай Бог), у Вас голова будет болеть далеко не о фотографиях.


Ведь сегодня диски стоят недорого.


Так и я о том же ... внешние диски стоят недорого, по крайней мере, существенно дешевле, чем аналогичного объема топовые системы RAID и им подобные. Причем последние надо еще как-то конфигурить и т.п. и т.д. ...


И на мой взгляд, гораздо проще обезопасить свои нервы, наладив процесс. Это на самом деле недорого сейчас.


Опять полностью с Вами согласен, только, на мой взгляд, сложные системы RAID и т.п. в домашних условиях - это зря истраченные деньги (еще раз повторю, это мое личное мнение, которые может быть далеко от истины). Лично мне существенно проще и спокойнее и дешевле скопировать изредка на внешний диск, чем тратить время на конфигурацию бэкапной системы, настраивать софт для этого, терять часть производительности компа, терять часть пространства на хардах и т.п. и т.д.


Когда я зимой ходил в горы, то брал лавинное снаряжение, несмотря на то, что вероятность попасть под лавину много меньше, чем вероятность умирания жесткого диска (3% в год в среднем по индустрии).


Это другой вопрос - это вопрос жизни и в этом случае экономить точно не стоит. А потеря даже самой ценной фотографии - это не вопрос жизни ...


Если у Вас в хозяйстве 5 жестких дисков, то за 3 года их юзания вероятность проблемы с каким-либо 0,03*5*3=0,45 не так ли?


Следуя такой логике, если из этих пяти жестких дисков 2-3 бэкапные, то, просто, выкинув их мы уменьшим вероятность проблемы в 2 раза smile





P.S. Само-собой, каждый должен поступать именно так, как он считает нужным и как ему более спокойно и комфортно.
Аватара пользователя
Andrey
Сообщения: 7754
Зарегистрирован: Пн апр 25, 2005 14:39

Re: Организация хранения данных

Сообщение Andrey »

А по поводу покупки музыки. Далеко не все можно купить. Многие вещи не переиздаются, или при переиздании мастерятся заново. Мне нравится слушать винил. Причем не только в оригинале, но еще и в цифровых копиях, переписанных у разных знакомых.


Это лишняя строчка в .bat файле, который копирует на внешний диск. Т.е. такая музыка, которую нельзя купить относится к "критическим" данным и копируется на внешний диск вместе с документами и т.п.
Аватара пользователя
Andrey
Сообщения: 7754
Зарегистрирован: Пн апр 25, 2005 14:39

Re: Организация хранения данных

Сообщение Andrey »

и какой у Вас в совокупности, во всех рабочих компьютерах, объем переменных данных - папка "мои документы",


На всех моих компах папка "мои документы" - девственна пуста. Никогда не сохраняю документы (и все остальное) в "умолчательные" места в системе. Практически все вирусы, в первую очередь, разрушают эти, хорошо известные, директории.

У меня своя структура каталогов, куда все и пишется. Это еще удобно и тем, что апгрейд компа - это переброска всего одной (!) папки с одного компа на другой (только недавно меняли комп на работе. Системщики были в шоке, когда я им сказал, чтоб скопировали мне на новый комп одну папочку и спокойно забирали старый комп. Они так и не поверили smile , сказали, что "ты к нам еще вернешься за данными" smile , наивные smile ).


почтовые базы,


А разве это не проблема почтых клиентов? У меня куча разных e-mail-ов на yahoo, gmail и т.п. и, на мой взгляд, пусть yahoo и все остальные, кто предоставляет такие услуги об этом и заботятся ...


"рабочий стол"


Рабочий стол у меня тоже практически девственно пуст. При этом любой документ, программу, фотографию могу найти практически мгновенно (из-за хорошо организованной структуры каталогов, которую поддерживаю на своих компах уже лет 10). Это как с обычным рабочим столом, если на него навалена куча всего, то найти нужное бывает гораздо сложнее, чем когда все аккуратно находится на книжных полках ...


"избранное" и папки с фотоработой?


Еще один из минусов предлагаемого Вами подхода в том, что у Вас папки "мои документы", почтовые базы, "рабочий стол" "избранное" разные на всех Ваших компах и надо заботится об архивировании каждой из них в отдельности на всех компах. У меня же все хранится на одном жестком диске, который доступен всем остальным компам в домашней сетке. Т.е. бэкапить надо всего из одного места.


Организация хранения и обслуживания массива данных объемом до 1000 ГБ, и свыше 2000 GB - это немного разные задачи, и будут решаться оптимально разными способами....


Это еще один из минусов всех RAID-ов и т.п. ... когда бэкап идет обычным копированием на внешние диски, то объем не имеет значение, пусть хоть 100 Tb, подключаешь нужное количество внешних хардов, запускаешь батничек и утром (или когда закончится копирование) относишь внешние харды в надежное место.
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

Genn писал(а): 1. Физическая организация. (Концепция)



Пока использую внешний жесткий диск (в режиме RAID 1) в качестве библиотеки, куда нерегулярно сбрасываю информацию с жестких дисков компов. В промежутках между сессиями устройство стоит отключенным. Сейчас там место заканчивается. Надо подумать на тему новых подходов.



Сейчас стала популярной абревиатура NAS.



В данном варианте мне нравится то, что можно (наверное) запрограммировать регулярный бэкап отдельных каталогов на жестком диске. Но не нравится, что диски постоянно крутяся и вероятность сбоя растет.



2. Физическая организация - железо и ПО



Как это лучше всего организовать на уровне железа? Есть варианты про какие-то thecus, d-link, и т.д. Есть там что-то именно с возможностью организации файл сервера с временно монтируемыми дисками? Какие лейблы лучше?

Какие диски брать для такого массива?

Заодно кстати и вопрос по ПО. Что лучше всего использовать в качестве бэкапной программы?



Можно купить комплектуху и собрать комп чисто в качестве файл-сервера, но стоит ли оно того? Опять же надо разбираться с новой ОС.



3. Логическая модель данных.



Как построить логическую модель данных?

Сейчас у меня исходные равы отсортированы по датам съемки. Папки называю - YYMMDD-место. Отдельные кадры YYMMDD-NNN.



Как это лучше организовать?
Все внимательно прочитал - нескончаемый вопрос, который все время приходится решать. Постарался оставить в оригинальном письме только те части, на которые буду отвечать. И, по-видимому не в порядке следования вопросов. Итак...



1. Начну издалека - диски постоянно крутятся. Надежность снижает только вкл/выкл. Все время крутящиеся диски плохи, по ср. с некрутящимися, лишь в ситуации внезапного выключения питания - некрутящиеся не получат стресс вида вкл/выкл.

2. Логическая модель. Полагаю, что удобнее всего та, что удобна вам. И к которой вы привыкли. По результатам советов, вы только сможете примерить на себя ту или иную модель, и решить, что подойдет лично вам. У меня (к примеру) логическая модель близкая к той, что вы изложили.

3. Куда все это и как, особенно, если вы не тверды в своем workflow. Я неск. лет пользовался родным виндовозным backup от Veritas. Сейчас я считаю, что Time Machine, это то средство, которое в максимальной степени избавляет ваш мозг от вопросов резервного копирования в ситуации, когда вы не являетесь хорошо настроенным механизмом после 7-ми лет трудов в этом направлении. Проще говоря, используйте эту штуку. У нее один недостаток - вам нужно переехать на Mac OS X. Зато - все работает само и клетки мозга не занимаются дурацкой ерундой.

4. Физическая модель. Внешний диск на FireWire 800 (при копировании сравнительно больших файлов развивает в "крейсерском" режиме 65МБ/с) в сочетании с Time Machine решает все вопросы в состоянии неопределенности и банальной лени. После того, как у вас наступит "просветление" в отношении результатов вашего фототворчества и вы сотрете мусор, вам ничто не мешает скопировать на этот же диск уже "хорошую" сессию и стереть рабочий вариант, который за вас сохранил Time Machine, освободив, т.о., место на диске. Я после этого еще копирую этот "ценный" набор на NAS.

4.1. Лично я в последние 2-3 года люблю диски WD Green, поскольку они тихие.

5. Я использую NAS постольку, поскольку я не один в семье (во-вторых), и поскольку это доп. средство резервирования. Synology 407 в сочетании с RAID1 и гигабитными Ethernet-портами дает мне никак не меньше 25МБ/с.



Вот как-то так...
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

multiformat amateur писал(а): К сожалению, подавляющее большинство NAS имеет идиотски маленькую скорость приемо-передачи, даже если оснащены гигабитным портом. То есть, в спецификации – интерфейс гигабит, а на практике скорость – единицы мегабай в сек. это маркетинговый буллшит. Такова природа дешевых изделий. У них единственный выигрыш - в занимаемой площади. Остальное - сплошные недостатки: скорости нет, управляемость малая, функциональность практически не расширяется.



3. Поскольку скупой платит а иногда и трижды, то я сразу отказался от недорогих dlink и прочей бытовухи, а ориентирусь на 3com и zyxel.
Или наоборот - купить один раз сравнительно приличное решение и иметь управляемое и быстрое хранилище, со скромными физическими размерами. Это я про NAS. Активное сетевое оборудование у меня - TrendNET (не в части сравнения, а только для завершения описания своей аппаратной конфигурации).
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

multiformat amateur: Это все здорово, но как правило в каждом компе жесткий диск один.
Совершенно верно. Поэтому, я уже даввно бросил идеи разбиения внутрненнего диска на части - это ни от чего не спасает. Я систему переставляю раз в 3 года - вот Mac OS X 10.4 менял на 10.6. Все пользовательские данные я перелил из "Time Machine"-ского backup-а руками. Ничего другого ценного там не может сохраниться - за это время все программы все равно нужно ставить новые ВСЕ.
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

Andrey писал(а): внешние диски стоят недорого, по крайней мере, существенно дешевле, чем аналогичного объема топовые системы RAID и им подобные. Причем последние надо еще как-то конфигурить и т.п. и т.д. ...



на мой взгляд, сложные системы RAID и т.п. в домашних условиях - это зря истраченные деньги



Лично мне существенно проще и спокойнее и дешевле скопировать изредка на внешний диск, чем тратить время на конфигурацию бэкапной системы, настраивать софт для этого, терять часть производительности компа, терять часть пространства на хардах и т.п. и т.д.
Ключевая вещь здесь - затраты собственного времени. В случае с внешними RAID, деньги платятся за освобождение вашей головы и вашего времени от совершения лишних действий. Сложных домашних RAID не существует smile ,
Аватара пользователя
Gun
Сообщения: 591
Зарегистрирован: Пн май 16, 2005 09:20

Re: Организация хранения данных

Сообщение Gun »

Andrey писал(а): На всех моих компах папка "мои документы" - девственна пуста. Никогда не сохраняю документы (и все остальное) в "умолчательные" места в системе. Практически все вирусы, в первую очередь, разрушают эти, хорошо известные, директории.

У меня своя структура каталогов, куда все и пишется. Это еще удобно и тем, что апгрейд компа - это переброска всего одной (!) папки с одного компа на другой (только недавно меняли комп на работе. Системщики были в шоке, когда я им сказал, чтоб скопировали мне на новый комп одну папочку и спокойно забирали старый комп. Они так и не поверили smile , сказали, что "ты к нам еще вернешься за данными" smile , наивные smile ).
Дело в том, что помимо вашей собственной дисциплины в отношении данных, еще необходима дисциплина ПО. Иными словами, надо еще чтобы используемые вами программы тоже сохраняли свои данные/настройки в тех местах, которые вы им укажете. А в виндовозном мире это не соблюдается писателями программ практически никогда. Так что, реакция ваших "системщиков" более чем оправдана.
Аватара пользователя
Andrey
Сообщения: 7754
Зарегистрирован: Пн апр 25, 2005 14:39

Re: Организация хранения данных

Сообщение Andrey »

Ключевая вещь здесь - затраты собственного времени. В случае с внешними RAID, деньги платятся за освобождение вашей головы и вашего времени от совершения лишних действий. Сложных домашних RAID не существует smile ,


Чем копирование на внешний диск (командой copy в батнике или тупым копи-паст в проводнике) сложнее конфигурации внешнего RAID? И каким образом моя голова и время будут заняты в этом случае? smile
Аватара пользователя
Andrey
Сообщения: 7754
Зарегистрирован: Пн апр 25, 2005 14:39

Re: Организация хранения данных

Сообщение Andrey »

Дело в том, что помимо вашей собственной дисциплины в отношении данных, еще необходима дисциплина ПО. Иными словами, надо еще чтобы используемые вами программы тоже сохраняли свои данные/настройки в тех местах, которые вы им укажете. А в виндовозном мире это не соблюдается писателями программ практически никогда. Так что, реакция ваших "системщиков" более чем оправдана.


Странно, комп на работе мне меняли в ноябре, сейчас май, на новом компе все работает великолепно. Дома тоже менял компы ... может я не тем виндовозом пользуюсь? smile



И NAS и RAID вещи хорошие, но я ими не пользуюсь из-за:



1) у NAS систем неоправдано задрана цена, как уже писал USB Enclosure стоит 10 баксов, Network принтер c Ethernet и Wi-Fi интерфейсами, включая аналог NAS для подключаемых флэшек, стоит 60$, т.е. цена Ethernet адаптера в нем коппейки. Почему ж тогда NAS Enclosure стоят от 100$? Дурная привычка - не люблю платить "за красивые глазки".



2) Зачем нужен RAID на серьезных работах - понимаю, и хорошо знаю, что это такое и с чем это кушают, зачем нужен RAID (тем более за деньги) дома - не понимаю.



Но, я не хочу сказать, что все должны поступать также ... система, которой пользуюсь я, удобна и комфортна мне, другому пользователю более удобно и комфортно пользоваться NAS, RAID, соответствующим софтом и т.п.



Как говорится - о вкусах не спорят ...

Вернуться в «Перекачка и хранение файлов, создание архивов (картридеры, хранилища)»

Кто сейчас на конференции

Сейчас этот форум просматривают: ClaudeBot [Bot] и 0 гостей