Стример для хранения данных. Играемся с серверным железом или как совместить несовместимое.
- Цена: $50
- Перейти в магазин
Началось всё с того, что мой сосед уехал в большой город и оставил мне большой катушечный магнитофон. Это была «Астра-110 стерео» первого класса и в отличии от её предшественников она стояла на столе и очень красиво играла что-то западное конца 80 годов. А уж если её раздеть разобрать то вообще вызывала экстаз всеми колёсиками, пассиками и прочей советской механикой.
Организм потребовал продолженияэротического шоу и заявил что хочет стример. Доводы что у нас в доме только ноутбук и нам некуда его втыкать были отвергнуты.
Итак, есть Thinkpad T520, отсюда узнаём что у нас в слоте ExpressCard есть одна линия PCI-E 2.0 и практически должно давать 425 MB/s. Другие варианты вроде USB2 и eSATA нам не подходят категорически, да и для ExpressCard предложение было всего одно. Контроллер старый, больше не производится, однако у этого продавца они были новые и в количестве. Я долго закидывал продавца письмами с просьбой указать стоимость доставки в Россию (ну стоимость то он назвал, но ebay заказ оформить не давал), пока не нашел кнопочку «запросить счёт». Ура! Мне прислали счёт на $50+$19 доставки. Пришел контроллер в обычном пакете из пупырки, что было несколько опрометчиво со стороны продавца, но последствий не имело.
Попутно нашелся и стример… Варианты всяких DLT и старых LTO я отмёл — ну какой смысл в библиотеке суммарно на 450 гигабайт, если один ноутбучный винт вмещает больше? Ну и плюс сохранность — текущие ролики, лопающиеся резинки… В итоге выбор был между LTO-4 и LTO-5. Судя по обзорам ломаться там действительно особо нечему. Последний жаба в итоге отмела, 20 тысяч это его минимальная цена. С предыдущим тоже было не просто, на авито они попадаются от библиотек за вполне разумные 4000-6000 рублей. Однако при звонке выясняется что это цена за то, что-бы добавить привод в библиотеку, плюс у привода не будет морды (ибо кто на него в библиотеке смотрит кроме робота?). В итоге минимальная цена стала в 7200 с ожиданием или 10000 но сейчас. И тут на ebay мне попадается LTO-4 всего за 50 евро, как и у 2gusia — из Франции. Это была самая стрёмная моя покупка, отзывов у продавца почти не было, да и те были оставлены несколько лет назад другими продавцами. Т.е. была не хилая вероятность что аккаунт сломан. Но, проанализировав всё что можно, я решился. В итоге это был однозначный выигрыш: стример оказался почти новым — за 3 года POH загружено 215 кассет или записано 37 полных, шикарная упаковка, картридж в подарок. Обошелся он мне с доставкой в 80 евро.
Что ещё? Кабель. На контроллере стоит SFF-8088, который содержит 4 канала SAS. Кабель нашелся в китае, за 1000 с копейками рублей. И, хотя я не планировал собирать настольную машину, я всё же схватил там же SAS контроллер под стационарную машину. Трек был получен в последний возможный день, заказ отправлен еще через неделю :E
И вот настал день, когда всё это богатство таки оказалось у меня. Первой неожиданностью было то, что почти все переключения совершались в горячую (на блоке питания уже неделю висел Conner CP30080E, а выключать каждый раз ноутбук мне показалось глупо). Ничего не сгорело…
Учитывая что разбираться со стримерным софтом мне еще предстоит, в качестве кролика был выбрал Smartbuy Ignition Plus, на старом добром MLC флеше.
Неудобство — контроллер сильно выступает, плюс разъём, плюс жесткий кабель, плюс то, что после разветвления кабель идёт без изоляции и кажется что пару раз перегни и он сломается… В общем не по феншую совсем :(
Вот оно — исполнение мечты! Заработало ли? Нууу… В общем да, L&TT стример видит, тесты гоняет. «Нууу...» — как я уже говорил, со стримерным софтом еще разбираться и разбираться. Контроллер видится как Marvell 64xx/63xx SAS Controller, поддерживает одновременное подключение SATA и SAS.
А вот скорость…
Кролик везде один, Smartbuy. Первые два теста это на внутренних контроллерах thinkpadа, третий — как раз на нашей фундервафле. 425 мегабайтами и не пахнет, но есть нюансы.
upd: Видимо контроллер достаточно старый и поддерживает только версию 1.1 PCIe.
Device Name: Marvell 88SE63xx/64xx SAS Controller
PCI Express
Version: 1.1
Maximum Link Width: 4x
Current Link Width: 1x
Maximum Link Speed: 2.5 GT/s
Current Link Speed: 2.5 GT/s
Сидел бы чип на нескольких линиях было бы лучше, но в expresscard линия всего одна.
Ghost 12.0.0.10695, что загруженный через родную WinPE, что через стороннюю, контроллер (и винт естественно) не видят, загрузиться с него тоже нельзя. Горячее подключение работает, но странно работает отключение, устройство всегда занято. Впрочем, на компе есть всякие dropboxы, может это они лезут. Можно извлечь сам контроллер. В настройках есть галочки на hotswap раздельно по каждому порту. Лампочки обращения к диску вполне работают.
Следующий опыт — у меня есть EXP GDC, следовательно берём наш стационарный контроллер и
В системе уже 3 блока питания! Скорость не радует, это тест 4. Я немного пожалел что взял этот LSI 3445E, надо было чутка доплатить и взять sas9212-4i 4e, это следующее поколение. Если контроллер подключен при включении ноута, то после загрузки он будет не виден, если воткнуть при уже загруженной ОС — всё находится.
upd: То же самое, старый чип с PCIe 1.1
Device Name: Symbios Logic/LSI 53C1068E 8-port SAS 3000 Adapter
Version: 1.1
Maximum Link Width: 8x
Current Link Width: 1x
Maximum Link Speed: 2.5 GT/s
Current Link Speed: 2.5 GT/s
Хотя даже в этих условиях имхо можно было и побыстрей…
Ужас сисадмина:
На самом деле за время ожидания железок, страшась жуткого нагрева агрегата, я собрал почти сервер (ну по сусекам там поскрёб...). Вот что бывает когда серверное железо пытаешься засунуть в обычный inwin
Стример большой, даже длиннее старинного SCSI CD-ROMа
На этом «сервере» были проведены тесты 5 и 6 на внутренних контроллерах. Через LSI тоже смотрел, на удивление показатели поменялись не сильно, т.е. виновата была не урезанная шина. Кстати LSI не работает одновременно с SAS и SATA, Win7x64 виснет при загрузке.
upd:
Скорость на ноутбуке (L&TT)
Testing with 2:1 Compression Ratio
4.0 GB written in 45.7 seconds at 87.5 MB/s (Min 87.0 MB/s, Max 89.6 MB/s)
4.0 GB read in 24.1 seconds at 166 MB/s (Min 163 MB/s, Max 166 MB/s)
Скорость на «сервере» (L&TT)
Testing with 2:1 Compression Ratio
4.0 GB written in 25.5 seconds at 157 MB/s (Min 155 MB/s, Max 161 MB/s)
4.0 GB read in 24.1 seconds at 166 MB/s (Min 163 MB/s, Max 166 MB/s)
В итоге контроллер буду продавать.
Он что, аппаратно жмёт? Жмет.
Т.е. физически он пишет порядка 80 Mb/s (подтверждается wiki), но по шине может гнать гораздо больше?
|__ Device Performance Test Started on Drive (Ultrium 4-SCSI) (Tape0)
|__ Testing with Random
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 49.3 seconds at 81.2 MB/s (Min 80.7 MB/s, Max 81.3 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 49.3 seconds at 81.1 MB/s (Min 78.4 MB/s, Max 81.3 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
|__ Testing with 4:1 Compression Ratio
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 26.1 seconds at 153 MB/s (Min 152 MB/s, Max 156 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 18.3 seconds at 218 MB/s (Min 217 MB/s, Max 221 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
|__ Testing with Zeros
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 23.5 seconds at 171 MB/s (Min 169 MB/s, Max 172 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 17.3 seconds at 231 MB/s (Min 228 MB/s, Max 237 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
upd: Второй кролик — Samsung 840 EVO. Четвёртый тест LSI 3445E проводился на «сервере», т.е. на полной шине.
upd: Еще один облом, все большие=механические hdd в доме не дают больше 98 Mb/s. Этому стримеру нужно раза в два больше минимум. Если писать с аппаратным сжатием, то лента постоянно пускается-останавливается-перематывается. Если с программным то лучше, просто пишет кусками иногда запуская стример. А еще при записи получается не линейное чтение на максимальной скорости, а что-то гораздо более медленное (сейчас цифра мелькает в пределах единиц мегабайт в секунду :(
temp на ssd.
Подводя итоги хочу сказать что 2gusia был прав, не связывайтесь с такими игрушками, если у вас тараканы меньше ладони :)
Я попал на кучу узких мест при смеси старого и ноутбучного железа, считаю что задача была решена только частично.
ps: Стример — серверная железка для записи данных на магнитную ленту. Конкретно эта пишет на один картридж 800 гигабайт (ну или маркетинговые 1,6Тб со сжатием). Следующая — LTO-5 пишет уже 1,5Тб на один картридж, а самая современная — 12,8Тб (но стоит она где-то от 500 тысяч рублей). Магнитофон действительно был прелюдией, по физической сути стример это тот же магнитофон, только сильно более современный. За подробностями — на youtube.
Организм потребовал продолжения
Итак, есть Thinkpad T520, отсюда узнаём что у нас в слоте ExpressCard есть одна линия PCI-E 2.0 и практически должно давать 425 MB/s. Другие варианты вроде USB2 и eSATA нам не подходят категорически, да и для ExpressCard предложение было всего одно. Контроллер старый, больше не производится, однако у этого продавца они были новые и в количестве. Я долго закидывал продавца письмами с просьбой указать стоимость доставки в Россию (ну стоимость то он назвал, но ebay заказ оформить не давал), пока не нашел кнопочку «запросить счёт». Ура! Мне прислали счёт на $50+$19 доставки. Пришел контроллер в обычном пакете из пупырки, что было несколько опрометчиво со стороны продавца, но последствий не имело.
Попутно нашелся и стример… Варианты всяких DLT и старых LTO я отмёл — ну какой смысл в библиотеке суммарно на 450 гигабайт, если один ноутбучный винт вмещает больше? Ну и плюс сохранность — текущие ролики, лопающиеся резинки… В итоге выбор был между LTO-4 и LTO-5. Судя по обзорам ломаться там действительно особо нечему. Последний жаба в итоге отмела, 20 тысяч это его минимальная цена. С предыдущим тоже было не просто, на авито они попадаются от библиотек за вполне разумные 4000-6000 рублей. Однако при звонке выясняется что это цена за то, что-бы добавить привод в библиотеку, плюс у привода не будет морды (ибо кто на него в библиотеке смотрит кроме робота?). В итоге минимальная цена стала в 7200 с ожиданием или 10000 но сейчас. И тут на ebay мне попадается LTO-4 всего за 50 евро, как и у 2gusia — из Франции. Это была самая стрёмная моя покупка, отзывов у продавца почти не было, да и те были оставлены несколько лет назад другими продавцами. Т.е. была не хилая вероятность что аккаунт сломан. Но, проанализировав всё что можно, я решился. В итоге это был однозначный выигрыш: стример оказался почти новым — за 3 года POH загружено 215 кассет или записано 37 полных, шикарная упаковка, картридж в подарок. Обошелся он мне с доставкой в 80 евро.
Что ещё? Кабель. На контроллере стоит SFF-8088, который содержит 4 канала SAS. Кабель нашелся в китае, за 1000 с копейками рублей. И, хотя я не планировал собирать настольную машину, я всё же схватил там же SAS контроллер под стационарную машину. Трек был получен в последний возможный день, заказ отправлен еще через неделю :E
И вот настал день, когда всё это богатство таки оказалось у меня. Первой неожиданностью было то, что почти все переключения совершались в горячую (на блоке питания уже неделю висел Conner CP30080E, а выключать каждый раз ноутбук мне показалось глупо). Ничего не сгорело…
Учитывая что разбираться со стримерным софтом мне еще предстоит, в качестве кролика был выбрал Smartbuy Ignition Plus, на старом добром MLC флеше.
Неудобство — контроллер сильно выступает, плюс разъём, плюс жесткий кабель, плюс то, что после разветвления кабель идёт без изоляции и кажется что пару раз перегни и он сломается… В общем не по феншую совсем :(
Вот оно — исполнение мечты! Заработало ли? Нууу… В общем да, L&TT стример видит, тесты гоняет. «Нууу...» — как я уже говорил, со стримерным софтом еще разбираться и разбираться. Контроллер видится как Marvell 64xx/63xx SAS Controller, поддерживает одновременное подключение SATA и SAS.
А вот скорость…
Кролик везде один, Smartbuy. Первые два теста это на внутренних контроллерах thinkpadа, третий — как раз на нашей фундервафле. 425 мегабайтами и не пахнет, но есть нюансы.
upd: Видимо контроллер достаточно старый и поддерживает только версию 1.1 PCIe.
Device Name: Marvell 88SE63xx/64xx SAS Controller
PCI Express
Version: 1.1
Maximum Link Width: 4x
Current Link Width: 1x
Maximum Link Speed: 2.5 GT/s
Current Link Speed: 2.5 GT/s
Сидел бы чип на нескольких линиях было бы лучше, но в expresscard линия всего одна.
Ghost 12.0.0.10695, что загруженный через родную WinPE, что через стороннюю, контроллер (и винт естественно) не видят, загрузиться с него тоже нельзя. Горячее подключение работает, но странно работает отключение, устройство всегда занято. Впрочем, на компе есть всякие dropboxы, может это они лезут. Можно извлечь сам контроллер. В настройках есть галочки на hotswap раздельно по каждому порту. Лампочки обращения к диску вполне работают.
Следующий опыт — у меня есть EXP GDC, следовательно берём наш стационарный контроллер и
В системе уже 3 блока питания! Скорость не радует, это тест 4. Я немного пожалел что взял этот LSI 3445E, надо было чутка доплатить и взять sas9212-4i 4e, это следующее поколение. Если контроллер подключен при включении ноута, то после загрузки он будет не виден, если воткнуть при уже загруженной ОС — всё находится.
upd: То же самое, старый чип с PCIe 1.1
Device Name: Symbios Logic/LSI 53C1068E 8-port SAS 3000 Adapter
Version: 1.1
Maximum Link Width: 8x
Current Link Width: 1x
Maximum Link Speed: 2.5 GT/s
Current Link Speed: 2.5 GT/s
Хотя даже в этих условиях имхо можно было и побыстрей…
Ужас сисадмина:
На самом деле за время ожидания железок, страшась жуткого нагрева агрегата, я собрал почти сервер (ну по сусекам там поскрёб...). Вот что бывает когда серверное железо пытаешься засунуть в обычный inwin
Стример большой, даже длиннее старинного SCSI CD-ROMа
На этом «сервере» были проведены тесты 5 и 6 на внутренних контроллерах. Через LSI тоже смотрел, на удивление показатели поменялись не сильно, т.е. виновата была не урезанная шина. Кстати LSI не работает одновременно с SAS и SATA, Win7x64 виснет при загрузке.
upd:
Скорость на ноутбуке (L&TT)
Testing with 2:1 Compression Ratio
4.0 GB written in 45.7 seconds at 87.5 MB/s (Min 87.0 MB/s, Max 89.6 MB/s)
4.0 GB read in 24.1 seconds at 166 MB/s (Min 163 MB/s, Max 166 MB/s)
Скорость на «сервере» (L&TT)
Testing with 2:1 Compression Ratio
4.0 GB written in 25.5 seconds at 157 MB/s (Min 155 MB/s, Max 161 MB/s)
4.0 GB read in 24.1 seconds at 166 MB/s (Min 163 MB/s, Max 166 MB/s)
В итоге контроллер буду продавать.
Правда я так и не понял какая у стримера действительная скорость
Т.е. физически он пишет порядка 80 Mb/s (подтверждается wiki), но по шине может гнать гораздо больше?
|__ Device Performance Test Started on Drive (Ultrium 4-SCSI) (Tape0)
|__ Testing with Random
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 49.3 seconds at 81.2 MB/s (Min 80.7 MB/s, Max 81.3 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 49.3 seconds at 81.1 MB/s (Min 78.4 MB/s, Max 81.3 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
|__ Testing with 4:1 Compression Ratio
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 26.1 seconds at 153 MB/s (Min 152 MB/s, Max 156 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 18.3 seconds at 218 MB/s (Min 217 MB/s, Max 221 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
|__ Testing with Zeros
|__ Opening Tape Drive Tape0
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB written in 23.5 seconds at 171 MB/s (Min 169 MB/s, Max 172 MB/s)
|__ Rewinding Tape
|__ Spinning Up
|__ 4.0 GB read in 17.3 seconds at 231 MB/s (Min 228 MB/s, Max 237 MB/s)
|__ Rewinding Tape
|__ Closing Tape Drive Tape0
upd: Второй кролик — Samsung 840 EVO. Четвёртый тест LSI 3445E проводился на «сервере», т.е. на полной шине.
upd: Еще один облом, все большие=механические hdd в доме не дают больше 98 Mb/s. Этому стримеру нужно раза в два больше минимум. Если писать с аппаратным сжатием, то лента постоянно пускается-останавливается-перематывается. Если с программным то лучше, просто пишет кусками иногда запуская стример. А еще при записи получается не линейное чтение на максимальной скорости, а что-то гораздо более медленное (сейчас цифра мелькает в пределах единиц мегабайт в секунду :(
temp на ssd.
Подводя итоги хочу сказать что 2gusia был прав, не связывайтесь с такими игрушками, если у вас тараканы меньше ладони :)
Я попал на кучу узких мест при смеси старого и ноутбучного железа, считаю что задача была решена только частично.
ps: Стример — серверная железка для записи данных на магнитную ленту. Конкретно эта пишет на один картридж 800 гигабайт (ну или маркетинговые 1,6Тб со сжатием). Следующая — LTO-5 пишет уже 1,5Тб на один картридж, а самая современная — 12,8Тб (но стоит она где-то от 500 тысяч рублей). Магнитофон действительно был прелюдией, по физической сути стример это тот же магнитофон, только сильно более современный. За подробностями — на youtube.
Самые обсуждаемые обзоры
| +59 |
3920
124
|
| +37 |
4849
95
|
| +41 |
2645
76
|
| +28 |
2786
70
|
P.S. И я так понимаю, про катушечник, это прелюдия была))
один вход музычка с телефона на колонки, через другой — архивация на ленту славич4407, 18 см.
хм, интересно, а программное декодирование через платы захвата никто не сделал?
Можно на полигоне призраков написать, там хорошая барахолка.
А лазерник это да, с ним играться не интересно :)
Ps: а шнуры к арвиду есть? Город? Цена?
А SCSI на PCI/PCI-X/PCI-E?
ru.wikipedia.org/wiki/АрВид
а через 10 лет обьемы _винтов_ были на 2 порядка больше.
Стримерные ленты DDS2, имеющие такую же емкость 4Gb, появились на рынке года на 3-4 позже арвида, но стоимость их была несравнима с видеокассетами, а стоимость самого стримера делала стандарт абсолютно недоступным для частника. В районе 2000 у меня был корпоративный стример DDS2 и соответствующие кассеты. И тогда я регулярно вспоминал арвид, с его коррекцией ошибок и, главное, их визуализацией. Особенно когда DDS2 на ровном месте отказывалась восстанавливать данные. И ничто, никакой софт не давал возможности выснить что же там с еще исправной кассетой происходит — нет ли там проблемных мест. В отличие от арвида, где вся эта диагностика давалась в онлайне.
Никто и никогда не позиционировал арвид как корпоративное решение, но вот для конечного пользователя никакой альтернативы не было очень долго, до массового распространения DVD-RW.
в 99 же появились dds-4 несжатого обьема те же 20G. а dds-2 это 93 год, что на год-другой раньше арвидов105x, которые и позволяли записать ~4G. 1020/103x на 4хчасовую кассету писали чуть меньше 3G.
не надо переписывать историю.
forum.ixbt.com/topic.cgi?id=11:3164
И по тем временам этот агрегат стоит 1000 $ был крут. Дык вот, cdrom это 600 мб, помню я оценил арвид когда вышел квест фантасмагория аж на 7 дисках, и хрен ты унесешь его без арвида… Жаль что не пошло в массы, прогресивная и доступаная была штука.
Mikel Lavrentyev 2:5020/35
2:5030/1522
ps: Задолбали с Арвидом.
потом свою сетку открыли 2:5013/1.5
потом в армии опять на областную подключился 2:5010/91.забыл
потом появился инет и физическое расположение стало неважно — вернулись в свою сетку 2:5013/5.1
А на смену арвиду пришел DV формат. НО у него софт был по такой цене, что мы про него только в книжках читали…
Я 2:5020/514.4, но это уже совсем другая история
Всем привет от 2:5029/7
Ох ты ж, сколько лет я нигде не набирал этот адрес, аж вспомнить страшно.
По теме поста — тоже засматриваюсь в сторону LTO, но для себя решил, что брать можно только LTO-5 или новее. Насколько помню, с пятёрки можно работать с файлами на стриммере, а на более ранних версиях всё только в своём хитром архивном формате.
Да и размер LTO-4 как-то маловат для хорошего бекапа.
Из первой десятки из 2:5029/?
Там в живых осталась одна единственная нода, The Power Of Music. Твоя? :)
эх, плюсомета на вас нет! ;)
…
Посмотрел нетлист 97 года, «вспомнить всё»
22 был, а дальше опять не помню…
И Арвид помню, и Синклер…
2:5030/4.2, 2:5030/42
И это всё на robocopy…
Или речь о хитром софте бекапа, идущем со стриммерами? И как этот софт производит бекап «пары десятков промышленных БД» и дальше по тексту? Что там с «автоматизацией и каталогизацией»? Просто на уровне «сюда вставляем кассету, а сюда винт» я особой разницы не вижу.
з.ы. Полагаю, придумать хоть на робокопи, хоть на чёрте лысом можно запросто — но будет наколенное решение.
Есть загрузчики попроще,карусельного типа. Там 8 лент.
А что за библиотека и во сколько в итоге обошлось это удовольствие?
Я так понимаю, у вас LTO-4?
Ну я срочно и купил. привод штатный был LTO3, до кучи внутри оказалось 10 лент.
через 2 года прикупил привод LTO4 за 120$ и 12 лент к нему за 60$, 10 изз них были не распечатаны.
SCSI контроллер был. Шланг 2.5м 10$
Да. Для оперативного бэкапа, который восстановить над по причине потертой БД в обед, лучшее решение — диски. На этой же машине или на сервере бэкапов, это уже у кого какая ситуация.
А когда надо складывать архивы данных, которые требуется держать какое-то количество лет, или копии БД, то ленты идеальный вариант по удобству и цене.
Прокомментируете?
www.zdnet.com/article/amazon-launches-glacier-cloud-storage-hopes-enterprise-will-go-cold-on-tape-use/
У амазона — проприетарное всё, коммерческий аналог — Oracle Storagetek: www.oracle.com/us/products/servers-storage/storage/tape-storage/034341.pdf
www.zdnet.com/article/amazon-launches-glacier-cloud-storage-hopes-enterprise-will-go-cold-on-tape-use/
Стоимость WD Red 3Tb — в розницу в России порядка $100, оптом от WD в промышленных масштабах он будет стоить не дороже $70.
Использование всяких штук типа Raidz1 на 3*3Tb дисках позволит хранить 6Tb зарезервированных данных со стоимостью чисто дисков в $210-300.
За эти 6Tb в год клиенты заплатят $288, а за гарантийный срок дисков (3 года) — $864.
И это ещё не учтена стоимость извлечения (если предположить, что 5% данных платно выкачивается обратно из хранилища, а стоимость выкачивания а 10 раз больше стоимость заливки, то получаем ещё +50% от выручки).
Очевидно, что в этих расчётах не учтено ещё дофига расходов (которые могут быть в 2-3 раза выше стоимости самих дисков) — начиная от программно-аппаратного комплекса, который сможет работать с тысячами или даже десятками тысяч дисков (скорее всего будет аналогичная «библиотека» с хотсвопом sata дисков), заканчивая стоимостью самого ЦОД'а, но скорее основной вывод — с экономической точки зрения glacier вполне может работать и на обычных HDD не уходя в убыточность.
Ну а если Амазон выбрал что-то другое, то означает это только одно — они нашли более экономически выгодное решение ;))
Также они будут явно выгодны для обеспечения сохранности — пока лента не в приводе, ей не страшен ни вирус ни пожар (если она в защищённом месте).
Ну а б/у хардв мне как-то совсем не нравятся. Ненадёжно выглядит. Если только делать 3-4 копии, но это уже совсем перебор.
Хотя руководство бывает разное, кто-то в такой ситуации может денег сильно зажимать. Но тогда из такого места его бежать как можно быстрее — опыта там не получить, а головной боли можно грести вёдрами.
А вот для дома тратить даже 30-60 т.р. на систему резервирования данных готов далеко не каждый.
Тем более, добавлять ещё гео-резерв.
Святая уверенность в супернадежность лент бывает только у тех кто с ними не работал
Вот этим вторым физическим форматом и может быть лента. А если вы помните какое то другое правило 3-2-1 — то скажите какое.
Норму необязательно выполнять буквально — эта проблема решается переводом второй копии в оффлайн.
Что же до данных “для фотографов», то у меня и больше чем 3-2-1 — помимо копий активных проектов 3-2-1, хранятся копии оригиналов со съемок и отдельно xmp.
Когда у меня несколько лет назад из-за сбоя материнки погибло три из 6 хардов в онлайне на 8 Tb в сумме, данные не были потеряны никакие вообще.
1 Размагничивается без перезаписи
2 После долгого лежания может не раскрутиться шпиндель
Я как-то тоже получил 60-80 а потом оказалось, что на i7 6700k есть полная скорость, а на dell xps13 60-80.
Кроме того, не забывайте о черепице. Когда переукладывать не нужно(новый диск), то будет вся сотка. Когда нужно пречтение и переукладка соседней дороги — то легко получить деградацию
2. Я не помню чтобы в 2012 была черепица, во вторых она не влияет на чтение, только на запись.
2. головы давно на рампе, залипнуть не могут.
Не головы. Там со шпинделем проблемы от долгого хранения винта. Даже тут в теме несколько случаев есть. Почитайте. Эффект частый
ps: а еще окисление контактов. винт не годится для длительного хранения информации
pss: вот зачем опять эту тему поднимаем?
затем что не надо фантазировать. произойти разумеется может все что угодно. но все это бывает достаточно редко, что бы делать озвученные выше выводы.
Нет, не смешно. Это не дешёвые ssd. Если я из своего кармана плачу, мне нужна надёжность
Согласен. Лучше сесть и разобраться ;) И понять, что проблема есть
Размагничивание происходит по физическим законам, оно не может быть медленнее или быстрее. Проблема со шпинделем при длительном хранении — частая. Окисление контактов для определенных моделей — частое
дык редкостная флуктация.
Нет, не смешно. Это не дешёвые ssd. Если я из своего кармана плачу, мне нужна надёжность
с кармой что-то не то?
И понять, что проблема есть
описанных — нет, во всяком случае в промышленных масштабах.
Размагничивание происходит по физическим законам,
что, магнитные заряды утекают? ;) облом, их не существует.
Проблема со шпинделем при длительном хранении — частая.
ни разу.
Окисление контактов для определенных моделей — частое
окисленные контакты, которые привели к проблемам — нет.
В 'промышленных' масштабах никто диски долго не использует. И, тем более, не хранит на них информацию долговременно. У них жизненный цикл до замены не большой. Там проявляются другие проблемы при использовании 24/7. Сморите по ссылкам статистику гугла и датацентра. Использовать винт для длительного хранения — чисто домашний прикол
Уже прочитали по ссылке что происходит?)
Ага. Даже в этой ветке
«Konokrad
Стоял терабайтник на полочке. Он его время от времени подкидывал для архива в комп. В один прекрасный день шпиндель заклинило
2gusia
достал с полки 5 двутеров после нескольких лет без движения. Три ожили, два — нет… не крутятся»
Смешно. Диск, выпадающий из системы — не проблема? Как вы думаете, сколько процентов юзеров будет разбирать диск для чистки контактов? Почему для вас не очевидно, что для длительного хранения нужно использовать именно носитель информации без электроники и с большой надежностью? Или очевидно, но спорите ради спора?
www.overclockers.ua/storage/hdd-endurance-mtbf/all/
Тут о можно почитать о стабильности магнитных доменов
kpfu.ru/portal/docs/F2066740618/Latfulina.pdf
На буржуйских форумах я находил оценку потерь от 3 до 30 процентов информации при хранении в течении 10 лет информации на жёстком диске. Причем там зависит от многих условий — размере домена, температуры, скорости изменения температуры, величины начальной намагниченности итд. Если уже храните инфу на жд где-то, то лучше раз в пару лет подключать жд к компу и переписывать бекапы туда-обратно. Так влияние хотя бы одной проблемы минимизируете
потери данных у винтов в ситуации поверхность целая, головы живые, но не читается — крайне редки, если вообще бывают.
лучше — не натягивать сову на глобус.
так-то даже ленточки, и те не размагничиваются, хотя оснований у них для этого больше вплоть до вполне реально существовавшего копир-эффекта. вот осыпаться — могут.
проблемы винтов не в том, что у них что-то якобы размагничивается, а в том что в случае механических проблем «интегрированный носитель» эффективно и быстро в значительной степени может самоуничтожится.
Какой размер домена в ленте и диске?
А с HDD почитайте про проблемы взаимного влияния доменов при повышении плотности записи.
В общем, фанатам что-то доказывать бесполезно.
Покажите носитель, кроме МО, у которого в спецификациях гарантированы data retention 50years?
Флеш? Да даже у мелкоразмерных SLC гарантируют 10лет. Винты? Так там гарантий никто вообще не даёт :)
2,5" тошиба 20гб 2002 год
www.youtube.com/watch?v=sPCprzyN6to
У меня стоит Carbon Copy Cloner, но он на один раздел внутреннего харда копирует SSD только (то есть и основной раздел харда незабэкаплен, и висят они два электронных устройства на одном питании, то есть если электрический хрясь какой, то могут уйти вместе).
Лента это прикольно.
Только вот крайне интересно, удастся ли эту красоту запустить на маке (и sas, и стриммер, и чтоб он распознался, и чтоб на него бэкапилось)…
Но возможно существуют драйвера под этот чип от других контроллеров? А вот про бэкапный софт вообще не скажу, только сейчас узнал что для стримера всё же драйвер нужен :)
HPE StoreEver Tape Drivers for Windows
В 7 и далее ее выпилили. А новая утилита архивирования с лентами уже не работает. Нет там таких устройств. Только коммерческие от симантека или Weeam
Removable Storage Manager (RSM) is no longer included in Windows 7 or in Windows Server 2008 R2. If you want to restore a backup from a tape device, please perform the restore on one of the following operating systems:
Windows XP
Windows Server 2003
Windows Vista
Windows Server 2008
The Windows NT Backup Restore Utility for Windows 7 and for Windows Server 2008 R2 is not intended to remain on computers that are running Windows 7 and Windows Server 2008 R2 indefinitely and should be removed once you have restored backups that were made on Windows XP and on Windows Server 2003.
А для восстановление данных предлагается шаманство в командной строке Powershell
Попробовал, чтобы иметь представление. Но не актуально. Библиотека под линуксами работает отлично.
Еще засада была, что старые SCSI контроллеры в 7 и далее уже не поддерживаются практически. Только самые последне модели. А значит парк приводов SCSI становится совсем недорогим на вторичке.
только большой софт для библиотек под винду?
Но баловство, на самом деле, тут я согласен с DmitriiKKK. Для домашнего использования лучше диски в NAS (всегда и навсегда).
Ленты хороши в узкой нише, которой в домашнем испольовании почти никогда не бывает.
В любом случае спасибо, покопаю на досуге.
… горячо рекомендую
— завести отдельный винт в USB3 кейсе.
— накатить на него образ clonezilla.org/downloads.php
— раз в неделю на ночь — грузить компьютер с этого внешнего диска и делать побайтовый бэкап
TimeMachine в нужный момент вас обломит. На фото — не разовый пример, я получил такой же результат при попытке восстановиться со второй TimeMachine.
Внешних дисков навалом, да и внутренних можно поставить (у меня основная рабочая машинка как раз хакинтош, потому что на момент её заведения новых прошек ещё не представили, а всякие макмини меня не устраивали по производительности, собрал на i9-9900k с 64gb памяти — работает идеально).
Ну и я машину неделями не выключаю и не перезагружаю, так что раз в неделю как-то специально грузиться — не мой вариант.
Потому нужен оффлайн, чтобы шифрователи не добрались( что даст стриммер) ну и вне дома ещё один бэкап…
Но вот физические повреждения и пожары — это да. Но тут просто в другой части дома можно бэкапницу расположить. Ну и стриммер даёт много плюсов, это факт.
А важное всё всё равно по 20 раз забэкаплено на гуглодравах, айклаудах и прочих гитхабах с aws s3. Тут скорее про всякое не особо важное, но то что жалко терять.
Как же мне нравится, какую реакцию на этом сайте моментально вызывает любое моё упоминание о том, что мои жилищные условия чуть лучше чем съёмная однушка в Улан-Удэ! Искренняя, честнейшая ненависть. Обожаю.
вы не поверите. Например, каждый пятый кусок вареза под mac на Пиратской бухте поставляется сегодня с шифровальщиком EvilQuest, который отличненько работает и под Catalinа, и под Big Sur.
Но мне кажется это надо быть особо одарённым чтобы сошлось столько факторов: скачать варез из этой помойки, поставить его и дать все права, и ещё и при этом хранить документы в директории Documents (не думаю что он весь home шифрует, хотя я рабочие документы и в home не храню). Такому человеку можно смело порекомендовать и sudo rm -rf / из терминала выполнить, он вполне может согласиться.
Кстати, если интересует, есть корпус с б/п.
Корпус хочу!
По корпусу в понедельник отпишусь на почту.
А в библиотеке стоит полной высоты. Салазки под два половинных привода очень негуманно стоят.
Кто говорит про б/у винты видимо не попадал в ситуацию, когда винт после простоя вдруг не хочет работать и эти терабайты становятся недоступны.
А с лентами все проще. Даже если привод умер, то полно приводов недорого и прочитать ленту можно на любом этого поколения и два поколения вперед. Т.е. если ленты LTO-3 например, то на приводах LTO-3 и LTO-4 их можно полноценно читать и писать, а на LTO-5 прочитать
У меня внешнй диск 2.5" на 750ГБ внезапно перестал определяться системой. Пробовал и в другом боксе и напрямую в комп на сата кабель. Тишина.
С лентами такого не будет, если не пропадут во всем мре внезапно приводы 3 соседних поколений
И с оптическими дисками тоже, кстати!
Первый свой магнитооптический диск 3.5" на 128МБ, с записанными курсовыми и дипломом в 92 году, прочитал недавно без проблем.
Бывает BER высокий прямо сразу после записи, такие да, дохнут быстрее.
ЗЫ: мой первый CD-R, записанный в 1999м — тоже читается успешно
Хотя 2002го диски Verbatim super-azo читаются неплохо также. У них синеватый слой
А вот один из dvd+r «архив грейд» не сдержал обещаний и потерял 4,37 Гб данных. Уж что я с ним не делал — сначала пытался читать на всех доступных приводах, потом холодильник и чтение…
Дело было в дооблачную эпоху, сейчас проще.
да, пишет не быстро, но что нужно под рукой, но чтобы не занимало место на NAS, как холодные данные, самое то
Fujitsu MCJ3230SS
У меня так с полки самсунг 320Гб 2,5" новый решил уйти в себя.
Но раскручивался. Зацепил его к Acronis TI 9.7.3 в сейф моде и таки вычитал. Очень до-о-олго читались первые сектора на поверхности, но вычитались акронисом, в то время как система сходила сума от long read-ов в начале диска…
У меня еще вот такие винтики живее всех живых и читаются без проблем.
А это как никак начало или середина 80-х
Похожи на RLL-ки
Маркировка Seagate ST-251 MLC-1
Емкость накопителя 43Mb
Скорость вращения шпинделя (об/мин) 3600
Количество дисков 3
Количество головок 6
Автопарковка yes
Cylinders/Heads/Sectors 820/6/17
Интерфейс MFM/ST412
Еще и 225 есть, и тоже работают.
У меня был на 80Мб, но биос Поиск-2 мог только 74Мб адресовать… Был размером в два 5" юнита кирпич…
Вот они правда не работают, а может и работают, но проверить уже не могу, машина умерла полностью.
Маленький такой винчестер.
И да я говорю о том что больший на картинке, маленький справа от него, это обычная саташка или идешка, одним словом первое что нашел для примера.
А теперь по сути.
Прекрасно видит SAS и SATA винчестеры. SAS Загрузочный с Win7 и SATA 1,5Тб для архивов
Копирование с SAS на SATA. Прекрасно работают, только это надо, SATA винчестер на SAS контроллере?
P.S. Это все сделано, чтобы показать, что все прекрасно уживается.
А вот про загрузочный можно подробнее? Карта такая же или это десктопный вариант?
Если такая же то какая модель ноутбука?
Но буду благодарен за полное наименование чипа (а не из программы),
и натравить на него hwinfo32 и посмотреть параметры шины. У меня сейчас
Device Name: Marvell 88SE63xx/64xx SAS Controller
PCI Express
Version: 1.1
Current Link Width: 1x
И вот в этом 1.1 пол собаки то и зарыто…
Желательно инкрементальный.
Желательно с возможностью хранить отдельно.
а что мешало посмотреть, в каком режиме pcie работали железяки по факту (хотя конечно скорость и так намекает, что это 1x1)? каким-нить hwinfo32 например.
PCI Express
Version: 1.1
Maximum Link Width: 4x
Current Link Width: 1x
Maximum Link Speed: 2.5 GT/s
Current Link Speed: 2.5 GT/s
Но судя по всему 1.1 это ограничение Марвела, чипсет 2.0 умеет.
И тогда ограничение в 200 мегабайт выглядит очевидным.
Кто так и не понял — зачем — я излагал в своем обзоре 3 года назад. 99.99% что вам не понадобится. А я вот может и карусельку посмотрю, как камрад Konokrad показывает. Вот только с уже бывшей разъедусь — и буду безумствовать
Ну и по делу — SATA и SAS. IMHO не стоит на одной линии смешивать SATA и SAS устройства (на разных — запросто). Такое смешение — один из известных способов получения проблем.
у меня в хозяйстве, значит, 9260-8i с парой дисков sas 15к. корзина подключена к одному разъёму. значит, не стоит туда пихать sata диски??
По деньгам они выходили дешевле чем sas и их брали что бы тупо забить полку аля файлопомойка или под бекапы, одним словом там где скорость была не важна, а хотелось объема по-больше и без гемороя.
Вот их можно было совмещать в одной полке и соответсвенно на одном порту с полноценными sas.
А вообще по опыту эксплатации LSI контроллеров с SCSI и SSD M2 драйвами на одном контроллере никаких проблем в парке из пары десятков тысяч серверов никогда не было.
MegaRAID SAS 9365-28i
На одном шлейфе 2 sas винта и 2 sata ssd. Ни каких проблем. Аптайм нарушают только ремонтные работы и частые выключения электричества.
Платы scsi контроллера нет, по этому использовать нет возможности, да и объемы у него, сколько? 8 лент по 100Gb?
выкинуть жалко, чемодан без ручки.
Да, не удобно, но скорость ленты 19,05см в секунду давала существенно лучший диапазон записываемых и воспроизводимых частот.
Кассеты с их 4см в секунду на их фоне выглядели нууу…
Ну и безусловно кассетники были значительно менее прихотливы.
Но я с интересом почитаю искренний, хоть и непрофессиональный обзор на нечастую на муське тему.
NAS и RAID — молодежно и всегда есть доступ ко всем файлам из любого места
Не понял только почему стример обязательно серверная железяка? Раньше дома держал, когда инета не было и приходилось все программы и драйвера хранить, а
деревьядиски былимолодымималенькие.Правда это:
1)Дорого. Не реально дорого! Один только рутрекер имеет объем 4,126 PB. Если брать LTO-5 объемом 1,5TB, то это будет 2700 кассет…
2)Сложно. Готовых решений по парсингу всего и вся не существует. Даже что бы заказать готовое решение за деньги, нужно самому в этом разбираться, что бы грамотно написать ТЗ.
3)Долго. Одна только запись подобного объема информации потребует более месяца…
Перебирать топики по циферке айди
rutracker.org/forum/viewtopic.php?t=1518902
Потом скроллить вниз и искать внизу:
Нашли — жмякаем мышей.
Я так недавно сграбил 600тыс торрент-файлов с myanonamouse :)
Ушло три недели неспешной работы automatic mouse and keyboard )))
Попытаюсь попроще. Вот надо, например, фильм скачать. Идете на сайт, ищите торрент файл, забираете себе, с помощью этого файла и трекера ищется куски нужного вам фильма у тех, у кого он есть, и у скачивается у владельцев, ни в коем случае не с сайта.
2)называется nas. Выбираете что вам из всего хлама интересно и собираетесь потихоньку. За вас ваши вкусы никто не реализует, даже за $$$
3) ну не месяц, но ща полгода год вы вполне подберите под себя. Не спеша. А жизнь длинная…
РS и только потом, если это сделаете, вам может понадобиться стример. И то далеко не факт :)
Обойдется вам это примерно в полмиллиона долларов.
Если делать все это на ленте то это только LTO-8 или T10000D и обойдется вам дороже чем диски.
Чебурнет того однозначно стоит.
а резина за десятки лет, просто разваливается в труху или в сопли.
,, Па́ссик (от польского pasek — ремешок) — приводной ремень круглого (симметричного) сечения в ремённом приводе. Как правило, изготавливаются из резины или полимерных материалов. Чаще всего используются в электронных устройствах, в магнитофонах, электрофонах.,,
См википедия или словарь, два ,, с ,, там
— светового месяца? ))) Если ленту крутить со скоростью света ))
(Типа шутка, игра слов)
PS Вот есть же чем людям заняться
Сколько свободного времени
Это и быстрее ;-)
ЗыЖ сколько мы таких стримеров выкинули на работе после списания лет 6 назад, страшно подумать :)
ЗзыЖ пяток кассет от арвида леждат где-то в общей куче на даче.
ЗызЖ 2:5012/47.25
А если DDS, то не жалко. Точнее, жалко только как творение инженерной мысли.
была голова с приводом на 4ГБ и загрузчиком на 6 кассет.
чтение записанного целое мучение. Постоянно повторное чтение, чистка головок. Плюс к этому обнаружил, что ролик прижимной потрескался.
Всегда больше нравилась серпантинная запись еще с формата QIC
А реальные случаи осыпания лент были? Не из разряда гипотетического размагничивания, а реальные случаи. Т.е. до чего нужно довести ленту, что бы с ней начались проблемы?
Что значит полностью убивает?
В дприводах LTO блок головок устроен так, что пишет данные и тут же считывает и поверяет на ошибки. Если есть ошибка записи, производится попытка повторной записи блока.
Проблема быстрее с приводом возникает, чем с лентами.
И да, как он сказал, критическое влияние имеет не только температура но и влажность. Он описывал условия, насколько там всё должно быть стабильно и как это недостижимо даже в условиях средней конторы.
И он сказал, что ленты периодически перечитывают для контроля ошибок. Они есть даже при строгом соблюдении условий. Говорит, через пол года, например, две ленты читались с ошибками, пришлось переписывать.
Ибо «лента посыпется» и «две ленты читались с ошибками» — это очень большая разница, вплоть до того, что посыпавшаяся лента убивает привод, а две ленты, которые читались с ошибками, были из нескольких сотен нормальных и записывались на почти изношенном приводе (т.е. ситуация от ужас-ужас до «иногда бывает» и предусмотрено стандартом). Из твоих слов чётко не следует насколько ужасная ситуация (и ужасная ли вообще) и как к ней относится. Видимо поэтому и минусуют.
Однако, год назад я консультировался со специалистом из местной конторы (имеющей свои HDD датацентры), где его рекомендовали как человека, ранее работавшего в датацентре на ленточных библиотеках.
Консультацию у него я брал в связи с тем, что в небольшой конторе надо было хранить архивы рабочих данных, где-то 0.5ТБ в год, и я думал, что ленты — это хорошее решение.
Вобщем, он мне всё это и рассказал, таким образом, отговорив от затеи.
«Лента посыпалась» — это его профессиональный жаргон, я думаю. Конечно, это не означает, что он её исследовал под микроскопом и обнаружил следы осыпания.
(Я не говорю что он не был прав или пытался вас обмануть! И не утверждаю что лента безгрешна, но хочется более полной информации о причинах и наступивших последствиях, возможно что для дома они окажутся совершенно неважными)
ps: Я например тут обнаружил, что у меня фотографии дублируются на диске в тройном количестве, архив мой, архив жены и сохранялка яндекс.диска. Т.е. если на ленте будут просто появляться одиночные ошибки это вряд ли на что-то повлияет.
Это снимает с меня необходимость лично проверять информацию.
Поэтому ваше заявление воспринимается в приличном обществе несколько вызывающе.
В другом случае мы имеем хранение домашней информации, стоимость которой сугубо эмоциональная, на оборудовании списанном еще много лет назад, при несоблюдении вообще никаких климатических правил (ибо частный дом).
Перечитайте ваш первый комментарий.
Если дословно ему верить, то данные у меня пропадут все (лента посыпется). Подтверждений этому я не нахожу. Что это, как ни ОБС? Вы, не имея всего опыта специалиста, дублируете его советы для совсем другой ситуации. Не надо так.
Вот если бы вы сказали «10 лент с износом 20% лежали дома пять лет, без заморозок, при попытке чтения три из них вообще не прочитались, а еще на двух было по несколько десятков ошибок» — вот это было бы очень дельно! Я бы удвоил количество копий и читал бы их раз в год. Статистика-решение!
думаю, хранение личной эмоциональной информации — ответственное дело.