Сетевое хранилище для исследовательской группы, 10-100 ТБ
Это связано с этим постом:
Масштабируемое (> 24 ТБ) NAS для исследовательского отдела
но, возможно, немного более общий.
Фон:
Наша исследовательская лаборатория насчитывает около 10 человек, которые проводят множество экспериментов, которые включают фотографирование в одной из нескольких лабораторных установок и последующий анализ на одном из нескольких лабораторных компьютеров. Каждый эксперимент может дать 2 или 3 ГБ данных, и мы генерируем данные со скоростью около 10 ТБ / год.
Прямо сейчас мы храним данные на 6-разрядном сетевом накопителе readynas pro, но даже с накопителем на 2 ТБ это дает нам только 10 ТБ памяти. Кроме того, сейчас мы вообще не копируем. Наш краткосрочный план резервного копирования состоит в том, чтобы получить вторую readynas, поместить ее в другое здание и отразить один диск на другой. Очевидно, это несколько не идеально.
Наши варианты:
1) Мы можем заплатить нашему университету $400/ ТБ / год за "резервное копирование" онлайн-хранилища. Мы доверяем им больше, чем нам, но не очень.
2) Мы можем продолжать покупать небольшие NAS и зеркалировать их между офисами. Одно ограничение, хотя и глупое, это то, что у нас нет неограниченного количества разъемов Ethernet.
3) Мы можем попытаться реализовать наше собственное решение для хранения данных, поэтому я и спрашиваю вас, ребята.
Следует учитывать, что мы очень преходящее население, и никто из нас не является экспертом по сетевому администрированию. Я, вероятно, буду здесь только еще один год или около того, и аспиранты, которые здесь дольше всего, имеют шкалу времени 5-6 лет. Так что ничто не может требовать экспертного контроля.
Наши скорости передачи данных низки - большая часть данных будет просто храниться на сервере, ожидая, что кто-то просмотрит его один или два раза, поэтому нам не нужна действительно высокоскоростная система.
Учитывая эти ограничения, кто-то может порекомендовать довольно недорогую, масштабируемую, более или менее готовую к использованию систему хранения общих данных с резервным копированием в отдельном физическом месте. Существует ли такая вещь, или мы должны просто заплатить университету, чтобы он позаботился об этом для нас?
Как второй вопрос, наш профессор только получил срок и составляет бюджет. Здесь цель состоит в том, чтобы попросить как можно больше и надеяться, что вы получите часть этого. Так что тот же вопрос, за вычетом низкой стоимости. Без бюджетных ограничений, можете ли вы порекомендовать масштабируемую систему резервного копирования под ключ.
Спасибо
3 ответа
На http://www.backblaze.com/petabytes-on-a-budget-how-to-build-cheap-cloud-storage.html есть отличная и очень подробная статья о создании "стручков" NAS. cheap-cloud-storage.html. Они описывают это как "67 ТБ за 7 867 долларов", что очень хорошо. Они запускают JFS поверх томов RAID-6 под Debian; Затем они предлагают это через https, но ничто не мешает вам разместить (например, SaMBa) вместо этого (вы не говорите, каков ваш текущий протокол удаленного доступа к файлам).
Отказ от ответственности: я ничего не знаю об этих людях, кроме того, что я прочитал, и я не пытался создать один из них сам. Тем не менее, если они не подделывают фотографии, они действительно создают и внедряют кучу этих вещей, и они еще не ушли из бизнеса.
Изменить: мне потребовалось немного больше времени, чтобы найти конкретный список поставщиков (подробный список деталей находится в оригинальной ссылке выше), но он находится на http://blog.backblaze.com/2009/10/07/backblaze-storage-pod-vendors-tips-and-tricks/. Я действительно восхищаюсь тем, как эти ребята открыли свою детальную инфраструктуру для повторного использования; но как говорится в оригинальной публикации:
Наконец, мы благодарим тысячи инженеров, которые потратили миллионы часов на то, чтобы предоставить нам недорогие или полностью бесплатные компоненты модуля, такие как процессор Intel, Gigabit Ethernet, невероятно плотные жесткие диски, Linux, Tomcat, JFS и т. Д. Мы понимаем, что стоим на плечах гигантов.
Я не знаю об их продукте (у меня есть свой накопитель на магнитной ленте для резервного копирования), но я одобряю их смирение.
Я думаю, что это один из случаев, когда вы должны отдать его на аутсорсинг. Позвольте отделу ИТ университета управлять хранением, они позаботятся о резервном копировании и обслуживании решения для хранения. Это будет лучше в долгосрочной перспективе.
Спросите своих университетских людей, есть ли меньший уровень хранения. Возможно что-то, что не поддерживается или копируется только еженедельно / ежемесячно. Если есть более дешевый вариант "без резервного копирования", купите в 2-3 раза больше хранилища и напишите несколько сценариев для полуавтоматического создания резервных копий. Резервное копирование, особенно резервное копирование на ленту, может составлять две трети стоимости сетевого хранилища.
Также спросите, предлагают ли они "хранение на линии".