Jump to content
Калькуляторы

Услуга хранения данных в сети Ethernet-провайдера

Материал:

Данная статья посвящена истории запуска услуги хранения данных в сети городского провайдера и освещает один из примеров её технической реализации. Искренне надеемся, что наш опыт окажется полезен коллегам, заинтересованным предложить абонентам новые услуги без значительных затрат.

 

Полный текст

Share this post


Link to post
Share on other sites
Guest Zverushka

статья порадовала.

однако соглашусь с пердыдущим коментатором еть нюансы :+)

вот два места:

1. "4-х жестких дисков по 2 Гб (далее - HDD)."

2. "из 8 Гб суммарного объема жестких дисков доступно 5,5 Тб «полезной» емкости"

:+)

Share this post


Link to post
Share on other sites
Guest Zverushka

за грамматику "звиняйте братцы" :+) но смешно вышло :+))

Share this post


Link to post
Share on other sites

2 Zverushka:

спасибо за отзыв, нюансы поправлены :-)

 

Кстати возникла идея провести тест-драйв системы на сетях других провайдеров, производитель согласился выдать несколько хранилок на тест, с конфигой подмогу.

 

Коллеги, кому интересно - пишите в личку или на мыло.

 

-

 

С уважением,

Захаров Андрей

team@metroethernet.ru

Edited by azakharov

Share this post


Link to post
Share on other sites

Не совсем понятна использованная технология - 5,4 Тб вполне может переварить и обычный рейд HDD всавленный в сервер. Понятно что если планируется 100-300 Тб, тогда может и применимо

Share this post


Link to post
Share on other sites

А надежность хранения какая?

Куда же делать резервное хранение?

Ведь если берете деньги за услугу и вдруг данные пропадут - кто будет отвечать и как решаются претензии со стороны пользователя?

Share this post


Link to post
Share on other sites

2 roling - спасибо за комментарий

 

цитата из статьи:

"Кто-то может сказать, что задача решается установкой сервера на Linux/xBSD. Однако, желая более широкого функционала «из коробки» и минимизации времени на конструирование велосипеда, был проведен поиск по готовым программно-аппаратным решениям"

 

В результате при сопоставимой с сервером цене было существенно сэкономлено время на пуско-наладку системы.

Поддержка софта осуществляется производителем и неожиданный уход сотрудника, который настраивал сервис не приведет к его медленной и мучительной смерти.

 

Касаемо большей емкости есть модель ReadyNAS 4200 с 12 дисками и 10G портом - соответственно 20,5 Тб полезного пространства в RAID-массиве.

По мере подключения услуги абонентами ставится рядом еще одна система хранения, таким образом наращивается емкость и вкладываются финансы по мере спроса от абонентов.

Вложиться в 100-300 Тб систему и ждать N лет, когда она окупится может позволить себе скорее крупный провайдер и технологии там другого класса, чем рассматриваемая в статье.

 

В данном случае технология уместна для провайдера 1-10 тыс.абонентов масштаба района или небольшого города.

 

--

С уважением,

Андрей Захаров

team@metroethernet.ru

Share this post


Link to post
Share on other sites

Андрей, рассматривали варианты сделать услугу на базе обычного сервера с установкой собственного дистрибутива?

Я сейчас как раз думаю над такой системой, решаю брать готовое решение или самодельное.

 

 

Вот такая модель не рассматривалась? Она дешевле в полтора раза и не стоечная.

 

http://www.netgear.ru/?page=products/stora...s/rnd4000/index

 

Апдейт

 

По ссылке ReadyNAS NV+ начального уровня, стоимость примерно 12 т.р.

Есть еще ReadyNAS NVX продвинутый, стоимость 20 т.р.

Ваш ReadyNAS 2100 это аналог NVX в юнитовом корпусе стоит 30 т.р.

 

 

Для сравнения собрать аналог NVX и 2100 можно на базе платы Supermicro под Atom 525 c 6 SATA разьемами и двумя интеловскими гигабитами. Если поместить все в корпус Inwin microATX, то можно подключить до 6 SATA дисков.

 

Стоимость получается 7,5 + 2 = 9,5 т.р. за более производительный аналог.

Разница в 2 или 3 раза соответственно.

 

Расплачиваться за это придется гемороем с настройками ПО.

 

 

 

Share this post


Link to post
Share on other sites
А надежность хранения какая?

Куда же делать резервное хранение?

Ведь если берете деньги за услугу и вдруг данные пропадут - кто будет отвечать и как решаются претензии со стороны пользователя?

Ответственность за сохранность данных несет провайдер, претензий пока не поступало, хотя винты отказывали.

В целом вопрос с надежностью и отказоустойчивостью системы хранения по сути аналогичен оборудованию сети передачи данных – каждый провайдер решает сам какой уровень надежности он обеспечивает и какие риски при этом несет.

Считаю, что полностью исключить все риски все равно не получится, поэтому давать 100% гарантию было бы нечестно, гораздо лучше сообщить абонентам за счет каких средств услуга обеспечит бОльшую надежность, чем, например, внешний винт или домашний самосборный NAS.

 

В нашем случае отказоустойчивость обеспечивается RAID-массивом, используем X-RAID2. Также в ЗИП лежит жесткий диск для оперативной замены. На шасси системы хранения действует 5-летняя гарантия производителя.

 

Резервное хранение - кому как нравится, на внешний сервер или ленточный накопитель. Хотя чаще всего абоненты сами используют сетевой ресурс как место для бэкапа и хранят на нем копии своих файлов, поэтому делать ли резервное копирование вопрос открытый.

 

Традиционно в сфере провайдинга как только появляются гарантии (SLA и прочее) тут же ценник прирастает в несколько раз и это явно не сегмент домашних пользователей с коллекцией сериалов, которые при худшем раскладе можно заново скачать из Интернета.

 

--

С уважением,

Андрей Захаров

team@metroethernet.ru

 

Share this post


Link to post
Share on other sites
Для сравнения собрать аналог NVX и 2100 можно на базе платы Supermicro под Atom 525 c 6 SATA разьемами и двумя интеловскими гигабитами. Если поместить все в корпус Inwin microATX, то можно подключить до 6 SATA дисков.

 

Стоимость получается 7,5 + 2 = 9,5 т.р. за более производительный аналог.

Разница в 2 или 3 раза соответственно.

 

Расплачиваться за это придется гемороем с настройками ПО.

Корзины под хотсвап забыл. Хотя они не влезут в микроАТХ. Да и вообще, платы с атомом с райдом бывают? Без райда ей богу не смешно, на файлопомойках саташные диски мрут только в путь.

Share this post


Link to post
Share on other sites
Андрей, рассматривали варианты сделать услугу на базе обычного сервера с установкой собственного дистрибутива?

Я сейчас как раз думаю над такой системой, решаю брать готовое решение или самодельное.

 

Вот такая модель не рассматривалась? Она дешевле в полтора раза и не стоечная.

Sonne, приветствую старожилов!

 

Несколько лет назад, когда сам работал технарем в провайдере, была попытка сделать услугу на базе сервера, мучения длились 3 месяца, кончилось тем, что подняли FTP-сервер и на этом ограничились. Слишком трудозатратна собственная доработка, отладка и поддержка, пусть лучше этим занимаются специально обученные компании, имеющие на то ресурсы. Поэтому однозначно рекомендую готовое, но такое готовое, чтобы была возможна самостоятельная кастомизация мелкозернистым напильничком, как с ReadyNAS.

 

Линейку NVX рассматривали - там немного обрезанная прошивка, производительность пониже, нет второго Ethernet-порта и главное - это потребительский (consumer) сегмент. У устройств потребительского сегмента другой жизненный цикл и отличается подход к сервисному обслуживанию, который через год-два может выйти End-of-Life'ом.

 

Возможно для совсем ограниченного бюджета и микросети абонентов 100-500 решение на NVX имеет место быть.

Хотя у меня лично предубеждение к нестоечному железу, слащавое оно какое-то :)

 

--

С уважением,

Андрей Захаров

team@metroethernet.ru

Share this post


Link to post
Share on other sites

А как заставить абонента это покупать?

Вот в чем вопрос.

Вот тариф 300 руб. за 500 Гб

Вы действительно думаете что это актуально?

Смотрим по прайсу: жесткий диск на 1ТБ стоит меньше 2000 руб, но зато он будет у меня дома всегда и без проблем

неужели вы думаете что я буду платить провайдеру 600 руб ежемесячно за тот же обьем и получать проблемы в виде настройки всего этого барахла, проблем с сетью и прочее. Как бы проще купить все же жесткий диск себе.

Честное слово проще вообще ничего не хранить на домашнем компе, а оперативно скачать его их торрента и смотреть пока он скачивается, или вообще смотреть онлайн, или скачать на хорошем тарифе за полчаса.

В общем сомнительное предложение

Далее в статье совершенно не учитываются стоимость электричества и обслуживания серверов, работу по привлечению этих самых 34 абонентов(а на практике возьмут услугу 5-10 человек и окупаться она будет очень долго).

 

Share this post


Link to post
Share on other sites
Андрей, рассматривали варианты сделать услугу на базе обычного сервера с установкой собственного дистрибутива?

Я сейчас как раз думаю над такой системой, решаю брать готовое решение или самодельное.

 

Вот такая модель не рассматривалась? Она дешевле в полтора раза и не стоечная.

Sonne, приветствую старожилов!

 

Несколько лет назад, когда сам работал технарем в провайдере, была попытка сделать услугу на базе сервера, мучения длились 3 месяца, кончилось тем, что подняли FTP-сервер и на этом ограничились. Слишком трудозатратна собственная доработка, отладка и поддержка, пусть лучше этим занимаются специально обученные компании, имеющие на то ресурсы. Поэтому однозначно рекомендую готовое, но такое готовое, чтобы была возможна самостоятельная кастомизация мелкозернистым напильничком, как с ReadyNAS.

 

Линейку NVX рассматривали - там немного обрезанная прошивка, производительность пониже, нет второго Ethernet-порта и главное - это потребительский (consumer) сегмент. У устройств потребительского сегмента другой жизненный цикл и отличается подход к сервисному обслуживанию, который через год-два может выйти End-of-Life'ом.

 

Возможно для совсем ограниченного бюджета и микросети абонентов 100-500 решение на NVX имеет место быть.

Хотя у меня лично предубеждение к нестоечному железу, слащавое оно какое-то :)

 

--

С уважением,

Андрей Захаров

team@metroethernet.ru

 

Спасибо за ответ!

 

Каков цикл и позиционирование продукта для меня не важно, считаем что SOHO сегмент на 100 абонентов, где единственный ключевой параметр - цена. Интересен более вот этот момент: "самостоятельная кастомизация мелкозернистым напильничком, как с ReadyNAS."

 

Хотелось бы навесить к серверу несколько фич типа DC++ хаб и и каой нибудь локальный web-сервер с форумом. С тем что хочется специальную железку я полностью согласен, вопрос только в том NV+ или NVX дает напильничек в руки или там принципиально иная прошивка? Если ответ на этот вопрос вызывает трудности не могли бы скинуть контакты замечательного менеджера Netgear в личку, которого можно было бы попытать подробнее?

Share this post


Link to post
Share on other sites

Опуская экономику, могу сказать, что только совсем непуганные могут ставить китайский RAID5 из домашних дисков на платный сервис.

У нас давеча три WD20EADS одновременно в одном тазике улетели, если бы не резервирование тазиков целиком, не знаю что было бы.

 

Хотелось бы навесить к серверу несколько фич типа DC++ хаб и и каой нибудь локальный web-сервер с форумом.

Это лучше в другом месте держать, httpd + SQL убивается производительность NAS насмерть.

Share this post


Link to post
Share on other sites

Еще дополнение

 

Вот ссылка на официальную таблицу сравнение NASов

http://www.netgear.ru/upload/comparison/re..._comparison.pdf

 

Из нее следует что NVX - полный аналог 2100, только в настольном исполнении, а вот NV+ действительно отличается мощностью, скоростью и фичами.

Share this post


Link to post
Share on other sites
А как заставить абонента это покупать?

Вот в чем вопрос.

Прекрасный вопрос, спасибо что затронули тему про продажи.

Пример организации процесса продаж:

1. Выделить целевые аудитории – а) киноманы, б) пользователи нетбуков, которым нужна максимальная мобильность в) те, кто не хочет хранить определенный видеоконтент на локальном диске или хочет его запаролить ;-)

2. Донести предложение услуги в каждую целевую аудиторию с указанием конкретных преимуществ – рассылка по email, телемаркетинг, форум, информация в личном кабиненте

3. Заинтересовавшимся предложить подписку с демо-периодом 1 месяц.

4. Те абоненты, кому услуга окажется действительно полезной оставят подписку. Заставлять покупать никого не надо.

В простейшем случае – выбираем из биллинга статистику по абонентам, которые больше всего качают и предлагаем им месяц бесплатной подписки сообщением через личный кабинет. Стоимость такого продвижения 0 рублей.

 

Вот тариф 300 руб. за 500 Гб

Вы действительно думаете что это актуально?

Смотрим по прайсу: жесткий диск на 1ТБ стоит меньше 2000 руб, но зато он будет у меня дома всегда и без проблем

300 руб. имхо дороговато, поэтому в расчете окупаемости на него приходится 2 абонента или 5% от пользователей услуги.

100 руб. вполне приемлемо, и в момент когда понадобится большой объем абоненту не нужно идти в магазин за жестким диском или ждать заказа через Интернет, не нужно путаться в проводах, не нужно тратить сразу значительную для сумму (напомню, что во многих городах средняя зарплата 10-15 тыс.руб и покупка жесткого займет пятую часть семейного бюджета).

Просто активировать подписку, а если это временная надобность, от нее можно также и отказаться.

 

Честное слово проще вообще ничего не хранить на домашнем компе, а оперативно скачать его их торрента и смотреть пока он скачивается, или вообще смотреть онлайн, или скачать на хорошем тарифе за полчаса.
Сам так и делаю :) однако люди разные и многие, особенно не из ИТ-сферы предпочитают хранить скачанное.

Кстати для информации - в 2009 году объем продаж домашних хранилок у одного из производителей вырос более чем на 70%.

Этот факт подтверждает, что спрос на домашнее хранение данных растет, соответственно услуга удовлетворяет этот спрос, только используя арендную модель.

 

Далее в статье совершенно не учитываются стоимость электричества и обслуживания серверов, работу по привлечению этих самых 34 абонентов(а на практике возьмут услугу 5-10 человек и окупаться она будет очень долго).
Потребление электричества – шасси+4 диска = 80 Вт по тех.паспорту, в месяц порядка 60 КВатт*ч = 100-300 руб.в месяц в зависимости от региона и тарифов. Подобные косты относятся к эксплуатации центрального узла связи и разделять их отдельно на маршрутизатор, отдельно на биллинг, отдельно на NAS было бы как-то странно. Расходы на продвижение – универсальных способов нет и каждый провайдер определяет для своих абонентов сам, можно партизанить, можно дать рекламу на 1м канале в прайм-тайм – никто не запрещает :-)

 

Negator, к вам деловое предложение – если являетесь провайдером с базой 1-10 тыс.абонентов, сомневаетесь, что услуга будет востребована и не хотите рисковать - мы готовы предоставить преднастроенное оборудование на месяц для проведения тест-драйва. Не будет спроса – вернете, будет спрос – рассмотрите приобретение.

Share this post


Link to post
Share on other sites
Хотелось бы навесить к серверу несколько фич типа DC++ хаб и и каой нибудь локальный web-сервер с форумом. С тем что хочется специальную железку я полностью согласен, вопрос только в том NV+ или NVX дает напильничек в руки или там принципиально иная прошивка? Если ответ на этот вопрос вызывает трудности не могли бы скинуть контакты замечательного менеджера Netgear в личку, которого можно было бы попытать подробнее?

Навесить реально – есть дополнение к прошивке, открывающее ssh-доступ. http://www.readynas.com/?p=4203

Внутрь ставится все что угодно из deb-пакета. Чтобы не затрагивать производительность RAID-массива операциями работы с SQL-базой можно разместить директорию базы на внешнем USB-диске.

Контакты скинул в личку.

Share this post


Link to post
Share on other sites
Опуская экономику, могу сказать, что только совсем непуганные могут ставить китайский RAID5 из домашних дисков на платный сервис.

У нас давеча три WD20EADS одновременно в одном тазике улетели, если бы не резервирование тазиков целиком, не знаю что было бы.

К сожалению или счастью уже пуганые, как раз на домашних дисках WD Green и обожглись, соблазнившись ценой, после чего перешли на диски Seagate из официального списка совместимости. http://www.readynas.com/?page_id=82

Кстати если установленные диски в список не входят, официальный суппорт даже тикет не открывает.

 

--

С уважением,

Андрей Захаров

team@metroethernet.ru

Share this post


Link to post
Share on other sites

Очень интересно что Вы скажете остальным абонентам, когда из-за какого-то конкретного человека Ваш чудо-NAS изымут сотрудники правоохранительных органов как вещественное доказательство.

Share this post


Link to post
Share on other sites
Прекрасный вопрос, спасибо что затронули тему про продажи.

Пример организации процесса продаж:

1. Выделить целевые аудитории – а) киноманы, б) пользователи нетбуков, которым нужна максимальная мобильность в) те, кто не хочет хранить определенный видеоконтент на локальном диске или хочет его запаролить ;-)

2. Донести предложение услуги в каждую целевую аудиторию с указанием конкретных преимуществ – рассылка по email, телемаркетинг, форум, информация в личном кабиненте

3. Заинтересовавшимся предложить подписку с демо-периодом 1 месяц.

4. Те абоненты, кому услуга окажется действительно полезной оставят подписку. Заставлять покупать никого не надо.

В простейшем случае – выбираем из биллинга статистику по абонентам, которые больше всего качают и предлагаем им месяц бесплатной подписки сообщением через личный кабинет. Стоимость такого продвижения 0 рублей.

Расходы на продвижение – универсальных способов нет и каждый провайдер определяет для своих абонентов сам, можно партизанить, можно дать рекламу на 1м канале в прайм-тайм – никто не запрещает :-)

Ну собственно тут ничего нового не открыли, это все понятно. Но все вышеперчисленное стоит денег. Выявление аудитории, телемаркетинг и прочее стоит денег. Девочки обзванивающие абонентов, реклама и прочее прочее прочее.

Причем денег сравнимых с ценой самого решения. Новости в личном кабинете мало кто читает.

Продать такую услугу в Московском регионе сложно. Где нибудь на дальнем востоке, где интернет медленный а зарплаты маленькие -да возможно. В москве проще и жесткий диск купить дополнительный.

Да и 100-500 Гб это ни о чем в век двухтерабайтных хардов.

Вот если бы эта услуга смогла бы заменить NAS -тогда да - это проще и удобнее. Но цена за 2-4Тб по приведенным тарифам заставляет все же купить NAS. А вот скажем рублей за 200 в мес было бы интересно вместо покупки NAS-a хранить все у провайдера. Таким образом потенциальных клиентов этой услуги становится не так уж и много

 

В итоге смысл в том что затраты на привлечение абонентов на эту услугу вполне может быть больше чем стоимость железки.

 

Negator, к вам деловое предложение – если являетесь провайдером с базой 1-10 тыс.абонентов, сомневаетесь, что услуга будет востребована и не хотите рисковать - мы готовы предоставить преднастроенное оборудование на месяц для проведения тест-драйва. Не будет спроса – вернете, будет спрос – рассмотрите приобретение.
Являюсь. Если вы найдете хотя бы 34 желающих из ~9000 абонентов готовых постоянно пользоваться услугой -купим за полторы цены

 

 

 

 

 

Share this post


Link to post
Share on other sites
Очень интересно что Вы скажете остальным абонентам, когда из-за какого-то конкретного человека Ваш чудо-NAS изымут сотрудники правоохранительных органов как вещественное доказательство.

хм, у вас был подобный негативный опыт изъятия оборудования?

поделитесь информацией, можно в личку, т.к. ранее сотрудничали с местными органами и обходилось без радикальных мер.

Share this post


Link to post
Share on other sites

Не прошло и полгода...

Работает с забытого года. Только немного другое назначение, отказоустойчивое хранение небольших объёмов данных. Поэтому объём массивов небольшой. Зато регулярное резервирование информации на накопители, находящиеся физически в другом месте (более 20 километров по прямой). Всё удовольствие живёт под Novell на протоколе IPX (по определённым соображениям).

Используется пользователями для хранения важных данных (пример - докторская диссертация в процессе написания, которую нельзя потерять при пожаре в квартире, когда и резервные носители дохнут).

Share this post


Link to post
Share on other sites
Очень интересно что Вы скажете остальным абонентам, когда из-за какого-то конкретного человека Ваш чудо-NAS изымут сотрудники правоохранительных органов как вещественное доказательство.
Так способы противодействия известны:

информация шифруется серьёзным ключом

серверы зеркалируются

серверы находятся в совершенно разных помещениях

помещения зарегистрированы на левые организации

резервные накопители также в совершенно левых помещениях

каналы связи к основным серверам заходят по радиоканалу из левых помещений

каналы связи тоже зарегены на левые фирмы

ну и ещё некоторое количество методов...

Share this post


Link to post
Share on other sites

Используется пользователями для хранения важных данных (пример - докторская диссертация в процессе написания, которую нельзя потерять при пожаре в квартире, когда и резервные носители дохнут).

В криптоконтейнер и на пару флешек, одну с собой, одну на работе. По крайней мере доступность повыше будет, чем через IPX.

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
Sign in to follow this