Хостинг - Обзор: эпицентр русскоязычного хостинга

Здравствуйте, гость ( Вход | Регистрация )

> Правила раздела

Настоящие Правила Раздела являются дополннением к Общим Правилам Конференции. В случаях противоречий отдельных пунктов, действуют Правила Раздела.

Запрещается

  1. Обсуждение хостинговых компаний и качества предоставляемых ими услуг.
  2. Реклама и антиреклама услуг хостинговых компаний.
  3. Навязывание собственных услуг в любом виде.
    Участникам Клуба хостинг-провайдеров разрешено давать ссылки на профайл своей компании в каталоге хостинга только в случае явного запроса услуг потенциальным клиентом. При поиске автором темы уникальных или специфических услуг, не описанных в каталоге хостинга, допускается информирование клиента о предоставлении таковых только персонально в личных сообщениях или с использованием другой контактной информации из профайла автора темы.

> Хранение данных, как сделать недорого, делимся опытом
promobit
сообщение 05.05.2010, 17:56
Сообщение #1





Группа: Старые пользователи
Сообщений: 85
Регистрация: 16.09.2009
Из: Омск
Пользователь №: 10,270


Репутация: 189


Хостинг-провайдер, который стал производителем серверов хранения.

(IMG:http://bitblaze.ru/uploads/fotos/01_IMG_4384.jpg)

Добрый день, мы - региональный хостинг-оператор. Один из ресурсов, расположенный на нашей площадке, начал стремительно развиваться и требовал быстрой отдачи большого объема тяжелого контента. Перед нами была поставлена задача организовать ёмкое, надежное и производительное хранилище данных. Большинство людей, которым нужно хранить данные покупают довольно дорогие, но проверенные решения. Но в нашем случае такой подход был не приемлем. Нам требовалось хранилище за разумные деньги. Изучив рынок, мы поняли - готового решения, нужного нам, на рынке нет.

В октябре 2009 г. мы начали работу над созданием собственной платформы. Примерно в это же время на хабрахабре появился перевод статьи американского хостера, также столкнувшегося с нашей проблемой и нашедшего ей оригинальное решение. Их конструкция собственного сервера хранения нам показалась интересной. Но она не решала ряд наших задач: платформа была не достаточно надежна, не было возможности управлять удаленно, основывалась на устаревших комплектующих, имела размеры не всегда совместимые с использующимися у нас стойками. Эти задачи были поставлены перед нашими инженерами и были ими успешно решены.

(IMG:http://bitblaze.ru/uploads/fotos/screen.jpg)

После того, как все чертежи и теоретические расчеты были готовы, мы начали поиски поставщиков и подрядчиков. Налаживали связи с производителями из “поднебесной”. Пробовали различные производства, оценивали их цены и качество. Но нужно признаться, было сложно работать с российскими подрядчиками. У каждого из них были свои преимущества и недостатки. Кто-то не выдерживал сроки, кто-то не следил за качеством.

(IMG:http://bitblaze.ru/uploads/fotos/IMG_1272.jpg)

После продолжительных поисков нам удалось найти подрядчиков сочетающих хорошую цену с нормальным качеством. Несмотря на это, приходится брать под личный контроль все стадии производства, дабы обеспечить качество и надежность.

(IMG:http://bitblaze.ru/uploads/fotos/P1010589.jpg)


После кропотливой работы, в декабре 2009 был готов первый прототип нашего сервера хранения. Конфигурация получилась следующей: 90Тб (45 дисков SATA по 2Тб) уместились в 4U. Стоимость хранения 1 Тб данных в готовом к работе сервере составляет 4500 рублей! Что гораздо дешевле предложений на рынке!

(IMG:http://bitblaze.ru/uploads/fotos/IMG_1047.jpg)

После перехода с серверов HP Proliant на серверы собственного изготовления мы получили заметный прирост производительности. Благодаря возможности построения отказоустойчивого RAID массива из большого количества недорогих жестких дисков SATA 7200rpm, нам удалось увеличить предельное значение количества операций ввода-вывода в секунду (IOPS), при этом сохранить низкую стоимость и надежность.

(IMG:http://bitblaze.ru/uploads/fotos/03_IMG_4350.jpg)

Использование более дорогих жестких дисков 15000 rpm SAS и значительно более дорогих накопителей SSD не позволяет решить задачу хранения большого объема данных. Для 15000 rpm SAS, на сегодняшний день, максимальный объем накопителя - 600Gb, для SSD - 256Gb. Стоимость таких накопителей в среднем в 10-20 раз выше накопителей использующихся в нашем решении. И увеличение стоимости в данном случае не гарантирует увеличения производительности.

Слепой переход с SATA 7200 rpm на SAS 15000 rpm или SSD не позволяет решить все проблемы с быстродействием. Отдельно взятый 15000rpm диск или SSD накопитель, безусловно, обладает более привлекательными скоростными характеристиками, чем отдельно взятый 7200rpm SATA диск. Но если прирост в скорости линейных чтения/записи и скорости доступа заметен, то в случае нагрузки большим количеством операций ввода-вывода, прирост в максимальном значении IOPS не столь ощутим.

Ощутимый прирост в данной задаче дает наращивание количества накопителей в RAID массиве. И наше решение, обладающее максимальной плотностью хранения данных, идеально подошло для этой задачи.

Ранее для отдачи тяжелого контента на стабильно высокой скорости, суммарной полосой до 1.5 гигабит/с нам приходилось использовать схему с балансировкой нагрузки между 2мя серверами HP Proliant DL185. Сейчас с этим справляется один сервер нашего производства. Судя по показателям iostat - это далеко не предел. Ждем когда спрос на контент, отдаваемый сервером превысит 2 гигабита/с, на этот случай готовим конфигурацию сервера с 4-портовым гигабитным и 10-гигабитным сетевыми адаптерами.

Тем временем, нашим продуктом начали интересоваться партнеры. Заметив, что потребность в хранении больших объемов есть не только у нас, мы решили выпускать серверы под собственным брендом – а почему нет?! Это и послужило началом бренда BitBlaze. Сейчас мы активно работаем над новыми модификациями платформы, ищем новые ниши, привлекаем новых партнеров. Ваши комментарии и идеи могут сыграть значительную роль в разработке!
User is offlineProfile CardPM
Go to the top of the page
+Quote Post

Сообщений в этой теме
promobit   Хранение данных, как сделать недорого   05.05.2010, 17:56
adnull   Backblaze это региональный хостинг-оператор? Или в...   05.05.2010, 20:12
promobit   Backblaze это региональный хостинг-оператор? Или ...   05.05.2010, 20:31
DCUA   Стоимость хранения 1 Тб данных в готовом к работе...   05.05.2010, 20:17
promobit   Это уже с учётом стоимости самих дисков ? Или 405...   05.05.2010, 20:28
eSupport.org.ua   Интересно какой там random seek?   05.05.2010, 20:30
adnull   Как то уж очень поделка коллег похожа на вашу. Но ...   05.05.2010, 21:24
Ivan   Внутри то что воткнули? Мое имхо, по сравнению со...   05.05.2010, 21:26
promobit   Внутри то что воткнули? Мое имхо, по сравнению с...   05.05.2010, 21:51
Ivan   В вашем сравнении серверные платформы и сервера ср...   05.05.2010, 22:05
promobit   В вашем сравнении серверные платформы и сервера с...   05.05.2010, 22:31
Ivan   Гугл, гуглом, но у меня другая статистика Итак, бе...   05.05.2010, 22:46
promobit   Гугл, гуглом, но у меня другая статистика Итак, б...   06.05.2010, 07:41
Admin   Хостинг-провайдер, который стал производителем се...   06.05.2010, 07:27
Ivan   А вы и ССС с РСТ получили? С другой стороны, зач...   06.05.2010, 08:20
promobit   А вы и ССС с РСТ получили? С другой стороны, за...   06.05.2010, 09:25
Ivan   В нашем случае: конфигурация с 2мя системными вин...   06.05.2010, 09:32
promobit   Умеет Вот с такой железкой http://www.nix.ru/aut...   06.05.2010, 12:49
promobit   И все молчат... Как до стоимости доходит эти ...   06.05.2010, 16:45
DCUA   И все молчат... Не смутило, что интерес был то...   06.05.2010, 17:56
different   А чего высчитывать стоимость 1ТВ из 90ТВ без рейда...   06.05.2010, 17:14
Ivan   Ваше решение, крашенное зеленой краской и произво...   06.05.2010, 18:00
ENELIS   Я может упустил технические подробности? RAM, Raid...   06.05.2010, 18:28
promobit   Просто разумно помыслите, такое можно взять тольк...   06.05.2010, 20:12
ENELIS   Не знаю насчет HP. Sun при platinum поддержке обес...   06.05.2010, 22:33
different   То есть, для того же ZFS SUN для меня уже намного...   06.05.2010, 23:05
Admin   Полстраны до сих пор ездит на жигулях и счастливы....   06.05.2010, 22:53
ENELIS   Уважаемый Петр, когда речь идет об 11к долларов ил...   06.05.2010, 23:10
Admin   Мне кажется если у Вас есть 11к долларов лучше по...   06.05.2010, 23:15
ENELIS   Надо узнать что за материнская плата, как соединен...   06.05.2010, 23:18
2 страниц V  1 2 >


Reply to this topicStart new topic
1 чел. читают эту тему (гостей: 1, скрытых пользователей: 0)
Пользователей: 0

 



- Текстовая версия Сейчас: 29.03.2024, 10:18
Яндекс.Метрика