В последнее время, кого не послушай, все свои компьютерные кластеры строят на сommodity hardware. Кто ещё не построил - тот собирается. Вот что Yahoo!, примерно, понимает под этим термином:
Processor - 2 quad-core Intel Xeon 2.5GHz CPUs
Memory - 8 GB ECC RAM
Storage - 4×1 TB SATA disks
Network - Gigabit Ethernet
Это конфигурация Hadoop-узла в 4000-ном кластере на сентябрь 2008 года. Характеристики этого самого “сommodity hardware” конечно меняются со временем, но картина становится более-менее понятной.
Что бы примерно прикинуть сколько это стоит - вот голые факты - мы в Viigo за один такой хост платим $1132 USD в месяц. Fully managed hosting @ RackSpace. Free incoming traffic. Годовой контракт. Конечно, если бы мы эти хосты там арендовали сотнями, то цена пошла бы вниз.
“Commodity” не означает “самое дешевое”, дешевые хосты зачастую собраны из самых дешевых комплектующих, которые выходят из строя чаще чем более дорогие (но всё равно “сommodity” класса) детали. Если кластер состоит из десятков, сотен или тысяч машин, дешевые комплектующие выходят боком. Более частые поломки - выше затраты на обслуживание. С другой стороны, машины класса “база данных”, то же не самый лучший выбор - отношение цена/производительность у них так себе. И даже тот факт, что их надо будет меньше что бы построить кластер с заданной производительностью, компенсируется тем, что выход из строя одного такого хоста окажет больший эффект на всю систему в целом.
July 7th, 2009 at 2:09 am
Никогда не интересовался managed серверами, но что-то мне кажется не может эта “услуга” стоить 50-70% цены за аренду.
Т.к. за эти деньги можно взять 2-3 таких сервера и нанять админа.
July 7th, 2009 at 2:10 am
А где вы арендуете такие сервера ?
July 7th, 2009 at 8:42 am
2Gothy
managed это и есть аренда. Только без геморроя с дохлыми деталями. На самом деле это хорошая цена, потому что трафик включён и потому что managed. В длинной перспективе так выходит дешевле.
2kviring.com
там же написанно - RackSpace
July 7th, 2009 at 1:35 pm
Игорь, managed это разновидность аренды, когда всё _базовое_ администрирование осуществляется самим хостером. обычные рут-сервера это тоже аренда, только гораздо более гибкая, хотя и геморойная если нет администратора.
с такими серверами обычно дают столько трафика, сколько хватит для 99% нужд.
в общем дешевле выйти имхо никак не может, если есть в штате администратор.
хостеры проверенные на моём опыте уже можно сказать десятками серверов
http://www.1und1.info/xml/order/ServerPremium
iweb.com - собрал аналогичный приведенному Вами сервер с 2ТБ трафика в месяц, получилось $624.00 в месяц.
ещё один хостер, которого мне хватили, но сам не пробовал - serverloft.
http://www.serverloft.com/dedizierte-server/server-details.php?products=5 по всем параметрам, кроме объёма винчестеров(которые, кстати, там сказевые) более сильный сервер, 15Тб трафика - стоит US$249
Так что цена > $1132 в месяц за такой сервер просто безумная.
July 7th, 2009 at 8:46 pm
я заметил две странности в ваших рассуждениях
- вы думаете, что содержать администраторов дешевле чем платить хостеру. Это не всегда так. годовая з.п. будет в районе $70ооо на человека не учитывая бенефитов.
и второе
- вы считаете, что 15Тб это много.
July 8th, 2009 at 1:11 pm
1) я просто почему-то подумал, что администратор будет из xUSSR и тогда годовая ЗП в 18-20 тыс. будет достаточна. если же админ должен быть в USA, то возможно цифры и иные
2) 15Тб это чуть меньше гигабайта в минуту. имхо этого вполне достаточно на один сервер для сервиса типа Viigo. опять же, может я не прав.
July 8th, 2009 at 1:22 pm
15Tb/mo = 364Mb/min
это на весь кластер конечно, не на один сервер.
Трафик это вообще такой фокус! Я не могу вынести часть кластера на EC2 потому что внутрикластерный траффик начинает стоит $12ооо в месяц (AWS< ->RS)
Amazon вообще молодцы - заманивают дешевыми хостами - а потом собирают за траффик.
July 8th, 2009 at 1:55 pm
точно, на калькуляторе посчитал, Вы правы
но всё же, 15 Тб дают на сервер
на EC2 траффикодинамичные проекты точно не надо выносить, особенно если не целиком весь кластер и не в одну зону
амазон это отдельное царство со своими фишками, на траффике они отбивают именно возможность приобщиться ко всему этому великолепию
ну и к тому же их ephemeral storage у инстансов это просто какое-то издевательство
btw, если уж речь про клауды зашла, то мне пока больше всего нравится тот же рекспейсовый Mosso - http://www.rackspacecloud.com/cloud_hosting_products/servers/pricing при небольших объёмах трафика это очень хорошие цены. если я не путаю они купили технологию и спецов у http://www.slicehost.com/ и теперь продают дешевле сервера, но дерут за траффик покруче всяких амазонов
July 9th, 2009 at 1:43 pm
насчёт Mosso, я говорил на днях с их представителем, всё таки у нас основной кластер именно там, дай думаю спрошу не сделают ли скидку на трафик RS < -> Mosso
они говорят - нет, не сделаем.
сказали, что это у них в TODO, но когда будет - затруднились ответить.