Екскурсія в дата-центр MSM.ru, Комп’ютери, огляди

Новий дата-центр

Дата-центр на ВДНГ – це експериментальний проект, спроектований і зроблений цілком у стінах компанії МСМ. Він невеликий, всього 40 стійок, має рівень TIER 2 +. У Центрі Обробки Даних (ЦОД) рівня Tier 2 (з надлишковими компонентами) передбачається резервування компонентів інженерних систем, але тільки один шлях розподілу електроживлення та охолодження. Такий ЦОД схильний порушень функціонування від різного роду дій і подій менше, ніж Tier 1, але технічне обслуговування та ремонт системи розподілу електроживлення та охолодження зажадає зупинки всього встановленого в ньому обладнання.

Дата-центр МСМ має повністю резервувати харчування та охолодження, але, оскільки, стоїть не в окремо побудованому під ДЦ будівлі не може вважатися TIER 3.

Експеримент з датацентрів на ВДНГ проводиться для того, щоб навчитися, як правильно будувати дата-центри. І зараз МСМ будує новий, найбільший в Росії, дата-центр на 2000 стійок. Це більше, ніж на М9 і у стак-нету. Новий дата центр буде мати рівень TIER 4.

В ЦОД рівня TIER 4 (відмовостійкий) для розподілу електроживлення та охолодження передбачено кілька маршрутів, з них не менше двох завжди активні. Для цього інженерні системи повинні володіти подвійним рівнем надмірності за принципом «система + система». Рівень TIER 4 дозволяє здійснювати будь-яку планову діяльність без порушення нормального функціонування критично важливою навантаження. Відмовостійкість інфраструктури ЦОД достатня для того, щоб витримати, принаймні, один позаплановий відмову (або подія) найгіршого властивості без наслідків для критично важливою навантаження.

За розрахунками Uptime Institute, доступність ЦОД рівня Tier 4 становить 99,995%, що відповідає 26 хв простою в рік. Тривалість доступності та простою ЦОД рівня Tier 2 і 3 становить 99,75% і 99,98%, що відповідає 21,9 і 1,75 год простою в рік.

У датацентрі MSM всього 2 ряду стійок. Внизу з щілин йде холодне повітря з хорошим напором, щоб доходити до серверів на самому верху стійок. Він відбивається від стелі, в результаті чого всередині коридору дуже холодно і створюється надлишковий тиск, щоб уникнути попадання пилу в холодний коридор, а холодне повітря рівномірно досягав всіх серверів в стійках. Гаряче повітря забирається з так званих гарячих коридорів які розташовані по краях проходить через фільтри, щоб вона не потрапляла в сервера.

Комутатор, який роздає інтернет на всі стійки. Подібних комутаторів в Дата-центрі МСМ два вони розташовані в 2-х останніх стійках + запас всіх необхідних плат на випадок виходу будь-яких з них з ладу.

Це рейд-масив (рейд 5) в 12 терабайт, де зберігаються всі логи і дампи з дата-центру. Ще у МСМ понад 100 стійок на M9. Якщо у вас сервера у МСМ в різних дата-центрах, то трафік між ними не рахується.

Величезний чорний шафа – це мега-упс, який може тримати весь дата-центр в перебігу 15-20 хвилин. Так само в підвалі стоїть дизель-генератор на всякий випадок, який включається автоматично якщо один з 2-х енергетичних вводів впаде.

Червоні балони – це газ (вуглекислий, начебто) під тиском. Якщо щось спалахує в дата-центрі, то газ випускається і заміщає собою весь кисень. Відповідно вогонь гаситься, але все обладнання при цьому залишається неушкодженим.

Ось так виглядає цей мега-упс всередині.

Ще балони, вже підключені до системи.

Датчики диму і вогню стоять над кожною стійкою і під фальш підлогою перед кожною стійкою … Але, про всяк випадок, ще й 24/7/365 сидить спеціальна людина, відповідальний за протипожежну охорону.

Це щиток, який контролює електрику. В цей дата-центр входить 2 електричних незалежні канали. Кожен з яких може повністю забезпечити електро-постачанням весь дата-центр. Ну і як резерву упс і дизель-генератор.

Щиток, який роздає електрику на кожну стійку. У прямому ефірі показує, скільки ампер кожна стійка жере.

Система охолодження. Повітря дуже непогано очищається фільтрами і охолоджується. Таких установок всього 3 – на початку, по середині і в кінці дата-центру. Будь-які дві можуть забезпечувати повне охолодження всіх 40 стійок. Відповідно все зроблено з надлишком.

Сучасні технології навіть в офісі – двері відкриваються від відбитків пальців.

Ще цього дата-центр прокладено два 10ти гігабітних каналу в інтернет (один основний та один резервний) і два по 1 гігабіта (для офісного застосування). При цьому в каналу вільна смуга в 6 гігабіт.

У МСМ дуже багато відомих клієнтів. Так, кілька стійок в дата-центрі на ВДНГ, повністю заклеєні наклейками одного дуже відомого південнокорейського гіганта. Там розміщені всі їхні сервера.

Всі сервера, що здаються в оренду компанією МСМ зараз – це сервера IBM. Раніше у них були ще й HP, але від них довелося відмовитися, тому що були проблеми з драйверами на лінухах, відмінних від Red Hat’а. Самозбірних серверів МСМ не здає в оренду. І ще – на сайті є стандартні конфігурації серверів, але це зовсім не означає, що немає інших. З менеджерами завжди можна домовитися і замовити саме тут конфігурацію, що потрібно.

Так само компанія МСМ може допомогти зробити систему будь-якої складності в їх дата-центрах, як наприклад системи балансування навантаження на сервера, окремі сервера під БД і т.д. і т.п. Ще вони можуть допомогти боротися з ДДОС і взагалі зробити все, що захочеться клієнту за його гроші. Крім одного – вони принципово не займаються “адмініструванням” серверів на рівні софта (налагодження апача / мускули і т.д.).

Було дуже цікаво і я зрозумів, що не дарма орендував сервер саме у них. Він, до речі, працює там уже півтора року як годинник. Єдине, довелося його перезавантажувати кілька разів через те, що оновлював ядро.

Офіційний сайт дата-центру MSM – www.msm.ru

Pavel Bykov ( http://padlik.ru)

19/08.2009

Схожі статті:


Сподобалася стаття? Ви можете залишити відгук або підписатися на RSS , щоб автоматично отримувати інформацію про нові статтях.

Коментарів поки що немає.

Ваш отзыв

Поділ на параграфи відбувається автоматично, адреса електронної пошти ніколи не буде опублікований, допустимий HTML: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>

*

*