Bash.org.ru IT Happens Истории ## 9701 – 9800

#9736: Ковровая перезагрузка

12:45 16.08.2012, IT happens

Предприятие среднего уровня. В процессе монтажа видеонаблюдения нам выделили небольшое отдельное помещение. Серверной назвать тяжело, но функциональное назначение именно таково. Трудятся там три сервера видеонаблюдения (около сотни камер) и системы турникетов и учёта рабочего времени (специально разделили для надёжности), пара свитчей по 24 порта, мини-АТС, сервера бухгалтерии, прокси, блоки питания камер, CDMA-терминалы и еще куча всякого оборудования.

Боремся за повышение надёжности. Сервера разделены, питание идет от двух упсов (онлайн и смарт), АТС имеет ещё и собственные аккумуляторы. Два независимых ввода силового питания с АВР, кондиционер. Помещение обшито металлом и закрыто на замок, ключи только у охраны и у меня. Всё работает стабильно, но ничего не может работать со стопроцентной надёжностью.

Не помню, какой из компьютеров сбойнул. Звонит мне охрана. Обьясняю: надо пойти в серверную и перезагрузить сервер на второй сверху полке. Задачу передают человеку, который понимает, что жать. Кладу трубку. Через десять минут перезванивают: «Всё, заработало». Попутно слышу какой то разговор, спрашиваю, что там такое.

— А, девочки из бухгалтерии забегали.

В душе какое-то странное чувство.

— А вы какой сервер перезагрузили?

— А мы всё перезагрузили!

Как потом выяснилось, часть не перезагрузили, а выключили.

Помните следствие закона Мёрфи? «Если четыре причины возможных неприятностей заранее устранены, то всегда найдётся пятая».