#1113: Сказано без очереди не пущать!

У одного заказчика есть большая и суровая железка под названием Sun Fire E25K, крайне критичная для бизнеса. Управляют сервером два контроллера — встроенные в шасси мелкие серваки с Solaris на борту. Греется этот слон так, что от него можно прикуривать, а с охлаждением в датацентрах вечная проблема. Админы написали скриптик, который берет вывод команды showenvironment, выкусывает из него температуру и в случае достижения определенного значения шлёт почту, где жалуется на некомфортные погодные условия. Всё работает уже с полтора года и все счастливы.

В прошлые выходные между двумя этими контроллерами повис интерконнект — ни файловер не сделать, ни подключить консоль с одного на другой. В общем, отказоустойчивости ноль.

Запланировали работы по исправлению ситуации — сервер надо было выключать целиком. Опустили домены, выключили контроллеры, обесточили сам сервер. Покурили, идем включать. Загрузив контроллеры, даём команду poweron и начинаем медленно покрываться испариной — сервер долго висит на включении вентиляторов. Из опыта я знаю, что такого быть никак не может, ибо вентиляторы включены абсолютно всегда, а сервер пишет, что их включает, чисто для проформы. Сроки работ ограничены, все в панике.

Смотрим лист процессов и наблюдаем, как несчастный контроллер запрашивает состояние температур у выключенного шасси! В лучших традициях советских очередей «привратник» не даёт пролезть вперед другим процессам (например, poweron) даже по большому блату.

После ритуального уничтожения строки запуска скрипта в кроне дело пошло как подобает. Да, в инструкциях такого не пишут — верно утверждение, что «тонкости познаются через факапы»!

Ещё интересное на этом сайте:

#1112: Делим интернет по-братски
Анекдоты и картинки #44355
Поздравим порталом?
Мифы обыденного сознания
Ребята стебутся над гламурной тусовкой
Красная Шапочка
Анекдоты и картинки #44350
Анекдоты и картинки #44349
Задроты (46 фото)
Девушки, которые играют в покер (30 фото)
Роддом в в г. Кимры (9 фото)
Как дельфин человеку жизнь спас (3 фото)
Жестокий офисный прикол (10 фото)
Ловкий папа (5 фото)
Телефон-мерседес (8 фото)
Чрезвычайная ситуация
Провал на Fina Swc в Риме
Из жизни мухи, или кое-что о других измерениях
Анекдоты и картинки #44338
Анекдоты и картинки #44337

« все анекдоты и картинки