Факапы

Товарищ отдал комп в ремонт. Повозился я с ним, нашёл весёлость: бывает, отваливается кнопка питания. Возвращаю системник. Жена товарища:

— Андрей, а комп всё ещё не работает.
— А я знаю! — радуется товарищ. — Надо БП включить, сзади кнопка есть.

На мой крик «Стой!» никто не шевельнулся. Теперь паяю БП: переключил он на 110. А ещё инженер…

Монтировал как-то охранно-пожарную сигнализацию в главном логове МВД города N. Речевое оповещение о пожаре на всех этажах, как в лучших домах Лондона и Парижа. В серверной — стойка с лютыми усилителями, чтобы всё это вывезти.

Близится дата сдачи объекта. Генералы, полковники и прочая милиция на «лексусах» уже заняла свои кабинеты. Пришла пора протестить это самое оповещение. Микрофона и стоечного кассетного магнитофона не было на складе. Покопался в багажнике своей колымаги, нашел заплесневелый дисковый MP3-плеер, выдернул из магнитолы диск и, не подумав, воткнул это дело в усилители.

Надо было видеть лица правящей тусовки МВД, когда в 11 утра на всё здание заорал «Сектор Газа». Пришлось писать «по собственному».

Пришедшая весна и стучащее в окно солнце потребовали от меня наконец-то убрать всю квартиру после зимней спячки. Разумеется, я начал с самого главного — с системного блока.

Много я историй читал и слышал про чистку сжатым воздухом, а затем поход в сервис. Не отговорил меня Ктулху взять с утреца системник и отнести его в гараж на чистку самодельным компрессором из советского холодильника.

До направления струи воздуха на внутренности моего зверька я не задумывался о последствиях, но услышав негромкий треск, понял, что компрессор без фильтра на всасывающем отверстии — это прототип пескоструйного аппарата.

В момент рука дёрнулась к рубильнику. Адская чистка была прекращена, оставалось самое страшное — подсчитать, сколько денег придётся взять с собой в поход по магазинам. Но мне повезло: после включения бортовая система радостно пискнула и показала многообещающую картинку загрузки «Окон». Такого облегчения я ещё не испытывал.

Делал я как-то сайт, сроки поджимали, торопился жутко. И вот я сохраняю последние правки на хост — всё супер, всё работает, но что-то ещё по стилям чуток поправить нужно. Открываю файл стилей, делаю правки и снова сохраняю на хост. Закрываю редактор и, довольный собой, жму F5.

Моему взору предстаёт страница, у которой просто нет стилей — всё обычным текстом. Я в панике открываю файл стилей с сайта, а он пуст. Что делать?! Копии нет вообще, последний бэкап недельной давности. Спина начинает покрываться холодным потом. Пытаюсь найти хоть какие-то обрывки в кеше FTP-клиента — всё бесполезно. Чувствую, как волосы на голове начинают седеть.

И тут меня озаряет. Я вспоминаю, что минут десять назад смотрел сайт в Файрфоксе. О боги, только бы всё было так, как я думаю! Быстро открываю FF, набираю адрес сайта — он в прежнем виде. Буквально не дыша, открываю просмотр файла стилей в Firebug — и быстро-быстро Ctrl+A, Ctrl+C. Я спасён — хвала кешу FF!

Помните законы Мёрфи? Мужик реально понимал жизнь.

Конец августа. Четверг. Интуиция шепчет: «А сделай-ка снэпшот виртуалок, давненько не делал ведь». Интуиция — штука полезная. Дела.

Пятница. Сбой харда на хост-системе. Три часа контора стоит, пока e2fsck сканит терабайтный хард — ну не дают денег на зеркало, что делать? Находится сколько-то битых секторов. Которые мистическим образом принадлежат тому самому свежему бэкапу-снэпшоту (привет Мёрфи). Который удаляется. А предыдущий — за январь.

Стук падающих кирпичей.

Система, конечно, восстановлена. Свежие бэкапы данных (они дублируются трижды) развёрнуты. А вот последствия старой системы понемногу всплывали два дня. Оказывается, много чего поменялось за это время.

Взяли на работу нового администратора базы данных. Первым заданием ему было проверить списки логинов к базе и обновить имена-телефоны, которым эти логины принадлежат, — вдруг кто-то имя сменил или в другой офис переехал. Что может быть проще? Взял логин из базы, посмотрел на владельца, проверил по новой телефонной книге номер, позвонил, уточнил, записал изменения.

Наш герой IT-джамшутинга убил все логины из базы, а по корпоративной почте сделал рассылку: «В целях усиления контроля за безопасностью просьба всем сотрудникам, которым нужен доступ к базе данных, заново заполнить форму запроса логина». Геноциду подверглись не только личные логины простых сотрудников и автоматических систем, но и логины всей административной группы, включая самого героя.

Итог: полдня на отпаивание главного админа валидолом (она у нас уже в возрасте дама), изъятие орудий убийств у вторичных админов и один прячущийся в туалете выпусник престижного университета.

Давеча попалась мне странная мамка Асус. Старенькая, под сокет А, но интерес представляет, так как можно забабахать из неё файлопомойку и всё такое. Товарищ её никак не мог запустить: тупо гудит кулерами — и всё.

Взял я её на изучение. Первым делом подключил спикер и по характерным сигналам определил бракованную (ну, не бракованную, просто несовместимую) плашку памяти. И вот тут началось веселье: с заведомо исправной памятью мать нормально заводилась, кулера вращала, но с писком отключалась через пару секунд.

Материнка эта в своё время считалась продвинутой: с помощью DIP-переключателей можно было выставить любую частоту, множитель, напряжение проца, даже если множитель заблокирован.

Долго я чесал репу — и ручные настройки проца ставил, и автоматические. В очередной раз тянусь ставить дефолтные и тут замечаю рядом надпись: «CPU_FAN». Опа, а куда ж тогда подключен процессорный кулер? Ага, шутники из Асуса разместили рядом с процом разъем PWR_FAN, а CPU_FAN не так очевидно. И вот кто-то на этом прокололся. В итоге старенькая, но мудрая мать запускалась, видела, что процессорный кулер стоит, и отключалась от греха подальше.

В общем, айтишник, помни: причина капризов техники может быть очень простой, но прячется она не там, где её ожидаешь увидеть. Так что проверять следует даже самые неожиданные моменты.

Работаю в IT-журнале, иногда по долгу службы приходится разгонять железо, в том числе и под экстремальными системами охлаждения. И вот как-то раз, на третьем часу бенча под жидким азотом (на процессоре стоял медный стакан, в котором и кипела эта субстанция), замучил меня сушняк. Я залил порцию азота в стакан, и, благо процессор был не слишком горячим, решил, что вполне успею сгонять на кухню и налить себе сока.

Сказано — сделано. Возвращаюсь, неспешно отпивая из кружки, и вдруг вижу, что температура поднялась выше допустимой отметки, а значит, выполнение долгого теста находится под угрозой срыва. Я пулей метнулся к столу, чтобы вновь заполнить стакан… Ну и что, вы думаете, я в него залил?

Процессор выжил, стакан тоже, а вот тест пришлось проводить заново.

Госорганизация. Цикл работы серверов и сети — всегда. Жаркое московское лето 2010-го. Регламент обслуживания кондиционеров выбран сразу после того, как закончился тополиный пух. Кто такой умный придумал, что кондеи надо обслуживать не чаще раза в год? Наверное, живёт в каком-нибудь притихшем северном городе, в котором не растут тополя.

В серверной (первый этаж) два сплита на 18 серверов. В центре здания — комната, являющаяся ещё и кабинетом отдела АСУ, в которой стоит центральный шкаф со свитчами и другой активкой с тепловыделением 2 кВт. Один сплит на 4 кВт тепловой мощности. Установлена разная, но работоспособная диагностика температуры — где сервера умные, где UPS умнее. В строю несколько бойцов и бойчих.

Пятница. Обед. Диагностика показывает: в серверной 29. Телефонная станция подумала и отключилась. Бегу в серверную. Кондеи работают. Температура растёт. Сервера воют гиперпродувом.

Из дебрей извлекли пылесос «Тайфун», у которого, в отличие от импортных, есть не только всос, но и вполне реальный выдув в тот же шланг. В шланг вставили что-то типа воронки-переходника от импортной канистры, дабы повысить скорость струи. Аннулировали фильтр и всё, что мешало — почти половина пылесоса оказалось съёмной. Итог — почти компрессор.

На включённых наружных блоках операция выглядела примерно так. Бойчихи с отвёртками наготове. Бойцы, требуя у них инструмент, буквально сдирают наружные части обоих наружних блоков. Включается пылесос… Кто же знал, что за полтора месяца столько пыли попадёт в теплообменник наружного блока! В общем, заволокло всю округу. Дуть перестали только тогда, когда из блоков под любым углом уже ничего не вылетало. Когда собирали всё обратно, сняли лишние в нашей ситуации защитные сетки теплообменников — они выглядели так, будто на них кучу маленьких носков развесили.

Весь процесс занял 30 минут. Ничего не выключали. Начинаем сворачиваться, всё собираем — и тут один из наружных блоков выключается. Ну всё, кранты: что-то где-то не там выдули. Бегом в серверную — а там телефонная станция подумала и включилась. Сервера притихли. Температура вроде около нормы.

Понедельник следующей недели. Утро. В кабинете с активкой +32! Умер сплит — просто тихо умер. При попытке включиться — ток 26 ампер, отсутствие звука компрессора и срабатывание автомата. Диагностика циски показывает только на градус меньше уровня аларма.

Разослали сообщение, что в обед всё умрет, а в обед 45-килограммовый коммутатор вытащили на улицу, в момент разобрали и обработали «Тайфуном». Как и куда подходили те 8 оптических кабелей и 128 клиентских, в момент разборки никого не интересовало. Продули. Притащили. Соединили. Как соединяли — не помню, но очень быстро. Вероятность наудачу попасть в 4 VLAN и 8 туннелей исчезающе мала. Были просто возгласы: «Я посмотрел(а) и помню, этот провод был здесь!» Включили. С десяток клиентов звонят и жалуются. Смотрим конфигурацию — попали во все туннели и почти во все VLAN. Переключили — звонки прекратились.

Солнце начинает опускаться и светит точно в окно кабинета. В кабинете +41. Коммутатор показывает, что не то что до зоны аларма, а даже до зоны просто предупреждения ему ещё целых пять градусов.

Вентиляторы — к бою! В крышу шкафа на вытяжку — кулера все, что есть! Шкаф закрыть. Дыру в стене кабинета у пола просверлить. Из магазина канальный вентилятор притащить и сделать поддув снизу в шкаф через дыру с пола из коридора.

В кабинете +43. Температура коммутатора падает ещё на градус. Сверху с потолка дует, как из ада. Окно открыто, поделено картонкой напополам, вентилятор-подхалим — на выдув в верхней части. Вроде работает. Бегом строчить бумаги о замене кондиционера. Настрочили. Пошёл подписывать — подписали.

В кабинет зашёл шеф. Убежал. Через пять минут опять зашёл, принёс холодной воды. Выгнал всех из кабинета. Сказал, что при такой температуре можно работать только час в день. Согласились, составили график. По часу не получилось — по два. Работаем.

Вторник. Среда. Четверг. Жарко.

Пятница. Утро. Приезжает банда кондиционерщиков и меняет на фиг сдохший сплит. Берёт мойку «Керхер» и, не снимая кожухов и не останавливая, промывает теплообменники внешних блоков кондеев в серверной. Вымывает примерно столько, сколько мы выдули.

Осень. В серверную поставили резервный кондиционер. Вроде задача обеспечения бесперебойности работы выполнена. Премию дали. Командой доволен. Ждём следующего лета.