Size: a a a

Чат Салатовой телеги

2020 July 16

**

*** *** in Чат Салатовой телеги
А мне однажды привиделось, как давным-давно, в одной компании, на ул. Вавилова, внешние блоки кондиционеров стояли в подвале. Электрощитовая тоже была в подвале. А еще в этом подвале был городской ввод воды с нехилым приямком. И в один прекрасный день этот приямок переполнился. И вода стала везде. Даже в электрощитовой. Критического уровня вода не достигла, но оставалось совсем немного.
И да, ДГУ тоже под землей были :)
#Наташа была в шоке, как от решения, так и от того, что могло произойти, если б вода поднялась еще сантиметров на 10
источник

А

Алина in Чат Салатовой телеги
источник

SL

Sergey L in Чат Салатовой телеги
Лет 10+ назад приключилась одна забавная история. #наташа

Дело было было в одном из провайдеров одного города-миллионника N. Ядро состояло из нескольких "ненадежных" Длинков L3. Тут надо сказать, что за примерно 5-6 лет оно выключалось буквально пару раз.  Один раз когда ЦУС переезжал в другой район, ну и пару запланированных обновлений. И никогда не глючило.  Кроме одного единственного раза, когда все четыре админа и руководитель саппорта отмечали на даче ДР одного из нас (без интернета), только тел связь ( плохая)
Один (и только один) из коммутаторов решил повиснуть именно в этот момент. На нем был биллинговый сервер и что-то еще (по мелочи)
Решилось все простым выкл/вкл питания коммутатора, но в не очень трезвом виде ( в начале разговора) и по плохому телефону пришлось потратить еще минут 5-10 чтобы найти проблемное место и убедиться что лампочки заморгали.

PS: пожалуйста не надо обсуждать резервирование и как строить надежные сети...  Это все хорошо,  когда есть на что.
источник

A

Anton Klochkov in Чат Салатовой телеги
ID:0
«Наташа, вставай, мы там все уронили!»
Это наше Задание №4.

Вспомним то, от чего до сих пор ладони потеют. Расскажите в чате про самую дикую аварию/случай за все время работы, которые случались с вами или вашими коллегами.
Нам не нужны имена и названия, нам нужна жесть :) Ждем рассказы сегодня до 23:59.
Хэштег задания #наташа#наташа
Это одно из самых дорогих заданий марафона — за него можно получить 5 баллов.
Был обычный летник день и ничего не предвещало беды.
«Тетя Зина» из отдела коммерции открывает файлик, файлик в письме, а, но чего не открывается.
Тогда Тётя Зина пересылает файлик всему отделу и каждый юзвер протыкивает его.
Антивирусное ПО никак не реагирует на происходящее потому что это штатная функция системы – шифровать данные аххаха. (тогда шифровальщики были в диковинку)

В итоге папка отдела на 10к файлов зашифрована, так же вместе с тем что было на локальных дисках, как правило это документы с расширением DOC, EXCEL, PDF, ETC.
Ну до ладно подумал админ всякое бывает, пойду за бэкапами и тут выясняется…
Выясняется тут… Что правила бэкапов нарушены (я думаю их все знают, на всякий случай напомню- это уже делаешь и проверяешь. Полгода не проверялся бэкап этого отдела
¯\_(ツ)_/¯
Все данные отдела были безвозвратно утеряны.
Получилось так, что после настройки теневых копий, те папки, которые обзавелись этими самыми теневыми копиями, перестали попадать в общий бэкап дисков файлового сервера, проводимый Symantec BeckupExec (так кажется называется :-)
Ну и ещё теневые копии хранились на том же диске)) - это привело к тому, что при восстановлении большого числа файлов место на диске закончилось, и система автоматически удалила теневые копии, так и не успев все восстановить)

Кто-то скажет, да и черт с ним все важно должно лежать в базе, а все остальное это информационный мусор, другой начнет трясти кулаками до пены у рта. В итоге состоялось увольнение, причем гендир посмотрел на плоды работы и был против увольнения (лишить квартальной премии и на этом все), а вот некий ойти дир все же с пеной у рта доказывал, что ннада уволить и в итоге настоял на своём, а админ был не плохой.

#наташа#наташа
источник

A

Anton Klochkov in Чат Салатовой телеги
Ещё я пережил маски-шоу с почти полным изъятием всех серверов (и бэкапов тоже), это незабываемый опыт :)
источник

A

Anton Klochkov in Чат Салатовой телеги
А ну ещё "забавный" случай, когда на Боровой 57 ИВЦ РЖД (Питер) во время грозы и косого дождя нам залило 7609 и все ИБП,
Сдохли кондеи, и специально обученный человек дежурил, открыв все окна чтобы оборудование не поджарилось.
Но так хоть он и был специально обучен при этом он не был задублирован и свалил заниматься своими делами (хз, обедать и прочее). Этого времени хватило чтобы наше оборудование было подтоплено :)
В итоге лежало долго и много клиентов, пока строительным феном сушили оборудование надеявшись на удачу.

#наташа#наташа
источник

SG

Sveta Gazizova in Чат Салатовой телеги
Anton Klochkov
Ещё я пережил маски-шоу с почти полным изъятием всех серверов (и бэкапов тоже), это незабываемый опыт :)
О, маски шоу тоже было! А потом оказалось, что они в соседний офис пришли:( Но все сотрудники торжественно прошлись сквозь коридор омоновцев
источник

A

Anton Klochkov in Чат Салатовой телеги
Sveta Gazizova
О, маски шоу тоже было! А потом оказалось, что они в соседний офис пришли:( Но все сотрудники торжественно прошлись сквозь коридор омоновцев
Представьте, меня спас тот факт, что я в этот день просто проспал и опоздал на электричку :)
И обошлось без ректального криптоанализа и добычи паролей. Скупая СМС "Антон не приходи на работу"
источник

SG

Sveta Gazizova in Чат Салатовой телеги
Ха-ха, хорошие коллеги. Плохие бы написали: «Антон, скорее на работу»
источник

[MagicalEvil] Святос... in Чат Салатовой телеги
Sveta Gazizova
Ха-ха, хорошие коллеги. Плохие бы написали: «Антон, скорее на работу»
Welcome to hell
источник

В

Виталий in Чат Салатовой телеги
Антон, тут просто жара, заскакивай!))
источник

A

Anton Klochkov in Чат Салатовой телеги
Так вот это ещё не все :)
источник

A

Anton Klochkov in Чат Салатовой телеги
Я потом разрабатывал уникальную систему борьбы с маски-шоу
источник

SG

Sveta Gazizova in Чат Салатовой телеги
Anton Klochkov
Я потом разрабатывал уникальную систему борьбы с маски-шоу
Стаканчиком кофейным кидаться?
источник

A

Anton Klochkov in Чат Салатовой телеги
Умная розетка, смс отключала настоящую серверную, в онлайне оставалась фейковая.
Маски-шоу забирали белые и пушистые сервера с правильной 1C, AD и т.д.
При входе и по команде вырубалось питание в здание, никаких ИБП быть не должно.
Компы ребутались и получили правильный домен, на каждом пк скриптами удалялось все лишнее из реестра и прочее прочее :)
источник

A

Anton Klochkov in Чат Салатовой телеги
Прям опыт опыт ))
источник

A

Anton Klochkov in Чат Салатовой телеги
Все должно быть белое и пушистое :)
источник

A

Anton Klochkov in Чат Салатовой телеги
Sveta Gazizova
Стаканчиком кофейным кидаться?
Если бы))
источник

A

Anton Klochkov in Чат Салатовой телеги
Да и были учения и вот это все
источник

A

Anton Klochkov in Чат Салатовой телеги
Сдох винт, юзер потерял данные, да всем плевать (потому что нет ИБП) :)
источник