Меня подпишите пожалуйста
Вчора для тих, хто висловив бажання, відіслав обіцяний сабдж. Першу частину. Розглянуто реальний кейс, зачепив також "eTOM business framework".
Ось анонс (початок):
--------------------------------------------
1.1 Случай с затянувшимся maintenance window
Дано: довольно крупный (тысячи различных пользователей) телекоммуникационный сервис-провайдер, оказывающий услуги передачи данных и доступа к Интернет.
Предыстория инцидента
В одну прекрасную ночь с субботы на воскресенье (как увидим далее - это важно!) с ~00:00ч. по ~1:30ч. проводились работы на технической площадке по расширению функциональных возможностей одной из систем. По завершении работ были обнаружены некоторые проблемы. Посему дежурной сменой NOC’a было принято решение по замене функционального модуля одной из железок (я сознательно упускаю несущественные детали. Сам случай реально имел место быть в 200Х году). После замены модуля часть проблем осталась. После дополнительного переконфигурирования (~5:30 утра) дежурная смена сообщила, что вся система функционирует нормально.
Инцидент
В ~8:10 новая дежурная смена сообщила нач. тех. отдела, что «не работает VIP-клиент». Проверка показала, что на канальном уровне (data link layer в терминах OSI) сегмент сети функционирует, но не работает на сетевом (network layer). Причина – сбой специализированной железки (GW). Перезапуск GW к успеху не привёл. Посему было принято решение о его замене. В 9:55 новый GW был запущен. Длительное время запуска вызвано большим объёмом работ по его конфигурированию. После запуска резервного GW параллельно со сбойным последний не освободил MAC-адрес, что привело к конфликту «duplicate MAC addresses» и высокому значению счетчика потери пакетов. VIP-клиента, специфика бизнеса которого требует круглосуточной работы канала, все это время «колбасит». Клиент очень злой. Никто не озаботился ему внятно сказать когда же наладится нормальная работа (потому что никто и сам не знает). Злость клиента нарастает по мере продления ремонтно-восстановительных работ, потому что он совершенно не владеет информацией «что происходит в данное время и когда наконец прекратится это безобразие».
Анализ инцидента
.... --------------------------------------------
Хто бажає - ніколи не пізно сповістити мене про своє бажання і підписатися на дану розсилку.
Regards,
Oleh Hrynchuk R&D Department, principal engineer ********************************************* Incom Corporation. Incom Business-Centre 31-33, Smolenska St. Kyiv, 03005, Ukraine Tel. +380 44 538-0003; Fax: +380 44 538-0000 E-mail: Oleh.Hrynchuk@incom.ua Web: http://www.incom.ua
-- Best regards, Anton V. Kutin mailto:kutin@zaporozhye.net =================================================================== uanog mailing list. To Unsubscribe: send mail to majordomo@uanog.kiev.ua with "unsubscribe uanog" in the body of the message