Sunucu saatlerce kapalıydı ama sadece tek bir uyarı aldık

O zaman çözüm tekrarda değil, ilk bildirimin doğru yere ve doğru kişiye ulaşmasında. Önerdiğim yapılandırma: 1. Aynı monitör için birden fazla bildirim kanalı tanımlayın. E-postanın yanına en az bir SMS veya sesli arama kanalı ekleyin. Sesli arama, hafta sonu fark edilme oranı en yüksek kanaldır. 2. Her kanalı ilgili monitöre abone edin. Kritik servisler için organizasyon geneli abonelik yerine monitör bazlı abonelik kullanmanızı öneririm, böylece gürültü azalır. 3. Nöbet çizelgenizi kurun ve bu servise bağlayın. Böylece bildirim tüm ekibe değil, o an nöbetçi olan kişiye gider. 4. Eskalasyon politikası tanımlayın: örneğin ilk anda e-posta, 5 dakika sonra SMS, 10 dakika sonra sesli arama, 15 dakika sonra ekip liderine sesli arama. Nöbetçi incident'ı üstlendiğinde eskalasyon durur. Bir de önemli bir davranış notu: incident'ın durumu üstlenildi veya inceleniyor olduğu sürece de yeni incident açılmaz. Yani birisi incident'ı üstlenmişse sistem sessiz kalır, bu kasıtlıdır. Incident çözüldü olarak işaretlendikten sonra aynı monitör tekrar düşerse yeni bir incident ve yeni bir bildirim üretilir.