7/24 NOC Saha Altyapısı İçin Gerçekte Ne Yapar: Alarmlar, Ekip Yönlendirme ve Eskalasyon

Yazar: Djordje Milivojevic, Elektrik Mühendisi · Güncellendi: · 9 dk okuma

Kısa cevap

Saha altyapısı için 7/24 bir NOC, uzak sahalardaki ve mağazalardaki enerji, soğutma, erişim ve jeneratörleri izler. Ekipman alarmlarını, müşteri kayıtlarını ve çağrıları alır, ilişkili alarmları tek bir olayda toplar, etki ve aciliyete göre öncelik belirler, uzaktan çözüm dener, en yakın yetkin teknisyeni gönderir, zamanlayıcılara göre eskale eder, müşteriyi bilgilendirir ve olayı ancak doğrulamadan sonra kapatır.

Bu makalede
  1. Ağ NOC'u ile altyapı NOC'u arasındaki fark nedir?
  2. Saha altyapısı NOC'una neler gelir?
  3. 7/24 bir NOC'ta alarm yaşam döngüsü nasıldır?
  4. NOC alarm önceliğini nasıl belirler?
  5. Runbook nedir ve neden her alarm tipinin bir runbook'u olmalı?
  6. Ekip yönlendirme nasıl işler?
  7. Eskalasyon zamanlayıcıları nasıl çalışır?
  8. NOC müşteriye neyi, ne zaman söyler?
  9. Vardiya devirleri neden önemlidir?
  10. Saha altyapısı NOC'unu hangi KPI'lar ölçer?
  11. Alarm gürültüsü nasıl azaltılır?
  12. Kendi NOC'unuzu mu işletmelisiniz, yoksa dış kaynak mı kullanmalısınız?
  13. Sıkça sorulan sorular
  14. Kaynaklar

Çoğu insan NOC denince ağ trafiğini gösteren bir ekran duvarı hayal eder. Telekom sahalarını, mağazaları ve ofisleri çalışır durumda tutan bir şirket için ise ekranlarda şebeke kesintileri, deşarj olan aküler, duran klimalar, gece açılan kapılar ve çalışmayan jeneratörler görünür.

NOC, bu sinyallerin eyleme dönüştüğü yerdir: neyin önemli olduğuna hızla karar vermek, doğru kişiyi doğru yere ulaştırmak ve alarm ile onarım arasında hiçbir şeyin unutulmamasını sağlamak. Aşağıda, saha ekipleri için 7/24 bir yönlendirme merkezi işletme deneyimine dayanarak bunun pratikte nasıl işlediği anlatılıyor.

İnsansız bir sahada telekom kulesinin tabanında dış ortam radyo ekipmanı rafı ve enerji dağıtımıUzak bir telekom sahasının güvenlik çitinde asma kilitli kapı
Saha operasyonlarımızdan: insansız bir sahada dış ortam radyo ekipmanı ve enerji dağıtımı (solda) ve teknisyenin ona ulaşmak için açması gereken asma kilitli kapı (sağda). NOC sahayı yalnızca alarmları üzerinden görür.

Ağ NOC'u ile altyapı NOC'u arasındaki fark nedir?

Klasik bir ağ operasyon merkezi bağlantıları, yönlendiricileri, trafiği ve servisleri izler. Altyapı veya tesis NOC'u ise bu servislerin dayandığı fiziksel katmanı izler. Birçok operatörde ikisi birden bulunur.

Ağ NOC'uAltyapı NOC'u
Neyi izlerBağlantılar, yönlendiriciler, radyo ve iletim ekipmanı, trafikŞebeke, doğrultucular, aküler, jeneratörler, soğutma, kapılar, yangın ve izinsiz giriş
Temel çözümUzaktan yeniden yönlendirme, yeniden başlatma, yeniden yapılandırmaÇoğu zaman sahada aleti, yakıtı veya yedek parçası olan bir kişi
Temel soruServis çalışıyor mu?Saha ayakta kalacak mı, ne kadar süre?
Zaman baskısıGenellikle anındaÇoğu zaman bir geri sayım: akü otonomisi, sıcaklık artışı, yakıt seviyesi

En önemli satır sonuncusudur. Şebeke kesildiğinde saha akülerle çalışır ve NOC'un şebekeyi geri getirmek veya bir jeneratörü çalıştırmak için bu otonomi kadar zamanı vardır. Altyapı NOC'unun işi büyük ölçüde bu tür geri sayımları yönetmektir.

Saha altyapısı NOC'una neler gelir?

  1. Ekipman alarmları. Doğrultucular, jeneratör kontrol üniteleri, klimalar, enerji analizörleri ve saha kontrol üniteleri; SNMP trap'leri, bir ağ geçidinin sorguladığı Modbus (RTU veya TCP) ya da uzak terminal ünitesine kablolanmış kuru kontaklar (potansiyelsiz röle çıkışları) üzerinden raporlama yapar.
  2. Müşteri kayıtları. Bir mağaza dondurucu reyonunun ısındığını bildirir; bir operatör ağında bir sahanın düştüğünü görür.
  3. Telefon çağrıları. Açık bir kapıyı veya dumanı bildiren güvenlik şirketleri, arazi sahipleri veya komşular.
  4. Teknisyen güncellemeleri. Varış, tespitler, fotoğraflar, okumalar, gereken parçalar, tamamlanan iş.
  5. Planlı işler. Önleyici ziyaretler, jeneratör testleri ve duyurulmuş şebeke kesintileri; bunlar aksi halde arıza gibi görünecek alarmları açıklar.

Bunların tümü, her sorun için tek bir olay numarasıyla tek bir kuyruğa düşmelidir. Alarmlar, kayıtlar ve teknisyen güncellemeleri farklı araçlarda durduğunda NOC zamanını sahaları onarmak yerine kaynakları birbiriyle eşleştirmeye harcar.

7/24 bir NOC'ta alarm yaşam döngüsü nasıldır?

ITIL olay yönetimi her olay için aynı temel yolu tanımlar: kaydet, sınıflandır, önceliklendir, teşhis et, çöz, kapat. Saha altyapısı NOC'u buna, BT servis masalarının nadiren ihtiyaç duyduğu iki adım ekler: fiziksel ekip yönlendirme ve sahada doğrulama.

7/24 NOC'ta alarm yaşam döngüsüİki sırada on adım. Kontrol merkezinde: al, ilişkilendir, önceliklendir, onayla ve uzaktan çözüm dene. Ardından sahada ve geri dönüşte: ekip gönder, takip et, bir zamanlayıcı dolduğunda eskale et, doğrula ve kapat. Uzaktan çözüm işe yararsa altıncı ile sekizinci adımlar atlanır.Alarmdan kapanmış olaya on adımda1Alarmı alalarm, kayıt2İlişkilendirbirleştir, grupla3Önceliklendiretki, aciliyet4Onaylaadı belli sorumlu5Uzaktan çözümreset, arama6Ekip gönderdoğru teknisyen7Takip etzamanlayıcılara göre8!Eskale etsüre doldu9Doğrulaalarm temizlendi10Kapatneden kaydedildiUzaktan çözüm işe yararsa olay 5. adımdan doğrudan doğrulama ve kapatmaya geçer.
İki saha adımı eklenmiş ITIL olay akışı: ekip gönderme ve sahada doğrulama. Eskalasyonu birinin hatırlaması değil, zamanlayıcılar tetikler.
  1. Alarmı veya kaydı zaman damgası, saha ve kaynakla birlikte alın.
  2. Tekrarları ayıklayın ve ilişkilendirin: tekrarlayanları birleştirin ve tek bir nedene sahip alarmları tek bir olayda toplayın.
  3. Etki ve aciliyete göre önceliği sınıflandırın; zamanlayıcıları öncelik belirler.
  4. Onaylayın: adı belli bir operatör sorumluluğu üstlenir.
  5. Uzaktan çözüm deneyin: ilgili okumaları kontrol edin, bir üniteyi resetleyin, jeneratörü çalıştırın, saha irtibat kişisini veya elektrik dağıtım şirketini arayın.
  6. Doğru teknisyeni doğru parçalarla gönderin.
  7. Yolculuğu, varışı ve işi zamanlayıcılara göre takip edin.
  8. Bir zamanlayıcı dolduğunda veya onarım teknisyenin yapabileceklerini aştığında eskale edin.
  9. Alarmın temizlendiğini ve okumaların normal olduğunu doğrulayın.
  10. Neden ve yapılan işlem kaydedilerek kapatın; tekrarlayanları bir ITIL problem kaydına bağlayın.

NOC alarm önceliğini nasıl belirler?

Öncelik iki sorudan çıkar: ne kadarı etkileniyor (etki) ve durum ne kadar hızlı kötüleşecek (aciliyet). Bu ITIL yaklaşımıdır ve saha altyapısına uygundur, çünkü aciliyet çoğu zaman fizikseldir: kalan akü dakikaları, saatte derece, litre yakıt.

Örnek öncelik matrisi: etki ve aciliyetAçıklayıcı üçe üç bir tablo. Satırlar yüksek, orta ve düşük etki; sütunlar düşük, orta ve yüksek aciliyettir. Yüksek etki ve yüksek aciliyet kritiktir, örneğin akülerle çalışan ve jeneratörü olmayan bir saha. Orta etki ve orta aciliyet ortadır, örneğin yedek ünite çalışırken arızalanan bir klima. Düşük etki ve düşük aciliyet düşüktür, örneğin planlı bir ziyaret sırasında açık kapı.Örnek: etki ve aciliyete göre öncelikAçıklayıcı tablo; gerçek eşleştirme ve zamanlayıcılar sözleşmeye göre belirlenirYüksekOrtaYüksekKritikSaha akülerde,jeneratör yokOrtaDüşükOrtaBir klima arızalı,yedek çalışıyorYüksekDüşükDüşükPlanlı ziyaretsırasında açık kapıDüşükOrtaDüşükOrtaYüksekAciliyet: durum ne kadar hızlı kötüleşiyorEtki: ne kadarı etkileniyor
ITIL tarzında açıklayıcı bir etki ve aciliyet tablosu. Mesai dışı bir kapı alarmı düşük öncelikle başlar ve izinsiz giriş veya ekipman alarmları eklendiğinde tabloda yukarı çıkar.
DurumEtkiAciliyetÖncelik
Şebeke kesildi, saha akülerle çalışıyor, jeneratör yokYüksek: saha düşecekYüksek: akü otonomisi tükeniyorKritik
Bir klima arızalı, yedek ünite çalışıyor, sıcaklık normalOrta: yedeklilik kaybolduOrta: yedek de arızalanırsa destek yokOrta
İki klima da arızalı, sıcaklık yükseliyorYüksekYüksekKritik
Çalışma saatlerinde kapı açık, planlı bakım ziyareti varDüşükDüşükDüşük veya bilgi amaçlı
Mesai dışında kapı açık, planlı ziyaret yokSahaya bağlıBaşka hangi alarmların geldiğine bağlıİzinsiz giriş veya ekipman alarmlarıyla birlikteyse yüksek

Kapı örneği, önceliğin neden alarm tipinin sabit bir özelliği olamayacağını gösterir: aynı sinyal planlı bir ziyaret sırasında gürültüdür, gece ise olası bir hırsızlıktır. İyi bir kural, alarmı planlı işlerle ve aynı sahadaki diğer alarmlarla birlikte değerlendirir.

Runbook nedir ve neden her alarm tipinin bir runbook'u olmalı?

Runbook, tek bir alarm tipi için yazılmış kısa prosedürdür: uzaktan neler kontrol edilir, kim aranır, ne resetlenebilir, ne zaman ekip gönderilir ve müşteriye ne söylenir. En iyi operatörün deneyimini her vardiyanın standardına dönüştürür. Aküyle çalışan bir sahada şebeke kesintisine ilişkin bir runbook şunları kapsayabilir:

  1. Yakındaki sahaların da aynı anda şebekeyi kaybedip kaybetmediğini kontrol edin. Öyleyse sorun büyük olasılıkla dağıtım şirketindedir.
  2. Akü gerilimini ve yük akımını okuyun, kalan otonomiyi saha kaydından tahmin edin.
  3. Jeneratör varsa çalıştığını ve yükü taşıdığını teyit edin. Çalışmıyorsa, kontrol ünitesi izin veriyorsa uzaktan çalıştırmayı deneyin.
  4. Kalan otonomi yol süresinden kısaysa, mobil jeneratörü gerilim düştüğünde değil, şimdi gönderin.

Ekip yönlendirme nasıl işler?

Ekip yönlendirme "kim boştaysa onu gönder" değildir. Doğru teknisyen, şu koşulları sağlayan en yakın kişidir:

  • İş için yetkin: elektrik, (AB) 2024/573 sayılı F-gaz Yönetmeliği kapsamında soğutucu akışkanla çalışma, jeneratör, yüksekte çalışma.
  • Muhtemel parçalarla donanımlı: sigorta seti, kontaktör, filtre, akü bloğu, yakıt.
  • Sahaya girebilecek durumda: anahtarlar veya şifreler, arazi sahibine veya güvenliğe bildirim ve mesai dışı erişim izni.

Ekip yönlendirmelerinin başarısız olmasının nedeni çoğu zaman mesafe değil erişimdir. Bu yazının başındaki gibi asma kilitli bir kapıya doğru anahtar olmadan iki saat yol giden bir teknisyen, akü otonomisini boşa harcamış olur. NOC, ekip göndermeden önce her sahanın nasıl açıldığını bilmelidir.

Eskalasyon zamanlayıcıları nasıl çalışır?

Her öncelik seviyesinin temel adımlar için zamanlayıcıları vardır: onaylama süresi, ekip gönderme süresi, varış süresi ve hizmeti yeniden sağlama süresi. Değerler müşteri sözleşmesinden gelir. Bir zamanlayıcı dolduğunda olay otomatik olarak bir üst seviyeye çıkar; böylece kimsenin eskale etmeyi hatırlaması gerekmez.

TetikleyiciEskale edildiği kişiAmaç
Kararlaştırılan sürede onaylanmadıVardiya amiriHiçbir alarm sahipsiz kalmaz
Kararlaştırılan sürede teknisyen gönderilmediVardiya amiri, ardından saha müdürüBaşka bir teknisyen veya taşeron bulunur
Teknisyen kararlaştırılan sürede sahada değilSaha müdürüYeniden planlanır, müşteri erken bilgilendirilir
Kararlaştırılan sürede hizmet yeniden sağlanmadıSaha müdürü, ardından müşterinin nöbetçi yöneticisiGeçici önlemlere karar verilir: mobil jeneratör, portatif soğutma
Kapatıldıktan sonra aynı alarm tekrarlıyorMühendislik veya bakım planlamaBir reset daha değil, kök neden bulunur

NOC müşteriye neyi, ne zaman söyler?

  • Onaylama ve ekip gönderme anında: neyin etkilendiği, kimin gittiği, beklenen varış ve bir sonraki güncellemenin zamanı.
  • Kritik bir olay açık kaldığı sürece kararlaştırılan her aralıkta, hiçbir şey değişmemiş olsa bile. "Değişiklik yok, teknisyen yolda" da bir güncellemedir.
  • Hizmet yeniden sağlandığında: sorun neydi, ne yapıldı ve takip ziyareti gerekiyor mu.
  • Periyodik raporda: olaylar, tutturulan ve kaçırılan zamanlayıcılar ve tekrarlayan alarmlar.

Vardiya devirleri neden önemlidir?

Olaylar vardiya tanımaz. Olay yönetim sisteminde yazılı yapılan bir devir; açık olayları ve zamanlayıcıları, yoldaki teknisyenleri, planlı işleri, tekrarlayan sahaları ve müşteriye verilen her sözü kapsar.

Saha altyapısı NOC'unu hangi KPI'lar ölçer?

KPINeyi ölçerNeden önemli
Onaylama süresiAlarmdan adı belli bir sorumluya kadarAlarmların, özellikle geceleri, görülüp görülmediğini gösterir
Ekip gönderme süresiAlarmdan bir teknisyenin atanıp yola çıkmasına kadarYavaş kararları ve eksik teknisyenleri ortaya çıkarır
Hizmeti yeniden sağlama süresiAlarmdan sahanın normale dönmesine kadarMüşterinin en çok hissettiği rakam
SLA uyumuSözleşme zamanlayıcılarını karşılayan olayların payıÖncelik ve bölge bazında sözleşmesel bakış
Tekrarlayan alarmlarKapatıldıktan sonra aynı sahada aynı alarmKök nedenlere ve zayıf onarımlara işaret eder

Hedefler sözleşmeden ve saha tipinden gelir; bu yüzden evrensel bir iyi değer yoktur. Bunları sonradan elle girilen saatlerden değil, sistemin kaydettiği zaman damgalarından ölçün.

Alarm gürültüsü nasıl azaltılır?

Operatörler her vardiyada bir alarm seli gördüğünde, kritik alarm da diğerleri gibi görünür. İşin çoğunu üç teknik görür:

  1. Salınımı filtreleyin. Kısa bir sürede defalarca oluşup temizlenen bir alarm, her seferinde yeni bir olay açmak yerine bir kez sayılır ve kararsız olarak işaretlenir.
  2. Zincirleme alarmları gruplayın. Bir şebeke kesintisi bir zincir başlatır: şebeke alarmı, ardından jeneratörün devreye girmesi veya akü deşarjı, ardından düşük gerilim, soğutma durursa da yüksek sıcaklık. Hepsi tek bir kök nedene sahip tek bir olaydır.
  3. Planlı işler sırasında bastırın. Önleyici ziyaret yapılan veya planlı şebeke kesintisi olan bir sahadan gelen alarmlar beklenen alarmlardır ve kimseyi uyarmamalıdır.
Örnek: tek bir olayda gruplanan şebeke kesintisi zinciriBir sahadan sırasıyla gelen altı ham alarm: şebeke kesintisi, akü deşarj oluyor, jeneratör çalışmadı, düşük akü gerilimi, klima durdu ve yüksek sıcaklık. Altısı da kök nedeni şebeke kesintisi olan tek bir kritik olayda ve akülerle çalışan saha için bir runbook ile gruplanır.Örnek: altı alarm, bir kök neden, bir olayBir sahadan gelen ham alarmlar, sırasıylaŞebeke kesintisiAkü deşarj oluyorJeneratör çalışmadıDüşük akü gerilimiKlima durduYüksek sıcaklıkTEK OLAYŞebeke kesintisiÖncelik: kritik6 alarm gruplandı, 1 kök nedenRunbook: akülerle çalışan sahaMobil jeneratör gönderalarmuyarı
Açıklayıcı örnek. Gruplama olmadan tek bir şebeke kesintisi ekranı altı ayrı alarmla doldurur; gruplamayla operatör tek bir olay ve tek bir runbook görür. Tek tek alarmlar kayıtta kalır.

Gürültü azaltma asla geçmişi gizlememelidir: tek tek alarmlar kayıtta kalır, yalnızca olay görünümü sadeleştirilir.

Telekom ekipman konteynerinde duran hassas klima ünitesi
Saha operasyonlarımızdan: telekom konteynerinde bir hassas klima.
Konteyner duvarına monte edilmiş, LCD ekranında aktif alarm görünmeyen hassas klima kontrol paneli
Ünitenin konteyner duvarındaki kontrol ünitesi. Ana ekranı aktif alarm göstermiyor.
Birer dakika arayla reset ve uyarı kayıtlarını listeleyen kontrol ünitesi alarm kaydı; her biri ünitenin açma ve kapama kontrolüyle ilgili
Aynı kontrol ünitesinin alarm kaydı: birer dakika arayla reset ve uyarı kayıtları, her biri ünitenin kapatılıp açılmasıyla ilgili. Bunların hiçbiri ana ekranda görünmüyordu.

Kendi NOC'unuzu mu işletmelisiniz, yoksa dış kaynak mı kullanmalısınız?

Kurum içi bir NOC prosedürler üzerinde tam kontrol ve derin saha bilgisi sağlar, ancak her vardiya ve her gün için personel ve araç gerektirir. Dış kaynaklı bir NOC bu maliyeti müşteriler arasında paylaştırır ve daha hızlı ölçeklenir, ancak iyi saha kayıtlarına ve net runbook'lara bağımlıdır. 7/24 bir nöbet çizelgesi gece, hafta sonu, tatil ve hastalık izinlerini karşılamalıdır; daha küçük ağların çoğu zaman dış kaynak kullanmasının nedeni budur. Belirleyici etken genellikle sahayla bağlantıdır: ekip gönderemeyen veya teknisyenlerin sahada bulduklarını görmeyen bir NOC, yalnızca bir alarm iletme hizmetidir. Her iki durumda da alarmları, kayıtları, runbook'ları ve saha raporlarını bir arada tutan tek bir platform, tüm yaşam döngüsünü tek bir yerde toplar. Ziyaretlerin kendisi için telekom sahası önleyici bakım kontrol listesine ve baz istasyonu yedek enerji bakımına bakın.

Sıkça sorulan sorular

NOC saha altyapısı için ne yapar?

Uzak sahalardaki, mağazalardaki ve ofislerdeki enerji, soğutma, erişim ve jeneratörleri günün her saati izler: alarmları ve kayıtları alır, öncelik belirler, uzaktan çözüm dener, teknisyen gönderir, zamanlayıcılara göre eskale eder ve olayları ancak doğrulamadan sonra kapatır.

Ağ NOC'u ile tesis NOC'u arasındaki fark nedir?

Ağ NOC'u bağlantıları, yönlendiricileri ve trafiği izler ve sorunları genellikle uzaktan çözer. Tesis NOC'u şebekeyi, aküleri, jeneratörleri, soğutmayı ve kapıları izler; onarımların çoğu sahada bir teknisyen gerektirir, çoğu zaman da akü otonomisi gibi bir geri sayıma karşı.

NOC'ta alarmlar nasıl önceliklendirilir?

NOC'ların çoğu ITIL yaklaşımını kullanır: öncelik etki ve aciliyetten belirlenir. Jeneratörü olmayan ve akülerle çalışan bir saha kritiktir, yedek ünite çalışırken arızalanan tek bir klima orta önceliklidir, açık bir kapı ise günün saatine, planlı işlere ve diğer alarmlara bağlıdır.

NOC hangi KPI'ları takip etmeli?

Temel KPI'lar onaylama süresi, ekip gönderme süresi, hizmeti yeniden sağlama süresi, önceliğe göre SLA uyumu ve tekrarlayan alarm sayısıdır. Hedefler müşteri sözleşmesinden ve saha tipinden gelir ve sistem zaman damgalarından ölçülmelidir.

NOC'ta alarm yorgunluğu nasıl azaltılır?

Salınan alarmları filtreleyin, tek bir nedene sahip alarmları (örneğin bir şebeke kesintisi zinciri) tek bir olayda gruplayın ve planlı iş yapılan sahalardan gelen alarmları bastırın. Geçmişin asla kaybolmaması için her bir alarmı kayıtta tutun.

Kaynaklar

  • ITIL 4, Incident Management uygulaması: olayların kaydı, sınıflandırılması, etki ve aciliyete göre önceliklendirilmesi, eskalasyonu ve kapatılması.
  • Florlu sera gazlarına ilişkin (AB) 2024/573 sayılı Yönetmelik (F-gaz Yönetmeliği); soğutma ve klima ekipmanı üzerinde çalışan personelin sertifikasyonu hakkında.
  • Doğrultucu, jeneratör kontrol ünitesi ve hassas klima üreticilerinin alarm çıkışları, SNMP ve Modbus arayüzlerine ilişkin dokümantasyonu.
  • Domar'ın 7/24 izleme, ekip yönlendirme ve eskalasyona ilişkin saha prosedürleri.
  • İlgili yazılar: jeneratörlerin uzaktan izlenmesi ve kritik sahalarda enerji izleme.

Her saha, her varlık ve her ziyaret tek bir yerde

AllSiteCare saha ekipmanlarından gelen alarmları, önleyici bakım planlarını ve canlı saha raporlarını bir araya getirir; böylece her lokasyonda neler olduğunu ve nereye ziyaret gerektiğini görürsünüz.