Lack of memory error for vROPS

Merhabalar,

Yakın zamanda karşılaştığım memory yetersizliği nedeni ile oluşan hatadan bahsedeceğim. vROPS UI alanına giriş yapmaya çalıştığımda; “Unable to connect to platform services.” hatası ile karşılaştım.

Bu durumu analiz etmek ve node durumlarını kontrol etmek istediğimde /admin alanına giriş yapmaya çalıştığımda ise daha önce görmediğim pop-up şeklinde ekrana düşen bir log gördüm. Bu durum biraz korkuttu açıkcası, admin konsola da ulaşamıyorsam elim kolum bağlanmış durum oldukca kritik.

Master node a ssh ile bağlanmak istediğimde “”connection timeout” aldı sessionlar. Bunun üzerine vm console ile bağlanıp ssh servisini aktif etmek istedim ancak bu kezde “resource temporarily unavailable” hatası döndü.

Yapacak son çare kapat-aç kalmıştı ancak burda dataların consistant olmamasından korktuğum için CLI üzerinden cluster’ı offline çekmeye çalıştığımda yine servisler cevap vermedi. Kapatıp açtığımda uzun bir bekleme sürecinin ardından durum normale döndü. Tekrar yaşamamak adına daha rahat bir host üzerinde migration rule yazarak sabit kalmasını ve memory noktasında darboğaz yaşamamasını sağlamaya çalıştım. Güncelleme olması noktasında burayı düzenleyeceğim.

vROPS Alert Mail Log Check

Merhabalar

VMware’ın eski adı vCOPS yeni adı vROPS olan monitoring toolu üzerinde mail gönderim mekanizması var(her monitoring ürününün olmazsa olmazı). vROPS üzerinde sizin belirlediğiniz sympton lara göre custom alert yaratabilir ve bu oluşturduğunuz alertler için mail attırabilirsiniz. Default olan alertlerden bahsetmiyorum bile. 🙂

Peki bu ne işinize yarayacak ?
Sanal altyapınızda olup biten anormal aktivite olarak ne olup bitiyorsa kontrol edebiliyor olacaksınız. Tabi makul ve mantıklı çerçevede alert mekanizması dizayn edebilirseniz gerçek sonun anında durumdan haberdar olup müdahale edebilirsiniz.

“Ölçüp, izleyemediğiniz sistemi yönetemezsiniz!”

Sorun anında oluşan bu mailler ile otomasyon sisteminde aksiyonlar tetikleyebilirsiniz. Bunlar microsoft orchestrator, Automic, Azure Automation, AWS gibi hangisi sizin sisteminize entegre veya hangi platformda aksiyon almak istediğiniz ile alakalı.

Buraya kadar verdiğim bilgiler genel itibariyle sistemin işleyişi hakkındaydı. Zaman buldukça daha detay bilgiler vermeye çalışacağım arkadaşlar ancak en büyük sorun zamansızlık.

vROPS tarafından sisteminize gönderdiğiniz maillerin ulaşıp ulaşmadığını yani giden maillerin akıbetini aşağıdaki path de bulunan log file içerisinden görebilirsiniz. Yazının konu başlığı bu olsa da en sonunda söyleyebildim. 🙂

/data/vcops/log/view-bridge.log

Not: Her node random şekilde SMTP e erişip mail atıyor bu sebepten her node üzerinde bu dosyaya bakmak gerekiyor.