Загадка в vSphere

топ 100 блогов ru_root24.06.2016 Как обычно, я наступил на неизвестные науке грабли..

Имеется пара серверов с VMware vSphere и кучей виртуалок. ВНЕЗАПНО один из серверов несколько отвалился. Сам сервер и все его виртуалки отзывались на пинги и даже отвечали на некоторых портах, в том числе на 22, но после установки TCP-соединения наступала полная тишина. ssh -v тоже доходил до "debug1: Connection established", и всё.. Любопытно, что ssh ни к одной машине не отваливался по таймауту, а просто зависал навсегда (я некоторые экземпляры до получаса держал).

Я, было, подумал, что диски отвалились, оно примерно так бы выглядело, но к одной машинке по ssh таки удалось подключиться, и она даже выдавала сообщение про "Last login", после чего всё так же зависало навсегда. При следующей попытке соединения она выдавала "Last login" про мою же предыдущую попытку с соответствующим временем и IPшником, значит диск у неё работал, но всё равно сессия зависала.

Второй сервер и все его виртуалки продолжали успешно работать.

А к вечеру всё как-то само собой починилось.. Все виртуалки живы, не перегружались, значит, и сервер тоже не перегружался. Все диски на месте, в логах только сообщения о недоступности соседних машинок по сети, и больше никаких ошибок. То есть, они всё это время работали.

Самое интересное, что ещё до начала этого глюка у меня была открыта ssh-сессия на сам сервер. Она также залипла, но не отвалилась. Нажатие на Enter выдавало в терминал пустую строку (без prompt'а), значит, сессия была жива, но больше никаких надписей и никаких реакций ни на какие кнопки. Когда оно починилось, в терминал вылетела кучка строк с prompt'ами (на все ранее нажатые Enter'ы), и сессия продолжила нормально работать..

На сервере тоже никаких ошибок не показывают, а на графиках за время глюка вообще полная тишина:

Загадка в vSphere Загадка в vSphere Загадка в vSphere

Что это могло быть?? В целом выглядит как проблема с сетью, но я не могу придумать, как можно сделать, чтоб соединения работали на уровне TCP, но ничуть не выше. И чтоб тот же ssh, который не мог подключиться по SSL, не отваливался по таймауту..

Оставить комментарий

Архив записей в блогах:
Водопады Игуасу, это самое прекрасное, что я видела в своей жизни. Это комплекс из примерно 275 водопадов на реке Игуасу, которая является естественной границей между Аргентиной и Бразилией. Водопады образуют красивую дугу в виде амфитеатра. Самый большой водопад, это "Глотка Дьявола", ...
Вчера, как известно взрослым, наступила календарная весна. Но некоторым детям очень трудно, почти невозможно, объяснить, почему весна, а ничего не произошло: снег не растаял, трава не зазеленела, цветочки не распустились… Вот что написала в ...
Я правильно понимаю, что мы _снова_ стали свидетелями высочайшего профессионализма наших полицейских? 1: Сделать решето из парня в закрытом трамвае (высочайшее мастерство) - чек 2: Ползти на коленях на парковке когда тебя избивают (высший пилотаж) - чек 3: Попытаться сбить машиной ...
Сегодня выстроила много планов, решили пойти к морю. И вот по дороге саксофонист. Играет чудесная музыка,я спешу, но как только мы подошли,мелодия закончилась. Осваиваю фотоаппарат и комп одновременно. Я настраивала видео,а получилась просто какая-то детективная история. Шагаю. И мелодия ...
Если в двух словах, то вот в этой записи https://zmey-gadukin.livejournal.com/227392.html Мне написали, что не все видят фото. А точнее, только 2. Но эти два были взяты со сторонних(украинских) ресурсов. Остальные фото я выложил со своего гуглфото. Раньше я так делал на яндексе и все ...