Попытка компании VMware восстановить облачный сервис после возникшего сбоя, неожиданно спровоцировала второй сбой на следующий день после первого. Новый облачный сервис Cloud Foundry, пока находящийся в стадии бета-тестирования, на прошлой неделе отключился почти на два дня. Интересно отметить, что параллельно с этим компания Amazon, крупнейший мировой поставщик публичных облачных сервисов, также столкнулась со сбоем, в результате которого ряд крупных сайтов отказались в оффлайне.
В VMware говорят, что первые проблемы на сервисе Cloud Foundry возникли 25 апреля и продолжались по 26 число включительно. Cloud Foundry был анонсирован 12 апреля как PaaS (platform-as-a-service) для программистов, создающих распределенные облачные приложения.
Первый инцидент, как выяснилось, был связан со сбоем в электропитании в части датацентра, отвечавшей за системы хранения данных. В результате этого сбоя сами приложения оставались доступными, но простейшие операции с данными оказывались недоступными. Сбой продолжался по меньшей мере 10 часов, после чего приложения постепенно начали получать доступ к данным.
Однако на следующий день VMware столкнулась со вторым сбоем, как раз когда компания проводила мероприятия по предотвращению таких проблем в будущем. В компании первый сбой называют "неприятностями, которые время от времени происходят".
Как раз для того, чтобы убедиться в надежности датацентра, компания начала проводить мероприятия, связанные с резервированием оборудования и питания. Предполагалось, что значительная часть операций вначале будет проведена на бумаге, а затем реализована на практике, однако в результате ошибки одного из администраторов произошло отключение всей системы питания, отвечающей за работы Cloud Foundry. В результате отключенными оказались не только серверы, но и балансировщики нагрузки, маршрутизаторы, системы хранения и межсетевые экраны. В VMware признают, что фактически второй сбой оказался даже серьезнее первого.
По словам представителей VMware, в результате второго сбоя в рабочем состоянии оказался лишь небольшой фрагмент сети, отвечающей за фронт-энд сервиса.
