How to become an author
Search
Write a publication
Pull to refresh

Comments 224

@clodo_ru Вы сами запустите сервера?
Компенсация будет?
Total votes 5: ↑4 and ↓1+3
Сервера сами запустим. Вопросы компенсации будем решать после решения аналогичного вопроса с ДЦ Оверсан-Меркурий.
Total votes 63: ↑18 and ↓45-27
неправильный ответ
Total votes 68: ↑63 and ↓5+58
А почему наша компенсация зависит от ваших разборок с оверсан? Мы же вам деньги платим, а не оверсану
Total votes 59: ↑58 and ↓1+57
да он шёл просто и провод ногой зацепил и 9 часов немог понять как его вставить обратно
Total votes 2: ↑1 and ↓10
UFO just landed and posted this here
вернули 2.5 рубля. Спасибо! Это того стоило!
Total votes 2: ↑2 and ↓0+2
Компенсация за 2-3 часа простоя это, конечно, хорошо: получится 2-3 рубля.
Даже если компенсация будет за день простоя, у меня на проекте с посещаемостью около 10к в сутки на Scale Server clodo тратится 30 рублей в день, что же мне эти 30 рублей компенсируют.

А кто компенсирует простой размещенной на сайте рекламы, простой собственных рекламных кампаний, которые ведут на «невозможно отобразить страницу», и как компенсировать лояльность пользователей, которая бесценна и снижается от таких падений
Total votes 4: ↑3 and ↓1+2
У нас такая же история, но обычно в этих случаях говорят — сами виноваты. На других надейся, а сам не плошай.
Total votes 1: ↑1 and ↓0+1
Так списания за диск идут! Вот их в первую очередь нужно компенсировать независимо от «компенсаций Оверсана».
This comment wasn’t rated yet0
Списания будут возвращены обязательно.
Total votes 1: ↑0 and ↓1-1
А в оферте о предоставлении услуг от компании Clodo прописано, что они несут ответственность за убытки, понесенные клиентом по причине возникновения подобных ситуаций?
Total votes 1: ↑0 and ↓1-1
Ну как бы п.7 «Регламент пользования услугами Оператора (далее — Регламент)» гласит:

Оператор не несет ответственности по претензиям Абонента к качеству соединения с сетью Интернет, связанным с качеством функционирования сетей других провайдеров, политикой обмена трафиком между провайдерами, с функционированием оборудования и программного обеспечения Абонента и другими обстоятельствами, находящимися вне зоны компетенции, влияния и контроля Оператора.

И как бы, лично я, не знаю компаний, предоставляющих подобные услуги, у которых бы не было этого пункта.
This comment wasn’t rated yet0
обстоятельствами, находящимися вне зоны компетенции, влияния и контроля Оператора
Почему-то мне кажется, что проблема-то была в зоне компетенции, влияния и контроля Оператора. Другое дело, что конечно же в оферте никакие компенсации за убытки не предусмотрены — услуги по договорам с таким пунктом стОят совсем других денег.
This comment wasn’t rated yet0
Насколько я понимаю Clodo арендует стойки в ДЦ, и если их правда и письмо в «шапке» действительно от Оверсана, то поясните каким образом Clodo может быть в компетенции над криворукими инженерами ДЦ?
Total votes 1: ↑1 and ↓0+1
Насколько я понимаю, Оверсан отключил питание на 15 минут, остальное время — подъем машинок уже в Clodo. Это ни разу не камень в огород Clodo — это просто аргумент, почему данный пункт регламента неприменим к сегодняшней ситуации.
This comment wasn’t rated yet0
за что заплатили то и получили
This comment wasn’t rated yet0
UFO just landed and posted this here
UFO just landed and posted this here
Да сегодня уже почти четыре часа простой! Маловат запас на год остался. Я тоже все равно люблю Clodo, но отбиваться от нетерпеливых юзверей слегка притомило уже.
Total votes 1: ↑1 and ↓0+1
Почему-то вспомнилось это —
habrahabr.ru/company/oversun-mercury/blog/87503/ и вот это — nnm.ru/print/Boomburum/istoriya_odnogo_data-centra/

Стабильность питания обеспечивается множеством источников бесперебойного питания и дизель-генераторными установками.

Если верить докладчикам, то в случае пропадания питания «из вне», генераторы смогут обеспечить полноценную работу всего ДЦ на протяжении десятка часов (без подвоза дополнительного горючего). И да, доступность электропитания – 99.982%.


Total votes 3: ↑2 and ↓1+1
никакие генераторы не спасут, если кто-то рубанет автомат уже «чистого» питания…
This comment wasn’t rated yet0
Цитата по первой ссылке:

«И в таких, прямо сказать, неблагоприятных условиях мы должны выполнять обязательства уже перед собственными клиентами. А им и дела нет до того, что где-то нетрезвый энергетик перепутал рубильники»

Да уж :)
Total votes 1: ↑1 and ↓0+1
"… Стабильность питания обеспечивается множеством источников бесперебойного питания и дизель-генераторными установками..., а также высокопрофессионально криворуким техническим персоналом, который даже в кромешной тьме найдет нужный рубильник!"

Лично я с тенерпением жду официального объяснения «ошибки» инженера, которая привела к многочасовому простою (если конечно это «ошибка инженера»).

И еще, может кто-то подскажет, инженеры действительно такие тугодумы, если ссылаются на временные параметры в отключении питания? Они типа че там не знают какие клиенты у них в ДЦ и что для них даже самое кратковременное отключение питания — это часы простоя? И эти люди предлагают услуги Оверсан-Скалакси?
Total votes 2: ↑1 and ↓10
Может быть кто-нибудь из «Оверсана» что-то наконец скажет?

Total votes 2: ↑1 and ↓10
Сказали же — пятница, они уже стоят в пробке по пути на дачу начальства нет на месте.
Total votes 2: ↑2 and ↓0+2
Неа.Я думаю карму берегут.
Total votes 1: ↑1 and ↓0+1
sarcasm Ну овесану теперь осталось еще сгореть с несработавшей системой пожаротушения и тогда можно считать попил 100% успешным. /sarcasm
Total votes 12: ↑12 and ↓0+12
Оно всегда невовремя…
Total votes 11: ↑10 and ↓1+9
Стабильно раз в месяц :) Больше 40 минут лежим. Что будет предпринято в этот раз?
Total votes 7: ↑7 and ↓0+7
В данной ситуации с нашей стороны вина лишь в выборе дата-центра. Вообще то, что проблема задела в основном clodo, заставляет нас сильно задуматься о возможности дальнейшего нахождения в ДЦ рядом с конкурентами. Особенно учитывая, что инженер Оверсана заявил, что причина аварии — человеческий фактор.
Total votes 16: ↑14 and ↓2+12
То есть существуют варианты по выбору датацентра и возможна даже смена ДЦ?
Total votes 1: ↑1 and ↓0+1
Технически это возможно, но требует от нас капитальных затрат, причем немалых.
Total votes 1: ↑1 and ↓0+1
Ясно. Надеюсь, что ситуация разрешится меньшими потерями, так как реализованная вами платформа очень приятна в использовании. Желаю успехов.
P.S: но всё же приходится держать резерв под приложения на сторонних площадках, м.б. имеет смысл сделать как у заграничных хостингов дополнительный дц для создания сервера?
Total votes 1: ↑1 and ↓0+1
Проект в Европе и в Санкт-Петербурге сейчас в разработке.
Total votes 5: ↑5 and ↓0+5
По моему это какая-то проказа Оверсана.
У меня это вызывает какие-то странные чувства. Надеюсь у Вас скоро все будет отлично.
Total votes 9: ↑8 and ↓1+7
У меня тоже первая мысль была — «Оверсан сливает конкурентов». У Оверсана тоже ведь есть scaled-решения.
Total votes 2: ↑2 and ↓0+2
У Оверсан-а есть Скалакси scalaxy.ru, якобы живущие своей жизнью.
Если учесть что технологии Скалакси на начальном этапе вместе с частью сотрудников перетекли в Клодо, то можно заподозрить тут попытку слива клиентов, но мне кажется что тут скорее всего хромает дисциплина инженеров в ДЦ.
Оверсан явно не готов распрощаться с Клодо, надо же деньги государству возвращать за мега стройку-роспил.
Total votes 5: ↑2 and ↓3-1
У нас не работает ни одного сотрудника ранее работавшего в Скалакси.
Total votes 2: ↑2 and ↓0+2
более того, могу утверждать, что до определенного момента никто из ключевых сотрудников оверсана не уходил. а после ухода тех, кто теоретически мог бы что-то «слить» — у клодо просто не хватило бы времени воспользоваться
Total votes 2: ↑2 and ↓0+2
Приятно что вы сообщаете об этом оперативно на хабре, еще бы в панели управления уведомляли.
А то после нажатия кнопки «Перезагрузить» и отсутствии признаков жизни от VPS начинаешь думать что то произошло именно с твоим сервером.
Total votes 5: ↑5 and ↓0+5
Зато поддержка среагировала моментально(ну как моментально, в течение 5 минут).

@everybody рекомендую закрыть активные тикеты и написать попозже, врядли шквал одинаковых заявок сильно поможет в решении.
Total votes 6: ↑6 and ↓0+6
>электричество лишь “моргнуло”
facepalm.jpg
А вообще какой-то проблемный оверсан получается, не находите? И всё это несмотря на десятки красивых фотографий…
Total votes 15: ↑15 and ↓0+15
И особенно радует описание с сайта:
Энергообеспечение

Электроснабжение дата-центра обеспечивается двумя независимыми вводами от трансформаторных подстанций (первая категория надежности по ПУЭ). Стабильность подачи питания поддерживается ИБП производства компании AEG (Германия) и дизель-генераторными установками (ДГУ) FG Wilson (Великобритания). Надежность питания оборудования в стойке гарантируется двойным независимым электроснабжением. Схема резервирования питания — N+1. Доступность электропитания — 99,982%.
Total votes 5: ↑5 and ↓0+5
Мдя… 0,018% это и есть тот пресловутый человеческий факор. Все эти ПУЭ, N+1 и прочее, ничто, против дебилов, уборщиц и совковой конкуренции!
Total votes 2: ↑2 and ↓0+2
Купить оборудования за миллионы могут, а обучить несколько человек аккуратно убираться/администрировать/набирать не дебилов что-то не позволяет.
Total votes 1: ↑1 and ↓0+1
Это и есть дебилы и совковая конкуренция. Купить оборудования на миллионы и отправить на уборку бабку за гроши.
Total votes 1: ↑1 and ↓0+1
Ошибка инженера — бабка уборщица шваркнула шваброй по шнурам питания?
Total votes 1: ↑1 and ↓0+1
Ошибка начальства: наняли бабку-уборщицу, вместо хоть теоретически разбирающегося в предмете человека.
Total votes 1: ↑1 and ↓0+1
На апрель 2010г. диз. генератор еще не был готов к запуску так как не хватало какие-то деталей и было еще много мелочи и недоделок.
Мне рассказывали сотрудники, когда в Оверсан приходили журналисты смотреть на красивые черные стойки специально для них старший инженер доставал мониторы и включал якобы рабочую систему мониторинга ))
Total votes 2: ↑2 and ↓0+2
В стойку надо два питала от разных фаз вести для победы надо подобными случаями.
А вообще, оверсан — караван и кто еще там раздут рекламой, простые дц уровня надежности 2+.
До 28 часов простоя в год, если кто не в курсе, сколько на рекламу денег не трать и какие золотые унитазы там не ставь.
This comment wasn’t rated yet0
Насколько я знаю, там так и сделано. И даже сервера подключены как положено — каждый БП в разные фазы. Но что то особо не помогло. Видимо рубильник общий для двух фаз.
This comment wasn’t rated yet0
Молотком оверсану по голове надо за такое настучать. Почуяли что Clodo намного лучше и удобнее их сервиса. И сделали чтобы «электричество моргнуло». В надежде что все от них убегут. Шыш! Не на тех напали!
Я еще больше вцеплюсь в Clodo и их защиту. Буду их верным пользователем!
Total votes 15: ↑9 and ↓6+3
Клининговая компания «Бабка Ефросинья» — профессиональное устранение хостинг конкурентов. :)
Total votes 2: ↑2 and ↓0+2
Clodo заметили падение продаж. Для этого они заплатили инженеру оверсана, чтобы «электричество моргнуло». Так находят верных пользователей :)
Total votes 7: ↑3 and ↓4-1
— А что у вас с электричеством?
— Оно моргнуло
Total votes 38: ↑35 and ↓3+32
Соринка в глаз попала, угу.
Total votes 1: ↑1 and ↓0+1
«Моргнуло», «человеческий фактор»… — да просто приятно, наверное, сервер конкурента пнуть.
Total votes 6: ↑6 and ↓0+6
Сразу оговорюсь, что это лично мое мнение, но эта же мысль не выходит у меня из головы.
Total votes 4: ↑4 and ↓0+4
Конечно, сейчас все побегут к скалакси, валить Вам надо оттуда…
Total votes 2: ↑1 and ↓10
Не побежим, там дороже:) А у нас денег нет, только если продать что-нибудь ненужное.
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here
UFO just landed and posted this here
UFO just landed and posted this here
UFO just landed and posted this here
Так скалакси это и есть Оверсан, в котором сейчас сбой.
Total votes 7: ↑2 and ↓5-3
сбой в оверсане, но затронул в основном только клодо. скалакси в норме видимо
Total votes 1: ↑1 and ↓0+1
Точно такой же сбой по питанию мог произойти и для Скалакси раз ДЦ один и тот же. А цены из-за мнимой надежности.
Total votes 2: ↑2 and ↓0+2
Неужели вы думаете, что в скалакси не знают какие рубильники ихние, а какие клодовские?
Total votes 4: ↑3 and ↓1+2
Восстанавливайтесь быстрее!

А теперь вопрос к супер-пупер-мега надежному Оверсан: получается неоправданно цены у вас завышены за надежность — надёжность мнимая.
Total votes 12: ↑11 and ↓1+10
Как-то очень долго идёт запуск ваших систем…
Total votes 4: ↑2 and ↓20
Увы, сложные системы не умеют запускаться мгновенно.
Total votes 4: ↑4 and ↓0+4
да хотя бы проверка файловой системы, — уже до 20 минут запросто.
This comment wasn’t rated yet0
40ТБ — 2,5 часа проверка.
This comment wasn’t rated yet0
можете озвучить примерное время, через сколько сервера поднимутся?
Total votes 1: ↑1 and ↓0+1
С достаточно большой вероятностью уложимся в час.
Total votes 1: ↑1 and ↓0+1
Итого простой будет 2 часа, обидно.
Total votes 1: ↑1 and ↓0+1
С момента комментария прошло 23 минуты.
Total votes 1: ↑1 and ↓0+1
а… я подумал, что вы имели в виду относительно момента отключения, а не комментария
Total votes 2: ↑2 and ↓0+2
и все же не уложились)
Total votes 2: ↑2 and ↓0+2
Стартовать виртуальные сервера уже начали. Я уже писал, что процесс постепенный, если сразу все стартовать будут проблемы.
Total votes 1: ↑1 and ↓0+1
Лежат и не пингуются по-прежнему. Общий простой — 4 часа.
This comment wasn’t rated yet0
Час прошёл. Как у вас обстоят дела? Нужны более точные сроки, пусть с запасом.
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here
Файловая система уже прочекана. Сейчас админы приступают к запуску виртуальных серверов. Но запускаются не все сразу, поэтому этот процесс займет некоторое время.
Total votes 1: ↑1 and ↓0+1
На динамо-велотренажере?
Total votes 4: ↑4 and ↓0+4
В гугле откройте закладку с картинками и наберите «орудуют дебилы» :)
Total votes 2: ↑2 and ↓0+2
это не «моргнуло»
это называется «просадка напряжения»
либо кто то счелкнул выключателем. иначе я не могу представить причем тут человеческий фактор
Total votes 1: ↑1 and ↓0+1
То что щелкнули выключателем подтвердил инженер дата-центра
Total votes 2: ↑2 and ↓0+2
Не ДЦ, а сказка. Ходят себе, щёлкают рубильники, похоже все кому не лень :)
Total votes 5: ↑5 and ↓0+5
from: bash.org

xxx: сижу, похмелье, пью зеленый чай
xxx: подлетает начальник, шевелит усами, кричит: «у эксплуатации проблемы, не могут скип отправить, срочно разберись, помоги»
xxx: напрягаю мозг, звоню, отвечает дежурный, спрашиваю: «сменный? Сзади шкаф ШК1, там реле K2Q, зажми, 5 секунд подожди, программа циклов и программа подач сбросятся на начальные позиции»
xxx: жду. На том конце трубка лежит на столе, оператор ищет реле. Жду. Тут у него трели звонков телефонных, а на наладочном объекте вроде некому звонить, мастер печи еще не парится, остальные и подавно
xxx: опускаю глаза… Не ту страничку открыл в блокноте, не на тот завод позвонил… Тихонько кладу трубку.
xxx: сижу, похмелье, пью зеленый чай
Total votes 23: ↑22 and ↓1+21
UFO just landed and posted this here
UFO just landed and posted this here
Не до всего оборудования дотянулась костлявая рука человеческого фактора.
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here
Электричество «мигнуло» не на всех наших стойках.
Total votes 1: ↑1 and ↓0+1
Простите, не силен в облаках, но если «мигнуло» не на всех, то почему вообще что-то упало? Я думал при падении отдельных серверов виртуальные машины должны мигрировать на оставшиеся.
И чем это отличается от дедика тогда кроме того что он бы ребутнулся и снова работал через минуту, а не через час.
Total votes 1: ↑1 and ↓0+1
Контроллер кластера и сторадж задело
Total votes 2: ↑2 and ↓0+2
Когда падал дата центр на Амазоне, я писал что мой экс работодатель переехал туда, но их не задело…
Но недавно они переехали на Клодо, в виду ряда объективных причин. И на этот раз их накрыло…

От судьбы не уйдешь…
Total votes 2: ↑2 and ↓0+2
Ещё один кандидат на должность чувака с долларами?
Total votes 2: ↑2 and ↓0+2
Так вот кто виноват в происшедшем, тогда простим работников оверсана, их руку само провидение направляло.
This comment wasn’t rated yet0
Кажется, что проблемы с кратковременным отключением питания типа «мигнуло» должен решать поставщик услуг размещения оборудования.
Total votes 2: ↑2 and ↓0+2
Решение поставщика — «сейчас питание на стойки подается в штатном режиме»
Total votes 1: ↑1 and ↓0+1
не поленился найти объявленные хар-ки, они не плохо звучат на бумаге:

Электроснабжение дата-центра обеспечивается двумя независимыми вводами от трансформаторных подстанций (первая категория надежности по ПУЭ). Стабильность подачи питания поддерживается ИБП производства компании AEG (Германия) и дизель-генераторными установками (ДГУ) FG Wilson (Великобритания). Надежность питания оборудования в стойке гарантируется двойным независимым электроснабжением. Схема резервирования питания — N+1. Доступность электропитания — 99,982%.
Total votes 4: ↑3 and ↓1+2
Это они описывают характеристики доступности электропитания в целом по ЦОДу. «Человеческий фактор», дергающий рубильники у отдельных стоек, тут не учтен.
Total votes 2: ↑2 and ↓0+2
Так у стойки же два независимых питания
Total votes 2: ↑2 and ↓0+2
Ага… и один независимый рубильник.
Total votes 5: ↑5 and ↓0+5
Как вы себе это представляете?
Total votes 1: ↑1 and ↓0+1
Такие решения широко применяются. Двойными блоками питания, например, оборудуются некоторые сервера.
Total votes 2: ↑2 and ↓0+2
Картинка с доклада на spbcode (не все так хорошо с облаками, как это рекламируют):

image
Total votes 32: ↑32 and ↓0+32
Гуглевское облако, что характерно, самое надежное — отказала часть облака, а не всё сразу. А остальные — лузеры, это да, до гугля им как до китая.
Total votes 1: ↑1 and ↓0+1
Я так и не понял, почему не сработали хваленые системы резервного питания?
Total votes 1: ↑1 and ↓0+1
Питание отключили уже на стойке, как я понимаю…
Total votes 1: ↑1 and ↓0+1
Официальный ответ нам обещали прислать в понедельник, так как сейчас руководства нет в офисе. Пока мы довольствуемся только ответом по e-mail:
============
Максим, еще раз здравствуйте.
Главный инженер службы эксплуатации дата-центра, к сожалению, не полномочен выступать от лица компании с письменным обращением о произошедшем сбое. Сейчас мы готовы дать ответ только в электронном виде:
Сегодня 20.05.2011г. в 12.50 в связи с ошибкой инженера произошло кратковременное (менее 1 минуты) падение электоэнергии в дата-центре, которое затронуло часть оборудования.
Мы приносим свои извинения за возникший инцидент и можем гарантировать, что исключили возможность повторения подобной ситуации в будущем.
============

Ждем в понедельник официальное письмо
Total votes 2: ↑2 and ↓0+2
За выходные что нибудь придумают, не переживайте…
Total votes 2: ↑1 and ↓10
Интересно как они исключили возможность повторения такой ситуации в будущем? Уволили это инженера?
Total votes 3: ↑3 and ↓0+3
Нет, просто пообещали. Так сказать, ни к чему не обязывающее обещание )
Total votes 1: ↑1 and ↓0+1
Перевесили ярлычек с «Клодо» на пустую стойку :)
Total votes 2: ↑2 and ↓0+2
В прошлый раз Клодо в почте тоже написали что исключили этот фактор, 1 в 1 было письмо :) Тоже было лишь такое предположение.
Total votes 1: ↑1 and ↓0+1
Мы его у себя исключили. Но за действия третьих лиц мы никак не можем поручиться.
Total votes 3: ↑3 and ↓0+3
Наймите охранников пусть посменно сидят рядом с вашим рубильником в ДЦ :))
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here
UFO just landed and posted this here
Это грустно.
П.с.: не смотря на сбои, мне (в прошлый раз) понравилась постреакция на сбой, и то письмо я уже ставил несколько раз в пример, как нужно работать с клиентами в случае ЧП.
Total votes 1: ↑1 and ↓0+1
— «Ну и что нам с тобой делать Бородач?»
— «Понять и простить»
This comment wasn’t rated yet0
Рубильник был главным с ярлычком Clodo :)
Total votes 1: ↑1 and ↓0+1
Потому что они стоят до рубильника…
Total votes 2: ↑2 and ↓0+2
«worldoftanks_ru 14:08:42, 20 мая 2011 г.
В московском дата-центре проблемы с электропитанием. Ждем, пока всё устранят. Приносим свои извинения. =(»

Дак вот где хостятся теперь сервера WOT
Total votes 5: ↑4 and ↓1+3
Идет обновление программного обеспечения. Повторите запрос позже. :)
Total votes 2: ↑1 and ↓10
Мой так и не поднялся. При попытке ребутнуть в панели «Неизвестаня ошибка»
Total votes 1: ↑1 and ↓0+1
Не надо пытаться самостоятельно что то сделать. Мы сами все запустим.
Total votes 1: ↑1 and ↓0+1
Ок. Просто «оборудование начало включаться примерно через 25-26 минут после отключения… » расценил как то, что уже должно работать, учитывая что сейчас 15:10.
Делайте…
Total votes 1: ↑1 and ↓0+1
Включились железки. Облако это не только железки но и ПО. Старт всего комплекса занимает какое то время.
Total votes 1: ↑1 and ↓0+1
Во-во, именно эта проблема меня и беспокоит больше всего. Помимо того, что синхронный старт клиентов — это дикий всплеск нагрузки, то и количество машин ставит вопрос о том, как долго будет идти выход на штатные показатели.
Total votes 3: ↑2 and ↓1+1
сегментируй меньшими кусками, типа: два стора, 6 серверов. каждый такой сегмент поднимается не быстро, но за то ты сможешь запустить все сегменты одновременно.
This comment wasn’t rated yet0
Эта проблема понятна, понятна так же идея сегментирования, но очень много вопросов завязано на централизованное управление — пустить каждый компонент в свободное плавание никто не рискует (мы, по-крайней мере, нет), а централизованная (хоть вся из себя кластерная) система всегда точка затыка.

Пока до этого не дошли руки, но всю архитектуру нужно серьёзно менять, чтобы делать облако не только на уровне клиента, но и в рамках management-структур…
Total votes 2: ↑1 and ↓10
Подумать над распределенной системой управления? в принципе запасной управляющий хост может висеть вообще где-то у конкурентов и рулить по vpn работой сегментов облака. Биллинг понятное дело туда не вынесешь, но тут уж лучше пол дня биллинга потерять, чем аптайма.
This comment wasn’t rated yet0
Не-не-не, это проблема другого уровня.

Например, когда машина запускается, ей нужно иметь специфичные настройки. Фильтрация IP на интерфейсе, настройки регуляции памяти и т.д.

Где их брать? Когда «всё живое» — эти настройки хранятся в централизованной БД, а кешированная копия — в памяти обслуживающего хоста. Штатно предполагается, что централизованная система может лечь ненадолго, а хосты продолжат работать на кешированной копии. Альтернативно, если ложится хост, он ждёт ответа централизованной системы перед первыми запусками.

А теперь представим, что у нас «старт всего». Все ждут централизованной системы, остальные в это время имеют race за ресурсы и т.д… Тут простых решений нет, нужно садиться и делить администрирование на зоны — а это тяжело и опасно, потому что можно запросто получить конфликтную/противоречивую информацию в разных зонах…
Total votes 2: ↑1 and ↓10
Я не понимаю, что мещает иметь этот хост централизованной системы запущенным где-то на впс у конкурентов, в качестве последнего эшелона? локальный еще не поднялся, забрали данные с удаленного. Подтом поднимется — синхронизируется с живым.
This comment wasn’t rated yet0
Рисков не особо много и они нормально купируются. Другое дело, что провайдеру нужно решить для себя, стоит ли тратить время и менять систему для такой редкой ситуации как эта. Наверное, если разница будет между 1 часом и 6 часами, то стоит.

Децентрализация, конечно, ускоряет значительно — когда у TrueVDS была похожая ситуация с аварийным обесточиванием, на выход в рабочий режим 90% машин потребовалось около 30 минут. Хотя в основом это из-за организации дисковой системы получилось, и это был скорее побочный эффект, так как цель обеспечивать в первую очередь быстрый старт после аварий не ставилась.

Но у вас ведь XCP? У меня было впечатление, что там настройки всех гостей хранятся в децентрализованном сторедже средствами самого XCP. Что должно автоматически решать вопрос и избыточного хранения настроек, и быстрого старта, Или это не так?
Total votes 1: ↑1 and ↓0+1
У нас XCP только как «middleware», сверху там много своего.

Кроме того, у XCP хранение-то информации о пуле децентрализовано, а вот операции — централизованы и проходят через мастера. Так что в наш прошлый ляп с рейдом (около часа даун) 10 минут был даун и 50 минут — старт клиентских машин. Хоть там и был какой-никакой параллелизм, но очень ограниченный.
This comment wasn’t rated yet0
Если мастер выбывает, что происходит? Новый автоматом выбирается?
This comment wasn’t rated yet0
В xcp мастером может быть назначен любой хост пула, но эта операция всегда делается руками, чтобы не огрести массовый сплитбрейн.
This comment wasn’t rated yet0
UFO just landed and posted this here
Буквально за 20 минут до сбоя оплатили услуги.
И тут такая задница.
Total votes 1: ↑1 and ↓0+1
У меня ни один сервер не поднялся.
Есть тут счастливчики?
Total votes 2: ↑1 and ↓10
Счастливчиков пока немного. Около 100 клиентов. Стартуем постепенно.
Total votes 1: ↑1 and ↓0+1
У меня два сервера поднялись ))
Total votes 1: ↑1 and ↓0+1
UFO just landed and posted this here
Пять часов ровно… В панели по-прежнему статус «Ошибка»
This comment wasn’t rated yet0
Разговор двух админов:
— А у меня вчера друг за пять минут сервер сломал…
— Он что, хакер?!
— Нет, он просто дурак!!!
Total votes 5: ↑5 and ↓0+5
Некоторые оплатили на год… есть такие
Total votes 2: ↑2 and ↓0+2
Серваки были за упсами, а какой-нить рутер без. Это нормально для серьезного рутера подниматься 20мин))
Это все еще та же страна… могли и такую схему запустить в работу
Total votes 7: ↑2 and ↓5-3
У серваков есть логи.
Total votes 2: ↑2 and ↓0+2
3 часа лежать это уже не серьезно.
Total votes 3: ↑2 and ↓1+1
Клиентов уже запускаем. Перед запуском клиентов, система требует провести ряд проверок которых не избежать. Не серьезно было бы не сделать этих процедур.
Total votes 2: ↑2 and ↓0+2
Не серьезно падать во время компиляции в /tmp когда при загрузке он очищаеться… и УЖЕ списать деньги за недокомпилированный сервис
Total votes 5: ↑5 and ↓0+5
Попробую сейчас объяснить это моему начальству:)
Total votes 3: ↑3 and ↓0+3
Мое уже сказало: Надоели падения! Нес-ко раз в неделю! Съезжаем :) примерно так.
Total votes 6: ↑6 and ↓0+6
Присерно такой же ответ и я получил, но так не хочется покидать любимый clodo, восстанавливайтесь скорее ребята и больше не падайте.Желаю только удачи и бурного развития в дальнейшем.
This comment wasn’t rated yet0
Уже почти 4 часа даунтайм. Печально же.
Total votes 1: ↑0 and ↓1-1
Простите, можно узнать, когда, ориентировочно, всех включат?
Total votes 1: ↑0 and ↓1-1
Сейчас всех стартуем. Пятую часть уже запустили.
This comment wasn’t rated yet0
Ну то есть, некоторые заработают только часа через 3-4?
Total votes 1: ↑0 and ↓1-1
Все заработают гораздо раньше
This comment wasn’t rated yet0
Один заработал.
На втором красная табличка «ошибка».
Вы его включите?
Total votes 1: ↑0 and ↓1-1
Там же. Но веб-морды на отдельных железках и не в составе кластера.
This comment wasn’t rated yet0
Проясните ситуацию. Оверсан и Clodo.ru — партнеры?

Если так, то Оверсан не слишком то честный партнер. В одной из прошлых статей они (Оверсан Скалакси) довольно нелестно отзывались о Clodo.ru и несколько раз подчеркивали что последние используют устаревшую версию их оборудования.

И вот теперь устроили им отключение стоек, как бы случайно (лично я в такие случайности не верю).

В общем, если я все правильно понял — то рекомендую Clodo.ru отказаться от такого «партнерства». Иначе это тупик.
Total votes 5: ↑2 and ↓3-1
МЫ являемся клиентами ДЦ Оверсан-Меркурий — арендуем у них стойки.

Скалакси предположили, что мы используем устаревшую версию их программной архитектуры. Не оборудования.
Total votes 2: ↑2 and ↓0+2
>Скалакси предположили, что мы используем устаревшую версию их программной архитектуры. Не оборудования

Точно, прошу прощения.

ДЦ Оверсан-Меркурий и Оверсан-Скалакси — это одна и так же компания (т.е. те самые, которые писали порочащую статью на Хабре)?
This comment wasn’t rated yet0
ДЦ Оверсан-Меркурий официально сообщил нам, что статья опубликованная в блоге Оверсан является личным мнением их технического директора Дмитрия Лоханского и непосредственно Оверсан не имеет к этому отношения.
This comment wasn’t rated yet0
>является личным мнением их технического директора Дмитрия Лоханского

Хм. Но там была разглашена конфиденциальная информация (к которой имел доступ только инсайдер). Причем статья была написана в корпоративный блог (я так понимаю от имени Scalaxy).
This comment wasn’t rated yet0
У нас были вопросы к Оверсан по этому поводу. Суть официального ответа я уже передал выше.
This comment wasn’t rated yet0
Нас тоже это напрягает. Размещаясь в ДЦ Оверсан-Меркурий, мы полагали, что информация о нас не будет доступна нашим прямым конкурентам.
image
Total votes 3: ↑1 and ↓2-1
а что за статья? можно ссылочку?
This comment wasn’t rated yet0
Очень подозрительно что первоначальная архитектура СХД в Клодо в точности совпадает с той, которая была у Скалакси изначально, причем включаю конфигурацию железа. Позже Скалакси от нее отказалась, перейдя на другую а вы просто нарезали GPFS на несколько частей чтобы быстрее восстанавливаться.
Кроме того известно что некоторые из сотрудников Скалакси перешли в Клодо свое время, принеся нужные технологии и теперь Скалакси в лице Оверсана вполне возможно точит зуб на Клово.
Total votes 9: ↑4 and ↓5-1
Почему Вы так уверенно говорите о нашей архитектуре и о том что у нас работают бывшие сотрудники Скалакси? У Вас есть какая то информация которой нет у генерального директора Clodo?
Total votes 2: ↑2 and ↓0+2
бред не несите — в свое время никто из ключевых сотрудников оверсана не уходил
Total votes 2: ↑1 and ↓10
Приведу свои доводы:

1. Д. Лоханский в своем блоге habrahabr.ru/company/oversun/blog/117260/ явно пишет
«Clodo — коллеги, работающие с первой версией нашей архитектуры 2008 года, IBM GPFS хранилище, решение на базе Xen.» — если у Клодо архитектура другая получается что он ВРЕТ?
Если смотреть старые скриншоты архитектуры скалакси и нынешней Клодо (до того как они попилили GPFS на несколько частей) начинаешь верить Лоханскому.

2. Подозрительное сходство в использовании оборудования. Самое странное что и Скалакси и Клодо используют очень дорогой Infiniband. Заметьте что больше ни один рус хостинг подобные штуки не ставит — они очень дорогие и сильно снижают окупаемость хостинга. Скалакси можно понять здесь — они себя изначально позиционировали под размещение гос проектов и рос космоса и денег из гос бюджета не жалели а вот с Клодо — тут непонятны причины.

Исходя из этого можно заключить что технологии Скалакси каким-то образом попали в Клодо.

Вопрос как?
По логике вещей ответ тут только один — люди пришли и помогли/научили/поставили. Это должны быть люди которые умеют работать с очень ДОРОГИМ Infiniband, f5 и тд. Должны разбираться в cхемах построения инфраструктуры с использованием Infiniband для организации хостинга.

Кто мог за короткий срок помочь создать нужную инфраструктуру?
Ответ тоже навязывается сам — кто-то из организации, которая уже это сделала или этим занималась. На тот момент это был один хостинг — Скалакси.

Какие образом и кто помог Клодо освоить все эти технологии?
Кто-то из сотрудников перешел в Клодо, а может и не проходил а находился всегда в стороне, показывал, настраивал, учил — мне лично все равно. Для меня важнее последствия.

А последствия я лично вижу следующие:

1. У Оверсана есть проблемы с организацией работы — сегодня они всем это доказали
2 Клодо использует технологии Скалакси которых добился явно меньшими затратами за что Скалакси держит зуб на Клодо и и своих тестах их выставляет в конец списка облачных хостеров
Total votes 4: ↑2 and ↓20
Логика у вас просто «железная». И все так складно в «анализе» архитектуры. Особенно порадовал «попиленный на зоны GPFS», монополия Скалакси на infiniband и предположение, что специалисты, которые умеют работать с технологиями есть только в Мрскве и все они трудятся в Скалакси.
Total votes 2: ↑1 and ↓10
а де факто?) любопытно.

P.S.: тоже бывший сотрудник Scalaxy, хорошая команда там была, когда я там ваял, с Clodo не сотрудничал, если что :)
Total votes 1: ↑1 and ↓0+1
Что именно любопытно?
This comment wasn’t rated yet0
1. До запуска Скалакси было офигенное кол-во конференций, на которых, в том числе и Дима, довольно подробно рассказывали об архитектуре. то что прошло очень много времени от раскрытия архитектуры до реального запуска Скалакси и что за это время можно было построить работающую систему — явно не проблема Клодо.
2. То что пишет Дима, надо заметить не в своем, а корпоративном блоге — это его личное мнение и только. Если было бы иначе — есть суды, есть закон о коммерческой тайне, как умеет судится Оверсан все знают. Но, на сколько я знаю, никаких реальных доказательств слива нет — только логические выводы. Собственно поэтому наверное и исков нет.
3. Похожесть панелей очень относительная. Они похожи только в общих, очевидных подходах. Кстати доступ к интерфейсам панели был далеко не у всех. А так чтоб и к описании архитектуры и к интерфейсам — так вообще у единиц. Большая часть из которых были руководители.
4. Мне кажется естественным возникновение вопроса о том, откуда такие знания о конкуренте? Мне кажется, что в отличии от, Клодо так активно не участвовало в конференциях и не раскрывало столь подробно свою архитектуру.
Еще раз повторюсь — никто из ключевых сотрудников не уходил из Скалакси в обсуждаемый период (когда передача данных могла бы дать преимущество).
This comment wasn’t rated yet0
так, это уже не смешно, когда запустят все машины?
Total votes 2: ↑2 and ↓0+2
Присоединяюсь. Время 19.16 по МСК, у нас 2 сервера лежат. Мне нравиться Clodo.ru, но невольно уже начинаешь задумываться об альтернативах. Я понимаю 1-2 часа. Но 6 — это уже серьезно.
Total votes 2: ↑2 and ↓0+2
сижу жду пока начнут матом ругаться, а вообще тоскливо
Total votes 2: ↑2 and ↓0+2
Уже почти 7 часов дауна, негодую :(
Думаю над альтернативами.
Total votes 4: ↑3 and ↓1+2
Один сервер поднялся, второй все еще лежит.

Ответ саппорта:

Здравствуйте.
Быстрее не получится. Сервера запускаются в порядке очереди.
This comment wasn’t rated yet0
Странно что на форуме самого clodo тишина. Хорошо хоть здесь какая-то информация есть. Машина запущена, но, судя по всему, не имеет доступа к диску. Перезапустить не получается:«Действия временно недоступны».
Total votes 1: ↑1 and ↓0+1
А я у вас зарегистрировался! Давно хотел посмотреть на vps — и вот собрался.
Нравится.
Total votes 2: ↑2 and ↓0+2
Всё понравилось, буду пользоваться.
Только iptables не работает на Ubuntu 10.04-amd64, на форуме об этом пишут, завтра почитаю.

Свой сайт уже перенес, протестировал loadimpact: 1 — 2 мс, я доволен.
This comment wasn’t rated yet0
Что-то мне кажется, что у Скалакси, такого «моргания» не будет никогда… Моя VPSка как пару часов бегает.
ps: и правда бы лучше сделали глобальное уведомление/рассылку о проблеме, а так бедный саппорт на однотипные тикеты отвечать.
Total votes 2: ↑0 and ↓2-2
вообще-то падения есть и у Scalaxy, просто не такие масштабные. Никто не безгрешен.
Total votes 4: ↑3 and ↓1+2
можем гарантировать, что исключили возможность повторения подобной ситуации в будущем.
Примотали скотчем все вилки к розеткам
Total votes 3: ↑3 and ↓0+3
UFO just landed and posted this here
ув. представители Colodo, вы же знаете что критическая единица потребления электропитания — стойка. ну кто же вам мешает распихать все свои сервера по разным стойкам, таким образом чтобы обесточивание _1_ стойки не приводило к фаталам? вам лениво поговорить с оверсаном о том чтобы хитро осуществить эл. коммуникации?
Это такая проблема поставить по 1му дополнительному UPS на каждый ключевой сервер прямо в стойку и запитаться напрямую от него?

у нас все ржут теперь: над новый вид безоблачного хостинга или как компенсировать ущерб репутации клиентов чтобы слово «клоуны» не примешивалось к бренду.
Total votes 6: ↑3 and ↓30
ну все как всегда, и заминусовали, и конструктивно не ответили, и деньги не вернули. и заметьте, кроме пустых обещаний — никакого конструктива… впрочем пофиг, всеравно вы не признаете что молодые и несовершенные, и что у вас еще есть куча рисков и проблем. не признаете и на главной не напишете.
Total votes 4: ↑2 and ↓20
Sign up to leave a comment.

Articles

Show the best of all time
Unlock dark mode

Your account

Sections

Information

Services

Support
© 2006–2024, Habr