Открыть список
Как стать автором
Обновить
  • по релевантности
  • по времени
  • по рейтингу

Shit happens. Яндекс удалил часть виртуальных машин в своем облаке

IT-инфраструктураОблачные вычисленияСерверное администрированиеDevOpsОблачные сервисы
image
Кадр из фильма Мстители: Война бесконечности

По сообщению пользователя dobrovolskiy 15 мая 2019 года в результате человеческой ошибки Яндекс удалил часть виртуальных машин в своем облаке.

Пользователь получил письмо от техподдержки Яндекса с таким текстом:
Сегодня мы проводили технические работы в Яндекс.Облаке. К сожалению, из-за человеческого фактора были удалены виртуальные машины пользователей в зоне ru-central1-c, которые хоть раз находились в статусе SUSPENDED. Мы сразу заметили ошибку и остановили удаление. Увы, некоторые ВМ и их boot-диски были удалены.

В результате пользователем были полностью потеряны некоторые продакшн-сервера. Бекапы у пострадавшего были, но часть данных всё равно утрачена безвозвратно. Обычно Яндекс компенсирует даун-тайм своих сервисов, согласно своей политике, но кто компенсирует потерю данных?

UPD Яндекс официально подтвердил инцидент и прокомментировал ситуацию.
Читать дальше →
Всего голосов 130: ↑118 и ↓12 +106
Просмотры102.5K
Комментарии 268

[Санкт-Петербург] 12 сентября митап в офисе Яндекса про облака и управление проектами цифровой трансформации

IT-инфраструктураSaaS / S+SУправление проектамиDevOpsОблачные сервисы
Цифровизация или цифровая трансформация — понятие, которое описывает технологические улучшения в бизнесе. Цифровизация подразумевает разнообразные изменения, но их объединяет одно: сбор и обработка огромных массивов данных с применением машинного обучения и облачных решений.

12 сентября Яндекс.Облако и компания «21 век» поделятся кейсами цифровой трансформации.

Вы узнаете:
Читать дальше →
Всего голосов 12: ↑9 и ↓3 +6
Просмотры1.3K
Комментарии 0

Yandex Scale. 1 октября мы проведем первую большую конференцию про облачные технологии

Блог компании ЯндексХостингВиртуализацияОблачные вычисленияОблачные сервисы
Виртуальные машины, управляемые базы данных, объектные хранилища – всем этим пользуются и отдельные разработчики, и небольшие стартапы, и крупные корпорации. Но облачная платформа – это не просто набор полезных сервисов. Это экосистема, которая живет, растет и развивается. И именно об этом мы хотим поговорить 1 октября на первой большой конференции Яндекс.Облака – Yandex Scale.

Yandex Scale – это, пожалуй, первая большая российская облачная конференция, где разработчики будут подробно рассказывать о собственных продуктах, делиться знаниями, реальными бизнес-историями и помогут вам на практике познакомиться с действующими и новыми сервисами платформы. И, конечно, наша конференция не обойдется без крупных анонсов.

Читать дальше →
Всего голосов 14: ↑12 и ↓2 +10
Просмотры1.8K
Комментарии 5

Яндекс.Облако запустила автоматически обновляемую систему управления базами данных вместе с Mongo DB

Хранение данныхХранилища данныхФинансы в ITIT-компании


Разработчик системы управления базами данных MongoDB и платформа Яндекс.Облако объявили о партнерстве. Яндекс.Облако стала первым официальным партнером MongoDB в России. Платформа предоставила компании сервис Managed Service for MongoDB, который помогает поддерживать кластеры баз данных на основе СУБД Mongo DB.

«MongoDB — популярное NoSQL-решение для хранения данных с открытым исходным кодом. С Managed Service for MongoDB вы можете создавать, эксплуатировать и масштабировать нереляционные базы данных MongoDB в инфраструктуре Яндекс.Облака», — поясняют в Яндекс.Облаке.
Читать дальше →
Всего голосов 16: ↑14 и ↓2 +12
Просмотры3.4K
Комментарии 0

Яндекс.Облако стало первой платформой из РФ, которая подтвердила соответствие международным стандартам

Информационная безопасностьIT-стандартыЯндекс APIОблачные сервисы
image

Яндекс.Облако — первая в России и СНГ публичная облачная платформа, которой удалось выстроить управление информационной безопасностью по стандарту ISO/IEC 27017:2015 и обеспечить защиту персональных данных пользователей по международному стандарту ISO/IEC 27018:2019. Соответствие стандартам подтвердил независимый аудитор — Британский институт стандартов (BSI).

BSI заявил, что Яндекс.Облако соответствует требованиям трех международных стандартов информационной безопасности: ISO/IEC 27001:2013, ISO/IEC 27017:2015, ISO/IEC27018:2019. Два из них подтверждены в России впервые.
Читать дальше →
Всего голосов 23: ↑20 и ↓3 +17
Просмотры11.1K
Комментарии 14

Яндекс.Облако и Nvidia открыли библиотеку приложений для работы с ИИ в России

Облачные сервисыИскусственный интеллект
image

Облачная платформа «Яндекс.Облако» и Nvidia открыли для российских разработчиков библиотеку приложений для работы с искусственным интеллектом и машинным обучением – Nvidia GPU Cloud (NGC). Яндекс.Облако стала первым публичным облаком в России со статусом официального партнера c NGC-сертификацией от Nvidia.
Читать дальше →
Всего голосов 6: ↑6 и ↓0 +6
Просмотры2.3K
Комментарии 0

Яндекс.Облако открывает доступ к сервису для ML-обучения Yandex DataSphere

Облачные вычисленияМашинное обучениеОблачные сервисыIT-компании
image

Яндекс.Облако предлагает опробовать новый сервис Yandex DataSphere для разработки машинного обучения. Сервис работает в режиме preview по предварительной регистрации, а пользоваться им можно бесплатно.
Читать дальше →
Всего голосов 12: ↑12 и ↓0 +12
Просмотры3.9K
Комментарии 1

Зарубежные компании в 2020 году начали активнее закупать облачные мощности в РФ

IT-инфраструктураОблачные сервисыIT-компании

В International Data Corporation (IDC) сообщили, что в прошедшем году иностранные компании из финансовой и розничной сферы начали активнее закупать облачные мощности у российских поставщиков. Аналитики объясняют это тем, что российская облачная инфраструктура стала более конкурентоспособной как по цене, так и по функционалу.

Кроме того, многим компаниям теперь необходимо хранить персональные данные российских клиентов на территории страны.

Читать далее
Всего голосов 11: ↑10 и ↓1 +9
Просмотры2.1K
Комментарии 3

Экспресс-обзор производительности PostgreSQL 10.5 в новейших облачных сервисах Яндекс.Облака

PostgreSQLDevOpsОблачные сервисы
Буквально на днях Яндекс открыл доступ для beta-пользователей к своему новому сервису — Яндекс.Облако. Так вышло, что это событие совпало с необходимостью выбора облачной платформы для одного из наших внутренних проектов и я решил сразу протестировать производительность решений Яндекса.

Для теста я взял PostgreSQL и старый добрый pgbench. Выбор на СУБД пал потому что было интересно протестировать и сравнить производительность не только виртуальных машин, то и managed database сервисов.

Disclaimer: автор не является ни профессиональным админом, ни DBA, ни специалистом по настройке облачных решений. Тестирование проводилось сугубо в личных целях и на объективность не претендует, поэтому прошу воспринимать статью «as is». Внутри не будет какого-то глубокого разбора, но будет экспресс-сравнение с Selectel VPC (на разных дисках) и различными конфигурациями AWS EC2/RDS в части производительности и стоимости решений. Возможно, это сэкономит кому-то немного времени.

Подробности Yandex.Cloud vs Selectel VPC vs AWS под катом.
Читать дальше →
Всего голосов 18: ↑18 и ↓0 +18
Просмотры8.1K
Комментарии 21

Эволюция Backend as a Service: второе пришествие Scorocode

Блог компании ScorocodeGoРазвитие стартапаОблачные сервисы
Здравствуй, Хабр.

Мы прерываем длительное молчание и объявляем о выходе второй версии Scorocode.
Это даже не эволюция, а рождение нового сервиса.

Год работы, Docker, Kubernetes, Яндекс.Облако, и т.п.

Предупреждая вопрос «А зачем тут хаб Go?», отвечаю — все сервисы Scorocode написаны на Golang, именно этот язык у нас является основным в стеке технологий.

За подробностями прошу под кат.
Читать дальше →
Всего голосов 12: ↑9 и ↓3 +6
Просмотры3.6K
Комментарии 0

Яндекс открывает Облако. Архитектура новой платформы

Блог компании ЯндексIT-инфраструктураОблачные вычисленияОблачные сервисыIT-компании
image

Сегодня Яндекс.Облако стало доступно всем. Теперь любой пользователь может зайти в Облако и развернуть необходимые ему ресурсы, получив доступ к технологиям Яндекса. Например, к машинному переводу и распознаванию и синтезу речи.

Сегодня я хочу познакомить вас с Яндекс.Облаком и рассказать, как оно устроено внутри. Под катом вы узнаете немного об истории, команде и архитектуре нашей платформы.

Читать дальше →
Всего голосов 87: ↑85 и ↓2 +83
Просмотры57.8K
Комментарии 139

Как без даунтайма масштабировать базы данных в Яндекс.Облаке. Пример с тремя хостами

Блог компании ЯндексIT-инфраструктураАдминистрирование баз данных
Tutorial
Пост подготовили участники команды Яндекс.Облака: Иван Веткасов — архитектор, Леонид Клюев — редактор

Недавно мы рассказали об архитектуре Яндекс.Облака. Теперь давайте перейдем от теории к практике. В Облаке есть несколько сервисов для автоматизированного контроля за СУБД: Managed Service for ClickHouse, Managed Service for PostgreSQL и Managed Service for MongoDB. Все они являются платформенными и позволяют сосредоточиться на задаче хранения данных, а не на администрировании инфраструктуры. Но иногда бывает важно контролировать ещё и виртуальные машины кластера. Например, может возникнуть задача масштабирования в ответ на увеличение или снижение нагрузки. Обычно этот сценарий — один из самых трудоёмких с практической точки зрения. Сегодня мы расскажем, как Яндекс.Облако позволяет автоматизировать сложные задачи масштабирования, и убедимся, что база остаётся доступной в процессе изменения размера кластера.


Читать дальше →
Всего голосов 26: ↑25 и ↓1 +24
Просмотры7.8K
Комментарии 3

MPLS повсюду. Как устроена сетевая инфраструктура Яндекс.Облака

Блог компании ЯндексIT-инфраструктураСетевые технологииОблачные сервисыСетевое оборудование
Пост подготовили: Александр Вирилин xscrew — автор, руководитель службы сетевой инфраструктуры, Леонид Клюев — редактор

Мы продолжаем знакомить вас с внутренним устройством Яндекс.Облака. Сегодня поговорим о сетях — расскажем, как устроена сетевая инфраструктура, почему в ней активно применяется непопулярная для дата-центров парадигма MPLS, какие ещё сложные решения нам приходилось принимать в процессе построения облачной сети, как мы ей управляем и какие мониторинги используем.

Сеть в Облаке состоит из трёх слоёв. Нижний слой — уже упомянутая инфраструктура. Это физическая «железная» сеть внутри дата-центров, между дата-центрами и в местах присоединения к внешним сетям. Поверх сетевой инфраструктуры строится виртуальная сеть, а поверх виртуальной сети — сетевые сервисы. Эта структура не является монолитной: слои пересекаются, виртуальная сеть и сетевые сервисы напрямую взаимодействуют с сетевой инфраструктурой. Поскольку виртуальную сеть часто называют overlay, то сетевую инфраструктуру мы обычно называем underlay.
Читать дальше →
Всего голосов 50: ↑50 и ↓0 +50
Просмотры24.9K
Комментарии 27

1С и Яндекс.Облако Compute Cloud. Вдоль и поперек

Облачные вычисленияАдминистрирование баз данных1С-БитриксОблачные сервисы
Бороться и искать. Найти и перепрятать

Достаточно популярная поговорка во времена Союза.

Вот и сейчас, те у кого сервер 1С в локальной сети мечтают вынести его в облако, а те у кого в облаке прикупить свой в локальную сеть.

7 декабря 2018 г. AlexandrSurkov пригласил желающих: Яндекс открывает Облако. Архитектура новой платформы

Как у обычного пользователя у меня не нашлось чем занять этот ресурс, но как 1С-ник я подумал: А пуркуа бы и не па ? И попробовал положить в облако от Яндекса 1С Предприятие.

Тестирование Яндекс.Облако Compute Cloud для 1С Предприятие оставило у меня приятное впечатление.

Возможно кто-то повторит его и внесет больше ясности в настройки виртуальных серверов, использованию API и так далее. Интересующихся прошу продолжить чтение…


Читать дальше →
Всего голосов 29: ↑25 и ↓4 +21
Просмотры20.9K
Комментарии 57

Архитектура сетевого балансировщика нагрузки в Яндекс.Облаке

Блог компании ЯндексВысокая производительностьСетевые технологииОблачные сервисы

Привет, я Сергей Еланцев, разрабатываю сетевой балансировщик нагрузки в Яндекс.Облаке. Раньше я руководил разработкой L7-балансировщика портала Яндекса — коллеги шутят, что чем бы я ни занимался, получается балансировщик. Я расскажу читателям Хабра, как нужно управлять нагрузкой в облачной платформе, каким мы видим идеальный инструмент достижения этой цели и как движемся к построению этого инструмента.
Читать дальше →
Всего голосов 47: ↑47 и ↓0 +47
Просмотры14.7K
Комментарии 5

Опыт вывода программной реализации социального проекта «Вспомнить каждого» в опенсорс

Open sourceNode.JSMongoDB
Из песочницы
В прошлом году, нашей команде повезло принять участие в разработке программного обеспечения для социально значимого проекта – системы ввода архивных данных военных комиссариатов Хабаровского края времен Великой Отечественной войны. Кратко говоря, когда был призван, куда убыл и другую связанную с этим информацию – оцифровать и дать возможность искать эти данные кому угодно. Дальневосточный центр социальных технологий в 2018 году, при поддержке Фонда президентских грантов, реализовывал проект — «Вспомнить каждого». А мы, разработали приложение на нашем опенсорсном продукте IONDV. Framework. Итоговое приложение сейчас доступно под лицензией GPLv3.

Делимся нашим решением и опытом работы над проектом.

image
Читать дальше →
Всего голосов 18: ↑16 и ↓2 +14
Просмотры1.9K
Комментарии 7

Архитектура сервиса распределённых очередей сообщений в Яндекс.Облаке

Блог компании ЯндексАнализ и проектирование системПромышленное программированиеОблачные сервисыРаспределённые системы
Привет, меня зовут Василий Богонатов. Я один из тех, кто приложил руку и голову и вложил свою душу в сервис распределённых персистентных очередей сообщений Yandex Message Queue. Сервис вышел в общий доступ в конце мая, но внутри Яндекса он уже давно и активно используется в разных продуктах.

Сегодня я хочу рассказать читателям Хабра об очередях сообщений вообще и о Yandex Message Queue в частности. Сначала я хочу объяснить, что такое «распределённая персистентная очередь сообщений» и зачем она нужна. Показать её практическую ценность, механику работы с сообщениями, поговорить про API и удобство использования. Во второй половине материала мы посмотрим на техническую сторону: как в наших очередях используется Yandex Database (это надежный фундамент нашего сервиса), как выглядят наивный и улучшенный подход к построению архитектуры, какие проблемы вызывает распределённость и как их можно решить.


Читать дальше →
Всего голосов 57: ↑55 и ↓2 +53
Просмотры19.2K
Комментарии 23

Как можно использовать прерываемые виртуальные машины Яндекс.Облака и экономить на решении масштабных задач

Блог компании ЯндексIT-инфраструктураСерверная оптимизацияОблачные вычисленияОблачные сервисы
Сегодня мы хотим рассказать о такой полезной функции Яндекс.Облака как прерываемые виртуальные машины. Это специальная опция, которую вы можете выбрать при создании виртуальной машины, чтобы использовать вычислительные ресурсы по сниженной цене. Что же такого особенного в прерываемых виртуальных машинах, почему они стоят дешевле обычных и в каких случаях разумно их применять?


Читать дальше →
Всего голосов 35: ↑31 и ↓4 +27
Просмотры11.3K
Комментарии 8

B2B-навык Алисы: от прототипа до первого сэкономленного рубля

ПрограммированиеПроектирование и рефакторингИнтерфейсыAPIКонференции

Не так давно в Санкт-Петербурге прошла вторая конференция Conversations, посвящённая разговорному AI, на которой мне посчастливилось выступить в качестве докладчика. Темой была разработка прототипа B2B-навыка для крупной компании. В докладе рассказывалось о том, как удалось «подружить» навык с относительно медленными веб-сервисами и закрытой инфраструктурой компании. Об этом и пойдёт речь под катом.
Читать дальше →
Всего голосов 10: ↑10 и ↓0 +10
Просмотры2.5K
Комментарии 0

Наш опыт разработки CSI-драйвера в Kubernetes для Яндекс.Облака

Блог компании ФлантOpen sourceDevOpsОблачные сервисыKubernetes


Рады объявить, что компания «Флант» пополняет свой вклад в Open Source-инструменты для Kubernetes, выпустив альфа-версию драйвера CSI (Container Storage Interface) для Яндекс.Облака.

Но перед тем, как перейти к деталям реализации, ответим на вопрос, зачем это вообще нужно, когда у Яндекса уже есть услуга Managed Service for Kubernetes.
Читать дальше →
Всего голосов 44: ↑44 и ↓0 +44
Просмотры4.3K
Комментарии 1
1