Pull to refresh
  • by relevance
  • by date
  • by rating

Shit happens. Яндекс удалил часть виртуальных машин в своем облаке

IT InfrastructureCloud computingServer AdministrationDevOpsCloud services
image
Кадр из фильма Мстители: Война бесконечности

По сообщению пользователя dobrovolskiy 15 мая 2019 года в результате человеческой ошибки Яндекс удалил часть виртуальных машин в своем облаке.

Пользователь получил письмо от техподдержки Яндекса с таким текстом:
Сегодня мы проводили технические работы в Яндекс.Облаке. К сожалению, из-за человеческого фактора были удалены виртуальные машины пользователей в зоне ru-central1-c, которые хоть раз находились в статусе SUSPENDED. Мы сразу заметили ошибку и остановили удаление. Увы, некоторые ВМ и их boot-диски были удалены.

В результате пользователем были полностью потеряны некоторые продакшн-сервера. Бекапы у пострадавшего были, но часть данных всё равно утрачена безвозвратно. Обычно Яндекс компенсирует даун-тайм своих сервисов, согласно своей политике, но кто компенсирует потерю данных?

UPD Яндекс официально подтвердил инцидент и прокомментировал ситуацию.
Читать дальше →
Total votes 130: ↑118 and ↓12 +106
Views102.5K
Comments 268

[Санкт-Петербург] 12 сентября митап в офисе Яндекса про облака и управление проектами цифровой трансформации

IT InfrastructureSaaS / S+SProject managementDevOpsCloud services
Цифровизация или цифровая трансформация — понятие, которое описывает технологические улучшения в бизнесе. Цифровизация подразумевает разнообразные изменения, но их объединяет одно: сбор и обработка огромных массивов данных с применением машинного обучения и облачных решений.

12 сентября Яндекс.Облако и компания «21 век» поделятся кейсами цифровой трансформации.

Вы узнаете:
Читать дальше →
Total votes 12: ↑9 and ↓3 +6
Views1.3K
Comments 0

Yandex Scale. 1 октября мы проведем первую большую конференцию про облачные технологии

Яндекс corporate blogHostingVirtualizationCloud computingCloud services
Виртуальные машины, управляемые базы данных, объектные хранилища – всем этим пользуются и отдельные разработчики, и небольшие стартапы, и крупные корпорации. Но облачная платформа – это не просто набор полезных сервисов. Это экосистема, которая живет, растет и развивается. И именно об этом мы хотим поговорить 1 октября на первой большой конференции Яндекс.Облака – Yandex Scale.

Yandex Scale – это, пожалуй, первая большая российская облачная конференция, где разработчики будут подробно рассказывать о собственных продуктах, делиться знаниями, реальными бизнес-историями и помогут вам на практике познакомиться с действующими и новыми сервисами платформы. И, конечно, наша конференция не обойдется без крупных анонсов.

Читать дальше →
Total votes 14: ↑12 and ↓2 +10
Views1.8K
Comments 5

Яндекс.Облако запустила автоматически обновляемую систему управления базами данных вместе с Mongo DB

Data storageData storagesFinance in ITIT-companies


Разработчик системы управления базами данных MongoDB и платформа Яндекс.Облако объявили о партнерстве. Яндекс.Облако стала первым официальным партнером MongoDB в России. Платформа предоставила компании сервис Managed Service for MongoDB, который помогает поддерживать кластеры баз данных на основе СУБД Mongo DB.

«MongoDB — популярное NoSQL-решение для хранения данных с открытым исходным кодом. С Managed Service for MongoDB вы можете создавать, эксплуатировать и масштабировать нереляционные базы данных MongoDB в инфраструктуре Яндекс.Облака», — поясняют в Яндекс.Облаке.
Читать дальше →
Total votes 16: ↑14 and ↓2 +12
Views3.4K
Comments 0

Яндекс.Облако стало первой платформой из РФ, которая подтвердила соответствие международным стандартам

Information SecurityIT StandardsYandex APICloud services
image

Яндекс.Облако — первая в России и СНГ публичная облачная платформа, которой удалось выстроить управление информационной безопасностью по стандарту ISO/IEC 27017:2015 и обеспечить защиту персональных данных пользователей по международному стандарту ISO/IEC 27018:2019. Соответствие стандартам подтвердил независимый аудитор — Британский институт стандартов (BSI).

BSI заявил, что Яндекс.Облако соответствует требованиям трех международных стандартов информационной безопасности: ISO/IEC 27001:2013, ISO/IEC 27017:2015, ISO/IEC27018:2019. Два из них подтверждены в России впервые.
Читать дальше →
Total votes 23: ↑20 and ↓3 +17
Views11.2K
Comments 14

Яндекс.Облако и Nvidia открыли библиотеку приложений для работы с ИИ в России

Cloud servicesArtificial Intelligence
image

Облачная платформа «Яндекс.Облако» и Nvidia открыли для российских разработчиков библиотеку приложений для работы с искусственным интеллектом и машинным обучением – Nvidia GPU Cloud (NGC). Яндекс.Облако стала первым публичным облаком в России со статусом официального партнера c NGC-сертификацией от Nvidia.
Читать дальше →
Total votes 6: ↑6 and ↓0 +6
Views2.3K
Comments 0

Яндекс.Облако открывает доступ к сервису для ML-обучения Yandex DataSphere

Cloud computingMachine learningCloud servicesIT-companies
image

Яндекс.Облако предлагает опробовать новый сервис Yandex DataSphere для разработки машинного обучения. Сервис работает в режиме preview по предварительной регистрации, а пользоваться им можно бесплатно.
Читать дальше →
Total votes 12: ↑12 and ↓0 +12
Views3.9K
Comments 1

Зарубежные компании в 2020 году начали активнее закупать облачные мощности в РФ

IT InfrastructureCloud servicesIT-companies

В International Data Corporation (IDC) сообщили, что в прошедшем году иностранные компании из финансовой и розничной сферы начали активнее закупать облачные мощности у российских поставщиков. Аналитики объясняют это тем, что российская облачная инфраструктура стала более конкурентоспособной как по цене, так и по функционалу.

Кроме того, многим компаниям теперь необходимо хранить персональные данные российских клиентов на территории страны.

Читать далее
Total votes 11: ↑10 and ↓1 +9
Views2.1K
Comments 3

Экспресс-обзор производительности PostgreSQL 10.5 в новейших облачных сервисах Яндекс.Облака

PostgreSQLDevOpsCloud services
Буквально на днях Яндекс открыл доступ для beta-пользователей к своему новому сервису — Яндекс.Облако. Так вышло, что это событие совпало с необходимостью выбора облачной платформы для одного из наших внутренних проектов и я решил сразу протестировать производительность решений Яндекса.

Для теста я взял PostgreSQL и старый добрый pgbench. Выбор на СУБД пал потому что было интересно протестировать и сравнить производительность не только виртуальных машин, то и managed database сервисов.

Disclaimer: автор не является ни профессиональным админом, ни DBA, ни специалистом по настройке облачных решений. Тестирование проводилось сугубо в личных целях и на объективность не претендует, поэтому прошу воспринимать статью «as is». Внутри не будет какого-то глубокого разбора, но будет экспресс-сравнение с Selectel VPC (на разных дисках) и различными конфигурациями AWS EC2/RDS в части производительности и стоимости решений. Возможно, это сэкономит кому-то немного времени.

Подробности Yandex.Cloud vs Selectel VPC vs AWS под катом.
Читать дальше →
Total votes 18: ↑18 and ↓0 +18
Views8.1K
Comments 21

Эволюция Backend as a Service: второе пришествие Scorocode

Scorocode corporate blogGoStart-up developmentCloud services
Здравствуй, Хабр.

Мы прерываем длительное молчание и объявляем о выходе второй версии Scorocode.
Это даже не эволюция, а рождение нового сервиса.

Год работы, Docker, Kubernetes, Яндекс.Облако, и т.п.

Предупреждая вопрос «А зачем тут хаб Go?», отвечаю — все сервисы Scorocode написаны на Golang, именно этот язык у нас является основным в стеке технологий.

За подробностями прошу под кат.
Читать дальше →
Total votes 12: ↑9 and ↓3 +6
Views3.6K
Comments 0

Яндекс открывает Облако. Архитектура новой платформы

Яндекс corporate blogIT InfrastructureCloud computingCloud servicesIT-companies
image

Сегодня Яндекс.Облако стало доступно всем. Теперь любой пользователь может зайти в Облако и развернуть необходимые ему ресурсы, получив доступ к технологиям Яндекса. Например, к машинному переводу и распознаванию и синтезу речи.

Сегодня я хочу познакомить вас с Яндекс.Облаком и рассказать, как оно устроено внутри. Под катом вы узнаете немного об истории, команде и архитектуре нашей платформы.

Читать дальше →
Total votes 87: ↑85 and ↓2 +83
Views57.8K
Comments 139

Как без даунтайма масштабировать базы данных в Яндекс.Облаке. Пример с тремя хостами

Яндекс corporate blogIT InfrastructureDatabase Administration
Tutorial
Пост подготовили участники команды Яндекс.Облака: Иван Веткасов — архитектор, Леонид Клюев — редактор

Недавно мы рассказали об архитектуре Яндекс.Облака. Теперь давайте перейдем от теории к практике. В Облаке есть несколько сервисов для автоматизированного контроля за СУБД: Managed Service for ClickHouse, Managed Service for PostgreSQL и Managed Service for MongoDB. Все они являются платформенными и позволяют сосредоточиться на задаче хранения данных, а не на администрировании инфраструктуры. Но иногда бывает важно контролировать ещё и виртуальные машины кластера. Например, может возникнуть задача масштабирования в ответ на увеличение или снижение нагрузки. Обычно этот сценарий — один из самых трудоёмких с практической точки зрения. Сегодня мы расскажем, как Яндекс.Облако позволяет автоматизировать сложные задачи масштабирования, и убедимся, что база остаётся доступной в процессе изменения размера кластера.


Читать дальше →
Total votes 26: ↑25 and ↓1 +24
Views7.8K
Comments 3

MPLS повсюду. Как устроена сетевая инфраструктура Яндекс.Облака

Яндекс corporate blogIT InfrastructureNetwork technologiesCloud servicesNetwork hardware
Пост подготовили: Александр Вирилин xscrew — автор, руководитель службы сетевой инфраструктуры, Леонид Клюев — редактор

Мы продолжаем знакомить вас с внутренним устройством Яндекс.Облака. Сегодня поговорим о сетях — расскажем, как устроена сетевая инфраструктура, почему в ней активно применяется непопулярная для дата-центров парадигма MPLS, какие ещё сложные решения нам приходилось принимать в процессе построения облачной сети, как мы ей управляем и какие мониторинги используем.

Сеть в Облаке состоит из трёх слоёв. Нижний слой — уже упомянутая инфраструктура. Это физическая «железная» сеть внутри дата-центров, между дата-центрами и в местах присоединения к внешним сетям. Поверх сетевой инфраструктуры строится виртуальная сеть, а поверх виртуальной сети — сетевые сервисы. Эта структура не является монолитной: слои пересекаются, виртуальная сеть и сетевые сервисы напрямую взаимодействуют с сетевой инфраструктурой. Поскольку виртуальную сеть часто называют overlay, то сетевую инфраструктуру мы обычно называем underlay.
Читать дальше →
Total votes 50: ↑50 and ↓0 +50
Views24.9K
Comments 27

1С и Яндекс.Облако Compute Cloud. Вдоль и поперек

Cloud computingDatabase Administration1С-BitrixCloud services
Бороться и искать. Найти и перепрятать

Достаточно популярная поговорка во времена Союза.

Вот и сейчас, те у кого сервер 1С в локальной сети мечтают вынести его в облако, а те у кого в облаке прикупить свой в локальную сеть.

7 декабря 2018 г. AlexandrSurkov пригласил желающих: Яндекс открывает Облако. Архитектура новой платформы

Как у обычного пользователя у меня не нашлось чем занять этот ресурс, но как 1С-ник я подумал: А пуркуа бы и не па ? И попробовал положить в облако от Яндекса 1С Предприятие.

Тестирование Яндекс.Облако Compute Cloud для 1С Предприятие оставило у меня приятное впечатление.

Возможно кто-то повторит его и внесет больше ясности в настройки виртуальных серверов, использованию API и так далее. Интересующихся прошу продолжить чтение…


Читать дальше →
Total votes 29: ↑25 and ↓4 +21
Views20.9K
Comments 57

Архитектура сетевого балансировщика нагрузки в Яндекс.Облаке

Яндекс corporate blogHigh performanceNetwork technologiesCloud services

Привет, я Сергей Еланцев, разрабатываю сетевой балансировщик нагрузки в Яндекс.Облаке. Раньше я руководил разработкой L7-балансировщика портала Яндекса — коллеги шутят, что чем бы я ни занимался, получается балансировщик. Я расскажу читателям Хабра, как нужно управлять нагрузкой в облачной платформе, каким мы видим идеальный инструмент достижения этой цели и как движемся к построению этого инструмента.
Читать дальше →
Total votes 47: ↑47 and ↓0 +47
Views14.7K
Comments 5

Опыт вывода программной реализации социального проекта «Вспомнить каждого» в опенсорс

Open sourceNode.JSMongoDB
Sandbox
В прошлом году, нашей команде повезло принять участие в разработке программного обеспечения для социально значимого проекта – системы ввода архивных данных военных комиссариатов Хабаровского края времен Великой Отечественной войны. Кратко говоря, когда был призван, куда убыл и другую связанную с этим информацию – оцифровать и дать возможность искать эти данные кому угодно. Дальневосточный центр социальных технологий в 2018 году, при поддержке Фонда президентских грантов, реализовывал проект — «Вспомнить каждого». А мы, разработали приложение на нашем опенсорсном продукте IONDV. Framework. Итоговое приложение сейчас доступно под лицензией GPLv3.

Делимся нашим решением и опытом работы над проектом.

image
Читать дальше →
Total votes 18: ↑16 and ↓2 +14
Views1.9K
Comments 7

Архитектура сервиса распределённых очередей сообщений в Яндекс.Облаке

Яндекс corporate blogSystem Analysis and DesignIndustrial ProgrammingCloud servicesDistributed systems
Привет, меня зовут Василий Богонатов. Я один из тех, кто приложил руку и голову и вложил свою душу в сервис распределённых персистентных очередей сообщений Yandex Message Queue. Сервис вышел в общий доступ в конце мая, но внутри Яндекса он уже давно и активно используется в разных продуктах.

Сегодня я хочу рассказать читателям Хабра об очередях сообщений вообще и о Yandex Message Queue в частности. Сначала я хочу объяснить, что такое «распределённая персистентная очередь сообщений» и зачем она нужна. Показать её практическую ценность, механику работы с сообщениями, поговорить про API и удобство использования. Во второй половине материала мы посмотрим на техническую сторону: как в наших очередях используется Yandex Database (это надежный фундамент нашего сервиса), как выглядят наивный и улучшенный подход к построению архитектуры, какие проблемы вызывает распределённость и как их можно решить.


Читать дальше →
Total votes 57: ↑55 and ↓2 +53
Views19.2K
Comments 23

Как можно использовать прерываемые виртуальные машины Яндекс.Облака и экономить на решении масштабных задач

Яндекс corporate blogIT InfrastructureServer optimizationCloud computingCloud services
Сегодня мы хотим рассказать о такой полезной функции Яндекс.Облака как прерываемые виртуальные машины. Это специальная опция, которую вы можете выбрать при создании виртуальной машины, чтобы использовать вычислительные ресурсы по сниженной цене. Что же такого особенного в прерываемых виртуальных машинах, почему они стоят дешевле обычных и в каких случаях разумно их применять?


Читать дальше →
Total votes 35: ↑31 and ↓4 +27
Views11.4K
Comments 8

B2B-навык Алисы: от прототипа до первого сэкономленного рубля

ProgrammingDesigning and refactoringInterfacesAPIConferences

Не так давно в Санкт-Петербурге прошла вторая конференция Conversations, посвящённая разговорному AI, на которой мне посчастливилось выступить в качестве докладчика. Темой была разработка прототипа B2B-навыка для крупной компании. В докладе рассказывалось о том, как удалось «подружить» навык с относительно медленными веб-сервисами и закрытой инфраструктурой компании. Об этом и пойдёт речь под катом.
Читать дальше →
Total votes 10: ↑10 and ↓0 +10
Views2.5K
Comments 0

Наш опыт разработки CSI-драйвера в Kubernetes для Яндекс.Облака

Флант corporate blogOpen sourceDevOpsCloud servicesKubernetes


Рады объявить, что компания «Флант» пополняет свой вклад в Open Source-инструменты для Kubernetes, выпустив альфа-версию драйвера CSI (Container Storage Interface) для Яндекс.Облака.

Но перед тем, как перейти к деталям реализации, ответим на вопрос, зачем это вообще нужно, когда у Яндекса уже есть услуга Managed Service for Kubernetes.
Читать дальше →
Total votes 44: ↑44 and ↓0 +44
Views4.3K
Comments 1
1