Открыть список
Как стать автором
Обновить
  • по релевантности
  • по времени
  • по рейтингу

Пять вопросов о Ceph с пояснениями

Блог компании SouthbridgeСистемное администрированиеСерверное администрированиеХранилища данныхDevOps
Перевод


Что нужно знать о Ceph, хранилище с открытым исходным кодом, чтобы решить, подходит ли оно вашей компании. В статье будет сравнение с альтернативными объектными хранилищами, а также рассмотрена оптимизация Ceph.

Читать дальше →
Всего голосов 19: ↑14 и ↓5 +9
Просмотры4.3K
Комментарии 14

Эльбрус VS Intel. Сравниваем производительность систем хранения Аэродиск Восток и Engine

Блог компании АЭРОДИСКСистемное администрированиеIT-инфраструктураХранение данныхХранилища данных


Всем привет. Мы продолжаем знакомить вас с системой хранения данных Аэродиск ВОСТОК, выполненной на базе российского процессора Эльбрус 8C.


В этой статье мы (как и обещали) детально разберем одну из популярнейших и интереснейших тем, связанной с Эльбрусами, а именно – производительность. На тему производительности Эльбруса есть достаточно много спекуляций, причем абсолютно полярных. Пессимисты говорят, что производительность Эльбруса сейчас «никакая», и чтобы догнать «топовых» производителей потребуются десятилетия (т.е. в условиях нынешней реальности — никогда). С другой стороны, оптимисты говорят, что уже сейчас Эльбрус 8C показывает хорошие результаты, а в ближайшие пару лет с выходом новых версий процессоров (Эльбрус 16С и 32С) мы сможем «догнать и перегнать» ведущих мировых производителей процессоров.


Мы в Аэродиске люди практичные, поэтому пошли самым простым и понятным (для нас) путем: протестировать, зафиксировать результаты и только потом делать выводы. В итоге мы провели довольно большое количество тестов и обнаружили ряд особенностей работы Эльбруса 8С архитектуры e2k (в том числе, и приятных) и, конечно же, сравнили это с аналогичными СХД на процессорах Intel Xeon архитектуры x86-64.


Кстати, более подробно о тестах, результатах и о будущем развитии СХД на Эльбрусах мы поговорим на нашем очередном вебинаре "ОколоИТ" 15.10.2020 в 15 00. Зарегистрироваться можно по ссылке ниже.


Регистрация на вебинар

Читать дальше →
Всего голосов 57: ↑42 и ↓15 +27
Просмотры24.2K
Комментарии 99

Почему важно проверить ПО на вашей СХД высокой доступности (99,9999%)

Блог компании mClouds.ruСистемное администрированиеIT-инфраструктураСерверное администрированиеОблачные сервисы

Какая версия прошивки самая “правильная” и “рабочая”? Если СХД гарантирует отказоустойчивость на 99,9999%, то значит ли, что и работать она будет бесперебойно даже без обновления ПО? Или наоборот для получения максимальной откзоустойчивости нужно всегда ставить самую последнюю прошивку? 

Постараемся ответить на эти вопросы, опираясь на наш опыт.

Читать далее
Всего голосов 5: ↑5 и ↓0 +5
Просмотры2.3K
Комментарии 18

СХД Lenovo ThinkSystem DE2000. Быстро, качественно и недорого: получи всё и сразу

Блог компании LenovoСистемное администрированиеСерверное администрирование
Традиционно системы хранения данных были и остаются одним из ключевых компонентов ИТ-инфраструктуры. Если вернуться в прошлое и посмотреть, как менялось представление о СХД, то можно проследить интересную тенденцию.

Читать дальше →
Всего голосов 8: ↑8 и ↓0 +8
Просмотры2.8K
Комментарии 8

Промышленные тенденции в области массовых систем хранения данных

Блог компании HuaweiIT-инфраструктураХранилища данныхСетевое оборудование
Сегодня поговорим о том, как лучше хранить данные в мире, где сети пятого поколения, сканеры геномов и беспилотные автомобили производят за день больше данных, чем всё человечество породило в период до промышленной революции.


Читать дальше
Всего голосов 7: ↑7 и ↓0 +7
Просмотры2.4K
Комментарии 1

Эксплуатация Ceph: флаги для управления естественными состояниями OSD

Блог компании SouthbridgeСистемное администрированиеСерверное администрированиеХранилища данныхDevOps


Этой статьёй мы начинаем серию материалов об эксплуатации Ceph и проблемах, которые могут возникать в процессе. Сегодня расскажем о флагах, с помощью которых можно контролировать состояние кластера: noup, nodown, noin, noout. Объясним, что такое «флаппинг OSD» и как его можно остановить.

Читать дальше →
Всего голосов 14: ↑14 и ↓0 +14
Просмотры3.1K
Комментарии 1

Инжиниринг производительности систем хранения данных

Блог компании YADROСистемное администрированиеSANХранение данныхХранилища данных
Всем привет! Каждый день наша большая и дружная команда инженеров решает сложные задачи и вносит вклад в создание высокотехнологичных продуктов — систем обработки и хранения данных. Мы решили познакомить вас с их рутиной поближе, и сегодня начинаем серию интервью с коллегами, чтобы от первого лица рассказать обо всех нюансах их работы.

image

Производительность — одна из ключевых характеристик качественного программного обеспечения: прочие характеристики систем хранения данных не будут оценены по достоинству, если она работает медленно или нестабильно. Сегодня мы беседуем с Сергеем Качкиным kachini — руководителем отдела технической экспертизы департамента прикладных исследований и технической экспертизы компании YADRO.

У его профессии несколько названий: аналитик производительности, performance engineer, performance tester. И все они достаточно мало распространены в России. Между тем инжиниринг производительности помогает создавать эффективные компьютерные системы, которые работают быстро и надежно. Его задача — изучить, почему система функционирует не так, как хотелось бы, разобраться в причинах медленной или не соответствующей целевым параметрам работы, выявлять и находить проблемные места, помогать их устранять.  

Сергей Качкин рассказал о поиске узких мест в программном стеке и оптимизации производительности СХД, о том, чем занимается его команда.
Читать дальше →
Всего голосов 6: ↑6 и ↓0 +6
Просмотры2.6K
Комментарии 1

Приглашаем на технические сессии Dell Technologies: бесплатная регистрация открыта

Блог компании Dell TechnologiesИнформационная безопасностьСистемное администрированиеIT-инфраструктураХранение данных
Привет, друзья! Сегодня у нас ещё один полезный анонс специально для вас. В начале осени мы запустили интересный онлайн-формат – технические сессии с экспертами нашей компании. Это вебинары для специалистов, принимающих технически важные решения (CTO, системных инженеров, бизнес-аналитиков) и тех, кто непосредственно работает с заявленными в очень разносторонних темах продуктами и решениями.

Приглашать читателей с Хабра на технические сессии сразу мы немного постеснялись – нужно было для начала отработать формат. Теперь мы это сделали и спешим поделиться ссылкой на второй сезон специальных вебинаров. В нём мы сконцентрируемся на подходах к модернизации сети предприятия, администрировании, защите данных и управлении ими, а также поговорим об СХД для систем видеонаблюдения.

Если вам уже интересно, то можно не заглядывая под кат сразу переходить к описаниям вебинаров и бесплатной регистрации. А ниже мы подробнее расскажем о программе, датах и времени зимних вебинаров и о том, как посмотреть записи технических сессий первого осеннего сезона.


Читать дальше →
Всего голосов 16: ↑15 и ↓1 +14
Просмотры858
Комментарии 0

Эксплуатация Ceph: флаги для управления восстановлением и перемещением данных

Блог компании SouthbridgeСистемное администрированиеСерверное администрированиеХранилища данныхDevOps


Продолжаем рассказывать об эксплуатации Ceph. Сегодня поговорим о процессе восстановления данных и флагах, которые позволяют его контролировать: norebalance, nobackfill и norecover.


Статья подготовлена на основе лекции Александра Руденко, ведущего инженера в группе разработки «Облака КРОК». Лекция доступна в рамках курса по Ceph в «Слёрме».


Для полного понимания рекомендуем сначала прочесть статью о флагах для управления состояниями OSD.

Читать дальше →
Всего голосов 16: ↑16 и ↓0 +16
Просмотры1.7K
Комментарии 1

Эксплуатация Ceph: что такое Scrub и как им управлять

Блог компании SouthbridgeСистемное администрированиеСерверное администрированиеХранилища данныхDevOps


Scrub — это процесс фоновой проверки консистентности данных в Ceph. Он позволяет выявить и устранить несоответствия в копиях, а также найти рассыпающиеся диски, чтобы вовремя их заменить. При этом сам Scrub может создавать высокую нагрузку на кластер и мешать другим процессам. Сегодня расскажем о настройках, которые помогут оптимизировать его работу и сделать нагрузку практически незаметной.

Читать дальше →
Всего голосов 19: ↑19 и ↓0 +19
Просмотры2.2K
Комментарии 1

Организуем платформу обработки потоковых данных из Kafka, Spark и Greenplum

Блог компании ITSummaIT-инфраструктураBig DataХранение данныхData Engineering

Привет, Хабр! 

Меня зовут Иван Хозяинов, а работаю в ITSumma, где изучаю и применяю технологии, связанные с большими данными, машинным обучением и аналитикой. В этой статье хочу рассказать о системе хранения и обработки данных и инструментах, которые встречаются на пути от сырых исходников до представления, удобного для последующего анализа. 

Поговорим, как связаны серверы в дата-центре и распределенные приложения для обработки данных и почему пришлось написать свой коннектор для Spark и Greenplum.

Читать далее...
Всего голосов 19: ↑18 и ↓1 +17
Просмотры4.9K
Комментарии 26

Эксплуатация Ceph: как распределять пулы по разным типам (HDD/SSD) и группам серверов

Блог компании SouthbridgeСистемное администрированиеСерверное администрированиеХранение данныхDevOps


В Ceph можно распределять пулы с данными по разным типам серверов: «горячие» данные хранить и реплицировать на SSD, «холодные» — на HDD. Кроме того, пулы одного кластера можно разделять физически. В статье расскажем, как это сделать.


Статья подготовлена на основе лекции Александра Руденко, ведущего инженера группы разработки «Облака КРОК». Лекция доступна в рамках курса по Ceph в «Слёрме». Тема была добавлена уже после релиза видеокурса, в январе 2021. Также в январе в рамках развития курса появились новые практические задания:


  • Установка при помощи cephadm.
  • Установка при помощи Ansible.
  • Использование Ceph: объектное хранилище.
  • Пулы и классы хранения Ceph.
Читать дальше →
Всего голосов 17: ↑17 и ↓0 +17
Просмотры5.2K
Комментарии 4

Тестируем СХД OceanStor Dorado V6: производительность и отказоустойчивость

Блог компании STEP LOGICIT-инфраструктураХранение данныхХранилища данныхСетевое оборудование


Ранее я рассказывал о результатах проверки работы некоторых функций младшей модели OceanStor Dorado V6 от компании Huawei. Была протестирована работа мгновенного виртуального снимка HyperSnap, функций создания мгновенных снимков с высокой частотой HyperCDP и полных копий исходных данных с использованием расписания HyperClone, а также настройки приоритезации потоков ввода-вывода SmartQOS.


Более подробно об организации стенда, подключении оборудования и проведенных ранее испытаниях можно прочитать в предыдущей части.


Ну а теперь, как и обещал, перейдем к тестированию производительности и отказоустойчивости.

Читать дальше →
Всего голосов 9: ↑9 и ↓0 +9
Просмотры1.4K
Комментарии 4

Функция AppsON в Dell EMC PowerStore: запускаем приложения прямо на массиве

Блог компании Dell TechnologiesСистемное администрированиеIT-инфраструктураСерверное администрированиеХранение данных
Мы продолжаем цикл статей о нашей новой линейке систем хранения данных PowerStore. Этот материал посвящен уникальному функционалу, позволяющему запускать на борту системы пользовательские приложения – AppsON.

Для начала вкратце напомним основные особенности PowerStore. Система имеет микроконтейнерную архитектуру. Разные компоненты ОС выделяются в отдельные, изолированные функциональные элементы (контейнеры). Это обеспечивает простую переносимость функций, стандартизацию и быстрое внедрение нового функционала, а также максимальную гибкость развёртывания.


Читать дальше →
Всего голосов 4: ↑4 и ↓0 +4
Просмотры1.1K
Комментарии 0

Обзор HPE Nimble или практический опыт использования. Все ли так хорошо, как заявляет производитель?

Тестирование IT-системСистемное администрированиеIT-инфраструктураХранение данных
Из песочницы

Хотелось бы поделиться с вами практическим опытом тестирования и использования системы хранения данных HPE Nimble, в нашем случае впечатлениями будем делиться относительно модели All-Flash – HPE Nimble AF40. Насколько эта статья будет актуальна и интересна – решать только вам, но мы в свое время столкнулись с проблемой поиска реальных историй (не путайте с историями успеха), в которых по большей степени автор делился бы своими мыслями, опытом и впечатлениями, т.е. чистыми эмоциями от сердца, а не сухими фактами или вездесущим маркетингом. Поэтому решили потратить немного своего времени и попробовать написать что-то подобное, поэтому не судите строго, т.к. это первая проба пера. Итак, поехали.

Чтобы немного ввести вас в курс дела для начала дадим скупую информацию о нашем подопытном. Данную модель HPE позиционирует среди своего же семейства All-Flash массивов Nimble, как оптимальный выбор по соотношению цена/производительность. С точки зрения производительности система достаточно сильно отличается от младшей модели AF20 (превышает почти в 5 раз!), но при этом не столь сильно уступает более старшим моделям – AF60 и AF80. Самой старшей модели наш экземпляр уступает по паспорту в среднем в 3 раза, по некоторым показателям и то меньше, а модели Nimble AF60 – не более, чем в 2 раза. Массивы всей линейки HPE Nimble имеют весь необходимый функционал, согласно своему статусу – массивам среднего ценового сегмента. Тут тебе и компрессия с дедупликацией, причем последняя с переменным блоком, и аппаратные снимки с согласованием на уровне приложения, и синхронная репликация, с возможностью реализации концепции Metro Storage Cluster, и поддержка технологии VVOL, QoS, возможность собирать Storage Pool из нескольких массивов – некое подобие федерации, и еще парочка козырей в рукаве в виде искусственного интеллекта и продвинутой аналитики.

Читать далее
Всего голосов 10: ↑10 и ↓0 +10
Просмотры2.5K
Комментарии 4

Гиперконвергентная система AERODISK vAIR v2. Часть 1. Система виртуализации АИСТ

Блог компании АЭРОДИСКСистемное администрированиеIT-инфраструктураВиртуализацияХранение данных


Всем привет. Этой статьей мы начинаем знакомить вас с новой версией российской гиперконвергентной системы AERODISK vAIR v2, в частности, со встроенным гипервизором АИСТ, который сейчас получил возможность работать автономно от vAIR, используя внешние СХД.

Читать дальше →
Всего голосов 1: ↑1 и ↓0 +1
Просмотры2.3K
Комментарии 22

Гиперконвергентная система АЭРОДИСК vAIR v2. Часть 2. Файловая система ARDFS и её функциональность

Блог компании АЭРОДИСКСистемное администрированиеIT-инфраструктураВиртуализацияХранение данных


Привет, Хабровчане! В этой статье мы продолжим знакомить вас с новой версией российской гиперконвергентной системы АЭРОДИСК vAIR v2. В данном случае в фокус статьи попадет компонент, отвечающий за распределенное хранение данных – файловая система ARDFS – её назначение, применение, функциональность и особенности.

Читать дальше →
Всего голосов 3: ↑2 и ↓1 +1
Просмотры1.4K
Комментарии 2