Pull to refresh

Comments 79

Всегда хотел попробовать этот KVM, но руки не доходят.
п.с. XP прекрасно работает в VirtualBox поедая 1G оперативки и 6Gb диска.
UFO just landed and posted this here
В этом все и дело. На домашнем и на ноуте стоят ubuntu с virtualbox. На серверах еще не приходилось делать виртуалку, и честно сказать не знаю зачем она там. Нужен сервер с виндой — можно его и взять.
UFO just landed and posted this here
Точно. Про VDS я и забыл.
Берется Windows Server и туда ставятся виртуалки через HyperV.
UFO just landed and posted this here
UFO just landed and posted this here
proxmox, Red Hat Enterprise Virtualization что то есть у proxmox. Они вполне позволят вам держать зоопарк windows машин.
UFO just landed and posted this here
Я так не думаю. Вы для себя это сами решили. Нам всегда будет чего-то не хватать в разных решениях.
После того как попробуешь и начинаешь сравнивать, часто ловишь себя — вот это бы сюда, и вот то туда класс будет!
Если брать меня, то я постоянно не доволен всем в нашем IT мире. Включая ОС :).
Если вам чего то не хватает, в данном случаи вы можете допилить сами и поделится с сообществом.

Меня данное решение на текущий момент удовлетворяет (о чем я писал выше). Но это не значит, что я доволен!
Есть конечно вещи, которых не хватает — например балансировка по ресурсам.

Но в остальном все стандартно, gui понятен и я могу обучить нового сотрудника с ним работать, прова доступа регулируется. OpenVz имеет нужную мне гибкость, а kvm для виндовых исключений.
Я видел ужас, под названием сервер с виртуалками на VB. Выглядело это очень печально.
UFO just landed and posted this here
Тогда я узнал, что VB бывает в консольном виде :) Просто я его вообще не использовал и думал, что он всегда с GUI идет.
А как насчет ESX? Он вродк ставится на линупсы и на нем прекрасно работают что линупсы что винды…
Вроде нет. Системы слишком разные по архитектуре и по производителю — VBox делала SUN, а KVM — Qumranet, которую потом купила Red Hat.
Нет, у них поддержка со стороны ядра организована в виде собственного драйвера (на который все плюются, кстати).
Для продакшена нужна KVM
1 которая глючит с ХР
2 Требует отключения обновленият из за глюков
3 Требует 3 Гб памяти для windows 7
4 server 2003. Хм наверно он стоит также как XP\7. Ах да совсем забыл для продакшена не нужны лицензии. Привет рутрекер!
5 Динамическая память. Гуд. Но опять же Windows 7 Enterpise. Привет подписка микрософт +30% стоимости Prof.

Кстати да подтверждаю XP работате по коробкой на debian base прекрасно!
Кстати да XP на Hyper-V (на процессоре FX-8320) ЖУТКО лагала. Работать нереально (в режиме реального времени). 7ка работает сносно на 1Гб. Но все же лучше 1.5-2.

Несколько рекомендаций учту. За статью спасибо.
UFO just landed and posted this here
1 Я не автор поста.
2 Если честно то это круто! Ну не то чтобы круто но точно Нормально! т.е. это ожидаемо!
3 Если клиенту надо. То наверно окупается! Вопросов ноль.

У меня вопрос сугубо практический. Делали ли вы тесты CPU\RAM\HDD.
Интересно узнать цифры. А если бы сравнение с аналогами то вообще дзен! ;)
UFO just landed and posted this here
С Virtio бывает засады. В новых версиях бывает и потеря производительности. В итоге мы забили на virtio и используем эмуляцию.
На серверах HP с SAN как то становится все равно на производительность.
XP в kvm давно нормально работает.
По крайне мере тестовые звери на XP живут нормально.
«Тестовые звери» — это образное выражение такое, или вы имеете в виду zvercd?
образное. Хотя вам не кто не мешает ставить и zvercd. Хотя я против таких сборок.
> 1 которая глючит с ХР

нет не глючит. по секрету скажу — именно для XP KVM изначально писался. последний раз разворачивал на XP VDI для 600 машин.

> 2 Требует отключения обновленият из за глюков

никаког отношения к платформе виртуализации это не имеет.

> 3 Требует 3 Гб памяти для windows 7

почему у меня их сотни работают на половине гигабайта?

> 4 server 2003. Хм наверно он стоит также как XP\7. Ах да совсем забыл для продакшена не нужны лицензии. Привет рутрекер!

вообще фигня какая то. у меня целый датацентр под KVM гоняет сложнуй набор систем под 2008R2 и 2012R2 сейчас на тестах показывает вполне нормальные результаты

> 5 Динамическая память. Гуд. Но опять же Windows 7 Enterpise. Привет подписка микрософт +30% стоимости Prof.

балунинг не особо и нужен, если KSM хорошо настроен.

ПС работал в кумранет а потом RH 5 лет, разворачивал и поддерживал не одну тысячу KVM хостов.
Windows 7 работает нормально, но согласно счётчикам Proxmox, требует для работы более 3 гигабайт ОЗУ.

ЛОЛ ШТО? А у меня тогда как работает с 2 гигабайтами?

Опять же про Windows. На официальном сайте есть вот такая замечательная страничка www.linux-kvm.org/page/Guest_Support_Status#Windows_Family

и там как раз таки Windows XP находится в поддерживаемых. Откуда у вас информация? ОБС?

Так же не понятно если у вас продакшен что мешает использовать libvirt? Он существенно упрощает работу с виртуальными машинами.
А у меня тогда как работает с 2 гигабайтами?

А как W2k3 работает на 256 мегабайтах?
Вы согласны, что W7 требует для нормальной работы на несколько сот мегабайт больше ОЗУ?
Если согласны, тогда к чему Вы цепляетесь? К способу подсчёта через Proxmox?
Если не согласны, тогда приводите свои настройки — проверим, сравним.

там как раз таки Windows XP находится в поддерживаемых.

На заборе тоже написано, а там дрова лежат. XP работала более-менее устойчиво до февраля 2011 года, когда вышло обновление, поломавшее совместимость с KVM.

Откуда у вас информация?

Везде из личного опыта, если явно не оговорено обратное.

Так же не понятно если у вас продакшен что мешает использовать libvirt? Он существенно упрощает работу с виртуальными машинами.

Это не имеет отношения к гостевым Windows, но вообще libvirt не понравился в своё время из-за www.opennet.ru/openforum/vsluhforumID1/92426.html
А так же подвисаний libvirtd, тогдашнего отсутствия внятной документации на ProxyARP-режим
и невозможности переносить XML между Дебианом и Центосом без небольшой пляски с бубном.
А как W2k3 работает на 256 мегабайтах?
Вы согласны, что W7 требует для нормальной работы на несколько сот мегабайт больше ОЗУ?

Не согласен. На двух гигах Windows 7 работает отлично. Со скрипом она работает на 1 гигабайте. Я спокойно запускаю в ней офис и браузер.

На заборе тоже написано, а там дрова лежат. XP работала более-менее устойчиво до февраля 2011 года, когда вышло обновление, поломавшее совместимость с KVM.

Пруфы в багтрекере kvm есть? Или тут из разряда «у нас плохо работает».

Это не имеет отношения к гостевым Windows, но вообще libvirt не понравился в своё время из-за www.opennet.ru/openforum/vsluhforumID1/92426.html

Баги есть везде.

невозможности переносить XML между Дебианом и Центосом без небольшой пляски с бубном.

Ой да ладно? И в чем же она заключалась?

Со скрипом она работает на 1 гигабайте. Я спокойно запускаю в ней офис и браузер.

На что же этот гигабайт тратится, если W2K3 на таком же объёме памяти обеспечивает одновременную работу через RDP двоих-троих сотрудников с 1С, офисом, браузером и почтой?

Ой да ладно? И в чем же она заключалась?

В xml вместо типа загрузчика требуется явно указывать полный путь к его исполняемому файлу. В Дебиане и Редхате он разный. Вы не знали?
На что же этот гигабайт тратится, если W2K3 на таком же объёме памяти обеспечивает одновременную работу через RDP двоих-троих сотрудников с 1С, офисом, браузером и почтой?

Это вы у Microsoft спросите. А вообще вы мне тут рассказывали что надо 3 гигабайта, а теперь рассказываете про W2K3

В xml вместо типа загрузчика требуется явно указывать полный путь к его исполняемому файлу. В Дебиане и Редхате он разный. Вы не знали?

Это офигеть какой бубен надо иметь. Например можно sed. А вообще это вполне очевидно.
Ну еще можно вспомнить windows 2000 server, а можно и nt4sp4 — они еще меньше потребляют.
Windows XP у меня несколько лет стабильно работала в KVM. Сейчас перешёл на Windows 7. 1 гигабайт памяти — вполне достаточно для «настольного» использования. Правда, есть ощущение, что что-то поломали в драйверах viostor, потому что сейчас при выключении в 100% случаев BSOD с IRQL_NOT_LESS_OR_EQUAL в viostor.sys, а при перезапуске примерно процентах в 50. Когда этот же образ разворачивал год назад, всё работало стабильно — поменялась только версия драйверов на проекте Fedora. Пробовал также драйвера из репозитория Ubuntu, эффект, увы, тот же.
Статья не о чем. Я люблю разные статьи, но тут глухо. Все это давно известно, если не известно то находится в руководстве.
Windows давно нормально эмулируется в KVM (за небольшими нюансами ). Для упрощение работы с ним лучше использовать libvrt (virsh) + удаленно использовать GUI.
Если совсем лениво и надо что то на уровне Ынтерпрайс то proxmox.
Если совсем лениво и надо что то на уровне Ынтерпрайс то proxmox.


А proxmox уже научился создавать KVM виртуалки из шаблонов, как они умеют с OpenVZ? Если нет, то как его использовать в энтрепрайзе, когда каждый день бывает нужно по несколько виртуалок создавать в автоматическом режиме? Последний раз (недавно) когда я его смотрел — единственный путь создания из веб-интерфейса — это создавать пустую виртуалку, цеплять к ней iso образ и устанавливать с него. Но это долго и муторно.
К сожалению нет, еще там нет балансировщика для kvm и много других хотелок. Зато работает нормально с ceph.

Далее на тему шаблонов, если вдуматся — то другие вирт машины (раньше по крайне мере) шли тупым путем microsoft. Делая образы известными средствами windows. Sysprep, создание файлов ответов, пред установка в режиме аудита. Далее уже потом все это ставится в новую вирт машину.
Если заглядывать еще дальше, можно сделать установку по сети шаблонов используя средства SCCM.

В общем вариантов как сделать шаблоны для виртуальной машины много, удобно конечно средствами самой системы. Но у microsoft свои подходы :)
А proxmox уже научился создавать KVM виртуалки из шаблонов, как они умеют с OpenVZ?

Оно? unix-heaven.org/proxmox-ve-kvm-template

Не в курсе, как с этим сейчас обстоит дело в Proxmox'e, но в чистом KVM виртуалки создаются
из пресетов копированием двух файлов — образа корневой ФС и настроек загрузчика.

Пресет — это обычная система с немного подчищенными настройками
(из /etc/ надо стереть ключи ssh-сервера, мак-адрес сетевой карты и т.д.)
Есть одно но!

В windows все равно надо сделать предварительно sysprep. Да и в linux надо сделать некоторые танцы.

У меня есть тупо подготовленные образы hdd, которые тупо можно сунуть.
В windows все равно надо сделать предварительно sysprep.

То ли мне повезло, то ли одно из двух.
Сделал пресет с Вендой, sysprep не использовал.
Создал из него несколько десяток ВМ на нескольких Линукс-серверах, проблем (пока) не было.

Что не будет работать, если при подготовке пресета не использовался sysprep?
Смена аппаратного окружения? Для Windows меняется только MAC-адрес сетевой карты.
Подключение в домен AD? На тех задачах, которые у меня возникали, оно не требовалось.
>Подключение в домен AD?
Да, это основная проблема.

Еще как вариант, почитайте про режим аудита в windows. Будет вам очень полезно при приготовки пресетов.
Оно? unix-heaven.org/proxmox-ve-kvm-template


Да, видел это решение, это примерно то, о чем вы говорите, но это просто вариант обхода этой проблемы, а не официально поддерживаемое решение. Работает только из консоли.
А еще есть VMmanager. В нем есть все популярные шаблоны OS на kvm. Правда он платный.
Скажите, а действительно все так плохо? 100% CPU, BSOD и падающая сеть — это слабо похоже на Ъ-энтерпрайз. А ведь пишут, что kvm уже давно как промышленное решение.

>>HDB — это пустой образ диска, созданный через «kvm-img create -f qcow2 temp.img 1G» с единственной целью — показать Windows устройство >>незнакомого типа, чтобы она затребовала драйвер для него. Установка в систему драйвера virtio для временного диска позволит переключить >>затем с IDE на virtio системный диск.
А как же образ дискетки с драйверами и «Press F6 if you need to install a third party SCSI or RAID driver»?
Вот именно, нужно сразу ставить всё на virtio и при установке подсовывать драйверы.
Сейчас и драйвера не надо подсовывать. Все находится и так. По крайне мере на современных версия винды win2008/win7.
это слабо похоже на Ъ-энтерпрайз.

Как правило, энтерпрайз специализируется на поддержке чётко очерченного круга задач на чётко обозначенном объёме ресурсов.
Отсюда ядро 2.6.18, всякие HCL и т.д.

А как же образ дискетки с драйверами и «Press F6 if you need to install a third party SCSI or RAID driver»?

Во-первых, готового образа дискетки у них нет, поэтому его надо создавать. Уже морока.

Во-вторых, заранее неясно, что именно с ISO-образа на неё надо копировать.
Папки на ISO-образе можно перебирать в Диспетчере оборудования до победного конца,
с неправильным образом дискетки придётся перезагружаться заново.

Так что формально Вы правы, но в итоге такой вариант рискует занять гораздо больше времени, чем с временным диском.
или я что то не понимаю или лыжи не едут. Винду уже давно можно переносить с одной машины на другую без всяких особенных извращений. У меня старые виндовые драйвера матались по разным виртуальным средам и в итоге остановились на работе в kvm среде. Все с ними хорошо.
Далее про драйвера virtio — Тупо положите на них болт! используйте эмуляцию e1000 для сетевой карты и ide для windows систем.
>> Винду уже давно можно переносить с одной машины на другую без всяких особенных извращений

Скажем так, есть набор условий, при которых винда не вылетит на новой машине с 0x0000007B без SYSPREP и т.п.
1) На старой и новой машине должен быть/не быть ACPI
2) На старой и новой машине должен быть/не быть IO APIC
3) На старой и новой машине должен одинаковые типы IDE-контроллера (всего с точки зрения WinXP их 4, лечится патчем на реестр, который включает все 4 драйвера сказу)
4) Если на старой машине IDE, на новой AHCI, то нужно в Win7 изменить тип запуска драйверов msahci и iaStorV с 3 на 0 (стартовать без инициализации). В WinXP нужно до переноса поставить соответствующий драйвер AHCI
Все ограничения встречают ой как редко и актуально для переноса.
Если образ создан, то установщик винды сам все поставит. Обычно я интегрирую driverpack, и уже давно проблем не наблюдаю.
Хотя я не показатель, так работаю больше с linux системами.
>>Отсюда ядро 2.6.18, всякие HCL и т.д.

Значит, только RHEL или ESX? Впрочем, в комментах ниже к этому выводу и пришли.

>>Во-первых, готового образа дискетки у них нет, поэтому его надо создавать. Уже морока.

dd if=/dev/zero of=./floppy.img bs=512 count=2880
mkfs.vfat ./floppy.img
mount ./floppy.img /mnt/floppy

>>Во-вторых, заранее неясно, что именно с ISO-образа на неё надо копировать.

Как это неясно? Нужны файлы viostor.* и еще — txtsetup.oem, которого в iso нет, но который легко гуглится
UFO just landed and posted this here
UFO just landed and posted this here
Нет. Смотрите на хороший продукт proxmox.
с kvm реально такие пляски с бубном или не все так печально?

Это пляски не столько с KVM, сколько с Windows.
Например, заблокированная по умолчанию реакция на сигналы ACPI — причём тут KVM?
Например, заблокированная по умолчанию реакция на сигналы ACPI — причём тут KVM?

Например, потому, что это серверная ОС?
А чем vmware server не угодил? Free to use, вторая версия туповата неповоротлива правда, зато первая просто летает. Правда нужно постоянно следить за kernel update на хосте, т.к. требует перекомпиляции vmware ядра и дров. 7 лет на дебиан — полет нормальный: гостями пашут Windows 2K, 2K3, XP, 2K8 (последняя правда без vmware tools, но они и не нужны по большому счету если лезем через terminal server).
Сравнимо с kvm работает только vmware ESXi а вот vmware server тот еще отстой.
vmware server тот еще отстой.

1) Аргументы?
2) Вы v.1 пробовали? По v.2 частично согласен, правда его нужно уметь готовить.
Пробовал. В те времена когда пробовал было замечены активная утечка памяти и сжирание одного из ядер в 100%.
Вот после таких статей и начинаются городские легенды про «нестабильность и тормознутость KVM» и возгласы «что вы, так нельзя».

Что такое «типовой линукс»? Какая OS, какая версия пакетов и какое ядро? Судя по багтрекеру — центос? Или проксмокс? Поставьте уже убунту и наслаждайтесь скоростью и стабильностью.

У нас нормально вообще все с KVM, highload все дела.
А для управления используете голый KVM, или с какими-нибудь интерфейсами? (libvirt, proxmox, opennebula, eucalyptus, openstack, etc). В качестве гостей есть windows? Как работает в продакшне под загрузкой?
Все зависит от того, как вы хотите. для libvrt есть простой gui, совсем простой — но хватает что бы подцепится.

Если вам надо кластер из машин и «бесплатно» то смотрите на proxmox.
Поддерживает кластер до 16 машин (вроде бы, точно искать цифру лень) + подключаем СХД или кластер машин с РФС ceph.

Но мое мнение, если у вас много windows, смотрите на решение windows с вложением средств. Будет правильнее и намного проще вам в дальнейшем управлять этой инфраструктурой.

Из распределенного облака я смотрел бы на openstack — redhat его активно пилят.
Работать с openstack и обслуживать его — не простое занятие :)
Не, наоборот — много linux и чуток windows, для которых как раз не хочется использовать отдельное решение, если это возможно. Про то, что есть gui и что такое openstack я знаю, просто интересно, как оно все ведет себя в реальном продакшне, насколько стабильно, удобно пользоваться, легко поддерживать и т.д.
proxmox меня устраивает более чем полность. openvz работает, kvm работает. Поддержка если надо покупается.
Не хватает некоторых вещей, но идеального ничего нет.

Можно конечно сразу посмотреть на решение от сосисочной компании (parallels), но там уже деньги :)
Проксмокс. Скоро будет openstack и всю внутреннюю кухню, типа дженкинсов и в целом тестового контура, надеюсь, увезем туда на kvm и lxc. Прототип работает, под нагрузкой не тестировали.
Windows гостей практически нет. Те, что есть, работают без проблем.
Что такое «типовой линукс»? Какая OS, какая версия пакетов и какое ядро?

Например, Ubuntu Server 12.04 LTS amd64. Ядро и все пакеты штатные.

Судя по багтрекеру — центос?

Нет, просто Гугл по описанию ошибки нашёл её в редхатовском багтрекере.
В нём наиболее полные описание и набор ссылок на багтрекеры других дистрибутивов.
Насколько можно судить, бага не в каком-то отдельном дистрибутиве.

Поставьте уже убунту и наслаждайтесь скоростью и стабильностью.

Наслаждаюсь.
Лечится следующим REG-файлом:

спс, на Win 2k8 R2 64 работает тоже. Больше не на чем проверить, одна винда на виртуалке… (хост Ubuntu 12.04 LTS )
Вообще-то это в group policy задать можно и это ИМХО наиболее правильно, чем править реестр «вручную»
Как всегда Комментарии становятся полезнее чем статья ^_^
Пользователь Worky с nag.ru прислал свой отзыв емейлом.
Выкладываю с минимальными косметическими правками. Особенно интересен имхо пункт 4.
Общего пессимизма автора в отношении Ubuntu Server и KVM не разделяю :)

Поведаю своего опыта.

Была задача завиртуализировать офис. Начал собирать данные по средам виртуализации, анализировать и пришел к КВМ. С виду было видно, что КрасноШляпа взялась за него серьезно и это мэйнстрим. В качестве платформы мы используем Ubuntu 10.04 и я решил не менять то, что работало.

Проблемы начались через неделю использования нескольких виртуалок с ВинХР.

Эпопею можно прочесть тут: bugs.launchpad.net/qemu/+bug/990364

При этом данное сообщение в логах либвирта ничего не значит: это просто реакция системы на сбой, а причина где то в дампе ядра винды.

В результате менял и версии дров либвиртио, и отключал вообще устройства либвиртио, а использовались устройства QEMU. Но результатов это не давало.

Пришлось связаться с одним из разрабов дров и узнать очень много нового, после чего мне теперь видится КВМ как сырое решение.

По своему опыту дам такие советы:

1) не использовать Убунту: даже переход с Дебиана на Убунту дает в КВМ ошибки на голом месте. Качество Убунты становится все ниже (ИМХО). Или вот еще факт — при выключении сервака Убунта просто ресетит виртуалки с потерей данных, в то время как Центос ставит их на паузу, сбрасывает их на диск и только потом тушит сервак. Только после воя на ланчпаде по этому вопросу, убунту девелоперы добавили временную задержку при выключении сервера…

2) использовать RHEL-аналоги дистров — девелоперы КВМ-дров проверяют их ТОЛЬКО на текущих релизах RHEL (Дебианы и Убунты идут лесом и сами решают проблемы с КВМ у себя).

3) в случае непонятных глюков пробуйте отключать KSM: в RH это демон (и в proc переменная), в Убунте это в конфиге либвирта переменная.

4) в случае ВинХР и BSOD с кодом IRQL_NOT_LESS_OR_EQUAL пробуйте загружать модуль КВМ под тип процессора так: kvm-intel flexpriority=0. Это помогает реально! И — ВНИМАНИЕ — об этом можно прочитать только на закрытом багтрекере КрасноШляпы!!! То есть по такому распространенному глюку ИНФЫ НЕТ!!! Поэтому…

5)… если у вас есть непонятные проблемы с виртуалками — пишите разрабам КВМ!!! Лучше и быстрее их вам никто не поможет!!!

6) Вин Сервер 2003 32бит работает под КВМ с дровами Виртио без проблем.

Итог: на голом месте я получил кучу проблем со средой, которая якобы готова для «ынтерпрайза».
Я разочарован, но решений такого же плана и свободных просто нет!
Ему надо было сразу использовать proxmox :)
Кстати вопрос насущный!
Что с лицензиями?
Можно ли запускать win7 pro и 2003\2008R2 std в виртуальной среде?
Или нужны какие-то другие редакции и\или доп лицензии?

Как я понял можно. Но хотелось бы официальное мнение прочесть по этому поводу.

Можно, нужна лицензия как на обычный сервер.
Sign up to leave a comment.

Articles