Обучение умных игровых соперников в Unity методом «игра с самим собой» средствами ML-Agents

[Sommerregen]

реальное применение для генерации «умного» ИИ для игр или для тестирования уровней, нахождение багов и дизбаланса и тп

[Kirsch]

Всё сильно зависит от задачи. При правильно настроенных параметрах, простые задачки типа достижения заданных координат на поверхности агенты самостоятельно начинают выполнять через 150-200 тыс итераций обучения (шагов, steps в терминологии tensor flow), время тут измеряется минутами при большом числе одновременно обучающихся агентов. В комплексной среде и со сложными задачами (например, когда на входе не raycast сигналы, а видео), это миллионы итераций и часы/дни обучения. Извините, наверное тоже слишком поверхностно, но это не то что в рамках комментария, в рамках целой статьи сложно подробно изложить.

[Sommerregen]

гонку с рейкастом я натренировал за 45 минут на моем ПК, ИИ ездил лучше меня. Для реальных игр, есть блог юнити, где они решают уровни для мобильной игре по изображения. Как они пишут, за 4ч решают. Ровио, которые Angry Birds, тоже решают свои уровни с РЛ для нахождения баланса и тп