Pull to refresh
5
-2
Solovjov Daniil @YaphetS7

Deep Learning

Send message
Спасибо за комментарий! Насчет глубины ResNet — я опирался на статью, в которой максимальная глубина — 152, но добавить о том, что позднее появились модификации — действительно стоило. Про Inception и другие сети — согласен с Вами, стоило рассказать.
Я, по возможности, стараюсь оставлять ссылки на источники с описанием алгоритмов и примерами кода. В частности здесь — на backpropagation и пример реализации FCNN. Ваше желание и мнение я услышал — в сегодняшнем посте прикреплю опросник и там посмотрим, я не против с кодом повозиться :)

Смысл статьи в том, чтобы дать понимание того, что есть эвристики для SGD, к примеру, и путем комбинирования эвристик как раз получаются различные навороченные оптимизаторы по типу Adam. Насчет того — есть ли такой пул задач, в которых "менее навороченные" оптимизаторы показывают себя лучше — ответить не берусь, но в статье я этого сказать ни в коем случае не хотел.
Спасибо за комментарий, постараюсь впредь доносить мораль более точно!

Information

Rating
Does not participate
Location
Россия
Registered
Activity