Список проголосовавших за комментарий "<blockquote>недавно пару умных книг (Гудфеллоу и Хайкин, в них хоть формулы какие-то есть) внезапно понял, что в этом подходе есть некая идея.</blockquote>Хайкина я читал, Гудфеллоу — этого не знаю. Идея там простая.)<blockquote>1. Если мы заменяем пороговую функцию с sign на tanh, то сетка ничего путного наваять не может<br/> 2. Если мы оставляем пороговую функцию sign, то результат получается шикарный</blockquote>Фигня. Это от конкретики зависит. Смотря для чего, короче.<blockquote>практически никто, кроме меня, не умеет решать задачи нелинейной оптимизации с негладкими пороговыми функциями )))</blockquote>Никаких проблем с обучением сейчас нет, алгоритмов полно, хороших, разных и уже готовых к употреблению — наливай, да пей.). Основная проблема в постановке задачи.<blockquote>Дай мне еще месяц до начала января — попробую собрать все в кучу и опубликовать подробный пост. Материалов много,</blockquote>Не думаю, что по НС мы услышим что-то новое, чего уже не было в других источниках."