Data Science
Как дроп-аут ведет себя как усреднение моделей?
00
Вопрос или проблема Утверждается Сривастава, Хинтон, и др., что “дропаут может быть эффективно применён и в скрытых слоях, и что его можно интерпретировать как форму усреднения модели” и что “обучение нейронной сети с дропаутом можно
Data Science
Является ли обобщение модели, а затем удаление обобщения, полезным для FFNN?
00
Вопрос или проблема Если вы обучаете базовую FFNN (Сеть с прямой связью), вы можете применять регуляризации, такие как дроп-аут, l1, l2 и гауссовский шум, чтобы модель была устойчивой и показывала лучшие результаты на новых данных.