Глубина и выразительность
Глубина может влиять на эффективность представления определённых функций. Примеры не доказывают теорему о разделении по глубине.
Уроки
- Функция на единичном интервале
- Композиция слоёв ReLU
- Функция шатра ReLU
- Размер для приближения гладких функций
- Утверждение о разделении по глубине
- Интерполяция повторными функциями шатра
- Радиальная функция
- Гиперплоскость
- Неглубокая сеть ReLU
- Условие глубины и ширины
- Взвешенные ошибки и ошибки Фурье
- Сумма гребневых функций
- Свёртка и носитель
- Где нейрон переключается
- Длина траектории признака
- Ожидаемая длина кривой признака
- Плотность из энергии Фурье
- Ошибка приближения Соболева
- Преобразование Фурье гребневой функции
- Напечатанное масштабирование инициализации
- Граница числа областей гиперплоскостей
- Масштабы размера приближения
- Проверка условий размера
- Условие нормы Соболева
- Произведение ширин скрытых слоёв
- Направления на рисунке источника
- Траектория двумерной сети