Выключение каналов в PyTorch
Создайте батч 2 на 4
на 8 на 8 из
единиц и слой, который в режиме
обучения обнуляет целые каналы
с вероятностью 0.5.
Прогоните данные и выведите
размеры результата.
Подготовьте карту 1 на 3
на 4 на 4 из единиц.
В режиме оценки пропустите её
через отключение каналов с
долей 0.3 и выведите
получившийся тензор.
Задайте случайный пакет 5
на 6 на 12 на 12
и регуляризацию, которая выключает
целые цветовые слои, а не
отдельные пиксели, с вероятностью
0.25 в режиме обучения.
Выведите размеры после прохода.
Возьмите нулевой батч 3
на 2 на 6 на 6,
включите режим обучения у слоя
с долей отключения 0.5
для целых каналов и выведите
размеры на выходе.
