Optimización de la tasa de aprendizaje

Ejercicio 1

Establece una tasa de aprendizaje de 0.1 en el control deslizante. Continúa presionando el botón STEP (PASO) hasta que el algoritmo de descenso de gradientes llegue al punto mínimo de la curva de pérdida. ¿Cuántos pasos tomó?

Ejercicio 2

¿Puedes llegar al mínimo de una forma más rápida con una tasa de aprendizaje más alta? Establece una tasa de aprendizaje de 1 y continúa presionando STEP (PASO) hasta que el descenso de gradientes llegue al mínimo. ¿Cuántos pasos necesitaste esta vez?

Ejercicio 3

Piensa en una tasa de aprendizaje incluso más grande. Restablece el gráfico, establece una tasa de aprendizaje de 4 e intenta llegar al mínimo de la curva de pérdida. ¿Qué ocurrió esta vez?

Desafío opcional

¿Puedes encontrar la tasa de aprendizaje con valor dorado para esta curva, donde el descenso de gradientes llega al punto mínimo en la cantidad de pasos más baja posible? ¿Cuál es la cantidad de pasos más baja que se necesita para llegar al mínimo?

Enviar comentarios sobre…

Curso intensivo de aprendizaje automático