¿Qué tiene de malo la retropropagación?

Tabla de contenido:

¿Qué tiene de malo la retropropagación?
¿Qué tiene de malo la retropropagación?
Anonim

En resumen, no puede hacer retropropagación si no tiene una función objetivo. No puede tener una función objetivo si no tiene una medida entre un valor predicho y un valor etiquetado (datos reales o de entrenamiento). Por lo tanto, para lograr el "aprendizaje no supervisado", es posible que haya abandonado la capacidad de calcular un gradiente.

¿Cuáles son las limitaciones de la retropropagación?

Desventajas del algoritmo de propagación hacia atrás:

Se basa en la entrada para realizar un problema específico. Sensible a datos complejos/ruidosos. Necesita las derivadas de las funciones de activación para el tiempo de diseño de la red.

¿Cómo solucionas la propagación hacia atrás?

Proceso de retropropagación en redes neuronales profundas

  1. Valores de entrada. X1=0,05. …
  2. Peso inicial. W1=0,15 w5=0,40. …
  3. Valores de sesgo. b1=0.35 b2=0.60.
  4. Valores objetivo. T1=0,01. …
  5. Pase hacia adelante. Para encontrar el valor de H1, primero multiplicamos el valor de entrada de los pesos como. …
  6. Paso hacia atrás en la capa de salida. …
  7. Pase hacia atrás en la capa oculta.

¿Es eficiente la retropropagación?

La retropropagación es eficiente, lo que permite entrenar redes multicapa que contienen muchas neuronas mientras se actualizan los pesos para minimizar la pérdida.

¿Qué problema resuelve la retropropagación cuando se trabaja con redes neuronales?

Al ajustar una red neuronal, la retropropagación calcula el gradiente dela función de pérdida con respecto a los pesos de la red para un solo ejemplo de entrada-salida, y lo hace de manera eficiente, a diferencia de un cálculo directo ingenuo del gradiente con respecto a cada peso individualmente.

Recomendado:

Articulos interesantes
¿Se cerrará una perforación de caracola?
Lee mas

¿Se cerrará una perforación de caracola?

Al igual que con muchas perforaciones de cartílago, cuando se perfora una caracola, el orificio en sí suele ser permanente una vez que se ha curado por completo. Sin embargo, la piel puede sanar sobre el agujero. … Este piercing tiene el potencial de cerrarse rápidamente, especialmente cuando es más nuevo.

¿Puede el coseno ser mayor que 1?
Lee mas

¿Puede el coseno ser mayor que 1?

Las proporciones de seno y coseno de un ángulo no pueden ser mayores que 1. ¿Puede el coseno de un ángulo ser mayor que 1? Por qué la función tangente puede ser mayor que 1, pero las funciones seno y coseno no. Independientemente del ángulo para el que evalúes la tangente, el coseno o el seno, siempre puedes considerarlo como la razón de dos lados de un triángulo rectángulo.

¿La trampa para osos invertida mataría?
Lee mas

¿La trampa para osos invertida mataría?

Cabe señalar que, aunque Reverse Beartrap es una de las únicas trampas que se reutiliza en más de una de las películas de la serie, solo se ha cobrado una víctima, Jill Tuck, que murió porque Hoffman lo manipuló para que fuera ineludible. ¿Cómo mata la trampa para osos invertida?