Foundations advanced

Backpropagation

The algorithm that works out how much each weight contributed to the error, so gradient descent can fix it.

Backpropagation schickt den Fehler Schicht für Schicht rückwärts durch das Netz und weist per Kettenregel jedem Gewicht seinen Anteil daran zu. Genau das macht das Training tiefer Netze rechnerisch machbar, und genau deshalb funktioniert Deep Learning überhaupt.

In der Praxis: Die Ausgabe lag um 0,3 daneben — Backprop entscheidet, welche der Milliarden Gewichte dafür verantwortlich sind.

Where this comes up