Álgebra lineal
Vectores, matrices y productos: todo modelo es, al final, multiplicación de matrices.
Lo mínimo imprescindible para leer un paper y entender qué hace un modelo por dentro.
Vectores, matrices y productos: todo modelo es, al final, multiplicación de matrices.
Cómo cambian las funciones: la base para optimizar la pérdida.
Pendiente de una función en un punto; la regla de la cadena permite derivar composiciones.
Vector de derivadas parciales: indica la dirección de máxima subida de la pérdida.
Lenguaje para la incertidumbre: distribuciones, esperanza, probabilidad condicionada.
Inferir propiedades de una población a partir de muestras; estimación, contrastes, intervalos.
La media de muchas variables independientes tiende a una normal, sea cual sea su distribución original.
P(A|B) = P(B|A)·P(A)/P(B): actualizar creencias con evidencia nueva.
Encontrar los parámetros que minimizan una función: convexidad, mínimos locales, puntos de silla.
Cálculo aproximado con ordenadores: estabilidad, precisión en coma flotante, softmax estable.