Library · CC BY-SA 4.0

Dive intoDeep Learning

Dive into Deep Learning

Cover illustration of the book

Choose your version

The same text, told at every level, in every language and look shown here. Pick, then listen or download.

Listen and watch

The same player the product gives for your own book: the voice, the drawings as they are drawn, the text.

The open textbook used in hundreds of university courses on neural networks. Its first chapter explains what it means for a program to learn from data: models, losses, optimisation, the kinds of learning problems, and how deep learning came to win.

This is a sample: 1 of 23 chapters.

From the lectures

Una pila de grabaciones etiquetadas sí y no alimenta un algoritmo de aprendizaje, que gira las perillas de una caja llamada modelo.
Perillas que aprenden una palabra

Las etiquetas fijan las perillas

Este es el truco que propone el libro. Usted no puede escribir cómo reconoce la palabra «Alexa», pero la reconoce al instante. Así que puede hacer otra cosa: reunir miles de grabaciones cortas y marcar cada una usted mismo, sí si contiene la palabra y no si no la contiene.

Una escala vertical de pérdida con una flecha hacia abajo rotulada mejor, y la fórmula pérdida = − puntuación.
Los datos adecuados y una puntuación justa

Menos es mejor

El tercer ingrediente responde a una pregunta que suena filosófica. Dijimos que aprender significa mejorar en una tarea. Pero ¿quién decide qué es «mejor»? Si una persona propone un cambio en el modelo, otra bien puede sostener que lo ha empeorado.

La misma recta de precios con un tercer punto en 3 horas, 420 dólares, por encima del 350 de la recta; una distancia discontinua de 70 entre ellos y el fallo al cuadrado 70² = 4900.
¿Cuánto? Regresión

Una factura fuera de la recta

El fontanero era un caso fácil, porque dos facturas fijaban exactamente las dos perillas. Los datos reales rara vez son tan amables.

La frase Tom has dinner in Washington with Sally con una marca bajo cada palabra, Ent bajo los nombres; debajo, una larga onda sonora de 48 000 muestras asociada a seis palabras.
Cuando el orden importa: secuencias

Etiquetas alineadas, audio no alineado

El libro destaca algunos casos especiales. El primero es el etiquetado y el análisis sintáctico, en el que cada palabra de un texto recibe una marca. Aquí la entrada y la salida están alineadas: hay una marca por palabra, en el mismo orden que las palabras.

Dos máquinas de café: la máquina A muestra un 6, la máquina B un signo de interrogación; flechas rotuladas explotar hacia A y explorar hacia B.
Aprender actuando: aprendizaje por refuerzo

Explotar o explorar

Una segunda dificultad es la observabilidad parcial: lo que el agente ve ahora puede no decirle dónde está. Imagine a su robot de limpieza atrapado en uno de varios armarios idénticos de su casa. Desde dentro todos parecen iguales; para saber en cuál está, debe recordar lo que vio antes de entrar.

Una columna de cuatro juegos de abajo arriba, backgammon, ajedrez, go, póquer, con una flecha hacia arriba rotulada más difícil; el póquer marcado con cartas ocultas.
Éxitos ocultos y éxitos visibles

Una escalera de juegos

Los juegos sirven desde hace mucho como vara de medir de la capacidad humana, y el libro traza una escalera de ellos. Empieza con TD-Gammon, un programa de backgammon que aprendía con una forma de aprendizaje por refuerzo.

How it was made

Examples for: a curious adult with school maths who uses ChatGPT and phone apps; add one modern instance per idea, such as a chatbot, a spam filter, a recommendation feed or a voice assistant

The source

The lectures retell the English text of d2l.ai (Cambridge University Press, 2023), GitHub d2l-ai/d2l-en by Aston Zhang, Zachary C. Lipton, Mu Li, Alexander J. Smola, published under an open licence that allows retelling and translation. The retelling, the drawings and the voice are made by AI and checked against the book by a second model. How AI is used.

The lectures adapt the original and are released under the same licence, free to share and adapt with credit to the author and a link to this page: CC BY-SA 4.0

Your own hard book, the same way

Upload a textbook or any difficult book. The first five minutes are free.

Upload a book