Alice's Adventures in a Differentiable Wonderland, Volume I: A Tour of the Land
Один и тот же текст на каждом уровне, на всех языках и во всех оформлениях, что здесь есть. Выберите, потом слушайте или скачивайте.
Тот же плеер, который продукт даёт для вашей книги: голос, рисунки по мере того, как они рисуются, текст.
Современный учебник о том, как на самом деле устроены нейросети: от тензоров и градиентов до трансформеров. Глава 6 показывает, как программа сама находит свои градиенты: автоматическое дифференцирование, обратный проход, на котором обучается любая модель.
Это пробная часть: 1 из 13 (главы).
La respuesta del libro empieza por mirar el modelo como un programa. Cuando el programa se ejecuta, realiza una cadena de operaciones pequeñas y sencillas, cada una alimentando a la siguiente; el libro llama primitiva a cada una, y grafo computacional a toda la cadena tal como se ejecutó.
Ahora, el primer camino: el modo directo. Imagínelo como recorrer la cadena en el sentido en que funciona el programa, llevando un cuaderno.
La observación clave del libro es que la cadena termina en un número, el error total. Así que, si empieza la multiplicación por ese extremo, lo que lleva nunca es una tabla entera, solo una fila de números, y una fila por una tabla es barato y da otra fila.
Dos ejemplos muestran por qué las respuestas son tanto más baratas que las tablas. Para la pieza más común de una red, multiplicar la entrada por una tabla de pesos, la tabla completa de pendientes respecto de los pesos sería un enorme bloque de números de tres dimensiones.
Los modelos de estilo de objetos, la forma habitual de escribir en PyTorch, necesitan un paso más. Una opción es sacar los pesos del objeto del modelo y llamarlo como una función simple a la que se entregan esos pesos.
El libro añade una advertencia. Para curvas que se doblan en los dos sentidos, los subgradientes pueden no existir, y los matemáticos usan en su lugar una versión local, más flexible.
Примеры для: a curious adult with school maths who uses AI apps every day; add one modern instance per idea, such as how a chat assistant or a phone's photo app is trained
Лекции пересказывают с английского оригинала книгу arXiv 2404.17625 (version 3, 2025), автор — Симоне Скардапане; книга вышла под открытой лицензией, которая разрешает пересказ и перевод. Пересказ, рисунки и голос сделаны ИИ и сверены с книгой второй моделью. Как используется ИИ.
Лекции — переработка оригинала и распространяются под той же лицензией: их можно свободно распространять и перерабатывать с указанием автора и ссылкой на эту страницу: CC BY-SA 4.0
Загрузите учебник или любую сложную книгу. Первые пять минут бесплатно.
Загрузить книгу