Alice's Adventures in a Differentiable Wonderland, Volume I: A Tour of the Land
The same text, told at every level, in every language and look shown here. Pick, then listen or download.
The same player the product gives for your own book: the voice, the drawings as they are drawn, the text.
A modern textbook on how neural networks really work, from tensors and gradients to transformers. The first three chapters lay the ground: what the book is about, the linear algebra and calculus a network runs on, gradient descent, and what a dataset and a loss function are.
This is a sample: 3 of 13 chapters.
Взгляд под капот начинается с одной идеи: обучение — это поиск. Вы пишете программу с огромным числом регулируемых ручек, называемых параметрами, и крутите их, пока программа не начнёт вести себя хорошо.
Таблицу чисел, матрицу, можно читать как стопку таких векторов, по одному на строку, и книга называет это батчем данных. Умножение матриц тогда не более чем вычисление многих скалярных произведений сразу, каждой строки одной матрицы с каждым столбцом другой, за одну операцию.
Встаньте на наклонную лужайку или пандус и сделайте по одному маленькому шагу в нескольких направлениях: прямо вверх, вбок, по диагонали. Вы должны почувствовать самый крутой подъём в одном направлении, никакого подъёма под прямым углом к нему и частичные подъёмы между ними.
Где заканчивается прогулка? Она останавливается там, где земля плоская, в стационарной точке, но плоская земля может быть дном долины, вершиной холма или седлом вроде горного перевала, который падает в одну сторону и поднимается в другую.
Затем ловушка. Средние потери на обучающих примерах всегда можно сделать идеальными жульничеством: справочной таблицей, которая хранит каждый пример и отвечает им, а для всего остального выдаёт что-нибудь по умолчанию.
Теперь глава 4 строит самый простой блок из всех, линейную модель, о которой книга говорит, что всякая дифференцируемая модель — её хитрая вариация.
Examples for: a curious adult with school maths who uses AI apps every day; add one modern instance per idea, such as how a chat assistant or a phone's photo app is trained
The lectures retell the English text of arXiv 2404.17625 (version 3, 2025) by Simone Scardapane, published under an open licence that allows retelling and translation. The retelling, the drawings and the voice are made by AI and checked against the book by a second model. How AI is used.
The lectures adapt the original and are released under the same licence, free to share and adapt with credit to the author and a link to this page: CC BY-SA 4.0
Upload a textbook or any difficult book. The first five minutes are free.
Upload a book