💡 Ah, behold the pinnacle of human innovation: translating #Python into #C for the nth time because apparently, Karpathy's #micrograd was too easy to read! 🙄 Congratulations, you've successfully turned a delightful script into a #C #labyrinth where only the bravest dare to tread. 🎉
https://github.com/oraziorillo/microcrad #translation #innovation #Karpathy #HackerNews #ngated
GitHub - oraziorillo/microcrad: A re-implementation of Karpathy's micrograd in C

A re-implementation of Karpathy's micrograd in C. Contribute to oraziorillo/microcrad development by creating an account on GitHub.

GitHub
GitHub - oraziorillo/microcrad: A re-implementation of Karpathy's micrograd in C

A re-implementation of Karpathy's micrograd in C. Contribute to oraziorillo/microcrad development by creating an account on GitHub.

GitHub

Обратное распространение ошибки: от интуиции до кода

Многие умеют вызывать loss.backward() в PyTorch, но не всегда понимают, что именно происходит под капотом. Как сеть вычисляет, какой из миллионов весов нужно изменить? В этой статье мы развеем магию обратного распространения ошибки (backprop). Разберем алгоритм на простых аналогиях с заводским конвейером, вспомним школьное правило дифференцирования и, чтобы закрепить понимание, напишем свой микро-фреймворк для автоматического вычисления градиентов на чистом Python с нуля.

https://habr.com/ru/articles/1031986/

#машинное_обучение #нейросети #backpropagation #обратное_распространение_ошибки #градиентный_спуск #deep_learning #python #математика #вычислительные_графы #micrograd

Обратное распространение ошибки: от интуиции до кода

Введение. Современные нейросети часто воспринимаются как черная магия. Вы закидываете в черный ящик датасет, ждете пару часов, и вот уже модель пишет за вас код, генерирует картины и безошибочно...

Хабр

Micrograd is very simple, only fully connected layers. So first trying to find out if it can even learn numbers based on MNIST dataset.

Then I hope to at least be able to verfit, so the essence works. Then I'll have the challenge of trying to make it work for every icon in the app.

Presumably I have to create/generate a huge set of icon images to train on..

#ux #micrograd #reactNative #MLP #MNIST #TinyUX #Karpathy #ai #NeuralNet