Два замечательных части разбора устройства нейронных сетей:
Устройство персептрона
Матрицы и обратное распространение на примере
Можно на задачки нарезать :)