Что такое нейронные сети и из чего они состоят?

Нейронная сеть — модель из связанных нейронов, организованных в слои. Нейрон считает y = f(w·x + b) — взвешенную сумму входов плюс смещение, пропущенную через функцию активации (ReLU, sigmoid, tanh). Слои бывают input, hidden, output; чем больше скрытых — тем «глубже» сеть. Обучение: forward pass считает предсказание, backpropagation распространяет ошибку обратно и обновляет веса градиентным спуском. Сильнее всего нейросети на изображениях, тексте, аудио.