Градиент

Градиент некоторой функции есть вектор, который указывает направление наискорейшего возрастания функции, модуль равен наибольшей скорости изменения в некоторой точке. Градиент является направленным отрезком с координатами в определенной системе. Процесс поиска экстремального значения функции называют оптимизацией. Методы многомерной оптимизации делятся на два класса: градиентные и безградиентные. Градиентом скалярного поля u (xyz) называется векторная функция и обозначается grad 

» Термины и определения Теории искусственных нейронных сетей