Функция активации (activation function) ограничивает амплитуду выходного 

сигнала нейрона. Эта функция также называется функцией сжатия (squashing function).  Обычно нормированный диапазон амплитуд выхода нейрона 

лежит в интервале  [0,1] или [-1,1]. (См: Хайкин С. Нейронные сети: полный курс, 2-е изд., испр.: Пер. с англ. М. : И.Д. Вильяме, 2006. — 1104 с.)