KAN: Kolmogorov–Arnold Networks

KAN: Kolmogorov–Arnold Networks
Математика
Автор: Коллектив авторов
Год: 2024
Добавил: Admin 7 Май 24
Проверил: Admin 7 Май 24
Формат:  PDF (12634 Kb)
  • Currently 0/5

Рейтинг: 0/5 (Всего голосов: 0)

Аннотация

Inspired by the Kolmogorov-Arnold representation theorem, we propose Kolmogorov-Arnold Networks (KANs) as promising alternatives to Multi-Layer Perceptrons (MLPs). While MLPs have f i xed activation functions on nodes (“neurons”), KANs have learnable activation functions on edges (“weights”). KANs have no linear weights at all – every weight parameter is replaced by a univariate function parametrized as a spline. We show that this seemingly simple change makes KANs outperform MLPs in terms of accuracy and interpretability. For accuracy, much smaller KANs can achieve comparable or better accuracy than much larger MLPs in data f i tting and PDE solving. Theoretically and em-pirically, KANs possess faster neural scaling laws than MLPs. For interpretability, KANs can be intuitively visualized and can easily interact with human users. Through two ex-amples in mathematics and physics, KANs are shown to be useful “collaborators” helping scientists (re)discover mathematical and physical laws. In summary, KANs are promising alternatives for MLPs, opening opportunities for further improving today’s deep learning models which rely heavily on MLPs.

Другие книги автора Коллектив авторов

Похожие книги

Квант 2007-5

Квант 2007-5
Квант 1993-1-2

Квант 1993-1-2
Метод Монте-Карло

Метод Монте-Карло
Квант 2010-2

Квант 2010-2
Квант 2003-4

Квант 2003-4
Квант 1977-6

Квант 1977-6
ГИА 2013. Математика: тематические тренировочные задания : 9 класс

ГИА 2013. Математика: тематические тренировочные задания : 9 класс
Геометрические преобразования. Том 1. Движения и преобразования подобия

Геометрические преобразования. Том 1. Движения и преобразования подобия
Том13. Абсолютная точность и другие иллюзии. Секреты статистики

Том13. Абсолютная точность и другие иллюзии. Секреты статистики
Математика как профессия. (О воспитательном эффекте математического образования)

Математика как профессия. (О воспитательном эффекте математического образования)
Квант 1992-11

Квант 1992-11
Геометрическая мозаика в интегрированных занятиях. Конспекты занятий с детьми 5-9 лет

Геометрическая мозаика в интегрированных занятиях. Конспекты занятий с детьми 5-9 лет

Комментарии к книге "KAN: Kolmogorov–Arnold Networks"

Комментарий не найдено. Будьте первыми!
Чтобы оставить комментарий или поставить оценку книге Вам нужно зайти на сайт или зарегистрироваться