这篇论文告诉我们，KAN（柯尔莫哥洛夫-阿诺德网络）与 MLP（-20240803100051

文章预览

2024-08-03 10:00 本条微博链接 这篇论文告诉我们，KAN（柯尔莫哥洛夫-阿诺德网络）与 MLP（多层感知器）相比并不那么出色 📌 KAN 可以看作是一种特殊类型的 MLP，其主要区别在于 KAN 使用可学习的 B 样条函数作为激活函数，而不是像 ReLU 这样的固定激活函数。 📌作者在控制参数数量或 FLOP 的同时，比较了 KAN 和 MLP 在多种任务类型中的表现： - 在符号公式表示任务上，在控制参数时，KAN 的表现优于 MLP，在控制 FLOP 时的表现 ………………………………