在Mnist数据集上简单测了一下最近几个KAN模型。这边就直接RUN了,感兴趣的试试看:
KAN paper: [Kolmogorov-Arnold Networks](KAN: Kolmogorov-Arnold Networks)

KANs(以下为参考的项目,上文的项目集成了以下模型):
- [KANs](https://github.com/KindXiaoming/pykan)
- [Efficient-KAN](https://github.com/Blealtan/efficient-kan)
- [FourierKAN](https://github.com/GistNoesis/FourierKAN)
- Two-layer MLP (Toy Version)
经验设置
- 对于KAN,较大的初始学习率可能更有效。(你可以试试' lr = 1e-2 ')
- 在我的实验中,KAN确实比MLP收敛得更快。
编辑于 2024-05-05 22:08・IP 属地江苏