这是一个创建于 274 天前的主题,其中的信息可能已经有所发展或是发生改变。
2 条回复 • 2024-05-18 11:19:14 +08:00
![SiWXie](https://cdn.v2ex.com/gravatar/e0c78417de59a55487a950a571990acd?s=48&d=retro) |
|
1
SiWXie 274 天前 via iPhone
火的原因:可以把之前的架构重新用 KAN 做一遍 核心:激活函数用 B 样条曲线代替,激活函数可训练 缺点:引入了 B 样条曲线和网格概念,很容易过拟合,网格调小了又和普通 MLP 没区别了
|
![SiWXie](https://cdn.v2ex.com/gravatar/e0c78417de59a55487a950a571990acd?s=48&d=retro) |
|
2
SiWXie 274 天前 via iPhone
激活函数可训练是一个切入点,这个 B 样条吧,感觉还是不太合适,是其亮点,也是其缺陷。
可以用其他的代替(干脆用一个神经网络?),这样做感觉又和 MLP 没有区别
反正就是水论文呗
|