本文为 中关于激活函数部分的笔記
历史上,sigmoid 函数曾非常常用然而现在它已经不太受欢迎,实际很少使用了因为它主要有两个缺点:
假定把xi分为20个梯度[x1,..., xn]就有20**n(20的n次方)个组合,这种最小值的直接求解是不可行的
可以考虑贪心算法,或者动归算法或者先做数学推导,然后求解
版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。
点击添加站长微信