Question

神经网络传递函数选取不同会有特别大差别嘛？

比如输出层用purelin线性函数，和非线性函数logsig，这样会有很大的不同结果嘛？

Answer 1

只是最后一层，但前面层是非线性，那么可能存在区别不大的情况。
线性函数f(a*input)=af(input), 一般来说，input为向量，最简化情况下，可以假设input的各个维度，a1=a2=a3。。。意味着你线性层只是简单的对输入做了scale~而神经网络能起作用的原因，在于通过足够复杂的非线性函数，来模拟任何的分布。所以，神经网络必须要用非线性函数。理论上，任意连续可导的函数（不要求处处可导）

Answer 2

线性与非线性函数，实际运用中差别还挺大的。