请解释常见的激活函数及其作用，并说明它们各自的优缺点和适用场景。

Question

Accepted Answer

考察点：考察对激活函数的原理、特性与选型理解。回答思路：准确说明激活函数引入非线性的作用 能列举并对比多种激活函数的表达式与特性 能结合梯度消失、计算复杂度等阐述优缺点 能根据不同场景给出合理的选型理由

考察说明