celu¶
celu 激活层(CELU Activation Operator)
根据 Continuously Differentiable Exponential Linear Units 对输入 Tensor 中每个元素应用以下计算。
\[celu(x) = max(0, x) + min(0, \alpha * (e^{x/\alpha} − 1))\]
其中,\(x\) 为输入的 Tensor。
返回¶
Tensor
,数据类型和形状同x
一致。
代码示例¶
>>> import paddle
>>> import paddle.nn.functional as F
>>> x = paddle.to_tensor([[-1., 6.], [1., 15.6]])
>>> out = F.celu(x, alpha=0.2)
>>> print(out)
Tensor(shape=[2, 2], dtype=float32, place=Place(cpu), stop_gradient=True,
[[-0.19865242, 6. ],
[ 1. , 15.60000038]])