torch.nn.functional.mish

torch.nn.functional.mish(input, inplace=False)

应用 Mish 函数，逐元素应用。

Mish：一种自正则化的非单调神经网络激活函数。

$$\text{Mish}(x) = x * \text{Tanh}(\text{Softplus}(x))$$

注意

请参阅《Mish：一种自正则化的非单调神经网络激活函数》。

更多详情请见 Mish 。

返回类型:

张量