Python PyTorch Hardswish用法及代碼示例

本文簡要介紹python語言中 torch.nn.Hardswish 的用法。

用法:

class torch.nn.Hardswish(inplace=False)

參數：

inplace-可以選擇就地執行操作。默認值：False

如本文所述，按元素應用 hardswish 函數：

Searching for MobileNetV3 。

\text{Hardswish}(x) = \begin{cases} 0 & \text{if~} x \le -3, \\ x & \text{if~} x \ge +3, \\ x \cdot (x + 3) /6 & \text{otherwise} \end{cases}

形狀：

• 輸入： (*) ，其中 * 表示任意數量的維度。

• 輸出：(*)，與輸入的形狀相同。

例子：

>>> m = nn.Hardswish()
>>> input = torch.randn(2)
>>> output = m(input)