墨塵的神經網絡9--MobileNet V3模型代碼復現及要點記錄

什麼是MobileNetV3
最新的MobileNetV3的被寫在了論文《Searching for MobileNetV3》中。

它是mobilnet的最新版，據說效果還是很好的。

作爲一種輕量級網絡，它的參數量還是一如既往的小。

它綜合了以下四個特點：
1、MobileNetV1的深度可分離卷積（depthwise separable convolutions）。
2、MobileNetV2的具有線性瓶頸的逆殘差結構(the inverted residual with linear bottleneck)。
3、輕量級的注意力模型。
4、利用h-swish代替swish函數。