深度學習基礎--正則化與norm--Switchable Normalization

Switchable Normalization

  BN 是 Google 在 2015 年提出的歸一化方法。至今已有 5000+次引用，在學術界和工業界均被廣泛使用。
  港中文團隊提出的 SN（Switchable Normalization）解決了 BN 的不足。SN 在 ImageNet 大規模圖像識別數據集和 Microsoft COCO 大規模物體檢測數據集的準確率，還超過了最近由 Facebook 何愷明等人提出的組歸一化 GN（Group Normalization）。