AI論文解説 EfficientNetの元論文を解説
はじめに
EfficientNetは2019年5月に発表されましたが、少ないパラメータで非常に高い精度を有し、NFNetなどの最新のモデルと比較されることが多いモデルです。今回はこのモデルを、非専門家の方でも概要がつかめるよう、わか...
2021-02
AI論文解説 
未分類 Label Smoothing（ラベルスムージング）をPyTorchで実装する
はじめに
Deep learningの学習の際には、過学習のみならずOver-confidence（自信過剰）が問題になることがあります。過学習を抑えるため、Weight decay、Early stopping、Dropoutなど...
AI論文解説 NFNet（バッチ正規化を用いない高精度画像認識）の元論文を解説
はじめに
Normalization-Free Net (NFNet) は、Deep Mind社から発表された最新の画像認識モデルで、今非常に注目されているモデルです。EfficientNetと同水準を維持しながらも、訓練が8.7倍...