機械学習エンジニアの備忘録

主に自分が勉強したことのメモ

2020-01-01から1年間の記事一覧

【Kaggle】鳥コンペ振り返り

はじめに 先日終了したKaggleのCornell Birdcall Identificationに参加し、1390人中122位(Top9%)で銅メダルを獲得することができました。 www.kaggle.com本記事では自分のソリューションと上位陣のソリューションを簡単にまとめておこうと思います。 コンペ…

Pytorchを使っているときにlossがnanになったときに確認すること

pytorchでモデルを学習させているときにlossがnanになって時間を結構溶かしたのでメモ。 BCEではなくBCEWithLogitsLossを使っているか 2値分類問題で自分で最終レイヤをいじったモデルはnanにならなくてOSSのモデル実装を使うとなぜかnanになる現象にぶちあ…