中間発表前から学習を行っていたResNetモデルですが、200epochほど学習を行っても、100epoch後からLossやMAEがあまり変わらないため、中断しました。
今は植物図鑑でも使用したXceptionなどの他のモデルを試しています。
Xceptionでの学習ですが、クラッシュを避けるためbatchSizeを16に変更し
5epochの段階でval_loss, val_maeがResNetの学習よりも早く下がっているのでこのまま学習を行う予定です。
前回の進捗報告の際に教えていただいたGCPでの実行ですが、調査したところ64GBのGPUを１ヶ月借りると712ドル超はかかるそうです。
以下がComputeEngineのGPU価格です。
https://cloud.google.com/compute/gpus-pricing?hl=ja
今後精度が出ない場合には検討したいと思います。