やったこと
・桃のデータ採取
・CNNモデルの可視化
桃のデータ採取
桃61個分のデータを採取しました。
一つの桃から48枚の画像を撮影し、6方向から糖度を測定しました。
条件
背景:段ボール・緑色のシート
照明:白色光・暖色光
角度:上下・側面4方向
CNNモデルの可視化
・使用技術:Grad-CAM
・使用したモデル:CNN(EfficientNet)
ー 画像背景は黒・緑・段ボール
ー データ数は計23200
・可視化に使用した層:block7b_add
・入力画像

・ヒートマップ

・合成画像(入力画像+ヒートマップ)

背景全体にうっすら反応があるほか、背景の光が当たった部分と下の部分にも反応を示している。
CNN条件を少し変えた場合で多少ヒートマップが変化するが、全体として背景で糖度推定している傾向がある。
その他の結果




今後の予定
・学会発表のレジュメ作成
・今年度のデータを追加してファインチューニング
・桃の領域のみを抽出する方法を考える