グレースケール画像を​ResNet50で分​類すると，画像データ​の与え方でスコアが異​なるのはなぜでしょう​か？

グレースケール画像（testimagesフォルダに格納）を，ResNet50による分類のために以下の二つの方法で与えたとき，スコアが異なりました。

１）拡張データストアでRGB化した場合の

imdsTest=imageDatastore('testimages')

audsTest=augmentedImageDatastore([224 224],imdsTest,"ColorPreprocessing","gray2rgb");

[PredTest, scoresTest]=classify(net,audsTest);

この結果で1番目の画像に対する予測結果の各クラスのスコア（scoresTest）の値と，

２）プログラムで画像をグレースケールからRGB化した時の

imdsTest=imageDatastore("testimages");

fileNumber=1;

img=readimage(imdsTest,fileNumber);

[xrow,xcol]=size(img);

img2rgb=zeros(xrow,xcol,3);

for i=1:3

img2rgb(:,:,i)=img2;

end

img2rgb=imresize(img2rgb,[224 224]);

[PredTest, scoresTest]=classify(net,img2rgb);

この結果での各クラスのスコア（scoresTest）の値

とが，同じでないのですが何故でしょうか？画像によってはPredTestの結果が異なってしまうケースもあります。

ご存じの方がいらしたら，ご教示お願いします。

[Kenta]

ちなみに、１）と２）の３チャンネルのグレースケールの画像は全く同じ輝度値を持っていますか？例えば、二つの画像を引き算して、その差分の絶対値の合計を出してみて０になっていますでしょうか。

[正樹 長谷川]

コメントありがとうございます。

拡張データストアからRGB化後の画像データを抽出する方法を調べているところでして，差分については確認できていない状況です。

[Kenta]

audsIm=read(audsTest);  
audsImCell=audsIm.input;
audsIm=audsImCell{1};

read関数で読みだせます。imgがimg2になっていて、ちがう画像を参照している、などではないでしょうか？

もしかしたら、uint8(img2rgb)とするとよいかもしれません。試してもらえると嬉しいです。

[正樹 長谷川]

教えてくださった方法で，画像データの中身を確認したところ，

１）では整数値の画像データでしたが，２）ではimresizeのところで画像データが実数値になっておりました。

classifyのscore値が，似た様な数字でも微妙に違う結果になってしまった原因がやっと判りました。

どうもありがとうございました。本当に勉強になりました。

Answer 1

[Kenta]

コメントのほう、ありがとうございました。解決したようでよかったです。念のため、回答欄に転記させてください。

audsIm=read(audsTest);  
audsImCell=audsIm.input;
audsIm=audsImCell{1};

このように、データストアからはread関数で画像を読みだせます。imgがimg2になっていて、ちがう画像を参照している、などではないでしょうか？

もしかしたら、uint8(img2rgb)とするとよいかもしれません。こちらで試したところ、一方はdouble,もう一方は整数のuint8型で呼び出されていて、そこで小さな違いが生じたのかもしれません。

試してもらえると嬉しいです。