データサイエンティスト検定 リテラシーレベル データサイエンス(機械学習・AI・非構造化データ) 練習問題 第43問: ある2値分類モデルは、陽性である確率を0〜1の値で出し、その値がしきい値以上のデータを陽性と予測する。評価用の200件(実際の陽性48件、実際の陰性152件)で
ある2値分類モデルは、陽性である確率を0〜1の値で出し、その値がしきい値以上のデータを陽性と予測する。評価用の200件(実際の陽性48件、実際の陰性152件)で、しきい値を0.5と0.8にしたときの結果は次のとおりだった。 ・しきい値0.5:真陽性36件、偽陽性24件、偽陰性12件、真陰性128件 ・しきい値0.8:真陽性24件、偽陽性6件、偽陰性24件、真陰性146件 しきい値を0.5から0.8に上げたときの適合率と再現率の変化として、最も適切なものはどれか。
解答と解説を先に見る
先に見ると、この問題は今回は育ちません。
正解: 4. 適合率は0.6から0.8に上がり、再現率は0.75から0.5に下がる
「適合率は0.6から0.8に上がり、再現率は0.75から0.5に下がる」が適切です。Google for Developersの機械学習の用語集(ML Glossary)は、適合率を陽性と予測したもののうち実際に陽性だった割合、再現率を実際の陽性のうち陽性と予測できた割合としています。
しきい値0.5では、適合率=36÷(36+24)=0.6、再現率=36÷(36+12)=0.75です。0.8では、適合率=24÷(24+6)=0.8、再現率=24÷(24+24)=0.5です。
しきい値を上げると陽性の予測が絞られて偽陽性が減る一方、見逃し(偽陰性)が増えます。「適合率も再現率も、0.6から0.8に上がる」は再現率の分母も陽性と予測した件数にした値、「適合率も再現率も、0.75から0.5に下がる」は適合率の分母も実際の陽性の件数にした値です。
「適合率は0.75から0.5に下がり」は2つの指標の値を入れ替えています。適合率の分母は陽性と予測した件数、再現率の分母は実際の陽性の件数です。
関連キーワード: 適合率・再現率・しきい値・混同行列
模試 (100問)
この問題が解けたら、本試験はどうですか?本番形式で、ほかの科目もまとめて確かめる
本番形式の模擬試験で実力チェックPremium (月980円)Premium (ご利用中)本番と同じ制限時間