問題文
不均衡なデータ(陽性が1パーセント)で2つのモデルを比べたい。陽性を捉えることが目的である。真陽性率と偽陽性率の曲線の下の面積で比べたところどちらも 0.95 を超えて差が見えなかった。次に見るべき指標はどれか。
選択肢
- 学習にかかった時間。性能が同じに見えるなら学習が速いほうを選べばよい
- 陽性と判定したものの正しさと陽性を捉えた割合の関係が描く曲線の下の面積。少数の側だけを見る指標である
- 全体の正解率。陽性を取りこぼせばその分だけ正解率も下がるため、不均衡でも2つのモデルの差は正解率に現れる
- 特徴量の重要度の一致度。上位に並ぶ特徴量が似ていれば2つは同じ性能とみなしてもよい