ある企業は、迷惑メールフィルタの性能を評価しています。適合率(Precision)と再現率(Recall)の両方を同程度に重視し、どちらか一方だけが高いモデルではなく、バランスの取れたモデルを選択したいと考えています。最も適した評価指標はどれですか。
正解は「F1スコア」です。F1スコアは、Precision(適合率)とRecall(再現率)の調和平均であり、両者のバランスを1つの値で評価できます。どちらか一方だけが高くてもF1スコアは高くならないため、適合率と再現率の双方が重要なタスクで広く利用されています。迷惑メール判定では、通常メールを誤って迷惑メールにすること(偽陽性)と、迷惑メールを見逃すこと(偽陰性)の両方を考慮する必要があります。一方、Accuracyはデータの偏りがある場合に高く見えてしまうことがあり、BLEUは機械翻訳、RMSEは回帰問題の評価指標です。AWS Certified AI Practitionerでは、Precision・Recall・F1の関係を理解していることが重要です。